sjero.net Git - wget/blob - src/ChangeLog

   1 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * progress.c (update_speed_ring): Moved the speed ring update to a
   4         separate function and documented it better.
   5
   6         * progress.c: Use `double' for most timers to support granularity
   7         smaller than 1ms.
   8
   9 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  10
  11         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
  12         string.
  13         (XDIGIT_TO_xchar): Ditto.
  14
  15 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  16
  17         * utils.c: Change the type of timer-related functions from long to
  18         double, for better precision.  On machines supporting gettimeofday
  19         the timers now work with granularity of less than one millisecond.
  20
  21 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  22
  23         * cookies.c (parse_set_cookies): Fixed the parser to handle more
  24         edge conditions.
  25         (test_cookies): New function, contains a test suite for
  26         parse_set_cookies.
  27
  28 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  29
  30         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
  31
  32 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
  33
  34         * cookies.c (parse_set_cookies): Allow trailing space in
  35         set-cookies header.  Also, allow any amount of whitespace, not
  36         only one character.  Allow empty set-cookies header without
  37         spewing an error.
  38
  39 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
  40
  41         * url.c (append_uri_pathel): Use opt.restrict_file_names when
  42         calling file_unsafe_char.
  43
  44         * init.c: New command restrict_file_names.
  45
  46         * main.c (main): New option --restrict-file-names[=windows,unix].
  47
  48         * url.c (url_file_name): Renamed from url_filename.
  49         (url_file_name): Add directory and hostdir prefix here, not in
  50         mkstruct.
  51         (append_dir_structure): New function, does part of the work that
  52         used to be in mkstruct.  Iterates over path elements in u->path,
  53         calling append_uri_pathel on each one to append it to the file
  54         name.
  55         (append_uri_pathel): URL-unescape a path element and reencode it
  56         with a different set of rules, more appropriate for handling of
  57         files.
  58         (file_unsafe_char): New function, uses a lookup table to decide
  59         whether a character should be escaped for use in file name.
  60         (append_string): New utility function.
  61         (append_char): Ditto.
  62         (file_unsafe_char): New argument restrict_for_windows, decide
  63         whether Windows file names should be escaped in run-time.
  64
  65         * connect.c: Include <stdlib.h> to get prototype for abort().
  66
  67 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
  68
  69         * utils.c (wtimer_sys_set): Extracted the code that sets the
  70         current time here.
  71         (wtimer_reset): Call it.
  72         (wtimer_sys_diff): Extracted the code that calculates the
  73         difference between two system times here.
  74         (wtimer_elapsed): Call it.
  75         (wtimer_elapsed): Don't return a value smaller than the previous
  76         one, which could previously happen when system time is set back.
  77         Instead, reset start time to current time and note the elapsed
  78         offset for future calculations.  The returned times are now
  79         guaranteed to be monotonically nondecreasing.
  80
  81 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
  82
  83         * host.c (lookup_host): Print the result of the DNS lookup.
  84
  85 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
  86
  87         * init.c (cmd_boolean): Accept yes/no along with on/off.
  88         (cmd_lockable_boolean): Ditto.
  89
  90 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
  91
  92         * init.c: New command dns_cache.
  93
  94         * main.c (main): New option --dns-cache[=off].
  95
  96 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
  97
  98         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
  99
 100         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
 101         HAVE_GETADDRINFO for getaddrinfo-related stuff.
 102
 103 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 104
 105         * url.c (url_parse): Return an error if the URL contains a [...]
 106         IPv6 numeric address and we don't support IPv6.
 107
 108 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
 109
 110         * url.c (is_valid_ipv6_address): Modified to not require
 111         zero-terminated strings.
 112         (is_valid_ipv4_address): Ditto.
 113
 114 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
 115
 116         src/url.c: added RFC 2732 compliance for URL parsing. The
 117         functions is_*_address valid are a modified version of
 118         glibc 2.3.2 inet_pton's code.
 119
 120 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
 121
 122         * main.c init.c options.h: Added --retry-connrefused option so
 123         that Connection Refused failures are treated as non-fatal (when
 124         trying to retrieve from busy servers).
 125
 126         * wget.h: New CONNECT_ERROR macro for encapsulating this
 127         modification.
 128
 129         * ftp.c http.c : Use CONNECT_ERROR macro in places where
 130         ECONNREFUSED was checked.
 131
 132 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
 133
 134         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
 135         by calling new function has_insecure_name_p.  This is based on a
 136         patch by Red Hat.
 137
 138         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
 139         if filename starts with `/' or contains `../' and is therefore
 140         considered insecure.
 141
 142         * fnmatch.h: Declare has_insecure_name_p().
 143
 144 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
 145
 146         * init.c (cmd_file): Allocate RESULT correctly.
 147
 148 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
 149
 150         * recur.c (retrieve_tree): Check whether downloaded_html_set is
 151         non-NULL before using it.
 152
 153 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 154
 155         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
 156
 157 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 158
 159         * progress.c (bar_set_params): Fall back to dot progress if the
 160         terminal type is "emacs".
 161
 162 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 163
 164         * log.c: Don't #undef WGET_USE_STDARG.
 165
 166 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 167
 168         * hash.c (prime_size): Store the offset of the prime number in the
 169         prime table.  When searching, start with the given offset.
 170         (hash_table_new): Pass the pointer to ht->prime_offset to
 171         prime_size.
 172         (grow_hash_table): Ditto.
 173         (prime_size): Make 13 the first prime to make empty hash tables
 174         slightly smaller.
 175
 176 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 177
 178         * recur.c (download_child_p): Minor optimization to avoid an
 179         unnecessary additional call to schemes_are_similar_p function.
 180
 181 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 182
 183         * url.c (schemes_are_similar_p): New function to test enumerated
 184         scheme codes for similarity.
 185
 186         * url.h: Declare it.
 187
 188         * recur.c (download_child_p): Use it to compare schemes.  This
 189         also fixes a bug that allows hosts to be spanned (without the
 190         -H option) when the parent scheme is https and the child's is
 191         http or vice versa.
 192
 193 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
 194
 195         * ftp.c (getftp): Don't ftruncate stdout.
 196
 197         * http.c (gethttp): Don't ftruncate stdout.
 198
 199 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
 200
 201         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
 202         (get_number): Ditto.
 203         (get_alt_number): Ditto.
 204         (__isleap): New function-like macro used by strptime.
 205         (day_of_the_week): New function used by strptime.
 206         (day_of_the_year): Ditto.
 207         (__mon_yday): Now shared by mktime and strptime implementations.
 208
 209 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 210
 211         * cookies.c (check_domain_match): Use match_tail in case
 212         insensitive mode.
 213
 214         * utils.c (match_tail): Allow the caller to specify case
 215         insensitive mode.
 216
 217         * cookies.c (store_cookie): When expiry_time is 0, print it as
 218         undefined, not indefinite.
 219
 220 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
 221
 222         * cookies.c (cookie_jar_process_set_cookie): Do not store
 223         discarded cookie.
 224
 225 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 226
 227         * cookies.c (check_domain_match): Allow cookies to be set for
 228         subdomains of unknown top-level domains under some circumstances.
 229
 230 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 231
 232         * gen_ssl.c:
 233         - allow checking of server cert
 234         - allow defining client cert type
 235         - allow limit of ssl protocol
 236         - check more return values
 237         - added debug message on break
 238
 239 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 240
 241         * recur.c (download_child_p): Revert order of items in check
 242         number 6 for clarity.
 243
 244 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 245
 246         * init.c: Ditto.
 247
 248         * main.c: Ditto.
 249
 250         * http.c: Use the new interface.
 251
 252         * cookies.c: Provide an OO-style "cookie jar" interface to enable
 253         separate cookie jars.
 254
 255         * http.c (http_atotm): Declare argument as const.
 256
 257 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 258
 259         * cookies.c (cookie_new): Default to PORT_ANY.
 260         (find_cookie_chain_exact): Only search by DOMAIN.
 261         (find_matching_cookie): Also check that PORT matches.
 262         (store_cookie): Only match the domain.
 263         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
 264         is valid for that host rather than discarding it completely.
 265         (find_matching_chains): Don't search by PORT.
 266         (matching_cookie): Also match PORT.
 267         (load_cookies): Set the port if specified, otherwise leave it as
 268         ANY.
 269         (save_cookies_mapper): Save the port if specified, otherwise leave
 270         it empty.
 271
 272 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 273
 274         * init.c: The option `egdfile' was not in sort order.
 275
 276 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 277
 278         * ftp.c (getftp): Treat directories that begin with <letter>: as
 279         absolute.
 280         (getftp): Strip trailing slashes from con->id before merging it
 281         with TARGET.
 282
 283 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 284
 285         * http.c (gethttp): If Content-Type is not given, assume
 286         text/html.
 287
 288 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 289
 290         * recur.c (download_child_p): Don't ignore rejection of HTML
 291         documents that are themselves leaves of recursion.
 292
 293 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 294
 295         Makefile.in: Updated several dependencies for object files to take
 296         account of nested include files.
 297
 298 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 299
 300         Makefile.in: The target `connect$o' (connect.o) now depends on
 301         `utils.h'
 302
 303 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 304
 305         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
 306         (gethostbyname_with_timeout): Use it.
 307
 308         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
 309         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
 310
 311 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 312
 313         * host.c (getaddrinfo_with_timeout): New function.
 314         (gethostbyname_with_timeout): Ditto.
 315         (lookup_host): Use them.
 316
 317 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 318
 319         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
 320
 321 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 322
 323         * init.c (comind): Use a marginally faster implementation of
 324         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
 325         nanosecond earned."
 326
 327 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 328
 329         * main.c (print_help): Document `--post-data' and `--post-file'.
 330
 331 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 332
 333         * http.c (gethttp): Ditto.
 334
 335         * retr.c (retrieve_url): Initialize variables to appease the
 336         compiler.
 337
 338         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
 339         select_fd.
 340         (ssl_iwrite): Ditto.
 341
 342         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
 343         ETIMEDOUT in case of timeout.
 344         (iread): No need to handle EINTR when calling select_fd.
 345         (iwrite): Ditto.
 346
 347 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 348
 349         * retr.c (retrieve_url): Make sure that POST is not honored for
 350         redirections.
 351
 352         * http.c (gethttp): Send the POST data when requested.
 353         (post_file): New function.
 354         (gethttp): Use it.
 355
 356         * main.c (main): Ditto.
 357
 358         * init.c: Add new options.
 359
 360         * options.h (struct options): New options post_data and
 361         post_file_name.
 362
 363 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 364
 365         * connect.c (connect_with_timeout): Firing SIGALRM can result in
 366         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
 367
 368 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 369
 370         * connect.c (connect_with_timeout): Use it.
 371
 372         * utils.c (run_with_timeout): New function.
 373
 374 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 375
 376         * url.c (getproxy): Accept a struct url argument.  This obviates
 377         the need for USE_PROXY_P.
 378
 379         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
 380
 381         * ftp.c (getftp): Recognize FWTK-style proxy.
 382
 383 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 384
 385         * config.h.in: Only define _VA_LIST when compiled with gcc.
 386
 387 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
 388
 389         * http.c (http_loop): Compensate for MS Windows two-second
 390         granularity of file modification time when comparing timestamps.
 391
 392         * ftp.c (ftp_retrieve_list): Ditto.
 393
 394 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 395
 396         * utils.c (has_html_suffix_p): New function to test filename for
 397         common html extensions.
 398
 399         * utils.h: Declare it.
 400
 401         * http.c (http_loop): Use it instead of previous test.
 402
 403         * retr.c (retrieve_url): Ditto.
 404
 405         * recur.c (download_child_p): Ditto.
 406
 407 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 408
 409         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
 410         declaring va_list.
 411         From Kevin Rodgers <kevinr@ihs.com>.
 412
 413 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 414
 415         * Makefile.in: Specify libtool mode explicitly when linking.
 416
 417 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 418
 419         * connect.c (connect_with_timeout): New function.
 420         (connect_to_one): Use it.
 421
 422         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
 423         HAVE_SETJMP_H.
 424
 425 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 426
 427         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
 428         is present.
 429
 430 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 431
 432         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
 433         TOTAL.
 434         (bar_finish): Likewise.
 435
 436 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 437
 438         * html-url.c (tag_handle_form): New function.  Pick up form
 439         actions and mark them for conversion only.
 440
 441 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 442
 443         * progress.c (struct progress_implementation): Use PARAMS when
 444         declaring the parameters of *create, *update, *finish, and
 445         *set_params.
 446
 447         * netrc.c: Ditto.
 448
 449         * http.c: Reformat some function definitions so that ansi2knr can
 450         read them.
 451
 452         * hash.c (struct hash_table): Use the PARAMS macro around
 453         parameters in the declaration of hash_function and test_function.
 454         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
 455         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
 456         that pre-ANSI compilers can read them.
 457         (find_mapping): Use PARAMS when declaring EQUALS.
 458         (hash_table_put): Ditto.
 459
 460         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
 461
 462         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
 463         which was unsupported by pre-ANSI compilers.
 464
 465         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
 466
 467 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 468
 469         * url.c (url_filename): Use compose_file_name regardless of
 470         whether opt.dirstruct is set.
 471         (mkstruct): Don't handle the query and the reencoding of DIR; that
 472         is done in compose_file_name.
 473
 474 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 475
 476         * wget.h: Ditto for extern char *exec_name.
 477
 478         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
 479         perfectly legal to follow an `extern' with a non-`extern' ones,
 480         provided the types match.
 481
 482         * main.c: Don't define OPTIONS_DEFINED_HERE.
 483
 484 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 485
 486         * progress.c (create_image): Revert to calculating ETA based on
 487         average download speed.
 488         (create_image): Don't print ETA until the download has been active
 489         for at least 3 seconds.
 490         (create_image): When ETA is not available, don't print anything.
 491         The previous version would print --:--.
 492
 493 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 494
 495         * progress.c (bar_update): Keep updating a subinterval until it
 496         reaches or exceeds a watermark.  That way the measurement will be
 497         guaranteed to span a configurable minimum of time.  The current
 498         default is 3s in 30 100ms intervals.
 499
 500 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 501
 502         * progress.c (bar_update): Maintain an array of the time it took
 503         to perform previous 30 network reads.
 504         (create_image): Calculate the download speed and ETA based on the
 505         last 30 reads, not the entire download.
 506         (create_image): Make sure that the ETA is not changed more than
 507         once per second.
 508
 509 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
 510
 511         * mswindows.c (borland_utime): New function conditionally defined
 512         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
 513         `utime()' as Borland's `utime()' function is broken on Windows 9x
 514         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
 515
 516 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 517
 518         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
 519
 520 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
 521
 522         * Makefile.in: Updated several dependencies for object files.
 523
 524 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
 525
 526         * mswindows.c: Include "utils.h".
 527
 528 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
 529
 530         * host.h: Don't include netdb.h on windows.
 531
 532 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 533
 534         * recur.c (retrieve_tree): Handle the case when start_url doesn't
 535         parse.
 536
 537 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
 538
 539         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
 540         calling xmalloc and memcpy.
 541
 542 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 543
 544         * host.h: Include Unix-specific includes #ifndef WINDOWS.
 545         Patch originally provided by Christian Lackas.
 546
 547 2002-02-11  Christian Lackas  <delta@lackas.net>
 548
 549         * recur.c: recurive downloading for https fixed.
 550
 551 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
 552
 553         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
 554
 555         * ftp-basic.c: Also include <netinet/in.h>.
 556
 557 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
 558
 559         * http.c (gethttp): when -c used, mark already fully retrieved
 560         file as successfully retrieved.
 561
 562 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 563
 564         * url.c (url_parse): Don't treat '?' as query string separator
 565         when parsing FTP URLs.
 566
 567 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 568
 569         * html-url.c (tag_handle_meta): Don't crash on <meta
 570         http-equiv=refresh> where content is missing.
 571
 572 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
 573
 574         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
 575         netdb.h on windows.
 576
 577 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 578
 579         * retr.c (retrieve_url): Remove redirection cycle detection.  This
 580         is because some sites legitimately redirect the user back to the
 581         same location, e.g. after an authorization check performed by
 582         another page.  MAX_REDIRECTIONS is still used to prevent infinite
 583         redirection loops.
 584
 585 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 586
 587         * http.c (gethttp): Wrap host name in square brackets if it
 588         contains a colon.
 589
 590 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 591
 592         * url.c (url_parse): Allow all hex digits, not only decimal ones,
 593         to form an IP address.
 594
 595 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 596
 597         * url.c (urlchr_table): Make square braces reserved, so we can
 598         parse http://[::1]/.
 599         (url_parse): Handle host in braces.
 600         (url_string): If url->host contains colons, wrap it in braces.
 601
 602 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 603
 604         * connect.c (resolve_bind_address): New function.
 605         (connect_to_one): Use it.
 606         (bindport): Ditto.
 607
 608         * init.c: Don't resolve bind-address here.
 609
 610         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
 611
 612 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 613
 614         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
 615         offset.
 616         (address_list_new): Use map_ipv4_to_ip.
 617         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
 618         in IPv4 context.
 619
 620 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 621
 622         * source: Integrated IPv6 support.
 623         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
 624
 625 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
 626
 627         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
 628         (cmd_directory): New function. Like cmd_file(), but strips
 629         trailing directory separators.
 630         (commands): Change action for "dirprefix" from `cmd_file' to
 631         `cmd_directory'.
 632
 633         * utils.c (make_directory): Allow intermediate `mkdir' calls to
 634         fail, as not all path components that do not exist should be
 635         directory components, especially under Windows.
 636
 637 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 638
 639         * netrc.c (parse_netrc): Skip leading whitespace before testing
 640         whether the line is empty.  Empty lines still contain the line
 641         terminator.
 642
 643 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 644
 645         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
 646         only if no data is pending in SSL buffers.
 647         From tony@bluetail.com.
 648
 649 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 650
 651         * headers.c (header_get): Strip trailing whitespace from the
 652         header.
 653
 654 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 655
 656         * url.c (parse_uname): URL-decode *USER and *PASSWD.
 657
 658 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
 659
 660         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
 661         starts with "//").
 662
 663 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 664
 665         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
 666         error.
 667
 668 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 669
 670         * version.c: Wget 1.8.1 is released.
 671
 672 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 673
 674         * version.c: Wget 1.8.1-pre3 is released.
 675
 676 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 677
 678         * recur.c (retrieve_tree): Enqueue the canonical representation of
 679         start_url, so that the test against dl_url_file_map works.
 680
 681 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 682
 683         * log.c (logputs): Check for requested verbosity before printing
 684         anything.
 685
 686 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 687
 688         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
 689         inline.
 690
 691 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 692
 693         * recur.c (retrieve_tree): Make a copy of file obtained from
 694         dl_url_file_map because the code calls xfree(file) later.
 695
 696 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 697
 698         * recur.c (register_html): Maintain a hash table of HTML files
 699         along with the list.  Disallow duplicates.
 700         (retrieve_tree): Use downloaded_html_set to check whether the file
 701         found in dl_url_file_map is an HTML file, and descend into it if
 702         so.
 703         (convert_all_links): Don't guard against duplicates in
 704         downloaded_html_list, since they are no longer possible.
 705
 706 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
 707
 708         * recur.c (retrieve_tree): Pass on referring URL when retrieving
 709         recursed URL.
 710
 711 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 712
 713         * version.c: Wget 1.8.1-pre2 is released.
 714
 715 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 716
 717         * retr.c (sleep_between_retrievals): Simplify indentation.
 718
 719 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 720
 721         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
 722         of "randomness" at a time.
 723         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
 724
 725         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
 726         random amount averages in opt.wait.
 727         (sleep_between_retrievals): Don't seed the PRNG; random_number
 728         will do that.
 729
 730         * utils.c (random_number): New function.
 731
 732 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 733
 734         * url.c (path_simplify): Move here from utils.c, and make static.
 735
 736 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 737
 738         * init.c (wgetrc_file_name): Print correct message when loading
 739         getenv("WGETRC") fails.
 740
 741 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 742
 743         * recur.c (register_download): Don't abort when one URL references
 744         two different files.
 745
 746 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 747
 748         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
 749         calling ssl_iwrite.
 750
 751 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 752
 753         * version.c: Wget 1.8.1-pre1 is released.
 754
 755 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 756
 757         * res.c (matches): Fix broken URL in the docstring.
 758
 759 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 760
 761         * html-url.c (tag_url_attributes): Mark <embed href=...> as
 762         external.
 763
 764 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 765
 766         * url.c (get_urls_file): Cosmetic changes.
 767
 768 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 769
 770         * html-url.c (append_one_url): Resurrect warning when unable to
 771         resolve a relative link.
 772
 773 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 774
 775         * html-url.c (collect_tags_mapper): Break into several functions.
 776         (tag_url_attributes): Collect <embed href=...>.
 777
 778 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 779
 780         * host.c: New type ipv4_address.  Use it consistently instead of
 781         `unsigned char[4]' and `unsigned char *'.
 782         (pretty_print_address): Accept a `const void *', to require even
 783         less casting.
 784
 785 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 786
 787         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
 788
 789 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 790
 791         * main.c (main): Initialize progress after fork_to_background, so
 792         that it knows when to use dots.
 793
 794         * mswindows.c (ws_hangup): Call log_request_redirect_output.
 795
 796         * utils.c (fork_to_background): Print the PID of the child
 797         process.
 798
 799         * log.c (log_request_redirect_output): Set a flag that output
 800         redirection has been requested.  Doing anything else in a signal
 801         handler is unsafe.
 802         (check_redirect_output): New function: check whether redirection
 803         has been requested and, if so, call redirect_output().
 804         (logputs): Call check_redirect_output.
 805         (logprintf): Ditto.
 806         (debug_logprintf): Ditto.
 807         (redirect_output): Print clearer messages.
 808
 809         * main.c (redirect_output_signal): Don't call
 810         redirect_output_signal directly.  Instead, call
 811         log_request_redirect_output.
 812
 813         * utils.c (memfatal): Ditto.
 814
 815         * progress.c (display_image): Use it.
 816
 817         * log.c (log_set_save_context): New function: allow the caller to
 818         turn off saving log context lines.
 819
 820 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 821
 822         * host.c (address_list_set_faulty): Uncomment a sanity check.
 823
 824 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 825
 826         * utils.c (long_to_string): Return a pointer after where the
 827         number ends.
 828         (long_to_string): Rename to number_to_string.
 829
 830 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 831
 832         * utils.c (path_simplify): Correctly handle the unlikely case that
 833         b starts out as path + 1.
 834
 835 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 836
 837         * utils.c (path_simplify): Rewrite, with better comments, and
 838         without the use of strcpy to move overlapping blocks.
 839
 840 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 841
 842         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
 843         valid progress type before setting it.
 844
 845 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 846
 847         * main.c (main): Remove stray debugging message.
 848
 849 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 850
 851         * progress.c (create_image): Fix ETA padding when hours are prined.
 852
 853 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 854
 855         * version.c: Wget 1.8 is released.
 856
 857 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 858
 859         * url.c (reencode_string): Declare static.
 860
 861         * res.c (registered_specs): Declare static.
 862
 863         * progress.c (current_impl_locked): Declare static.
 864
 865         * log.c (flush_log_p): Declare static.
 866         (needs_flushing): Ditto.
 867
 868         * http.c (digest_authentication_encode): Declare static.
 869
 870         * html-url.c (init_interesting): Declare static.
 871
 872         * host.c (host_name_addresses_map): Declare static.
 873
 874         * cookies.c (find_matching_chains): Declare static.
 875
 876         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
 877         indicated by lint.
 878
 879         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
 880
 881         * host.c (address_list_set_faulty): Document that INDEX is
 882         currently unused.
 883
 884         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
 885
 886 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 887
 888         * version.c: Wget 1.8-pre2 is released.
 889
 890 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 891
 892         * progress.c (progress_handle_sigwinch): Set up the signal again.
 893
 894         * utils.c: Include <sys/termios.h>, where Solaris defines
 895         TIOCGWINSZ.
 896
 897         * progress.c (bar_create): Don't use the last column on the screen.
 898         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
 899         only until it exceeded them.
 900
 901 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 902
 903         * version.c: Wget 1.8-pre1 is released.
 904
 905 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 906
 907         * progress.c (progress_create): Make sure that, when the output is
 908         redirected, the progress implementation gets changed to the
 909         fallback one.
 910         (bar_set_params): Set current_impl_locked to 1 when "force" is
 911         specified.
 912         (progress_create): Don't change the progress implementation if
 913         current_impl_locked is non-zero.
 914
 915         * main.c (redirect_output_signal): Call
 916         progress_schedule_redirect.
 917
 918         * progress.c (progress_schedule_redirect): New function.
 919
 920 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 921
 922         * log.c (logvprintf): Restructure to allow being called multiple
 923         times.
 924         (logprintf): Call logvprintf in a loop.
 925         (debug_logprintf): Ditto.
 926
 927 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 928
 929         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
 930         setting egd_file it to empty string.
 931
 932         * main.c (main): Change the option name from --sslegdsock to
 933         --egd-file.
 934
 935 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 936
 937         * gen_sslfunc.c (ssl_init_prng): Make the printed message
 938         translatable.
 939
 940 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 941
 942         * url.c (scheme_disable): New function.
 943
 944         * main.c (main): Call ssl_init_prng from here rather than from
 945         init_ssl, so that it has a chance to disable support for https
 946         before a URL has been resolved.
 947
 948         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
 949         failed.
 950         (ssl_init_prng): Disable support for https if seeding the PRNG
 951         fails.
 952
 953 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 954
 955         * utils.c (read_whole_line): Handle lines beginning with \0.
 956
 957 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 958
 959         * recur.c (convert_all_links): Guard against duplicates in
 960         downloaded_html_files.
 961         (register_download): Don't invalidate similar-looking URLs.
 962         (match_except_index): New function.
 963
 964 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 965
 966         * utils.c (path_simplify): Document with test cases.
 967
 968 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 969
 970         * gen_sslfunc.c: Ditto.
 971
 972         * rbuf.c: Include <string.h>.
 973
 974 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 975
 976         * recur.c (retrieve_tree): Check whether the URL was already
 977         downloaded before downloading it again.
 978         (descend_child_p): Renamed to download_child_p.
 979         (register_download): When one URL is downloaded to a file already
 980         "owned" by another URL, delete all references that map any URL to
 981         that file.
 982         (register_delete_file): New function.
 983         (retrieve_tree): Use it after deleting a file.
 984
 985         * url.c (url_parse): Re-canonicalize the URL also if the path is
 986         empty, so that e.g. "http://www.server.com" ->
 987         "http://www.server.com/".
 988         (lowercase_str): Use ISUPPER instead of !ISLOWER.
 989
 990         * retr.c (retrieve_url): Use the canonical URL form when calling
 991         register_download().
 992
 993 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
 994
 995         * snprintf.c (dopr): Use `unsigned int' as the second argument to
 996         va_arg when casting to `unsigned short' is intended.
 997
 998 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
 999
1000         * gen_sslfunc.c: on windows provide ssl crypto random
1001           initialization through RAND_screen(); could possibly
1002           be not enough for strong ssl communication (see the
1003           relevant manual page from the openssl package).
1004
1005 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1006
1007         * url.c (local_quote_string): Reenable quoting of question marks,
1008         but only when `--html-extension' is used.
1009
1010 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1011
1012         * version.c: Wget 1.8-beta3 is released.
1013
1014 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1015
1016         * snprintf.c (dopr): Cast the result of va_arg to short int and
1017         short unsigned int where these types are expected to be used.
1018
1019 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1020
1021         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
1022         with `int' when using it as the second argument to `va_arg'.
1023
1024 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1025
1026         * host.c (address_list_new_one): New function.
1027         (lookup_host): Use it.
1028
1029 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
1030
1031         * host.c (lookup_host): Don't initialize TMPSTORE directly because
1032         it's not legal C.
1033
1034 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1035
1036         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
1037         the socket data.
1038
1039         * ftp.c: Ditto.
1040
1041         * http.c: No need to declare h_errno.
1042
1043         * host.c: Declare h_errno.
1044
1045 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1046
1047         * utils.c (file_merge): If BASE doesn't contain a slash, just
1048         return a copy of FILE.
1049
1050 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1051
1052         * version.c: Wget 1.8-beta2 is released.
1053
1054 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1055
1056         * ftp.c (getftp): When PWD fails, assume "/".
1057
1058         * ftp-basic.c (ftp_syst): Fix indentation.
1059
1060 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1061
1062         * url.c (get_urls_file): If opt.base_href is specified, merge each
1063         URL with the base.
1064
1065 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1066
1067         * main.c (print_help): Don't document the removed `-nh'.
1068
1069 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1070
1071         * url.c (url_full_path): Document better.
1072
1073         * http.c (gethttp): Use the full path when creating digest
1074         authorization.
1075
1076 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1077
1078         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
1079         '/'.
1080
1081 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1082
1083         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
1084         PREFIX does.
1085
1086 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1087
1088         * cookies.c (check_domain_match): Reimplement to match Netscape's
1089         "preliminary specification" for cookies.
1090
1091 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1092
1093         * url.c (replace_attr_refresh_hack): New function.
1094         (convert_links): Call replace_attr_refresh_hack for Refresh
1095         links.  It will add the "TMOUT; URL=" junk before the link.
1096
1097         * html-url.c (collect_tags_mapper): Set ID to the ID of the
1098         "content" attribute, not "http-equiv".
1099         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
1100         instead, store the information that this entry belongs to a
1101         "refresh" link.
1102
1103 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1104
1105         * version.c: Wget 1.8-beta1 is released.
1106
1107 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1108
1109         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
1110         depth by more than one.
1111
1112 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1113
1114         * retr.c (retrieve_url): Don't allow more than 20 redirections.
1115
1116 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1117
1118         * recur.c (retrieve_tree): Skip the non-inline entries when
1119         enqueuing the children of a leaf HTML node in -p mode.
1120         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
1121         "inline".
1122
1123         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
1124         (collect_tags_mapper): When an entry is "inline", mark it as such.
1125
1126         * recur.c (descend_url_p): Fix test when checking for
1127         acceptance/rejection rules.
1128
1129 2001-10-31 Daniel BODEA <dali@dali-designs.com>
1130
1131         * netrc.c (search_netrc): When slack_default is 0, still look for
1132         an account with matching password, just not the "default account".
1133         HTTP Authorization using .netrc should now work as expected.
1134
1135 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
1136
1137         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
1138         test_socket_open fails.
1139
1140 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1141
1142         * progress.c (display_image): Just print one CR to reset the
1143         cursor position.
1144
1145 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
1146
1147         * init.c: New command `ssl_egd_sock'.
1148
1149         * main.c (main): New option `--sslegdsock'.
1150
1151         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
1152
1153 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1154
1155         * cmpt.c (memmove): Include a simple memmove implementation.
1156
1157 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1158
1159         * headers: Guard against header files being included twice.
1160
1161 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1162
1163         * gen-md5.c: Use unsigned char * as the buffer argument to
1164         gen_md5_update.
1165
1166 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1167
1168         * connect.h: Declare select_fd.
1169
1170 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1171
1172         * recur.c (descend_url_p): When resolving no_parent, compare with
1173         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
1174         wouldn't be followed, although the download started from /a/.
1175
1176 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1177
1178         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
1179         MS VC; somebody with Borland compiler please check and provide
1180         patch if possible;
1181
1182         * cmpt.c: provided a usleep emulation.
1183
1184 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1185
1186         * host.c (address_list_new): Initialize al->faulty.
1187
1188 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1189
1190         * http.c (http_process_range): Accept the broken output of
1191         "JavaWebServer/1.1.1".
1192
1193 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1194
1195         * progress.c (dot_set_params): If PARAMS is unspecified, use
1196         dot_style, if available.
1197
1198         * init.c: Ditto.
1199
1200         * main.c (main): Resurect --dot-style.
1201
1202         * progress.c (dot_finish): Print the quantity if we're left at the
1203         beginning of a row.
1204
1205 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1206
1207         * cmpt.c (random): Removed.
1208
1209         * retr.c (sleep_between_retrievals): Use the more portable rand()
1210         instead of random().
1211
1212 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1213
1214         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1215         prevent seg fault.
1216
1217 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1218
1219         * connect.c (connect_to_many): Use address_list_set_faulty to
1220         prevent the faulty address from being reused.
1221
1222         * host.c (address_list_set_faulty): New function.
1223         (address_list_get_bounds): New function, instead of
1224         address_list_count.
1225
1226 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1227
1228         * url.c (convert_links): Don't translate %d-%d.
1229
1230         * main.c (print_help): Remove stray HAVE_RANDOM code.
1231
1232 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1233
1234         * ftp.c (getftp): Improve output after sending PASV.  Don't
1235         attempt to "look up" the IP address we already know; call
1236         connect_to_one directly.
1237
1238 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1239
1240         * progress.c: Change the default progress implementation to "bar".
1241
1242 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1243
1244         * progress.c (bar_create): Print two newlines.
1245
1246 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1247
1248         * cmpt.c (random): New function, a simple-minded replacement for
1249         random() on systems that don't have it.
1250
1251 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1252
1253         * config.h.in: Put a HAVE_USLEEP stub.
1254
1255         * cmpt.c (usleep): Replacement implementation of usleep using
1256         select.
1257
1258         * init.c: New option init_rate.
1259
1260         * main.c (main): New option --limit-rate.
1261
1262         * retr.c (limit_bandwidth): New function.
1263         (get_contents): Call it to limit the bandwidth used when
1264         downloading.
1265
1266         * progress.c (dot_update): Would print the wrong download speed on
1267         rows other than the first one when the download was continued.
1268         (dot_finish): Ditto.
1269
1270 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1271
1272         * http.c (gethttp): fix undeclared variable 'err' when compiled
1273         with HAVE_SSL.
1274
1275 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1276
1277         * progress.c: Don't allocate new timers; use the timing data
1278         propagated from the caller.
1279
1280         * retr.c (get_contents): Allocate and use a timer.
1281
1282 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1283
1284         * http.c (last_host_ip): Made into an address_list.
1285         (invalidate_persistent): Release pc_last_host_ip.
1286         (register_persistent): Use lookup_host.
1287         (persistent_available_p): Check for equality of hosts using
1288         address_list_match_all.  Call address_list_release.
1289         (http_cleanup): New function.
1290
1291         * ftp.c (getftp): Use lookup_host and connect_to_many.
1292
1293         * http.c (gethttp): Use lookup_host and connect_to_many.
1294
1295         * connect.c (make_connection): Removed.
1296         (connect_to_one): New function.
1297         (connect_to_many): Ditto.
1298         (set_connection_host_name): Ditto.
1299
1300         * host.c (lookup_host): New function; new return type.
1301         (address_list_new): New function.
1302         (address_list_count): Ditto.
1303         (address_list_copy_one): Ditto.
1304         (address_list_delete): Ditto.
1305         (address_list_release): Ditto.
1306         (pretty_print_address): Ditto.
1307
1308 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1309
1310         * recur.c (retrieve_tree): In case of followed redirection,
1311         blacklist the pre-redirection URL.
1312
1313 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1314
1315         * recur.c (descend_redirect_p): New function.
1316         (retrieve_tree): Make sure redirections are not blindly followed.
1317
1318 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1319
1320         * config.h.in: added HAVE_RANDOM.
1321
1322         * options.h: added random_wait to struct options.
1323
1324         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1325         for --random-wait.
1326
1327         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1328         implementation of random wait times.
1329
1330         * init.c (commands): added "randomwait" keyword.
1331
1332 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1333
1334         * recur.c (descend_url_p): Be more conservative with blacklisting
1335         URLs.
1336         (convert_all_links): Print how many files have been converted, and
1337         how long it took.
1338
1339         * progress.c (create_image): Place the number of downloaded bytes
1340         right after the progress bar.
1341
1342         * utils.c (suffix): Return a pointer into the string.
1343
1344 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1345
1346         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1347
1348         * recur.c (retrieve_tree): Ignore download-ignorable children.
1349         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1350
1351         * html-url.c (handle_link): Return the newly created urlpos.
1352         (collect_tags_mapper): When dealing with BASE, store the base
1353         reference and mark it as download-ignorable.
1354
1355 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1356
1357         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1358         linking to local files.  Given up on the attempt, as it breaks
1359         local browsing.
1360
1361 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1362
1363         * main.c (private_initialize): Removed.
1364         (main): Don't call private_initialize.
1365
1366         * http.c: Call lookup_host.
1367
1368         * host.c (host_init): Removed.
1369         (add_host_to_cache): Initialize host_name_address_map here, on
1370         demand.
1371         (ngethostbyname): Commented out.
1372
1373         * connect.c (make_connection): Remove dead code; use lookup_host.
1374
1375         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1376         the args.
1377         Removed host_address_name_map and host_slave_master_map.
1378
1379 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1380
1381         * progress.c (dot_create): Align the "[ skipping ... ]" string
1382         with the dots.
1383
1384         * retr.c (rate): Split into two functions: calc_rate and
1385         retr_rate.
1386
1387         * progress.c (create_image): Draw a dummy progress bar even when
1388         total size is unknown.
1389         (display_image): Place the text cursor at the end of the "image".
1390
1391 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1392
1393         * url.c (reencode_string): Use unsigned char, not char --
1394         otherwise the hex digits come out wrong for 8-bit chars such as
1395         nbsp.
1396         (lowercase_str): New function.
1397         (url_parse): Canonicalize u->url if needed.
1398         (get_urls_file): Parse each URL, and return only the valid ones.
1399         (free_urlpos): Call url_free.
1400         (mkstruct): Add :port if the port is non-standard.
1401         (mkstruct): Append the query string to the file name, if any.
1402         (urlpath_length): Use strpbrk_or_eos.
1403         (uri_merge_1): Handle the cases where LINK is an empty string,
1404         where LINK consists only of query, and where LINK consists only of
1405         fragment.
1406         (convert_links): Count and report both kinds of conversion.
1407         (downloaded_file): Use a hash table, not a list.
1408         (downloaded_files_free): Free the hash table.
1409
1410         * retr.c (retrieve_from_file): Ditto.
1411
1412         * main.c (main): Call either retrieve_url or retrieve_tree
1413         for each URL, not both.
1414
1415         * retr.c (register_all_redirections): New function.
1416         (register_redirections_mapper): Ditto.
1417         (retrieve_url): Register the redirections.
1418         (retrieve_url): Make the string "Error parsing proxy ..."
1419         translatable.
1420
1421         * res.c (add_path): Strip leading slash from robots.txt paths so
1422         that the path representations are "compatible".
1423         (free_specs): Free each individual path, too.
1424         (res_cleanup): New function.
1425         (cleanup_hash_table_mapper): Ditto.
1426
1427         * recur.c (url_queue_new): New function.
1428         (url_queue_delete): Ditto.
1429         (url_enqueue): Ditto.
1430         (url_dequeue): Ditto.
1431         (retrieve_tree): New function, replacement for recursive_retrieve.
1432         (descend_url_p): New function.
1433         (register_redirection): New function.
1434
1435         * progress.c (create_image): Cosmetic changes.
1436
1437         * init.c (cleanup): Do all those complex cleanups only if
1438         DEBUG_MALLOC is defined.
1439
1440         * main.c: Removed --simple-check and the corresponding
1441         simple_host_check in init.c.
1442
1443         * html-url.c (handle_link): Parse the URL here, and propagate the
1444         parsed URL to the caller, who would otherwise have to parse it
1445         again.
1446
1447         * host.c (xstrdup_lower): Moved to utils.c.
1448         (realhost): Removed.
1449         (same_host): Ditto.
1450
1451 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1452
1453         * utils.c (path_simplify): Preserver the (non-)existence of
1454         leading slash.  Return non-zero if changes were made.
1455
1456 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1457
1458         * progress.c (bar_update): Don't modify bp->total_length if it is
1459         zero.
1460
1461 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1462
1463         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1464         print the correct error message rather than "UNKNOWN".
1465
1466 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1467
1468         * progress.c (bar_finish): If the timer didn't record any time
1469         since the download beginning, fake 1ms.
1470
1471 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1472
1473         * recur.c (recursive_retrieve): Fix typo.
1474
1475 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1476
1477         * progress.c (create_image): Don't translate "%ld ".
1478
1479 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1480
1481         * progress.c (bar_set_params): Allow the user to force the use of
1482         the bar.
1483
1484 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1485
1486         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1487
1488 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1489
1490         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1491         and consistency with bar_*.
1492         (print_download_speed): Get rid of the unneeded '@' character.
1493         (create_image): Fix download rate geometry.
1494
1495         * progress.c (print_elapsed): Remove spurious space.
1496         (print_elapsed): Renamed to print_download_speed, since that's
1497         what it does.
1498
1499 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1500
1501         * progress.c (bar_update): If the downloaded amount becomes larger
1502         than the expected amount, adjust the expected amount accordingly.
1503
1504 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1505
1506         * utils.c (determine_screen_width): New function.
1507
1508         * main.c (main): New option `--progress=TYPE'.
1509         (main): Implement compatibility with the old option `--dot-style'.
1510
1511         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1512         dp_set_params.
1513         (cmd_spec_progress): New function.
1514
1515         * retr.c (get_contents): Use the progress_* functions instead of
1516         the old show_progress().
1517         (show_progress): Removed.
1518         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1519         etc.
1520
1521         * progress.c (set_progress_implementation): New function.
1522         (valid_progress_implementation_p): Ditto.
1523         (progress_create): Ditto.
1524         (progress_update): Ditto.
1525         (progress_finish): Ditto.
1526         (dp_create): Ditto.
1527         (dp_update): Ditto.
1528         (dp_finish): Ditto.
1529         (dp_set_params): Ditto.
1530         (print_elapsed): Ditto.
1531
1532 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1533
1534         * retr.c (show_progress): Use it.
1535
1536         * log.c (log_set_flush): New function.
1537
1538 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1539
1540         * utils.c (path_simplify): Don't remove trailing slashes.
1541
1542         * ftp.c (ftp_get_listing): Use it.
1543
1544         * utils.c (file_merge): New function.
1545
1546         * url.c (opt_url): Removed.
1547
1548         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1549
1550         * main.c (main): Use xfree(), not free().
1551
1552         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1553
1554         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1555         internally.
1556
1557         * config.h.in: Include a stub for HAVE_STRPBRK.
1558
1559         * cmpt.c (strpbrk): Include a replacement for systems without
1560         strpbrk().
1561
1562         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1563
1564         * url.c (url_set_dir): New function.
1565         (url_set_file): Ditto.
1566
1567         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1568         parser makes the URL "params" available, so we can do that in this
1569         function.
1570
1571         * retr.c: Ditto.
1572
1573         * ftp.c: Ditto; pass the local file information in `ccon'.
1574
1575         * http.c: Get rid of the ugly kludge that had URL being replaced
1576         with the proxy URL when proxy retrieval was requested.  Use a
1577         separate parameter to http_loop and gethttp for the proxy URL.
1578
1579         * http.c: Changed to reflect the fact that local file, proxy, and
1580         referer information are no longer stored in struct url.  The local
1581         file information is passed in `struct hstat' now.
1582
1583         * url.c: Reworked URL parsing to be more regular.  Reencode the
1584         URL using reencode_string.
1585         Removed non-URL-related information from struct url.  This
1586         includes fields `proxy', `local', and `referer'.
1587
1588 2001-11-22  Jochen Hein  <jochen@jochen.org>
1589
1590         * main.c (main): Split the copyright notice for easier
1591         translation.
1592
1593 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
1594
1595         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
1596           command to server to request file size.
1597         * ftp.h (ftp_size): Export it.
1598         * ftp.c (getftp): Use new ftp_size function if restoring
1599           transfer of a file with unknown size.
1600
1601 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1602
1603         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
1604
1605 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1606
1607         * url.c (getproxy): Handle URL shorthands.
1608
1609 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1610
1611         * main.c: Remove --wait / --waitretry backwards compatibility
1612         code.
1613
1614 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1615
1616         * main.c (main): Use it.
1617
1618         * url.c (rewrite_url_maybe): New function.
1619
1620 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1621
1622         * url.c: Clean up handling of URL schemes.
1623
1624 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1625
1626         * url.c: Get rid of `protostrings'.
1627         (skip_proto): Don't use protostrings.
1628         (has_proto): Ditto.
1629
1630 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1631
1632         * Makefile.in: Conditionally compile getopt.o.
1633
1634 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1635
1636         * md5.h: Renamed to gnu-md5.h.
1637
1638         * md5.c: Renamed to gnu-md5.c.
1639
1640         * http.c: Ditto.
1641
1642         * ftp-opie.c: Use the new macros.
1643
1644         * sysdep.h: Define md5-related macros.
1645
1646         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
1647         depending on which md5 implementation is used.
1648
1649 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1650
1651         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
1652         the compiler.
1653
1654 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1655
1656         * http.c (gethttp): Print the whole response line when printing
1657         headers is requested.
1658
1659 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1660
1661         * res.c: New file.  Implement all RES-related code here.
1662
1663 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1664
1665         * version.c: Wget 1.7.1 is released.
1666
1667 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1668
1669         * headers.c (header_extract_number): Ignore trailing whitespace.
1670
1671 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
1672
1673         * html-url.c (collect_tags_mapper): Fix bug converting links
1674         with -k option for tags with multiple link attributes by
1675         handling links in the order they appear.
1676
1677 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
1678
1679         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
1680           the call to the 'rate' function by moving it past the error
1681           checking for the 'getftp' function return value.
1682
1683 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1684
1685         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
1686         '\"'.  Different compilers' assert macros are broken in different
1687         ways.
1688
1689 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
1690
1691         * http.c (gethttp): print debug output for errors occuring during
1692         the ssl handshake.
1693
1694 2001-11-16  Chris Seawood  <cls@seawood.org>
1695
1696         * init.c: Ditto.
1697
1698         * host.c: Ditto.
1699
1700         * connect.c: Ditto.
1701
1702         * sysdep.h: Support compilation under BEOS.
1703
1704 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1705
1706         * url.c (url_equal): Fix a memory leak when parseurl returns an
1707         error on the second URL. Also, since url_equal is not used at the
1708         moment, do not compile it.
1709
1710         * url.h: Ditto for the prototype of url_equal.
1711
1712 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1713
1714         * html-parse.c (map_html_tags): Support XML-style empty tags.
1715
1716 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1717
1718         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
1719         loop condition because we're no longer setting SIZEVAR here.
1720
1721 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1722
1723         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
1724         call because it needs the old value.
1725
1726 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1727
1728         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
1729         an attribute name.
1730
1731 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1732
1733         * url.c (url_filename): Make sure that slashes that sneak in to
1734         u->file via query string get protected.
1735         (file_name_protect_query_string): New function.
1736
1737 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1738
1739         * recur.c (recursive_retrieve): Also check undesirable_urls with
1740         canonicalized URL.
1741
1742 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1743
1744         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1745         one.
1746
1747 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1748
1749         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1750         define it.
1751
1752 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1753
1754         * ftp.h: Provide correct prototype for ftp_parse_ls().
1755
1756 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1757
1758         * version.c: Wget 1.7 is released.
1759
1760 2001-06-03  Karl Eichwalder  <ke@suse.de>
1761
1762         * ftp-ls.c (ftp_parse_ls): Fix typo.
1763
1764 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1765
1766         * all: Update copyright information.
1767
1768 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1769
1770         * http.c (gethttp): Indicate that the continued download failed
1771         for *this* file.
1772
1773 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1774
1775         * version.c: Wget 1.7-pre1 is released.
1776
1777 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1778
1779         * version.c: Updated version to 1.7-pre1.
1780
1781 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1782
1783         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1784
1785 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1786
1787         * http.c (gethttp): Use real URL data for cookies, not the proxy
1788         stuff.
1789
1790 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1791
1792         * main.c (print_help): Document `--no-http-keep-alive'.
1793
1794         * utils.c (numdigit): Handle negative numbers *correctly*.
1795
1796         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
1797         than the confusing "unsigned".
1798
1799         * utils.c (string_set_contains): Renamed from string_set_exists.
1800
1801         * hash.c (hash_table_contains): Renamed from hash_table_exists.
1802
1803         * cookies.c: Move case-insensitive hash tables to hash.c.
1804
1805 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1806
1807         * http.c (gethttp): Before concluding that the file is already
1808         fully retrieved, make sure that the file existed and `Range' was
1809         actually requested.
1810
1811 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1812
1813         * cookies.c (eliminate_dups): New function.
1814         (build_cookies_request): Use it.
1815         (build_cookies_request): Set chain_store_size after reallocating
1816         all_chains.
1817         (check_domain_match): Annotated for easier future debugging.
1818         (store_cookie): In the debug message, print whether the cookie is
1819         permanent.
1820
1821 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1822
1823         * http.c (http_loop): Reset no_truncate before deciding whether to
1824         set it.
1825         (gethttp): Further clarify "-c conflicts with existing file" error
1826         message, based on input from Herold Heiko.
1827
1828 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
1829
1830         * http.c (http_loop): If restval is set, set no_truncate to 1
1831         unconditionally.
1832
1833 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1834
1835         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1836         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1837         (ftp_parse_vms_ls): Ditto.
1838
1839 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1840
1841         * init.c (cmd_address): Zero SIN before using it; apparently
1842         needed on *BSD.
1843
1844 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1845
1846         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1847         empty.
1848
1849 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1850
1851         * main.c (main): Make `--cookies' respect its argument.
1852
1853 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1854
1855         * main.c (main): Removed undocumented option `--email-address'.
1856
1857         * netrc.c: Use the latest read_whole_line.
1858
1859         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1860
1861         * mswindows.c (pwd_cuserid): Ditto.
1862
1863         * utils.c (pwd_cuserid): Removed.
1864
1865         * host.c (ftp_getaddress): Removed.
1866
1867 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1868
1869         (http_loop): Allocate space for filename_plus_orig_suffix with
1870         alloca; this is more efficient and removes the need to free it
1871         before each and every return.
1872
1873 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1874
1875         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1876         unneeded because the file is already there and fully downloaded,
1877         and -c is specified.
1878         (http_loop): Handle RETRUNNEEDED.
1879
1880         * wget.h (uerr_t): New value RETRUNNEEDED.
1881
1882         * http.c (http_loop): Set no_truncate for files that both exist
1883         and are non-empty.
1884         (gethttp): Consider the download finished when restval >= contlen,
1885         not only when restval==contlen.
1886         (gethttp): Handle redirection before giving up due to -c.
1887         (gethttp): Clarify error message which explains that -c will not
1888         truncate the file.
1889         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1890         the stuff that needs freeing and release the socket.
1891
1892 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1893
1894         * main.c (print_help): Wget booleans accept "off", not "no".
1895
1896 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1897
1898         * http.c (http_loop): If allow_cache is zero, always disable
1899         caching, not only when retrieving through proxy.
1900
1901         * init.c: Ditto.
1902
1903         * options.h (struct options): Rename proxy_cache to allow_cache.
1904
1905 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1906
1907         * http.c (mktime_from_utc): Improve documentation.
1908         (http_atotm): Put format strings into a separate array.
1909
1910 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1911
1912         * safe-ctype.h: Instead of throwing #error when isalpha is
1913         defined, redefine it to something that will throw a compile-time
1914         error if actually *used*.  Do the same for the rest of the
1915         standard C macros.
1916
1917 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1918
1919         * url.c (getproxy): Ignore empty proxy vars.
1920
1921 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1922
1923         * http.c (http_loop): Would load cookies every time.
1924
1925         * cookies.c (load_cookies): Handle cookies whose values contain
1926         embedded spaces.
1927
1928 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1929
1930         * utils.c: Define each DIGITS_* in one line.
1931
1932 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
1933
1934         * http.c (http_atotm): Initialize t.tm_isdst to 0.
1935         (mktime_from_utc): Prevent mktime() from having discontinuities at
1936         DST transition points.
1937
1938 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1939
1940         * html-url.c (get_urls_html): Fix documentation.
1941
1942 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1943
1944         * url.c (UNSAFE_CHAR): Reimplement using a static table.
1945         (url_init): Removed.
1946         (init_unsafe_char_table): Removed.
1947
1948 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1949
1950         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
1951
1952 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1953
1954         * utils.c: Document timer functions.
1955
1956         * retr.c (rate): Use it.
1957         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
1958
1959         * utils.c (wtimer_granularity): New function.
1960
1961 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1962
1963         * retr.c (show_progress): Ditto.
1964
1965         * ftp.c (getftp): Ditto.
1966
1967         * http.c (gethttp): Use new timer functions.
1968
1969         * utils.c (wtimer_allocate): New function.
1970         (wtimer_new): Ditto.
1971         (wtimer_delete): Ditto.
1972         (wtimer_reset): Ditto.
1973         (wtimer_elapsed): Ditto.
1974
1975 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1976
1977         * utils.c (long_to_string): New, faster version.  Favors smaller
1978         numbers; much of the calculation is now done at compile-time.
1979
1980 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1981
1982         * utils.c (numdigit): Handle negative numbers.
1983
1984 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1985
1986         * retr.c (show_progress): Print the download rate even when the
1987         percentages are not available.
1988
1989 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1990
1991         * ftp.c (getftp): Adjust expected_bytes if the length is
1992         authoritative.
1993
1994 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1995
1996         * url.c: Don't declare `construct'.
1997
1998         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
1999         mappings to new locations.
2000         (hash_table_new): Make resize_threshold a field in the hash table,
2001         so we don't have to recalculate it in each hash_table_put.
2002         (grow_hash_table): Update resize_threshold.
2003         (MAX): Remove unused macro.
2004         (prime_size): Made static.
2005
2006 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2007
2008         * retr.c (retrieve_url): Call uri_merge, not url_concat.
2009
2010         * html-url.c (collect_tags_mapper): Call uri_merge, not
2011         url_concat.
2012
2013         * url.c (mkstruct): Use encode_string instead of xstrdup followed
2014         by URL_CLEANSE.
2015         (path_simplify_with_kludge): Deleted.
2016         (contains_unsafe): Deleted.
2017         (construct): Renamed to uri_merge_1.
2018         (url_concat): Renamed to uri_merge.
2019
2020 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2021
2022         * url.c (str_url): Use encode_string instead of the unnecessary
2023         CLEANDUP.
2024         (encode_string_maybe): New function, returns input string if no
2025         encoding is needed.
2026         (encode_string): Call encode_string_maybe to do the dirty work,
2027         xstrdup if no work needed.
2028
2029 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2030
2031         * wget.h (XDIGIT_TO_xchar): Define here.
2032
2033         * url.c (decode_string): Use new name.
2034         (encode_string): Ditto.
2035
2036         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
2037         (dump_hash): Use new name.
2038
2039         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
2040         XDIGIT_TO_XCHAR respectively.
2041
2042 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2043
2044         * init.c: Include cookies.h.
2045
2046         * cookies.h: Declare cookies_cleanup.
2047
2048         * cookies.c (check_domain_match): Remove unused variable.
2049         (save_cookies): Remove extraneous argument from debug statement.
2050
2051         * host.c (same_host): Don't call skip_url.
2052
2053         * url.c (skip_url): Removed.  Removed its calls from various
2054         functions in url.c.
2055
2056 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2057
2058         * cookies.c (unsigned_string_hash): Use the new code in
2059         string_hash as reference.
2060
2061         * hash.c (hash_table_map): Allow deletion and change of the
2062         element processed by MAPFUN.
2063         (string_hash): Use the function from glib.
2064
2065 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2066
2067         * config.h.in: Include #undef stub.
2068
2069         * hash.c (hash_table_remove): Rewrite to actually clear deleted
2070         entries instead of just marking them as deleted.
2071
2072 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2073
2074         * hash.h: Declare hash_table_get_pair and hash_table_count.
2075
2076 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2077
2078         * cookies.c: Declare http_atotm.
2079
2080 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2081
2082         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
2083         permissions.  A compiler that doesn't accept octal constants is
2084         seriously broken and shouldn't be used -- octal constants were
2085         present in K&R C!
2086
2087 2001-01-20  Karl Eichwalder  <ke@suse.de>
2088
2089         * Makefile.in: Provide and use DESTDIR according to the Coding
2090         Standards.
2091
2092 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2093
2094         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
2095         specification.
2096
2097 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2098
2099         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
2100         because that strips the *leading* slash, thus forcing relative
2101         FTP retrieval.
2102
2103 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2104
2105         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
2106         notation for VMS servers.
2107         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
2108         odir is an empty string.
2109
2110 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2111
2112         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
2113         effective. Suggested by Edward J. Sabol.
2114
2115 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2116
2117         * cookies.c (build_cookies_request): Use and sort cookies from all
2118         matching domains.
2119         (build_cookies_request): Check for duplicates before generating
2120         the `Cookies' header.
2121
2122         * main.c (main): Don't load cookies here.
2123         (main): Make loadcookies and savecookies call the correct command.
2124
2125         * http.c (http_loop): Load cookies on-demand.
2126
2127 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2128
2129         * http.c (gethttp): Fix indentation of SSL ifdef.
2130
2131 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2132
2133         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
2134         that hack is no longer necessary.
2135         (getftp): Prepend initial directory to *non*-absolute u->dir's.
2136
2137 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2138
2139         * init.c (cmd_file): New function.
2140         (enable_tilde_expansion): New variable.
2141         (run_wgetrc): Use it.
2142         (cmd_file): Use it.
2143
2144 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2145
2146         * init.c: Include cookie-related options.
2147
2148         * main.c (main): Include cookie-specific options.
2149         (main): Load cookies before download is finished.
2150         (main): Save cookies when done.
2151
2152         * http.c (gethttp): Process the `Set-Cookie' header.
2153         (gethttp): Include cookies in the response.
2154
2155         * cookies.c: New file.
2156
2157 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2158
2159         * utils.c (datetime_str): New function.
2160
2161 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2162
2163         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
2164         12:01PM == 00:01, which was obviously wrong. Taken care of this
2165         anomaly.
2166
2167         * ChangeLog: Removed an excess conflict marker. Reformatted the
2168         entry by Philipp Thomas from 2001-03-09.
2169
2170         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
2171         between 0 and 23. Elminate unused variable `sec'.
2172
2173 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2174
2175         * hash.c (hash_table_count): New function.
2176
2177 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2178
2179         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
2180         Digital Unix cc.
2181
2182 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2183
2184         * config.h.in: Oops, do the namespace tweaks only on systems we
2185         know about.
2186
2187 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2188
2189         * hash.c: Include <string.h>.
2190
2191 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2192
2193         * config.h.in: Define "compilation environment" options that work
2194         under Linux and Solaris.  To be reviewed on other OS'es.
2195
2196 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2197
2198         * http.c (gethttp): Prepend literal newline with `\n\'.
2199
2200 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2201
2202         * sysdep.h: Don't define VERY_LONG_FORMAT.
2203
2204         * utils.c (very_long_to_string): New function.
2205         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2206
2207 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2208
2209         * url.c (parse_uname): Would run past the end of the string if the
2210         username was present, but the URL did not contain a slash, e.g.
2211         http://foo:bar@myhost.
2212
2213 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2214
2215         * http.c (http_atotm): Use %A instead of %a to match full
2216         weekday.  (On most systems there is no difference.)
2217
2218 2001-04-03  Paul Bludov  <paul@ozero.net>
2219
2220         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2221         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2222         leak.
2223         (ws_mypath): Use GetModuleFileName instead of argv[0].
2224         (ws_startup): Use data.wVersion for comparison.
2225
2226 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2227
2228         * http.c (http_loop): Ditto.
2229
2230         * ftp.c (ftp_loop_internal): Made the check whether to continue
2231         retrieval `-O'-friendly.
2232
2233 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2234
2235         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2236         they will be handled as whitespace.
2237         (parse_netrc): Correctly handle lines that end with whitespace.
2238
2239 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2240
2241         * retr.c (retrieve_url): New variable global_download_count used
2242         to identify first retrieval.
2243
2244         * ftp.c (getftp): Ditto.
2245
2246         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2247
2248 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2249
2250         * init.c (cmd_address): Heap-allocate the address that gets stored
2251         to CLOSURE.  Old code would simply assign an address on the stack.
2252
2253 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2254
2255         * ftp.c (ftp_get_listing): Propagate error status.
2256         (ftp_retrieve_glob): Use it.
2257         (ftp_loop): Ditto.
2258
2259 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2260
2261         * main.c (main): Add -C to the string that is the third arg to
2262         getopt_long().
2263
2264 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2265
2266         * ftp.c (getftp): Don't start the download from scratch if `-c'
2267         was specified, but the file is already fully downloaded.
2268
2269         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2270         specified and the server doesn't support continued download.
2271         (gethttp): Don't start the download from scratch if `-c' was
2272         specified, but the file is already fully downloaded.
2273
2274 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2275
2276         (recursive_retrieve): Don't clear the hash tables at this point at
2277         all; it interferes with the normal operation of register_download.
2278
2279 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2280
2281         * recur.c (recursive_retrieve): Clear the hash tables only when
2282         they are defined.
2283
2284 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2285
2286         * http.c (gethttp): Make sure the socket is closed with
2287         CLOSE_INVALIDATE before we have drained the body.
2288
2289 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2290
2291         * retr.c (retrieve_url): Call register_download() for downloaded
2292         files and register_html() for downloaded HTML files.
2293
2294         * recur.c (register_download): New function; register here that a
2295         file has been downloaded, rather than in recursive_retrieve().
2296         (register_html): New function; enqueue the location of HTML files
2297         here rather than in recursive_retrieve().
2298
2299 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2300
2301         * main.c (print_help): Use multiple fputs instead of a single ugly
2302         printf().
2303         (main): Consistently assign numbers >128 to options without a
2304         corresponding character.
2305
2306 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2307
2308         * safe-ctype.h: New file. Locale independent ctype.h replacement
2309         taken from libiberty.
2310
2311         * safe-ctype.c: New file. Tables for above.
2312
2313         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2314         safe-ctype$o.
2315
2316         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2317         isspace.
2318
2319         * ftp-basic.c: Don't include ctype.h.
2320
2321         * ftp-ls.c: Likewise.
2322
2323         * ftp.c: Likewise.
2324
2325         * headers.c: Likewise.
2326
2327         * host.c: Likewise.
2328
2329         * html-parse.c: Likewise.
2330
2331         * html-url.c: Likewise.
2332
2333         * http.c: Likewise.
2334
2335         * init.c: Likewise.
2336
2337         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2338
2339         * netrc.c: Likewise.
2340
2341         * recur.c: Likewise.
2342
2343         * retr.c: Likewise.
2344
2345         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2346         instead of isdigit.
2347
2348         * sysdep.h: Remove defines of ctype macros as they aren't needed
2349         for safe-ctype-h.
2350
2351         * url.c: Don't include ctype.h.
2352
2353         * utils.c: Likewise.
2354
2355         * wget.h: Include safe-ctype.h.
2356
2357 2001-03-27  Dan Harkless  <wget@harkless.org>
2358
2359         * Makefile.in: Moved top_builddir out of "User configuration
2360         section" of top Makefile and analogous spot in this one.
2361
2362 2001-03-17  Dan Harkless  <wget@harkless.org>
2363
2364         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2365         Define top_builddir.  Link wget with libtool so the user doesn't
2366         have to supply a bunch of custom environment variables to
2367         correctly link with the OpenSSL shared libraries.
2368
2369 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2370
2371         * http.c (gethttp): skip :port in host header if it is the
2372         DEFAULT_HTTPS_PORT when using SSL.
2373
2374         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2375         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2376         rest of the code.
2377         * url.h: Ditto
2378
2379 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2380
2381         * retr.c (show_progress): Correctly calculate the number of bytes
2382         in the first line of the download that have been actually
2383         downloaded in this run.
2384
2385 2001-02-23  Dan Harkless  <wget@harkless.org>
2386
2387         * main.c (print_help): --help documentation for -N said it would
2388         re-download files if they had the _same_ timestamp on server.
2389         (print_help): -nr belongs in "FTP options" section of --help
2390         output, not "Recursive retrieval" section.  Alphabetized FTP
2391         options by long option name.
2392
2393 2001-02-16  Dan Harkless  <wget@harkless.org>
2394
2395         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2396         that "httpsproxy" had been inserted into commands[] out of
2397         alphabetical order, causing "BUG: unknown command `httpuser'".
2398
2399 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2400
2401         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2402         listing without correct permissons).
2403
2404         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2405         FTP server.
2406
2407         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2408         shall be donwloaded only when it's newer than the local copy or
2409         when it has the same timeestamp but its size is different. ST_VMS
2410         and ST_MACOS as special cases that lie about file size.
2411
2412         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2413
2414         * Makefile.in: Removed dependency on ftpparse library due to unclear
2415         copyright issues and absence of any feedback to our queries.
2416
2417         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2418         copyright issues and absence of any feedback to our queries.
2419         (ftp_parse_ls): Added a warning message when remote server system
2420         does not seem to be suported by wget.
2421         (ftp_parse_vms_ls): New function for parsing VMS ftp
2422         server listing output.
2423         (clean_line): New function responsible for removing
2424         end-of-line characters from FTP listing texts.
2425
2426         * ftp.c (getftp): Global variables pwd and host_type are now
2427         member of the ccon structure under names ccon.id and ccon.rs.
2428
2429         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2430         enum stype rs (remote system identification) and char *id (initial
2431         working directory), as suggested by Hrvoje.
2432
2433         * url.c (parse_uname): Added support for passwords containing '@'
2434         characters.
2435         (skip_uname): Ditto.
2436
2437 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2438
2439         * ftp.c (ftp_loop): Reset con.
2440
2441 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2442
2443         * url.c (parse_uname): Added support for passwords containing '@'
2444         characters.
2445         (skip_uname): Ditto.
2446
2447 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2448
2449         * url.c (parseurl): Debug-print u->ftp_type.
2450
2451 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2452
2453         * ftp.c (ftp_loop_internal): Disable padding.
2454         (getftp): Ditto.
2455
2456         * http.c (http_loop): Disable padding.
2457
2458         * retr.c (show_progress): Use it to enable padding.
2459
2460         * retr.c (rate): Optional parameter PAD for padding the rate.
2461
2462 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2463
2464         * retr.c (show_progress): Make sure that the last output line
2465         includes progress.
2466
2467 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2468
2469         * retr.c (show_progress): Print the download rate along with the
2470         percentages.
2471         Along with Anders Thorsby <anders@thorsby.dk>.
2472
2473 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2474
2475         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2476         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2477         net/if.h.
2478
2479 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2480
2481         * gen_sslfunc.c: verify_callback is now static
2482
2483         * gen_sslfunc.c (init_ssl): load certificate if specified
2484
2485         * gen_sslfunc.c (ssl_printerr): new function
2486
2487         * init.c: added new --sslcertfile and --sslcertkey switches
2488
2489         * main.c: ditto
2490
2491         * options.h: ditto
2492
2493         * http.c (gethttp): abort when init_ssl fails
2494
2495 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2496
2497         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2498
2499 2001-01-10  Dan Harkless  <wget@harkless.org>
2500
2501         * url.c (str_url): Clarified this function's comment header after
2502         Hrvoje answered my question on the list as to when hide != 1.
2503         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2504
2505 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2506
2507         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2508         Drazen Kacar <dave@arsdigita.com>.
2509         (conaddr): Ditto.
2510
2511 2001-01-09  Dan Harkless  <wget@harkless.org>
2512
2513         * html-url.c: A bunch of fixup of `--page-requisites'-related
2514         comments to reflect Hrvoje's changes to my code when transplanting
2515         it into this new file, to fix spelling mistakes, to clarify, etc.
2516
2517         * url.c (write_backup_file): Clarified a comment.
2518         (str_url): Henrik van Ginhoven pointed out on the list that we
2519         shouldn't give away the number of characters in the password by
2520         replacing each character with a 'x'.  Use "<password>" instead.
2521
2522         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2523         directories didn't work if logging in put you in a directory other
2524         than "/" is fixed now.  Removed the comment here warning of the bug.
2525
2526         * main.c (print_help): --continue's description was misleading.
2527         We don't "restart", we "resume".  Also, better to say
2528         "partially-downloaded file" rather than just "existing file".
2529
2530 2001-01-06  Dan Harkless  <wget@harkless.org>
2531
2532         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2533         the best way to go about my aim.  Removed them in favor of:
2534
2535         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2536
2537 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2538
2539         * url.c (replace_attr): New function, to be used by both
2540         TO_COMPLETE and TO_RELATIVE case in convert_links.
2541         (find_fragment): New function for finding URL fragments.
2542         (replace_attr): Better handle the case where the original string
2543         is not quoted.  Use find_fragment.
2544         (convert_links): Use replace_attr().
2545
2546 2000-12-31  Dan Harkless  <wget@harkless.org>
2547
2548         * ChangeLog: Since this flat file doesn't have multiple branches,
2549         looking at the dates would make you think that things went into
2550         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2551         in 1.6 branch.]" where appropriate to clarify.
2552
2553 2000-12-30  Dan Harkless  <wget@harkless.org>
2554
2555         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2556         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2557
2558 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2559
2560         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2561
2562 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2563
2564         * http.c (check_end): Fix test for '+' or '-'.
2565
2566 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2567
2568         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2569         clash with the function top-level-declared variable i.
2570         (str_url): Likewise, rename inner-loop i to j.
2571
2572         * recur.c (parse_robots): Don't declare LEN at top of function.
2573         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2574         global variable.
2575
2576         * main.c (main): Change erroneous use of bitwise and to logical.
2577
2578         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
2579         the stack because it will be copied to closure.
2580
2581         Thanks to Csaba Raduly's run of PC-LINT over the sources.
2582
2583 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2584
2585         * http.c (basic_authentication_encode): Use xmalloc(), not
2586         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
2587         sources.
2588
2589 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
2590
2591         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
2592         compilation.
2593
2594 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2595
2596         * mswindows.c: Include <errno.h>.
2597
2598         * gen_sslfunc.c: Include <errno.h>.
2599
2600         * ftp-basic.c: Don't attempt to declare errno or h_errno because
2601         they're not used.
2602
2603         * main.c: Include <errno.h> because errno is used.
2604
2605         * ftp.c: Ditto.
2606
2607         * http.c: Include <netdb.h> for h_errno.
2608
2609 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2610
2611         * html-parse.c (advance_declaration): MSVC assert() chokes on
2612         '\"'.  Use '"' instead.
2613
2614 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2615
2616         * utils.c (xfree_real): Removed.
2617         (xfree_debug): Just call free().
2618
2619         * wget.h (xfree): Make it an alias for free.
2620
2621 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2622
2623         * http.c (http_loop): Furthermore, touch output_document only if
2624         it is known to be an existing regular file.
2625
2626 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2627
2628         * ftp.c (ftp_retrieve_list): Ditto.
2629
2630         * http.c (http_loop): Touch output_document if that is used for
2631         output.
2632
2633 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2634
2635         * http.c: Include gen_sslfunc.h after including Wget's headers.
2636         (persistent_available_p): Needed coma before `int ssl'.
2637
2638 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2639
2640         * ftp.c (ftp_loop_internal): Ditto.
2641
2642         * http.c (http_loop): Use it.
2643
2644         * retr.c (sleep_between_retrievals): New function that handles the
2645         logic of opt.wait and opt.waitretry.
2646
2647 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2648
2649         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
2650         rbuf_read_bufferful when the buffer is depleted.
2651
2652         * rbuf.c (rbuf_read_bufferful): New function.
2653
2654 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2655
2656         * gen_sslfunc.h: Use ansi2knr style function declarations.
2657
2658         * gen_sslfunc.c: Reformat according to the GNU coding standards.
2659         More should be done.
2660
2661         * http.c (persistent_available_p): Place the cheap SSL test nearer
2662         the top of the function.
2663         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
2664
2665 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2666
2667         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
2668         char.
2669
2670 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
2671
2672         * Makefile.in: added gen_sslfunc object
2673         * config.h.in: added HAVE_SSL define
2674         * connect.c: changed select_fd from static int to int
2675         * connect.h: ditto
2676         * gen_sslfunc.h: New file
2677         * gen_sslfunc.c: ditto
2678         * http.c: added HTTPS fuctionality
2679         * retrc.c: ditto
2680         * url.c: ditto
2681         * init.c: added opt.httpsproxy
2682         * options.h: ditto
2683         * rbuf.h: added alternate rbuf struct
2684         * wget.h: added CONSSLERR
2685         * rbuf.c: ditto
2686
2687         * http.c: Added HTTPS fuctionality.
2688
2689         * retrc.c: Ditto.
2690
2691         * url.c: Ditto.
2692
2693         * init.c: Added opt.httpsproxy.
2694
2695         * options.h: Ditto.
2696
2697         * rbuf.h: Added alternate rbuf struct.
2698
2699         * wget.h: Added CONSSLERR.
2700
2701         * rbuf.c: Ditto.
2702
2703 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2704
2705         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2706         "ignore_perms" to ignore file and directory permissions for
2707         Windows NT FTP server listings.
2708         (ftp_parse_winnt_ls): New function.
2709         (ftp_parse_ls): Parses UNIX and Windows NT listings
2710         separately. Simple heuristics for distinguishing between UNIX and
2711         MS-DOS-like FTP listing provided by Windows NT FTP service.
2712
2713 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2714
2715         * ftpparse.c, ftpparse.h: New files.
2716
2717         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2718         only. Use ftp_parse_nonunix_ls otherwise.
2719         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2720         exotic FTP servers.
2721
2722         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2723         FTP servers.
2724
2725         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2726         (getftp): Support for VMS. Support for FTP servers that do not
2727         place you in the root directory after login.
2728         (ftp_retrieve_list): VMS is silent about the real file size, issue
2729         a more appropriate message.
2730         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2731
2732         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2733
2734 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2735
2736         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2737         "ignore_perms" to ignore file and directory permissions for
2738         Windows NT FTP server listings.
2739         (ftp_parse_winnt_ls): New function.
2740         (ftp_parse_ls): Parses UNIX and Windows NT listings
2741         separately. Simple heuristics for distinguishing between UNIX
2742         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2743
2744 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2745
2746         * netrc.c (parse_netrc): Get rid of line ending.
2747
2748 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2749
2750         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2751         Dan.
2752
2753 2000-11-24  Karl Eichwalder  <ke@suse.de>
2754
2755         * main.c (print_help): Untabify.
2756
2757 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2758
2759         * utils.c (xrealloc_debug): Do the unregister/register thing only
2760         if the pointer has actually changed.
2761         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2762         (xfree_real): Ditto.
2763         (xrealloc_real): Ditto.
2764         (xstrdup_real): Ditto.
2765
2766 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2767
2768         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2769         string; no need to strdup() it.
2770         (getftp): Make pwd_len a local variable.
2771         (ftp_loop): Free PWD before returning.
2772
2773         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2774
2775 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2776
2777         * all: Use xfree() instead of free.
2778
2779         * utils.c (xfree): New function.
2780
2781 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2782
2783         * url.c (convert_links): HTML-quote the converted string.
2784
2785         * utils.c (html_quote_string): Move here from ftp-ls.c
2786         (html_quote_string): Make non-static; declare in utils.h.
2787         (html_quote_string): Convert SP to &#32;.
2788
2789 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2790
2791         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2792         standards; remove (debugging?) printf's; use '\0' for the ASCII
2793         zero character.  Use alloca() instead of malloc() for
2794         inter-function temporary allocations.
2795
2796 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2797
2798         * ftpparse.c, ftpparse.h: New files.
2799
2800         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2801         only. Use ftp_parse_nonunix_ls otherwise.
2802         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2803         exotic FTP servers.
2804
2805         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2806         FTP servers.
2807
2808         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2809         (getftp): Support for VMS. Support for FTP servers that do not
2810         place you in the root directory after login.
2811         (ftp_retrieve_list): VMS is silent about the real file size, issue
2812         a more appropriate message.
2813         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2814
2815         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2816
2817 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2818
2819         * hash.c (hash_table_put): Don't overwrite deleted mappings.
2820
2821 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2822
2823         * hash.c (find_mapping): New function.
2824         (hash_table_get): Use it.
2825         (hash_table_get_pair): Ditto.
2826         (hash_table_exists): Ditto.
2827         (hash_table_remove): Ditto.
2828         (hash_table_remove): Really delete the entry if the mapping
2829         following LOCATION is empty.
2830
2831         * utils.c (string_set_add): Check whether the element has existed
2832         before.
2833
2834         * hash.c (hash_table_get_pair): New function.
2835
2836 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2837
2838         * http.c (http_process_type): Ignore trailing whitespace; use
2839         strdupdelim().
2840
2841         * recur.c (recursive_retrieve): Use the new `convert' field.
2842         (convert_all_links): Ditto.
2843         (convert_all_links): Don't respect meta_disallow_follow.
2844
2845         * html-url.c (handle_link): Fill out link_relative_p and
2846         link_complete_p.
2847
2848         * url.h (struct _urlpos): Make elements more readable.
2849
2850         * recur.c (recursive_retrieve): Call slist_prepend instead of
2851         slist_append.
2852         (convert_all_links): Call slist_nreverse before iterating through
2853         urls_html.
2854
2855         * utils.c (slist_prepend): New function.
2856         (slist_nreverse): Ditto.
2857
2858 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2859
2860         * http.c (check_end): Constify.
2861
2862 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2863
2864         * http.c (http_loop): If username and password are known, try the
2865         `Basic' authentication scheme by default.
2866
2867         * connect.h: Declare test_socket_open.
2868
2869 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2870
2871         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2872
2873 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2874
2875         * http.c (gethttp): Don't use the return value of sprintf().
2876         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2877
2878 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2879
2880         * recur.c (recursive_retrieve): Print the "so we don't load"
2881         debugging message only if we really don't load.
2882
2883         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2884         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2885
2886 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2887
2888         * http.c (gethttp): Make the HTTP persistent connections more
2889         robust.
2890
2891 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2892
2893         * retr.c (get_contents): If use_expected, make sure that the
2894         appropriate amount of data is being read.
2895
2896         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2897         `Connection: Keep-Alive'.
2898
2899         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2900         turned on.
2901
2902 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2903
2904         * http.c (connection_available_p): Use it.
2905
2906         * connect.c (test_socket_open): New function.
2907
2908         * http.c (gethttp): Support persistent connections.  Based on the
2909         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
2910         (register_persistent): New function.
2911         (connection_available_p): Ditto.
2912         (invalidate_connection): Ditto.
2913
2914 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2915
2916         * url.c (convert_links): Handle UREL2ABS case.
2917
2918         * recur.c (recursive_retrieve): Instead of the list
2919         urls_downloaded, use hash tables dl_file_url_map and
2920         dl_url_file_map.
2921         (convert_all_links): Use them to retrieve data.
2922
2923         * host.c (clean_hosts): Free the hash tables.
2924
2925         * main.c (private_initialize): Call host_init().
2926
2927         * host.c (store_hostaddress): Use a saner, hash table-based data
2928         model.
2929         (realhost): Ditto.
2930         (host_init): Initialize the hash tables.
2931
2932 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2933
2934         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
2935         used for what the sorted slists used to be used for.
2936         (slist_contains): Don't rely on the list being sorted.
2937         (slist_append): Simplify the code.
2938
2939         * recur.c (recursive_cleanup): Use free_string_set.
2940
2941         * utils.c (string_set_add, string_set_exists, string_set_free):
2942         New functions for easier freeing of hash tables whose keys are
2943         strdup'ed strings.
2944
2945         * recur.c (recursive_retrieve): Use the hash table functions for
2946         storing undesirable URLs.
2947
2948         * hash.c: New file.
2949
2950 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2951
2952         * main.c (private_initialize): Call url_init.
2953         (main): Call private_initialize.
2954
2955         * url.c (unsafe_char_table): New table.
2956         (UNSAFE_CHAR): Use it.
2957         (init_unsafe_char_table): New function.
2958         (url_init): New function; call init_unsafe_char_table.
2959
2960 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2961
2962         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
2963         _vsnprintf respectively.
2964
2965 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2966
2967         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
2968         on Linux.
2969
2970 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2971
2972         * html-url.c (handle_link): Handle HTML fragment identifiers.
2973
2974         * recur.c (recursive_retrieve): If norobot info is respected and
2975         the file is specified not to be followed by robots, respect that.
2976
2977         * html-url.c (collect_tags_mapper): Handle <meta name=robots
2978         content=X>.  For us the important cases are where X is NONE or
2979         where X contains NOFOLLOW.
2980         (get_urls_html): Propagate that information to the caller.
2981
2982 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2983
2984         * url.c (convert_links): Unlink the file we might be reading from
2985         before writing to it.
2986         (convert_links): Use alloca instead of malloc for
2987         filename_plus_orig_suffix.
2988
2989 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2990
2991         * host.c (realhost): Add HOST to the list with quality==0 only if
2992         it wasn't already there.
2993         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
2994
2995 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2996
2997         * url.c (get_urls_file): Ditto.
2998         (convert_links): Ditto.
2999
3000         * html-url.c (get_urls_html): Use read_file() instead of
3001         load_file().
3002
3003         * utils.c (read_file): New function, instead of the old
3004         load_file().
3005         (read_file_free): Ditto.
3006
3007         * url.c (findurl): Search only for the supported protocols.
3008         (convert_links): Use fwrite() when writing out a region of
3009         characters.
3010
3011 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3012
3013         * ftp-ls.c: Move html_quote_string and ftp_index here.
3014
3015         * url.c: Remove get_urls_html, since that's now in html-url.c.
3016
3017         * html-url.c: New file.
3018
3019         * html-parse.c: New file.
3020
3021 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3022
3023         * init.c (run_wgetrc): Don't bother killing off '\r' since
3024         pars_line() skips whitespace at end of line anyway.
3025         (parse_line): Oops, it didn't.  Now it does.
3026
3027         * recur.c (parse_robots): Ditto here.
3028
3029         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
3030         manually because read_whole_line no longer does.
3031
3032         * utils.c (read_whole_line): Rewrite to: a) use less memory
3033         (reallocates to needed size after work), b) work faster -->
3034         fgets() instead of getc, c) be more correct --> doesn't kill the
3035         newline character at the end of line.
3036
3037 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3038
3039         * init.c (comind): Initialize MAX to array size - 1.
3040
3041 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3042
3043         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
3044         Suggested by Edward J. Sabol.
3045
3046 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3047
3048         * url.c (construct): Handle the case where host name is not
3049         followed by a slash.
3050
3051 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3052
3053         * init.c: commands[] need to be sorted!  ("base" wasn't.)
3054
3055 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3056
3057         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
3058         `if'.
3059
3060 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3061
3062         * url.c (construct): Insert unneeded initialization for the
3063         compiler to shut up.
3064
3065         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
3066         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
3067         otherwise gets lost when you define _XOPEN_SOURCE.
3068
3069         * utils.c (touch): Include the file name in the error message.
3070         From Debian.
3071
3072 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3073
3074         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
3075         resize the buffer to fit the formated message.  That way, messages
3076         of arbitrary size may be printed.
3077         (logvprintf): Use saved_append() to optionally log the last
3078         several lines of output.
3079         (logputs): Ditto.
3080         (log_close): Adapt to new data structures.
3081         (log_dump): Ditto.
3082         (redirect_output): Print messages to stderr, not to stdout.
3083
3084         * log.c (saved_append_1): New function.  Replaces the old logging
3085         system ("log all output until 10M characters") with a new, much
3086         more reasonable one ("log last screenful of text").
3087         (saved_append): New function; call saved_append_1.
3088         (free_log_line): New function.
3089
3090 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3091
3092         * url.c (construct): Fix comment.
3093         (find_last_char): Document.
3094
3095 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3096
3097         * snprintf.c: New file.
3098
3099 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3100
3101         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
3102         types to logprintf() and debug_logprintf().
3103
3104 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3105
3106         * ftp.c (ftp_loop_internal): Hide the password from the URL when
3107         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
3108         <darekm@bydg.lomac.com.pl>.
3109
3110 2000-11-02  Junio Hamano  <junio@twinsun.com>
3111
3112         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
3113
3114 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
3115
3116         * http.c (known_authentication_scheme_p): Recognize NTML
3117         authentication.
3118         (create_authorization_line): Treat NTML the same as `Basic'.
3119
3120 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3121
3122         * retr.c (retrieve_url): Free url before returning.
3123         (retrieve_url): Free mynewloc before returning.
3124         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3125
3126 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3127
3128         * url.c (parseurl): Remove possible reading past the end of
3129         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3130
3131 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3132
3133         * main.c (main): In case of opt.downloaded overflowing, print
3134         <overflow> instead of a totally bogus random value.
3135
3136         * retr.c (retrieve_from_file): Ditto.
3137
3138         * recur.c (recursive_retrieve): Ditto.
3139
3140         * main.c (main): Ditto.
3141
3142         * http.c (http_loop): Ditto.
3143
3144         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
3145         `+=', and downloaded_exceeds_quota() instead of the simple-minded
3146         check.
3147         (ftp_retrieve_list): Ditto.
3148         (ftp_retrieve_dirs): Ditto.
3149         (ftp_retrieve_glob): Ditto.
3150
3151         * retr.c (downloaded_increase): New function.  Notice overflows of
3152         opt.downloaded.
3153         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
3154         used if it overflowed.
3155
3156         * options.h (struct options): New member downloaded_overflow.
3157
3158 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3159
3160         * wget.h (enum): Remove extra space after last enumeration.
3161
3162 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3163
3164         * main.c (main): Use legible_very_long() for printing
3165         opt.downloaded.
3166
3167         * utils.c (legible_1): New function that operates on strings and
3168         does the brunt of legible()'s work.
3169         (legible): Use legible_1().
3170         (legible_very_long): New function; dump the argument with
3171         sprintf(), and call legible_1().
3172
3173         * options.h (struct options): Use VERY_LONG_TYPE for
3174         opt.downloaded.
3175
3176         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
3177         type.
3178
3179         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
3180         defined.  Define HAVE_LONG_LONG if long long is available.
3181
3182 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3183
3184         * utils.c (long_to_string): Update with a later, better version.
3185
3186 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3187
3188         * url.c (path_simplify_with_kludge): New function.
3189         (path_simplify_with_kludge): Disable it.  Instead...
3190         (parse_dir): ...make sure that at this point the right thing is
3191         done, i.e. that "query" part of the URL (?...) is always assigned
3192         to the file, never to the directory portion of the path.
3193
3194 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3195
3196         * retr.c (retrieve_url): Detect redirection cycles.
3197
3198 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3199
3200         * url.c (get_urls_html): Decode HTML entities using
3201         html_decode_entities.
3202
3203         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3204         (&#NNN;) as an HTML fragemnt.
3205         (html_decode_entities): New function.
3206
3207 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3208
3209         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3210
3211 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3212
3213         * url.c (construct): Rewritten for clarity.  Avoids the
3214         unnecessary copying and stack-allocation the old version
3215         performed.
3216
3217 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3218
3219         * ftp.c (getftp): Ditto.
3220
3221         * http.c (gethttp): Rewind the stream when retrying from scratch.
3222
3223 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3224
3225         * retr.c (retrieve_url): Use url_concat() to handle relative
3226         redirections instead of /ad hoc/ code.
3227
3228         * url.c (url_concat): New function encapsulating weird
3229         construct().
3230         (urllen_http_hack): New function.
3231         (construct): When constructing new URLs, recognize that `?' does
3232         not form part of the file name in HTTP.
3233
3234 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3235
3236         * retr.c: Add msec timing support for WINDOWS.
3237         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3238         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3239
3240 2000-10-27  Dan Harkless  <wget@harkless.org>
3241
3242         * retr.c (retrieve_url): Manually applied T. Bharath
3243         <TBharath@responsenetworks.com>'s patch to get wget to grok
3244         illegal relative URL redirects.  Reformatted and re-commented it.
3245
3246 2000-10-23  Dan Harkless  <wget@harkless.org>
3247
3248         * connect.c (make_connection and bindport): Manually applied Rob
3249         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3250         changing coding style to GNU's.
3251
3252         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3253         files downloaded via FTP.  Per a comment, .listing files were not
3254         counted towards number of bytes and files downloaded because they're
3255         deleted anyway.  Well, they aren't under -nr, so count them then.
3256
3257         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3258         --bind-address, alphabetizing, changing coding style to GNU's,
3259         commenting, and renaming cmd_ip_address() to cmd_address() to
3260         imply hostnames also okay.
3261
3262         * main.c (main): --delete-after didn't delete the root of the
3263         tree.  Ignore --convert-links if --delete-after was specified.
3264         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3265         fixing duplicate use of added-since-1.5.3 case value.
3266         (print_help): Clarified that --delete-after deletes local files.
3267         Rob forgot to add a line for his new --bind-address option.
3268
3269         * options.h (struct options): Manually applied Rob Mayoff's patch
3270         to add --bind-address (bind_address structure member).
3271
3272         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3273         Ignore --convert-links if --delete-after was specified.
3274
3275         * retr.c (retrieve_from_file): Just added a DEBUGP().
3276
3277 2000-10-19  Dan Harkless  <wget@harkless.org>
3278
3279         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3280         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3281         patch to work around FTP servers that incorrectly respond to the
3282         "REST" command with the remaining size rather than the total file size.
3283
3284         * http.c (gethttp): Improved a comment and added code to tack on
3285         ".html" to text/html files without that extension when -E specified.
3286         (http_loop): Use new downloaded_file() enumerators and deal with
3287         the case of gethttp() called xrealloc() on u->local.
3288
3289         * init.c (commands): Added new "htmlextension" command.
3290         Also renamed John Daily's cmd_quad() to the more descriptive
3291         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3292         removed duplicate cmd_boolean() declaration.
3293
3294         * main.c (print_help): Added my new -E / --html-extension option.
3295         (main): Undocumented --email-address option previously used -E synonym.
3296         Stole it away for the much more deserving --html-extension's use.
3297
3298         * options.h (struct options): Added html_extension field.
3299
3300         * url.c (convert_links): URL X that we saved as X.html locally due
3301         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3302         (downloaded_file): Now remembers if we added .html extension to a file.
3303
3304         * url.h (downloaded_file_t): Added extra enumerators to support above.
3305         (downloaded_file): Now takes and returns a downloaded_file_t.
3306
3307         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3308
3309 2000-10-09  Dan Harkless  <wget@harkless.org>
3310
3311         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3312
3313         * main.c (print_help): Clarified what --retr-symlinks does.
3314
3315 2000-09-15  John Daily  <jdaily@cyberdude.com>
3316
3317         * init.c: Add support for "always" and "never" values to allow
3318         .wgetrc to override commandline (useful e.g. with .pm files
3319         calling `wget --passive-ftp' when your firewall doesn't allow that).
3320
3321         * ftp.c (getftp): passive_ftp is first option to support always/never.
3322
3323 2000-08-30  Dan Harkless  <wget@harkless.org>
3324
3325         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3326
3327         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3328         Wrapped some > 80-column lines.  When -p is specified and we're at a
3329         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
3330         <LINK REL="stylesheet">.
3331
3332         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3333
3334         * init.c: Added new -p / --page-requisites / page_requisites option.
3335
3336         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3337         infinite recursion.  Changed the unhelpful --mirrior description
3338         to simply give the options it's equivalent to.  Added new -p option.
3339         (main): Added some comments; handle new -p / --page-requisites.
3340
3341         * options.h (struct options): Added new page_requisites field.
3342
3343         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3344         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3345         get_urls_html().  Use new INFINITE_RECURSION #define.
3346
3347         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3348         final `dash_p_leaf_HTML' parameter.
3349
3350         * url.c: get_urls_html() and htmlfindurl() now take final
3351         `dash_p_leaf_HTML' parameter.
3352
3353         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3354
3355         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3356
3357 2000-08-23  Dan Harkless  <wget@harkless.org>
3358
3359         * main.c (print_help): -B / --base was not mentioned.
3360
3361 2000-08-22  Dan Harkless  <wget@harkless.org>
3362
3363         * main.c (print_help): Modified -nc description to mention that it
3364         also prevents the creation of multiple versions of the same file
3365         with ".<number>" suffixes.
3366
3367 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3368
3369         * retr.c (retrieve_url): Consistently strdup opt.referer when
3370         setting u->referer.
3371
3372 2000-06-09  Dan Harkless  <wget@harkless.org>
3373
3374         * main.c (print_help): --help output for --waitretry was over 80 cols.
3375
3376 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3377
3378         * url.c (encode_string): Fix comment.
3379         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3380
3381 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3382
3383         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3384         files.
3385
3386 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3387
3388         * url.c (str_url): Print the port number only if it's different
3389         from the default port number for that protocol.
3390
3391 2000-05-22  Dan Harkless  <wget@harkless.org>
3392
3393         * main.c (print_help): Added --help line for Damir Dzeko
3394         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3395         Removed comments that --referer and --waitretry were undocumented.
3396         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3397         line for --execute.
3398
3399 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3400
3401         * ftp.c (getftp): Ditto.
3402
3403         * http.c (gethttp): Check for return value of fclose/fflush.
3404
3405 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3406
3407         * host.c (store_hostaddress): Instead of shifting ADDR, start
3408         copying from the correct address.
3409
3410 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3411
3412         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3413         alloca().
3414         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3415
3416 2000-04-04  Dan Harkless  <wget@harkless.org>
3417
3418         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3419         "left shift count >= width of type" warning on 32-bit
3420         architectures.  Got rid of it by tricking the compiler w/ a variable.
3421
3422         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3423         characters per RFC1738, namely everything above '~'.  It also
3424         generated a warning on OSes where char =~ unsigned char.  Fixed.
3425
3426 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3427
3428         * http.c (http_process_type): Removed needless strdup(), a memory
3429         leak.
3430
3431 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3432
3433         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3434
3435 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3436
3437         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3438
3439 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3440
3441         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3442
3443 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3444
3445         * url.c (UNSAFE_CHAR): New macro.
3446         (contains_unsafe): Use it.
3447         (encode_string): Ditto.
3448
3449 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3450
3451         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3452
3453 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3454
3455         * Use TOUPPER/TOLOWER.
3456
3457 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3458
3459         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3460
3461 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3462
3463         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3464
3465         * sysdep.h (ISALNUM): New macro.
3466         (TOLOWER): Ditto.
3467         (TOUPPER): Ditto.
3468
3469 2000-03-10  Dan Harkless  <wget@harkless.org>
3470
3471         * html.c (idmatch): Implemented checking of my new --follow-tags
3472         and --ignore-tags options.
3473
3474         * init.c (commands): Added comment reminding people adding new
3475         entries doing allocation to add corresponding freeing in cleanup().
3476         (commands): Added new followtags and ignoretags commands.
3477         (cleanup): Free storage for new followtags and ignoretags.
3478
3479         * main.c: Use of "comma-separated list" was random -- normalized
3480         it.  Did some alphabetization.  Added comments pointing out
3481         "Options without arguments" and "Options accepting an argument"
3482         sections of long_options[].  Added new options --follow-tags and
3483         -G / --ignore-tags.  Added comment that Damir's --referer is
3484         currently undocumented.  Added comment that Heiko's --waitretry is
3485         partially undocumented (mentioned in --help but not in
3486         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3487
3488         * options.h (struct options): Added new fields follow_tags and
3489         ignore_tags.
3490
3491         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3492
3493 2000-03-02  Dan Harkless  <wget@harkless.org>
3494
3495         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3496         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3497
3498         * http.c (gethttp): Dan Berger's query string patch is totally
3499         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3500         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3501         second will overwrite the first.  Also, parameters to implicit
3502         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3503         be printed with trailing garbage characters, and could seg fault.
3504         Backing out the patch, which Dan B. informed me by email was just
3505         a kludge to download StarOffice from Sun made necessary due to
3506         wget's unconditional escaping of certain characters (room for an
3507         option there?).
3508         (http_loop): Heiko introduced "suggest explicit braces to avoid
3509         ambiguous `else'" warnings.  Eliminated them.
3510
3511         * main.c: Heiko's --wait / --waitretry backwards compatibility
3512         code looks to have been totally untested -- automatic variable
3513         'wr' was used without being initialized, and a long int was passed
3514         into setval()'s char* val parameter.
3515
3516         * recur.c (parse_robots): Applied Edward J. Sabol
3517         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3518         problem with "User-agent:<space>*<space>" lines in robots.txt.
3519
3520         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3521         http.c above for explanation).
3522
3523 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3524
3525         * ftp.c: Respect new option waitretry.
3526
3527 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3528
3529         * http.c (gethttp): Send custom Referer, if required.
3530
3531 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3532
3533         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3534
3535         * netrc.c (parse_netrc): New function.
3536
3537 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3538
3539         * http.c (gethttp): Send it.
3540
3541         * url.c (parseurl): Detect query string in HTTP URL-s.
3542         (str_url): Print it.
3543
3544 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3545
3546         * html.c (html_allow): Add <link href=...> and <script src=...>.
3547
3548 1999-05-02  andrew deryabin  <djsf@softhome.net>
3549
3550         * http.c (gethttp): Specify port in `Host' header only if it's
3551         different from 80.
3552
3553 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3554
3555         * recur.c (recursive_retrieve): If a finite maximum depth is
3556         specified, and we're are already at that depth, don't download the
3557         HTML file for parsing.
3558
3559 2000-03-01  Dan Harkless  <wget@harkless.org>
3560
3561         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3562         even though we don't do conversion on HTML files retrieved via
3563         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
3564         (ftp_retrieve_list): Added a comment saying where we need to
3565         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3566         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3567         a lie -- reworded as "Server file no newer than local file '%s' --".
3568
3569         * http.c (http_loop): Fixed a typo and clarified a comment.
3570         (http_loop): When -K and -N are specified together, compare size
3571         and timestamp of server file X against local file X.orig (if
3572         extant) rather than converted local file X.
3573         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3574         -- reworded as "Server file no newer than local file '%s' --".
3575         (http_loop): Call new downloaded_file() function to prevent
3576         wrongful overwriting of .orig file when -N is specified.
3577
3578         * url.c (convert_links): When -K specified, only rename X to
3579         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
3580         file X due to -N, we clobber an X.orig from a previous invocation.
3581         (convert_links): Call the failsafe xstrdup(), not the real strdup().
3582         (convert_links): Added a note asking anyone who understands how
3583         multiple URLs can correspond to a single file to comment it.
3584         (downloaded_file): Added this new function.
3585
3586         * url.h (downloaded_file): Added prototype for this new function
3587         as well as its downloaded_file_t enum type.
3588
3589         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
3590
3591 2000-02-29  Dan Harkless  <wget@harkless.org>
3592
3593         * version.c: Upped version to developer-only "1.5.3+dev".
3594
3595 2000-02-18  Dan Harkless  <wget@harkless.org>
3596
3597         * init.c (backup_converted): Added this new option.
3598
3599         * main.c (-K / --backup-converted): Added this new option.
3600
3601         * options.h (backup_converted): Added this new option.
3602
3603         * url.c (convert_links): When backup_converted is specified, save
3604         file X as X.orig before converting.
3605
3606         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
3607
3608 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3609
3610         * version.c: Wget 1.5.3 is released.
3611
3612 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3613
3614         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
3615         address doesn't yield FQDN.
3616
3617 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3618
3619         * cmpt.c (strerror): Fix declaration of sys_errlist.
3620
3621 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3622
3623         * main.c (main): Don't use an array subscript as the first
3624         argument to STRDUP_ALLOCA.
3625         From Kaveh R. Ghazi.
3626
3627 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
3628
3629         * html.c (htmlfindurl): Download table background.
3630
3631 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
3632
3633         * init.c (parse_line): Would free *com before allocating it.
3634         (parse_line): Would free com instead of *com.
3635
3636 1998-09-10  Howard Gayle  <howard@fjst.com>
3637
3638         * url.c (get_urls_html): Would drop the last character of the
3639         link.
3640
3641 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3642
3643         * http.c (http_loop): Don't print status code if quiet.
3644
3645 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3646
3647         * log.c: Use <stdarg.h> only when __STDC__.
3648
3649 1998-09-10  Adam D. Moss  <adam@foxbox.org>
3650
3651         * html.c (htmlfindurl): Download <layer src=...>.
3652
3653 1998-09-10  Howard Gayle  <howard@fjst.com>
3654
3655         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
3656         not retrieved.
3657
3658 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3659
3660         * utils.c: Include <libc.h> on NeXT.
3661
3662 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
3663
3664         * url.c (get_urls_html): Fix calculation of URL position.
3665
3666 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3667
3668         * version.c: Wget 1.5.2 is released.
3669
3670 1998-06-23  Dave Love  <d.love@dl.ac.uk>
3671
3672         * ftp.c, init.c, netrc.c: Include errno.h.
3673
3674         * http.c: Include errno.h and time header.
3675
3676         * Makefile.in (exext): Define.
3677         (install.bin, uninstall.bin): Use it.
3678
3679 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3680
3681         * http.c (http_loop): Don't attempt to compare local and remote
3682         sizes if the remote size is unknown.
3683
3684 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
3685
3686         * url.c (get_urls_html): Use malloc() instead of alloca in the
3687         loop.
3688
3689 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3690
3691         * version.c: Wget 1.5.2-b4 is released.
3692
3693 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3694
3695         * url.c (get_urls_html): Ignore spaces before and after the URI.
3696
3697 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
3698
3699         * ftp.c (getftp): Translate `done'.
3700
3701 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3702
3703         * version.c: Wget 1.5.2-b3 is released.
3704
3705 1998-06-06  Alexander Kourakos  <awk@bnt.com>
3706
3707         * init.c (cleanup): Close dfp, don't free it.
3708
3709 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3710
3711         * utils.c (make_directory): Twiddle.
3712
3713         * config.h.in: Added template for access().
3714
3715 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
3716
3717         * html.c (htmlfindurl): Download <input src=...>
3718
3719 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
3720
3721         * utils.c (file_exists_p): Use access() with two arguments.
3722
3723 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
3724
3725         * netrc.c (parse_netrc): Correct logic.
3726
3727 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
3728
3729         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
3730         <ljm@ljm.wownet.net>.
3731
3732 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3733
3734         * version.c: Wget 1.5.2-b2 is released.
3735
3736 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3737
3738         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3739
3740 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3741
3742         * retr.c (elapsed_time): Return correct value when
3743         HAVE_GETTIMEOFDAY is undefined.
3744
3745 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3746
3747         * version.c: Wget 1.5.2-b1 is released.
3748
3749 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3750
3751         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3752         (_getopt_internal): Don't translate `#if 0'-ed strings.
3753
3754 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3755
3756         * mswindows.c (ws_handler): Use fork_to_background().
3757
3758 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3759
3760         * version.c: Wget 1.5.1 is released.
3761
3762 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3763
3764         * http.c (parse_http_status_line): Avoid `minor' and `major'
3765         names.
3766
3767 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3768
3769         * utils.c (mkdirhier): Renamed to make_directory.
3770
3771 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3772
3773         * mswindows.c (fork_to_background): Define under Windows.
3774
3775         * utils.c (fork_to_background): New function.
3776
3777         * html.c (htmlfindurl): Removed rerdundant casts.
3778
3779 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3780
3781         * mswindows.c (ws_mypath): Cache the path.
3782
3783 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3784
3785         * ftp.h: Prefix enum ftype members with FT_.
3786
3787         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3788
3789         * mswindows.h: Use stat under Borland, _stat under MSVC.
3790
3791 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3792
3793         * http.c (known_authentication_scheme_p): New function.
3794         (gethttp): Handle authorization more correctly.
3795
3796         * ftp-basic.h: Removed.
3797
3798         * cmpt.h: Removed.
3799
3800         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
3801         with gcc 2.8.
3802         (numdigit): Use `while' loop.
3803
3804         * http.c (create_authorization_line): Detect authentication
3805         schemes case-insensitively.
3806
3807         * http.c (extract_header_attr): Use strdupdelim().
3808         (digest_authentication_encode): Move declaration of local
3809         variables to smaller scope.
3810         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
3811         (create_authorization_line): Detect authentication schemes
3812         case-insensitively.
3813
3814         * utils.c (touch): Constify.
3815
3816         * http.c (gethttp): Report a nicer error when no data is received.
3817
3818         * rbuf.h (RBUF_READCHAR): Ditto.
3819
3820         * ftp-basic.c (ftp_response): Use sizeof.
3821
3822 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
3823
3824         * retr.c (print_percentage): EXPECTED is long, not int.
3825         (print_percentage): Use floating-point arithmetic to avoid
3826         overflow with large files' sizes multiplied with 100.
3827
3828 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
3829
3830         * config.h.in: Added pid_t stub.
3831
3832         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
3833         define it).
3834
3835 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3836
3837         * version.c: Wget 1.5.0 is released.
3838
3839 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3840
3841         * url.c (str_url): Ditto.
3842
3843         * ftp-basic.c (ftp_rest): Use new name.
3844
3845         * utils.c (long_to_string): Renamed from prnum().
3846
3847 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3848
3849         * version.c: Wget 1.5-b17 is released.
3850
3851 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3852
3853         * headers.c (header_get): New argument FLAGS.
3854
3855         * http.c (gethttp): If request is malformed, bail out of the
3856         header loop.
3857         (gethttp): Check for empty header *after* the status line checks.
3858         (gethttp): Disallow continuations for status line.
3859
3860 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3861
3862         * version.c: Wget 1.5-b16 is released.
3863
3864 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3865
3866         * init.c (commands): Renamed `always_rest' to `continue'.
3867
3868 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3869
3870         * all: Use it.
3871
3872         * log.c (logputs): New argument.
3873         (logvprintf): Ditto.
3874         (logprintf): Ditto.
3875
3876 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3877
3878         * http.c (http_atotm): Update comment.
3879
3880         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3881
3882         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3883
3884         * main.c (i18n_initialize): New function.
3885         (main): Use it.
3886
3887         * log.c: Include <unistd.h>.
3888
3889         * retr.c (show_progress): Cast alloca to char *.
3890
3891 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3892
3893         * version.c: Wget 1.5-b15 is released.
3894
3895 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3896
3897         * utils.h: Declare file_non_directory_p().
3898
3899 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3900
3901         * main.c (main): It's `tries', not `numtries' now.
3902
3903 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3904
3905         * init.c (getperms): Removed.
3906
3907 1998-04-01  Tim Charron  <tcharron@interlog.com>
3908
3909         * log.c (logvprintf): Don't use ARGS twice.
3910
3911 1998-04-01  John  <john@futuresguide.com>
3912
3913         * mswindows.c: Cleaned up.
3914
3915 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3916
3917         * version.c: Wget 1.5-b14 is released.
3918
3919 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3920
3921         * ftp-opie.c (STRLEN4): New macro.
3922         (btoe): Use it.
3923
3924 1998-04-01  Junio Hamano  <junio@twinsun.com>
3925
3926         * http.c: Document all the Digest functions.
3927
3928 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3929
3930         * utils.c (file_non_directory_p): Renamed from isfile().
3931
3932         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
3933
3934 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3935
3936         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
3937
3938         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
3939         style.
3940         (cmd_permissions): Removed.
3941
3942         * config.h.in: Add template for WORDS_BIGENDIAN.
3943
3944 1998-03-31  Junio Hamano  <junio@twinsun.com>
3945
3946         * http.c (HEXD2asc): New macro.
3947         (dump_hash): Use it.
3948
3949 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3950
3951         * version.c: Wget 1.5-b13 is released.
3952
3953 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3954
3955         * main.c (main): Don't try to use `com'.
3956
3957 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3958
3959         * init.c (cmd_permissions): New function.
3960
3961 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3962
3963         * version.c: Wget 1.5-b12 is released.
3964
3965 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3966
3967         * init.c (commands): Renamed `numtries' to `tries'.
3968         (cmd_spec_debug): Removed.
3969         (home_dir): Under Windows, return `C:\' if HOME is undefined.
3970
3971 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3972
3973         * config.h.in: Define _XOPEN_SOURCE.
3974
3975         * init.c (check_user_specified_header): New function.
3976         (cmd_spec_header): Use it.
3977         (cmd_spec_useragent): New function.
3978
3979 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3980
3981         * version.c: Wget 1.5-b11 is released.
3982
3983 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
3984
3985         * wget.h: Include <libintl.h> only if NLS is enabled.
3986
3987 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
3988
3989         * options.h (struct options): Made `wait' a long.
3990         (struct options): Ditto for `timeout'.
3991
3992 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
3993
3994         * utils.c (exists): Renamed to file_exists_p.
3995         (file_exists_p): Use access() if available.
3996
3997 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
3998
3999         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
4000         infloop.
4001
4002         * log.c: do_logging -> save_log_p.
4003
4004         * config.h.in: Added template for HAVE_VSNPRINTF.
4005
4006 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4007
4008         * init.c: Ditto.
4009
4010         * http.c: Protect declaration against non-ANSI compiler.
4011
4012         * log.c (logvprintf): Use vsnprintf() if available.
4013
4014         * getopt.c (main): Don't translate test stuff.
4015
4016 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4017
4018         * version.c: Wget 1.5-b10 is released.
4019
4020 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
4021
4022         * ftp.c (getftp): Don't translate "CWD %s".
4023
4024         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
4025
4026 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4027
4028         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
4029
4030         * log.c (logputs): New function.
4031         (logvprintf): Renamed from vlogmsg; use logputs().
4032
4033         * retr.c (show_progress): Print `[100%]' when the retrieval is
4034         finished.
4035
4036         * init.c (run_wgetrc): Use FILE, not PATH.
4037         (wgetrc_file_name): Ditto.
4038
4039 1998-03-07  Tim Adam  <tma@osa.com.au>
4040
4041         * recur.c (parse_robots): Correctly reset `entries' on empty
4042         disallow.
4043
4044 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4045
4046         * init.c (cmd_spec_debug): Use cmd_boolean().
4047
4048 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
4049
4050         * http.c (gethttp): Create proxy-authorization correctly.
4051
4052 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4053
4054         * md5.c: Ditto.
4055
4056         * getopt.c: Use ANSI function definitions.
4057
4058         * ftp-opie.c: New file.
4059
4060         * options.h: Don't redefine EXTERN.
4061
4062         * init.c: Sort it correctly.
4063
4064 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4065
4066         * version.c: Wget 1.5-b9 is released.
4067
4068 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4069
4070         * recur.c (recursive_retrieve): Reset `first_time'.
4071
4072         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
4073
4074         * rbuf.c (rbuf_peek): Simplified.
4075         (rbuf_flush): Use MINVAL.
4076
4077         * wget.h (MINVAL): Moved from url.h.
4078
4079         * rbuf.h (RBUF_FD): New macro.
4080
4081         * url.c (add_url): Add to the head of the list.
4082
4083         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
4084         file.
4085         (getftp): Set the default permissions to 0600.
4086
4087 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
4088
4089         * url.c (get_urls_html): Ditto.
4090         (convert_links): Ditto.
4091
4092         * recur.c (parse_robots): Ditto.
4093
4094         * html.c (ftp_index): Ditto.
4095
4096         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
4097
4098         * init.c (defaults): Initialize `opt' to zero via memset.
4099
4100         * http.c (digest_authentication_encode): goto considered harmful.
4101
4102 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
4103
4104         * ftp.c (delelement): Simplify and fix leak.
4105
4106 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
4107
4108         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
4109
4110         * url.h (HEXD2ASC): Removed warning.
4111
4112         * init.c (comind): Use binary search.
4113         (commands): Reorganized.
4114         (setval): Ditto.
4115         (cmd_boolean): New function.
4116         (cmd_number): Ditto.
4117         (cmd_number_inf): Ditto.
4118         (cmd_string): Ditto.
4119         (cmd_vector): Ditto.
4120         (cmd_directory_vector): Ditto.
4121         (cmd_bytes): Ditto.
4122         (cmd_time): Ditto.
4123         (cmd_spec_debug): Ditto.
4124         (cmd_spec_dirmode): Ditto.
4125         (cmd_spec_dirstruct): Ditto.
4126         (cmd_spec_dotstyle): Ditto.
4127         (cmd_spec_header): Ditto.
4128         (cmd_spec_htmlify): Ditto.
4129         (cmd_spec_mirror): Ditto.
4130         (cmd_spec_outputdocument): Ditto.
4131         (cmd_spec_recursive): Ditto.
4132         (settime): Merged with cmd_time().
4133         (setbytes): Merged with cmd_bytes().
4134         (setonoff): Merged with cmd_boolean().
4135         (onoff): Ditto.
4136
4137 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4138
4139         * Makefile.in (distclean): Remove `config.h'.
4140
4141 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4142
4143         * version.c: Wget 1.5-b8 is released.
4144
4145 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4146
4147         * http.c (digest_authentication_encode): New function.
4148         (create_authorization_line): Use it.
4149         (dump_hash): New function.
4150         (digest_authentication_encode): Use it.
4151
4152         * fnmatch.c: Renamed from `mtch.c'.
4153
4154 1998-02-15  Karl Eichwalder  <ke@suse.de>
4155
4156         * main.c (main): Tag "Written by..." string as translatable.
4157
4158 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4159
4160         * wget.h (FREE_MAYBE): New macro.
4161
4162         * http.c (create_authorization_line): Don't use ANSI C string
4163         concatenation feature.
4164         (basic_authentication_encode): Use alloca() for temporary
4165         variables.
4166
4167         * recur.h: Ditto.
4168
4169         * http.c: Ditto.
4170
4171         * headers.h: Ditto.
4172
4173         * ftp-basic.c: Protect declaration against non-ANSI compiler.
4174
4175         * http.c (create_authorization_line): Cast `unsigned char *' to
4176         `char *' for sprintf, to shut up the noisy Digital Unix cc.
4177
4178 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4179
4180         * version.c: Wget 1.5-b7 is released.
4181
4182 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4183
4184         * cmpt.c (strstr): Synched with glibc-2.0.6.
4185
4186         * ftp-basic.c (calculate_skey_response): Ditto.
4187         (calculate_skey_response): Use alloca().
4188
4189         * http.c (create_authorization_line): Work with FSF's version of
4190         md5.c.
4191
4192         * md5.c: New file, from GNU libc.
4193
4194 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4195
4196         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4197
4198 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4199
4200         * http.c (basic_authentication_encode): New function, instead of
4201         the macro.
4202
4203 1998-02-13  Junio Hamano  <junio@twinsun.com>
4204
4205         * http.c: Add HTTP-DA support.
4206         * ftp-basic.c: Add Opie/S-key support.
4207         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4208         * md5.c, md5.h: New files.
4209
4210 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4211
4212         * http.c (http_process_range): Renamed from hprocrange().
4213         (http_process_range): Parse the whole header.
4214
4215         * headers.c: New file.
4216         (header_process): New function.
4217         (header_get): Renamed from fetch_next_header.
4218
4219         * all: Include utils.h only where necessary.
4220
4221         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4222
4223         * wget.h: Add provisions for dmalloc.
4224
4225 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4226
4227         * version.c: Wget 1.5-b6 is released.
4228
4229 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4230
4231         * ftp.c (ftp_loop): Determine `filename' more precisely.
4232
4233         * init.c (setval): Don't set `opt.quiet' if output-document is
4234         `-'.
4235
4236         * log.c (log_init): Print to STDERR instead of STDOUT.
4237         (vlogmsg): Use STDERR by default.
4238         (logflush): Ditto.
4239
4240 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4241
4242         * host.c: Use addr_in again.
4243
4244 1998-02-08  Karl Eichwalder  <karl@suse.de>
4245
4246         * http.c (gethttp): Fixed typo.
4247
4248 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4249
4250         * version.c: Wget 1.5-b5 is released.
4251
4252 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4253
4254         * retr.c (show_progress): Use it.
4255
4256         * log.c (logflush): New function.
4257
4258         * wget.h: Utilize __attribute__ if on gcc.
4259
4260 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4261
4262         * http.c (base64_encode_line): New argument LENGTH.
4263         (BASIC_AUTHENTICATION_ENCODE): Use it.
4264         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4265
4266         * main.c (main): Fixed fprintf() format mismatch.
4267
4268 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4269
4270         * version.c: Wget 1.5-b4 is released.
4271
4272 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4273
4274         * host.c: use sockaddr_in instead of addr_in.
4275
4276 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4277
4278         * init.c (cleanup): Use it.
4279
4280         * recur.c (recursive_cleanup): New function.
4281
4282         * retr.c (retrieve_from_file): Ditto.
4283
4284         * main.c (main): Use it.
4285
4286         * recur.c (recursive_reset): New function.
4287
4288         * retr.c (retrieve_from_file): Ditto.
4289
4290         * main.c (main): Simplify call to recursive_retrieve().
4291
4292         * recur.c (recursive_retrieve): Removed FLAGS argument.
4293
4294         * http.c (gethttp): Changed call to iwrite().
4295
4296 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4297
4298         * url.c (get_urls_html): Ditto.
4299         (free_urlpos): Ditto.
4300         (mkstruct): Ditto.
4301         (construct): Ditto.
4302
4303         * retr.c (retrieve_url): Move declaration of local variables to
4304         smaller scope.
4305
4306         * url.c (urlproto): Use it.
4307         (parseurl): Ditto.
4308         (str_url): Ditto.
4309         (get_urls_html): Ditto.
4310
4311         * utils.h (ARRAY_SIZE): New macro.
4312
4313         * url.c (proto): Moved from url.h.
4314
4315         * url.h (URL_CLEANSE): Reformatted.
4316         (USE_PROXY_P): Renamed from USE_PROXY.
4317
4318         * ftp-basic.c: Adjust to the new interface of iwrite().
4319
4320         * ftp-basic.c (ftp_port): Use alloca().
4321
4322 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4323
4324         * version.c: Wget 1.5-b3 is released.
4325
4326         * host.c (ftp_getaddress): Don't print to stderr directly.
4327
4328         * init.c (setbytes): Support `g' for gigabytes.
4329         (cmdtype): New specification CTIME.
4330         (setval): Use it with settime().
4331         (commands): Use it for WAIT and TIMEOUT.
4332
4333 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4334
4335         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4336         (gethttp): Use it.
4337
4338         * utils.c (unique_name_1): Moved from url.c.
4339         (unique_name): Ditto.
4340
4341         * url.c (url_filename): Ditto.
4342
4343         * log.c (redirect_output): Changed call to unique_name().
4344
4345         * url.c (unique_name_1): Renamed from unique_name().
4346         (unique_name): Changed interface.
4347
4348         * init.c (enum cmdid): Moved from init.h.
4349         (cmdtype): Ditto.
4350         (struct cmd): Ditto.
4351
4352         * main.c (main): Use it.
4353         (main): Moved `--backups' to not have a short option.
4354
4355         * options.h (struct options): New member BACKGROUND.
4356
4357         * main.c (print_help): Rearranged.
4358         (main): New long options for -n* short options: --no-directories,
4359         --no-host-directories, --non-verbose, --no-host-lookup and
4360         --dont-remove-listing.
4361
4362 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4363
4364         * main.c (main): Use log_close().
4365
4366         * log.c: New variable LOGFP.
4367         (vlogmsg): Use it.
4368         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4369         instead.
4370         (log_close): New function.
4371
4372         * options.h (struct options): Removed LFILE.
4373
4374         * log.c (log_enable): Removed.
4375
4376         * main.c (main): Use it.
4377
4378         * log.c (log_init): New function.
4379
4380         * url.c (get_urls_html): Removed needless assignment to BASE.
4381
4382         * host.c (add_hlist): Don't set CMP needlessly.
4383
4384         * utils.c (match_backwards): Ditto.
4385         (in_acclist): Ditto.
4386
4387         * url.c (findurl): Ditto.
4388
4389         * netrc.c (parse_netrc): Ditto.
4390
4391         * log.c (log_dump): Ditto.
4392
4393         * html.c (html_quote_string): Ditto.
4394
4395         * ftp-basic.c (ftp_request): Made static.
4396
4397         * connect.c: Made global variables static.
4398
4399         * url.c (construct): Ditto.
4400
4401         * init.c (init_path): Avoid assignment inside `if'-condition.
4402
4403         * ftp.c: Don't include in.h or winsock.h.
4404
4405         * ftp.c (ftp_loop): Use SZ.
4406
4407         * connect.c (bindport): Cast &addrlen to int *.
4408         (conaddr): Ditto.
4409
4410         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4411
4412 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4413
4414         * ftp.c (getftp): Initialize opt.ftp_pass here.
4415         (ftp_retrieve_dirs): Use alloca().
4416
4417         * init.c (defaults): Don't initialize opt.ftp_pass.
4418
4419         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4420         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4421
4422 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4423
4424         * recur.c (parse_robots): Check for comments more correctly.
4425
4426         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4427         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4428         hostname.
4429
4430 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4431
4432         * version.c: Wget 1.5-b2 is released.
4433
4434         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4435
4436         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4437
4438         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4439         char.
4440
4441         * log.c: Don't attempt to hide arguments from ansi2knr.
4442
4443         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4444
4445         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4446
4447         * ftp.c (getftp): Ditto.
4448
4449         * http.c (gethttp): Use it.
4450
4451         * retr.c (get_contents): New argument EXPECTED; pass it to
4452         show_progress().
4453         (show_progress): New argument EXPECTED; use it to display
4454         percentages.
4455
4456         * init.c (setval): Ditto.
4457
4458         * http.c (gethttp): Ditto.
4459         (http_loop): Ditto.
4460
4461         * ftp.c (getftp): Ditto.
4462         (ftp_loop_internal): Ditto.
4463
4464         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4465
4466         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4467
4468         * netrc.c (search_netrc): Use alloca().
4469
4470         * init.c (defaults): Initialize no_flush.
4471
4472         * log.c (vlogmsg): Don't flush if no_flush.
4473
4474         * options.h (struct options): New variable no_flush.
4475
4476         * main.c (main): Don't play games with buffering.
4477
4478         * log.c (vlogmsg): Flush the output after every message.
4479
4480 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4481
4482         * init.c (parse_line): Ditto.
4483
4484         * url.c (get_urls_html): Ditto.
4485
4486         * main.c (main): Don't cast to unsigned char.
4487
4488         * init.c (run_wgetrc): Don't cast to unsigned char.
4489         (parse_line): Accept char instead of unsigned char.
4490
4491         * html.c (htmlfindurl): Use char instead of unsigned char.
4492
4493         * all: Use them.
4494
4495         * sysdep.h: Add wrappers to ctype macros to make them
4496         eight-bit-clean:
4497
4498 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4499
4500         * html.c (htmlfindurl): Download <img lowsrc=...>
4501
4502         * main.c (main): Ignore SIGPIPE.
4503
4504         * connect.c (select_fd): New argument WRITEP.
4505         (iwrite): Call select_fd().
4506
4507 1997-02-27  Fila Kolodny <fila@ibi.com>
4508
4509         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4510         one already exists, just skip it.
4511
4512 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4513
4514         * http.c (gethttp): Cosmetic changes.
4515
4516         * http.c (check_end): Allow `+D...' instead of `GMT'.
4517         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4518
4519         * url.c (process_ftp_type): New function.
4520         (parseurl): Use it.
4521
4522         * connect.c (iwrite): Allow writing in a few chunks.
4523         (bindport): Made SRV static, so addr can point to it.
4524         (select_fd): Removed HPUX kludge.
4525
4526         * host.c (free_hlist): Incorporated into clean_hosts().
4527
4528 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4529
4530         * host.c (hlist): Made static.
4531         (search_address): Cosmetic change.
4532
4533 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4534
4535         * version.c: Wget v1.5-b1 is released.
4536
4537         * http.c (hgetlen): Use sizeof() to get the header length.
4538         (hgetrange): Ditto.
4539         (hgettype): Ditto.
4540         (hgetlocation): Ditto.
4541         (hgetmodified): Ditto.
4542         (haccepts_none): Ditto.
4543
4544         * main.c (main): Updated `--version' and `--help' output, as per
4545         Francois Pinard's suggestions.
4546
4547         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
4548         textdomain().
4549
4550         * config.h.in: Define stubs for I18N3.
4551
4552         * wget.h: Include libintl.h.
4553
4554 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4555
4556         * url.c (mkstruct): Check for opt.cut_dirs.
4557         (mkstruct): alloca()-te more, xmalloc() less.
4558
4559         * utils.c (load_file): Check for ferror().
4560
4561         * url.c (get_urls_file): Close only the files we opened.
4562         (get_urls_html): Ditto.
4563         (count_slashes): New function.
4564
4565         * http.h: Removed.
4566
4567         * http.c (gethttp): Respect username and password provided by
4568         proxy URL.
4569         (base64_encode_line): Write into an existing buffer instead of
4570         malloc-ing a new one.
4571         (struct http_stat): Moved from http.h
4572
4573         * retr.c (retrieve_url): Free SUF.
4574
4575         * all: Removed lots of unnecessary .h dependencies.
4576
4577         * html.c (global_state): Made static.
4578
4579         * utils.h (ALLOCA_ARRAY): New macro.
4580
4581         * main.c (main): New option `--cut-dirs'.
4582
4583         * url.c (construct): Use alloca() for T.
4584
4585         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
4586
4587         * host.c (_host_t): Moved from host.h.
4588         (struct host): Renamed from _host_t.
4589         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
4590         (realhost): Ditto.
4591
4592         * host.h: Don't include url.h.
4593
4594         * ftp.c (LIST_FILENAME): Moved from ftp.h.
4595
4596         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
4597
4598         * main.c (main): Enable log if the output goes to a TTY.
4599
4600         * connect.h: Removed unused constant `BACKLOG'.
4601
4602         * config.h.in: Check for isatty().
4603
4604         * Makefile.in (LINK): Use CFLAGS when linking.
4605
4606 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4607
4608         * mswindows.c (ws_hangup): Use redirect_output().
4609
4610         * main.c (redirect_output_signal): New function; use
4611         redirect_output().
4612
4613         * log.c (redirect_output): New function, based on hangup(), which
4614         is deleted.
4615
4616         * log.c (vlogmsg): New function.
4617
4618         * wget.h (DEBUGP): Use debug_logmsg().
4619
4620         * main.c (hangup): Use it.
4621
4622         * log.c (log_dump): New function.
4623
4624         * utils.h (DO_REALLOC): Use `long' for various sizes.
4625
4626         * http.c (hskip_lws): Use `while', for clarity.
4627         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
4628         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
4629
4630         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
4631         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
4632
4633         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
4634         (LEGIBLE_SEPARATOR): Ditto.
4635         (FILE_BUFFER_SIZE): Ditto.
4636
4637         * retr.c (BUFFER_SIZE): Moved from retr.h.
4638
4639         * log.c: New file.
4640         (logmsg): Moved from utils.c.
4641         (debug_logmsg): New function.
4642
4643         * mswindows.h: Include it here.
4644
4645         * init.c: Ditto.
4646
4647         * utils.c: Don't include <windows.h>.
4648
4649 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
4650
4651         * host.c (ftp_getaddress): Ditto.
4652
4653         * main.c (main): Use it.
4654
4655         * utils.h (STRDUP_ALLOCA): New macro.
4656
4657         * init.c: Prepend `wget: ' to error messages printed on stderr.
4658
4659         * utils.c (mkdirhier): Renamed from mymkdir.
4660         (touch): Renamed from my_touch.
4661         (pwd_cuserid): Renamed from my_cuserid().
4662
4663 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
4664
4665         * utils.c (accdir): Process wildcards.
4666         (proclist): New function.
4667         (accdir): Use it to avoid code repetition.
4668
4669 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4670
4671         * recur.c (parse_robots): Respect opt.useragent; use alloca().
4672
4673         * http.c (gethttp): Construct useragent accordingly.
4674
4675         * version.c: Changed version string to numbers-only.
4676
4677         * main.c (print_help): List all the options.
4678
4679         * mswindows.c (windows_main_junk): Initialize argv0 here.
4680
4681 1998-01-24  Karl Heuer  <kwzh@gnu.org>
4682
4683         * netrc.c (search_netrc): Initialize `l' only after processing
4684         netrc.
4685
4686         * main.c (main): Don't trap SIGHUP if it's being ignored.
4687
4688 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4689
4690         * all: Use logmsg().
4691
4692         * utils.c (time_str): Moved from retr.c.
4693         (logmsg): New function.
4694         (logmsg_noflush): Ditto.
4695
4696         * rbuf.c: New file, moved buf_* functions here.
4697
4698         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
4699
4700         * ftp-basic.c (ftp_rest): Use prnum().
4701
4702         * ftp-basic.c: Ditto.
4703
4704         * ftp.c: Use the new reading functions and macros.
4705
4706         * retr.c (buf_initialize): New function.
4707         (buf_initialized_p): Ditto.
4708         (buf_uninitialize): Ditto.
4709         (buf_fd): Ditto.
4710
4711         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
4712         efficiency.
4713         (gethttp): Use alloca() where appropriate.
4714
4715         * retr.c (buf_readchar): Use it.
4716         (buf_peek): Use rstreams.
4717
4718         * retr.h (BUF_READCHAR): New macro.
4719
4720         * init.c (home_dir): Rewritten for clarity.
4721         (init_path): Ditto.
4722
4723         * mswindows.c (ws_backgnd): Made static.
4724         (read_registry): Ditto.
4725         (ws_cleanup): Ditto.
4726         (ws_handler): Ditto.
4727
4728 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4729
4730         * alloca.c: New file.
4731
4732         * Makefile.in (ALLOCA): Define.
4733
4734         * mswindows.c (ws_help): Constify.
4735         (ws_help): Use alloca.
4736
4737         * mswindows.c: Reformat.
4738
4739         * all: Added _(...) annotations for I18N snarfing and translation.
4740
4741         * host.c (ftp_getaddress): Nuke SYSINFO.
4742         (ftp_getaddress): Don't use getdomainname().
4743         (ftp_getaddress): Use uname(), where available.
4744
4745         * http.c (gethttp): Protect a stray fprintf().
4746
4747         * init.c (settime): New function.
4748         (setval): Treat WAIT specially, allowing suffixes like `m' for
4749         minutes, etc.
4750
4751 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4752
4753         * url.c (get_urls_html): Use alloca() for TEMP.
4754
4755 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4756
4757         * url.c (rotate_backups): New function.
4758
4759         * http.c (gethttp): Ditto.
4760
4761         * ftp.c (getftp): Rotate backups.
4762
4763 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4764
4765         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4766         xrealloc() and xstrdup().  Use the new functions.
4767
4768         * url.c (decode_string): Made static.
4769         (has_proto): Ditto.
4770         (parse_dir): Ditto.
4771         (parse_uname): Ditto.
4772         (mkstruct): Ditto.
4773         (construct): Ditto.
4774         (construct_relative): Ditto.
4775
4776         * retr.c (show_progress): Made static.
4777
4778         * recur.c (robots_url): Made static.
4779         (retrieve_robots): Ditto.
4780         (parse_robots): Ditto.
4781         (robots_match): Ditto.
4782
4783         * main.h: Removed.
4784
4785         * main.c (printhelp): Made static.
4786         (hangup): Ditto.
4787
4788         * init.c (comind): Made static.
4789         (defaults): Ditto.
4790         (init_path): Ditto.
4791         (run_wgetrc): Ditto.
4792         (onoff): Ditto.
4793         (setonoff): Ditto.
4794         (setnum): Ditto.
4795         (myatoi): Ditto.
4796         (getperms): Ditto.
4797         (setbytes): Ditto.
4798
4799         * http.c (fetch_next_header): Made static.
4800         (hparsestatline): Ditto.
4801         (hskip_lws): Ditto.
4802         (hgetlen): Ditto.
4803         (hgetrange): Ditto.
4804         (hgettype): Ditto.
4805         (hgetlocation): Ditto.
4806         (hgetmodified): Ditto.
4807         (haccepts_none): Ditto.
4808         (gethttp): Ditto.
4809         (base64_encode_line): Ditto.
4810         (mktime_from_utc): Ditto.
4811         (http_atotm): Ditto.
4812
4813         * html.c (idmatch): Made static.
4814
4815         * host.c (search_host): Made static.
4816         (search_address): Ditto.
4817         (free_hlist): Ditto.
4818
4819         * ftp.c (getftp): Made static.
4820         (ftp_loop_internal): Ditto.
4821         (ftp_get_listing): Ditto.
4822         (ftp_retrieve_list): Ditto.
4823         (ftp_retrieve_dirs): Ditto.
4824         (ftp_retrieve_glob): Ditto.
4825         (freefileinfo): Ditto.
4826         (delelement): Ditto.
4827
4828         * ftp-ls.c (symperms): Made static.
4829         (ftp_parse_unix_ls): Ditto.
4830
4831         * connect.c (select_fd): Made static.
4832
4833         * utils.c (xmalloc): Renamed from nmalloc.
4834         (xrealloc): Renamed from nrealloc.
4835         (xstrdup): Renamed from nstrdup.
4836
4837         * getopt.c (exchange): Use alloca.
4838
4839         * mswindows.c (mycuserid): Use strncpy.
4840
4841         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4842         systhings.h, windecl.h and winjunk.h removed.
4843
4844         * mswindows.c (sleep): New function.
4845
4846         * utils.c: Include <windows.h> under Windows.
4847
4848 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4849
4850         * url.h (URL_UNSAFE): Change default under Windows.
4851
4852         * retr.c (retrieve_from_file): Respect opt.delete_after.
4853
4854         * main.c (main): Call ws_help on Windows.
4855
4856         * winjunk.c (windows_main_junk): New function.
4857
4858         * main.c (main): Junk-process argv[0].
4859
4860         * http.c (mktime_from_utc): Return -1 if mktime failed.
4861
4862         * http.c (http_loop): Ditto.
4863
4864         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4865         new URL.
4866
4867         * winjunk.c (getdomainname): Lots of functions.
4868
4869 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4870
4871         * cmpt.c (strptime_internal): Handle years more correctly for
4872         `%y'.
4873
4874 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4875
4876         * http.c (gethttp): Allocate enough space for
4877         `Proxy-Authorization' header.
4878
4879 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4880
4881         * version.c: Wget/1.4.5 is released.
4882
4883 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4884
4885         * retr.c (get_contents): Check return value of fwrite more
4886         carefully.
4887
4888 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4889
4890         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4891         year, regardless of century.
4892
4893 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4894
4895         * utils.c (isfile): Use `lstat' instead of `stat'.
4896
4897 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4898
4899         * utils.c (numdigit): Use explicit test.
4900
4901 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4902
4903         * http.c (http_loop): Always use `url_filename' to get u->local.
4904
4905 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4906
4907         * url.c: Recognize https.
4908
4909 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
4910
4911         * recur.c (recursive_retrieve): Lowercase just the host name.
4912
4913 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
4914
4915         * url.c (get_urls_file): Use the correct test.
4916         (get_urls_html): Ditto.
4917
4918 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4919
4920         * connect.c: Reverted addrlen to int.
4921
4922         * init.c (parse_line): Check for -1 instead of NONE.
4923
4924         * version.c: Changed version to 1.4.5.
4925
4926 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4927
4928         * init.c: New option netrc.
4929         (initialize): Don't parse .netrc.
4930
4931         * cmpt.c (recursive): Return rp.
4932         (strptime_internal): Match the long strings first, the abbreviated
4933         second.
4934
4935 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
4936
4937         * http.c (check_end): New function.
4938         (http_atotm): Use it.
4939
4940 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
4941
4942         * http.c (gethttp): Use them.
4943
4944         * init.c: New options proxy_user and proxy_passwd.
4945
4946 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4947
4948         * ftp.c (ftp_retrieve_list): Create links even if not relative.
4949
4950 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
4951
4952         * recur.c (recursive_retrieve): Lowercase the host name, if the
4953         URL is not "optimized".
4954
4955         * host.c (realhost): Return l->hostname, even if it matches with
4956         host.
4957
4958 1997-02-10  Marin Purgar  <pmc@asgard.hr>
4959
4960         * connect.c: Make addrlen size_t instead of int.
4961         (conaddr): Ditto.
4962
4963 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4964
4965         * systhings.h: Define S_ISLNK on NeXT too.
4966
4967 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
4968
4969         * version.c: Released 1.4.3.
4970
4971         * url.c: Futher update to list of protostrings.
4972         (skip_proto): Skip `//' correctly for FTP and HTTP.
4973
4974         * url.c (get_urls_html): Handle bogus `http:' things a little
4975         different.
4976
4977         * main.c (main): Removed `follow-ftp' from `f'.
4978         (main): Dumped the `prefix-files' and `file-prefix' options and
4979         features; old and bogus.
4980         (main): Exit on failed setval() in `-e'.
4981
4982         * http.c (fetch_next_header): Use it to detect header continuation
4983         correctly.
4984
4985         * retr.c (buf_peek): New function.
4986
4987 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4988
4989         * wget.h: Include time.h and stuff.
4990
4991 1997-02-08  Roger Beeman  <beeman@cisco.com>
4992
4993         * ftp.c: Include <time.h>
4994
4995 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4996
4997         * url.c (findurl): Would read over buffer limits.
4998
4999 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5000
5001         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
5002
5003 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
5004
5005         * http.c (http_atotm): Initialize tm.is_dst.
5006
5007 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5008
5009         * http.c (gethttp): Don't print the number of retrieved headers.
5010
5011         * main.c (main): New option `--no-clobber', alias for `-nc'.
5012
5013         * url.c: Recognize `https://'.
5014
5015 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5016
5017         * host.c (herrmsg): Don't use h_errno.
5018
5019 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5020
5021         * host.c (accept_domain): Use it.
5022
5023         * main.c (main): New option `--exclude-domains'.
5024
5025         * retr.c (retrieve_url): Use it.
5026         (retrieve_url): Bail out when an URL is redirecting to itself.
5027
5028         * url.c (url_equal): New function.
5029
5030 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5031
5032         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
5033
5034         * http.c (mk_utc_time): New function.
5035         (http_atotm): Use it; handle time zones correctly.
5036
5037 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5038
5039         * http.c: Ditto.
5040
5041         * ftp-basic.c: Use it instead of WRITE.
5042
5043         * connect.c (iwrite): New function.
5044
5045 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5046
5047         * cmpt.c (mktime): New function.
5048
5049         * netrc.c: Include <sys/types.h>.
5050
5051         * main.c (main): Wouldn't recognize --spider.
5052
5053         * retr.c (rate): Use `B', `KB' and `MB'.
5054         (reset_timer,elapsed_time): Moved from utils.c.
5055
5056         * ftp.c (ftp_retrieve_list): Ditto.
5057
5058         * http.c (http_loop): Don't touch the file if opt.dfp.
5059
5060 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5061
5062         * cmpt.c: New file.
5063
5064         * ftp.c (ftp_retrieve_glob): New argument semantics.
5065         (ftp_retrieve_dirs): Use it.
5066         (ftp_loop): Ditto.
5067
5068         * html.c (htmlfindurl): Recognize `'' as the quote char.
5069
5070 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5071
5072         * ftp.c (ftp_loop_internal): Use it.
5073
5074         * utils.c (remove_link): New function.
5075
5076 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
5077
5078         * retr.c (retrieve_url): Require STRICT redirection URL.
5079
5080         * url.c (parseurl): New argument STRICT.
5081
5082         * http.c (hparsestatline): Be a little-bit less strict about
5083         status line format.
5084
5085 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5086
5087         * http.c (gethttp): Use it.
5088
5089         * main.c (main): Don't use '<digit>' as options.
5090
5091         * init.c: New option ignore_length.
5092
5093         * http.c (gethttp): Ditto.
5094         (http_loop): Check for redirection without Location:.
5095         (gethttp): Don't print Length unless RETROKF.
5096
5097         * ftp.c (getftp): Use it.
5098
5099         * url.c (mkalldirs): New function.
5100
5101         * utils.c (mymkdir): Don't check for existing non-directory.
5102
5103         * url.c (mkstruct): Don't create the directory.
5104
5105 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
5106
5107         * init.c (setval): Removed NO_RECURSION checks.
5108
5109 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
5110
5111         * version.c: "Released" 1.4.3-pre2.
5112
5113         * recur.c (recursive_retrieve): Bypass host checking only if URL
5114         is ftp AND parent URL is not ftp.
5115
5116         * ftp-basic.c (ftp_request): Print out Turtle Power.
5117
5118         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
5119         wildcard.
5120         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
5121         not glob.
5122
5123         * http.c (gethttp): Be a little bit smarter about status codes.
5124
5125         * recur.c (recursive_retrieve): Always reset opt.recursive when
5126         dealing with FTP.
5127
5128 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
5129
5130         * retr.c (retrieve_url): New variable location_changed; use it for
5131         tests instead of mynewloc.
5132         (retrieve_url): Allow heuristic adding of html.
5133
5134         * url.c (url_filename): Don't use the `%' in Windows file names.
5135
5136         * http.c (http_loop): Always time-stamp the local file.
5137
5138         * http.c (http_loop): Ditto.
5139
5140         * ftp.c (ftp_retrieve_list): Use it.
5141
5142         * utils.c (my_touch): New function.
5143
5144         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
5145         instead of #ifndef NeXT.
5146
5147         * utils.c (strptime): New version, by Ulrich Drepper.
5148
5149 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
5150
5151         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
5152         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
5153         (http_loop): Would remove ACCEPTRANGES.
5154
5155         * ftp.c (getftp): Call ftp_list with NULL.
5156
5157 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
5158
5159         * html.c (ftp_index): Don't print minutes and seconds if we don't
5160         know them; beautify the output.
5161
5162         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
5163
5164 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
5165
5166         * utils.c (strptime): New function.
5167         (strptime): Don't use get_alt_number.
5168         (strptime): Don't use locale.
5169         (match_string): Made it a function.
5170
5171 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
5172
5173         * http.c (http_atotm): New function.
5174         (http_loop): Use it.
5175
5176         * atotm.c: Removed from the distribution.
5177
5178         * http.c (base64_encode_line): Rewrite.
5179
5180 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
5181
5182         * ftp.c (getftp): Use ftp_expected_bytes; print size.
5183
5184         * ftp-basic.c (ftp_response): Use ftp_last_respline.
5185         (ftp_expected_bytes): New function.
5186
5187         * ftp.c (getftp): Print the unauthoritative file length.
5188
5189         * ftp-ls.c: Renamed from ftp-unix.c.
5190         (ftp_parse_ls): Moved from ftp.c.
5191         (ftp_parse_unix_ls): Recognize seconds in time spec.
5192         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5193         year.
5194
5195 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5196
5197         * ftp-basic.c: Don't declare errno if #defined.
5198
5199         * host.c (ftp_getaddress): Check for sysinfo legally.
5200
5201 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5202
5203         * connect.c (iread): Use READ.
5204
5205 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5206
5207         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5208         schemes.
5209
5210 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5211
5212         * host.c (ftp_getaddress): Allow `.' in hostname.
5213
5214 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5215
5216         * wget.h: READ and WRITE macros for use instead of read and write
5217         on sockets, grep READ *.c, grep WRITE *.c
5218
5219         * wsstartup.c: new file - startup for winsock
5220
5221         * wsstartup.h: new file
5222
5223         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5224
5225         * configure.bat: Configure utility for MSVC
5226
5227         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5228
5229 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5230
5231         * version.c: Released 1.4.3-pre.
5232
5233         * utils.c (prnum): Accept long.
5234         (legible): Use prnum().
5235
5236         * connect.c (make_connection): Accept port as short.
5237         (bindport): Ditto.
5238
5239         * http.c (gethttp): Use search_netrc.
5240
5241 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5242
5243         * ftp.c (getftp): Use search_netrc.
5244
5245         * netrc.c (free_netrc): New function.
5246
5247         * init.c (home_dir): New function.
5248
5249         * url.c (convert_links): Allow REL2ABS changes.
5250
5251 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5252
5253         * netrc.c: New file.
5254         (parse_netrc, maybe_add_to_list): New functions.
5255
5256 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5257
5258         * retr.c (retrieve_url): Reset opt.recursion before calling
5259         ftp_loop if it is reached through newloc.
5260
5261         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5262         error; don't use "Syntax error", since we don't know if it is
5263         really a syntax error.
5264
5265 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5266
5267         * utils.c (acceptable): Extract the filename part of the path.
5268
5269         * recur.c (recursive_retrieve): Call acceptable() with the right
5270         argument; would bug out on wildcards.
5271
5272         * init.c (parse_line): Likewise.
5273
5274         * html.c (htmlfindurl): Cast to char * when calling stuff.
5275
5276 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5277
5278         * ftp.c (getftp): Use ftp_pasv.
5279
5280         * ftp-basic.c (ftp_request): Accept NULL value.
5281         (ftp_pasv): New function.
5282
5283         * options.h (struct options): Add passive FTP option.
5284
5285 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5286
5287         * url.c (parseurl): Debug output.
5288
5289         * utils.c (path_simplify): New one, adapted from bash's
5290         canonicalize_pathname().
5291
5292 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5293
5294         * ftp.c (getftp): Don't discard the buffer.
5295
5296         * retr.c (get_contents): New parameter nobuf.
5297
5298 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5299
5300         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5301
5302         * init.c (setval): Strip the trailing slashes on CVECDIR.
5303
5304 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5305
5306         * init.c: Make excludes and includes under CVECDIR instead of
5307         CVEC.
5308
5309 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5310
5311         * url.c (get_urls_html): Skip "http:".
5312
5313 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5314
5315         * utils.c (strcasecmp): From glibc.
5316         (strncasecmp): Also.
5317         (strstr): Also.
5318
5319         * url.c: Added javascript: to the list of URLs prefixes.
5320
5321 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5322
5323         * recur.c (retrieve_robots): Print the warning message only if
5324         verbose.
5325
5326 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5327
5328         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5329
5330 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5331
5332         * systhings.h: New file.
5333
5334         * ../configure.in: Check for utime.h
5335
5336         * ftp.c: Check whether we have unistd.h.
5337
5338 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5339
5340         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5341         (recursive_retrieve): Call get_urls_html with the canonical URL.
5342
5343 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5344
5345         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5346         ansi2knr support for compilers which don't support ANSI style
5347         function prototypes and signatures.
5348
5349         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5350
5351 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5352
5353         * url.c: Use it; Recognize paths ending with "." and ".." as
5354         directories.
5355         (url_filename): Append .n whenever file exists and could be a
5356         directory.
5357
5358         * url.h (ISDDOT): New macro.
5359
5360         * init.c (parse_line): Use unsigned char.
5361
5362         * url.c (get_urls_html): Cast to unsigned char * when calling
5363         htmlfindurl.
5364
5365         * html.c (htmlfindurl): Use unsigned char.
5366
5367         * version.c: Changed version to 1.4.3.
5368
5369 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5370
5371         * version.c: Released 1.4.2.
5372
5373         * ftp.c (getftp): Simplified assertion.
5374         (ftp_loop_internal): Remove symlink before downloading.
5375         (ftp_retrieve_list): Unlink the symlink name before attempting to
5376         create a symlink!
5377
5378         * options.h (struct options): Renamed print_server_response to
5379         server_response.
5380
5381         * ftp.c (rel_constr): Removed.
5382         (ftp_retrieve_list): Don't use it.
5383         (ftp_retrieve_list): Use opt.retr_symlinks.
5384
5385 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5386
5387         * main.c (main): New option retr_symlinks.
5388
5389         * url.c (convert_links): Print verbose message.
5390
5391 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5392
5393         * http.c (http_loop): Reset newloc in the beginning of function;
5394         would cause FMR in retrieve_url.
5395
5396 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5397
5398         * recur.c (convert_all_links): Find the URL of each HTML document,
5399         and feed it to get_urls_html; would bug out.
5400         (convert_all_links): Check for l2 instead of dl; removed dl.
5401
5402         * url.c (convert_links): Don't refer to freed newname.
5403
5404         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5405
5406         * main.c (main): Print the OS_TYPE in the debug output, too.
5407
5408         * recur.c (recursive_retrieve): Check for opt.delete_after.
5409
5410         * main.c (main): New option delete-after.
5411
5412         * init.c (setval): Cleaned up.
5413
5414 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5415
5416         * Makefile.in (wget): Make `wget' the default target.
5417
5418         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5419         loop.
5420         (ftp_retrieve_list): Warn about non-matching sizes.
5421
5422         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5423
5424         * init.c (setnum): Renamed from setnuminf; New argument flags.
5425         (setval): Use it.
5426
5427         * main.c (main): Sorted the options.
5428         (main): New option --wait.
5429
5430 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5431
5432         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5433         quotes.
5434
5435 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5436
5437         * version.c: Changed version to 1.4.2.
5438
5439 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5440
5441         * version.c: Released 1.4.1.
5442
5443         * html.c (html_quote_string): New function.
5444         (ftp_index): Use it.
5445         (htmlfindurl): A more gentle ending debug message.
5446
5447         * ftp.c (ftp_loop): Check for opt.htmlify.
5448
5449         * init.c: New command htmlify.
5450
5451         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5452         strings.
5453         (ftp_loop): Print size of index.html.
5454
5455         * init.c (setval): Implement "styles".
5456
5457         * main.c (main): New option dotstyle.
5458
5459 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5460
5461         * ftp.c (getftp): Close the master socket in case of errors, after
5462         bindport().
5463
5464         * connect.c (bindport): Initialize msock to -1.
5465
5466         * ftp.c (getftp): Initialize dtsock to -1.
5467
5468         * connect.c (closeport): Don't close sock if sock == -1.
5469
5470 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5471
5472         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5473         (setval): Don't send default values.
5474         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5475
5476         * options.h (struct options): Use long for dot_bytes.
5477
5478         * init.c (setquota): Renamed to setbytes.
5479         (setval): Use setbytes on DOTBYTES.
5480
5481 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5482
5483         * ftp.c (getftp): Initialize con->dltime.
5484
5485         * recur.c (recursive_retrieve): Use same_host instead of
5486         try_robots; simply load robots_txt whenever the host is changed.
5487         (recursive_retrieve): Free forbidden before calling parse_robots.
5488
5489 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5490
5491         * retr.c (show_progress): Use them.
5492
5493         * options.h (struct options): New options dot_bytes, dots_on_line
5494         and dot_spacing.
5495
5496 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5497
5498         * recur.c (recursive_retrieve): Retrieve directories regardless of
5499         acc/rej rules; check for empty u->file.
5500
5501 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5502
5503         * init.c (setval): Use it.
5504
5505         * utils.c (merge_vecs): New function.
5506
5507         * init.c (setval): Reset the list-type functions when encountering
5508         "".
5509
5510 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5511
5512         * recur.c (recursive_retrieve): Use base_url instead of this_url
5513         for no_parent.
5514
5515 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5516
5517         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5518
5519 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5520
5521         * utils.c (sepstring): Rewrote; don't use strtok.
5522
5523         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5524         when running the first time.
5525         (retrieve_robots): Warn to ignore errors when robots are loaded.
5526
5527         * utils.c (load_file): Moved from url.c.
5528
5529         * http.c: Made static variables const too in h* functions.
5530
5531         * main.c (main): Renamed --continue-ftp to --continue.
5532
5533         * recur.c (recursive_retrieve): Use it.
5534
5535         * utils.c (frontcmp): New function.
5536
5537         * url.c (accdir): New function.
5538
5539         * html.c (htmlfindurl): Recognize <area href=...>.
5540
5541         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5542
5543         * init.c (setval): Free the existing opt.excludes and
5544         opt.includes, if available.
5545
5546         * main.c (main): New option -I.
5547
5548 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5549
5550         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5551
5552         * version.c: Changed version to 1.4.1.
5553
5554 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5555
5556         * version.c: Released 1.4.0.
5557
5558 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5559
5560         * main.c (main): Free com and val after parse_line.
5561         (printhelp): Reorder the listing.
5562
5563         * http.c: More robust header parsing.
5564
5565         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5566         (hskip_lws): New function.
5567         (haccepts_bytes): New function.
5568         (gethttp): Use it.
5569
5570         * init.c (setval): Check header sanity.
5571         (setval): Allow resetting of headers.
5572
5573 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5574
5575         * http.c (http_loop): Don't use has_wildcards.
5576
5577         * http.c (gethttp): Free all_headers -- would leak.
5578
5579         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
5580         0 -- this fixes a long-standing bug in -rl.
5581
5582 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
5583
5584         * ftp.c: Use -1 as "impossible" value for con->fd.
5585
5586         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
5587
5588         * init.c (parse_line): Use isalpha.
5589
5590         * ftp-unix.c: Use HAVE_UNISTD_H.
5591
5592         * mtch.c (has_wildcards): Don't match \.
5593
5594         * http.c (http_loop): Warn on HTTP wildcard usage.
5595
5596 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
5597
5598         * url.c (url_filename): Do not create numbered suffixes if
5599         opt.noclobber -- would bug out on -nc.
5600
5601 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
5602
5603         * recur.c (parse_robots): Don't chuck out the commands without
5604         arguments (`Disallow:<empty>' didn't work).
5605         (parse_robots): Compare versions lowercase.
5606         (parse_robots): Match on base_version, not version_string!
5607         (parse_robots): Handle comments properly.
5608         (parse_robots): Match versions in a sane way.
5609
5610         * init.c: Print nicer error messages.
5611
5612         * version.c: Changed version to 1.4.0.
5613
5614 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5615
5616         * version.c: Released 1.4.0-test2.
5617
5618         * init.c (run_wgetrc): Close fp.
5619
5620         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
5621         u->dir.
5622
5623 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5624
5625         * init.c (setquota): Allow inf as quota specification.
5626
5627 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
5628
5629         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
5630         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
5631
5632         * main.c (main): Check for quota by comparison with downloaded
5633         stuff, not from status.
5634
5635         * connect.c (select_fd): Should compile on HPUX without warnings now.
5636
5637         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
5638         returned RETROK.
5639
5640 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
5641
5642         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
5643         (getftp): Return FTPRETRINT on control connection error.
5644
5645         * html.c (htmlfindurl): Recognize <embed src=...> and
5646         <bgsound src=...>.
5647         (ftp_index): Handle username and password correctly.
5648
5649         * main.c (main): Made `-np' a synonim for --no-parent.
5650
5651 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5652
5653         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
5654         ftp_retrieve_glob.
5655
5656         * version.c: Changed version to 1.4.0-test2.
5657
5658 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5659
5660         * version.c: Released 1.4.0-test1.
5661
5662         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
5663         directory.
5664         (convert_links): Removed definition of make_backup.
5665
5666         * http.h: Removed definition of MAX_ERROR_LENGTH.
5667
5668         * host.c (ftp_getaddress): Check for "(none)" domains.
5669
5670         * ftp.c (ftp_retrieve_dirs): Docfix.
5671
5672         * http.c (gethttp): Use ou->referer instead of u->referer.
5673
5674         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
5675         this was known to cause coredumps on Linux.
5676
5677         * html.c (ftp_index): Cast the argument to local_time to time_t *.
5678
5679 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
5680
5681         * connect.c (select_fd): Use exceptfds -- once and for all.
5682
5683         * retr.c (retrieve_from_file): Free filename after
5684         recursive_retrieve.
5685         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
5686         first-time retrieval.
5687         (retrieve_from_file): Return uerr_t; new argument, count.
5688         (retrieve_from_file): Break on QUOTEXC.
5689
5690         * init.c (setquota): Fixed a bug that caused rejection of
5691         non-postfixed values..
5692
5693 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
5694
5695         * version.c: Changed name to wget.
5696
5697         * connect.c (iread): Smarter use of select.
5698         (select_fd): Set errno on timeout.  If not timeout, return 1
5699         instead of 0.
5700
5701 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
5702
5703         * ftp.c (ftp_loop_internal): Don't use con->cmd before
5704         establishing it.
5705
5706 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
5707
5708         * http.c (gethttp): Send correct referer when using proxy.
5709         (gethttp): Use struct urlinfo ou to access the relevant data; send
5710         correct authorization in all cases.
5711
5712         * host.c (same_host): Use skip_uname to skip username and
5713         password.
5714
5715         * url.c (skip_uname): New function.
5716         (parseurl): Use it.
5717
5718         * host.c (same_host): Do not assume HTTP -- same_host should now
5719         be totally foolproof.
5720
5721         * url.c (skip_proto): New function.
5722         (parse_uname): Use it.
5723
5724         * http.c (gethttp): Create local user and passwd from what is
5725         given.
5726
5727         * url.c (parseurl): Check for HTTP username and password too.
5728
5729 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
5730
5731         * config.h.in: Removed #define gethostbyname R...
5732
5733 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5734
5735         * version.c: Changed version to 1.4.0-test1.
5736
5737 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5738
5739         * version.c: "Released" 1.4b29.
5740
5741         * recur.c (recursive_retrieve): Check for no_parent.
5742
5743         * init.c (setval): Option update.
5744
5745         * main.c (main): New option no-parent.
5746
5747         * options.h (struct options): New variable no_parent.
5748
5749         * recur.c (recursive_retrieve): Only files are checked for
5750         opt.accepts and opt.rejects.
5751         (recursive_retrieve): Check directories for opt.excludes.
5752         (recursive_retrieve): Make the dir absolute when checking
5753         opt.excludes.
5754
5755         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5756         src=...>
5757
5758 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5759
5760         * ftp.c (getftp): Do not line-break assert entries at all.
5761         (ftp_retrieve_dirs): docfix.
5762
5763         * connect.c (select_fd): Use fd + 1 as nfds.
5764
5765         * version.c: Changed version to 1.4b29.
5766
5767 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5768
5769         * version.c: "Released" 1.4b28.
5770
5771         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5772         don't continue the loop if it is.
5773         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5774
5775 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5776
5777         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5778         (getftp): Do not use multiline assert.
5779
5780         * http.c (hparsestatline): Use mjr and mnr instead of major and
5781         minor, which don't compile on Ultrix.
5782         (http_loop): Use strcpy() to initialize tmp.
5783
5784         * all: Geturl -> Fetch
5785
5786 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5787
5788         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5789         ':'.
5790
5791         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5792         moving `bufsize &&' to the beginning of each check in for-loops.
5793
5794         * recur.c (parse_robots): Close fp on exit.
5795
5796         * url.c (mymkdir): Check for each directory before creating.
5797
5798 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5799
5800         * version.c: Changed version to 1.4b28.
5801
5802 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5803
5804         * version.c: "Released" 1.4b27.
5805
5806         * init.c (parse_line): Use isspace.
5807         (parse_line): Free *com on all errors.
5808
5809         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
5810         (delelement): Use next instead of f->next and prev instead of
5811         f->prev.
5812         (delelement): Free the members of the deleted element.
5813
5814         * http.c (http_loop): Do not return RETROK on code != 20x.
5815
5816         * init.c (cleanup): Free opt.user_header.
5817         (cleanup): Free opt.domains.
5818
5819         * url.c (freelists): Moved to cleanup().
5820
5821         * http.c (hparsestatline): Docfix.
5822
5823         * main.c (main): Return with error status on unsuccesful
5824         retrieval.
5825
5826         * init.c (setval): Do not remove listing when mirroring.
5827
5828         * url.c (url_filename): Use opt.fileprefix.
5829
5830         * ftp.c (ftp_get_listing): Use url_filename to get filename for
5831         .listing.
5832
5833         * main.c (main): New option: -rn.
5834
5835 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5836
5837         * Makefile.in (RM): Added RM = rm -f.
5838
5839         * host.c (clean_hosts): New function.
5840         (free_hlist): Just free the list, no reset.
5841
5842         * version.c: Changed version to 1.4b27.
5843
5844 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5845
5846         * version.c: "Released" 1.4b26.
5847
5848         * retr.c (retrieve_from_file): If call get_urls_html with
5849         opt.spider to make it silent in spider mode.
5850
5851         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5852
5853         * url.h (CLEANDUP): New macro.
5854
5855         * http.c (gethttp): Fixed a bug that freed location only when it
5856         was NULL.
5857
5858         * retr.c (retrieve_url): Free url if it will not be stored,
5859         i.e. newloc is NULL.
5860
5861         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5862         old version would bug out on <a href="x#a"href="y">.
5863
5864         * html.h (state_t): New member in_quote.
5865
5866         * html.c (htmlfindurl): Free s->attr at the beginning of
5867         attr-loop.
5868
5869         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5870         (tried_robots): Make hosts a global variable.
5871         (recursive_retrieve): Free constr after URL host optimization.
5872         (tried_robots): Free urlinfo before exiting.
5873
5874         * utils.c (free_slist): New function.
5875
5876         * recur.c (recursive_retrieve): Use flags to add cleanup
5877         possibility.
5878
5879         * main.c (main): Free filename after recursive_retrieve.
5880
5881         * http.c (gethttp): Store successful responses too.
5882
5883 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5884
5885         * all: Constified the whole source.  This required some minor
5886         changes in many functions in url.c, possibly introducing bugs -- I
5887         hope not.
5888
5889         * ftp-basic.c: Removed last_respline.
5890
5891         * http.c (gethttp): Free type.
5892
5893         * host.c (same_host): Free real1 and real2.
5894
5895         * main.c (main): New option --spider.
5896
5897         * retr.c (get_contents): Don't reset errno.
5898
5899         * main.c (main): Sorted the options.
5900
5901         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5902         uninitialized by select().
5903
5904         * http.c (http_loop): Print the time when the connection is
5905         closed.
5906         (gethttp): Debug-print the HTTP request.
5907
5908 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
5909
5910         * connect.c (iread): Do not try reading after timeout.
5911
5912         * main.c (main): Would bug out on -T.
5913
5914         * connect.c (select_fd): Do not use exceptfds.
5915         (iread): Set ETIMEDOUT on select_fd <= 0.
5916
5917         * version.c: Changed version to 1.4b26.
5918
5919 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
5920
5921         * version.c: "Released" 1.4b25.
5922
5923         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
5924         or link name.
5925
5926         * http.c (gethttp): Add errcode to struct hstat.
5927         (http_loop): Use it.
5928
5929         * url.c (no_proxy_match): Simplify using char** for no_proxy.
5930
5931         * options.h (struct options): Make opt.no_proxy a vector.
5932
5933         * utils.c (sepstring): Use !*s instead of !strlen(s).
5934
5935         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
5936         (getperms): Use ISODIGIT instead of isdigit.
5937
5938         * ftp.c (getftp): Print time.
5939
5940         * main.c (main): Use legible output of downloaded quantity.
5941
5942         * ftp.c (getftp): Use elapsed_time().
5943         (ftp_loop_internal): Use rate().
5944
5945         * http.c (http_loop): Add download ratio output; Use rate().
5946
5947         * utils.c (rate): New function.
5948
5949 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
5950
5951         * http.c (http_loop): Use timer.
5952
5953         * ftp.c: Split to ftp-basic.c and ftp.c
5954
5955         * utils.c (reset_timer): New function.
5956         (elapsed_time): New function.
5957
5958         * retr.c (show_progress): Make bytes_in_line and offs long; should
5959         work on 16-bit machines.
5960
5961 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
5962
5963         * url.c (in_acclist): New argument backward.
5964
5965         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
5966         a file should be retrieved according to suffix.
5967         (ftp_get_listing): Check the return value of unlink; Do not call
5968         ftp_retrieve_dirs if depth reached maxreclevel.
5969         (ftp_retrieve_dirs): Check whether the directory is in
5970         exclude-list.
5971
5972         * main.c (main): Print the version number at the beginning of
5973         DEBUG output.
5974         (main): Use strrchr when creating exec_name.
5975
5976         * ftp.c (ftp_retrieve_glob): Do not close control connection.
5977
5978         * version.c: Changed version to 1.4b25.
5979
5980 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
5981
5982         * version.c: "Released" 1.4b24.
5983
5984         * Makefile.in: Rewrite.
5985
5986         * ftp.c (ftp_loop_internal): Likewise.
5987
5988         * retr.c (time_str): Check for failed time().
5989
5990         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
5991         HTML3.0.
5992
5993         * retr.c (time_str): Return time_t *.
5994
5995         * connect.c (bindport): Close msock on unsuccesful bind.
5996         (bindport): The same for getsockname and listen.
5997
5998         * retr.c (retrieve_url): Allow any number of retries on
5999         proxy.
6000
6001         * http.c (gethttp): Do not treat errno == 0 as timeout.
6002         (http_loop): Likewise.
6003         (http_loop): Cosmetic changes.
6004
6005         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
6006
6007         * retr.c (get_contents): Reset errno.
6008
6009         * ftp.c (getftp): Minor fixes.
6010
6011 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6012
6013         * http.c: Do not use backups.
6014
6015         * geturl.1 (WARNING): Warn that man-page could be obsolete.
6016
6017         * getopt.c (getopt_long): Moved to getopt.c
6018
6019         * geturl.texi: Enhanced.
6020
6021         * main.c (main): Use it.
6022
6023         * recur.c (convert_all_links): New function.
6024
6025         * utils.c (add_slist): New argument flags.
6026
6027         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
6028         (parse_robots): Do not chuck out empty value fields.
6029         (parse_robots): Make yourself welcome on empty Disallow.
6030
6031         * version.c: Changed version to 1.4b24.
6032
6033 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6034
6035         * version.c: "Released" 1.4b23.
6036
6037         * ftp.c (ftp_loop_internal): Get the time after getftp.
6038
6039         * Makefile.in (install.info): New target.
6040         (install): Use it.
6041
6042         * http.c (http_loop): Fix output when doing -O.
6043
6044 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6045
6046         * geturl.texi: New file.
6047
6048         * main.c (main): Do not print the warnings and download summary if
6049         opt.quiet is set.
6050
6051         * version.c: Changed version to 1.4b23.
6052
6053 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6054
6055         * "Released" 1.4b22.
6056
6057         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
6058         to avoid redefinition warnings.
6059
6060         * host.c (store_hostaddress): Use memcpy() to copy the address
6061         returned by inet_addr.
6062
6063         * version.c: Changed version to 1.4b22.
6064
6065 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
6066
6067         * version.c: "Released" 1.4b21.
6068
6069         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
6070
6071         * ftp.c (ftp_port): Use conaddr.
6072         (getftp): Print the file length.
6073         (ftp_retrieve_list): Check the stamps of plain files only.
6074
6075         * connect.c (closeport): Do not call shutdown().
6076         (conaddr): New function.
6077
6078         * html.c (ftp_index): Made it dfp-aware.
6079
6080         * init.c (cleanup): New name of freemem. Close opt.dfp.
6081
6082         * ftp.c (getftp): Use opt.dfp if it is set.
6083
6084         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
6085
6086         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
6087         CWDs to be sent with recursive FTP retrievals.
6088
6089 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
6090
6091         * recur.c (parse_robots): Made it more compliant with "official"
6092         specifications.
6093
6094         * http.c: New function.
6095
6096         * ftp-unix.c (ftp_parse_ls): Added better debug output.
6097
6098         * ftp.c (getftp): Print out the LIST in case of
6099         opt.print_server_response.
6100
6101         * version.c: Changed version to 1.4b21.
6102
6103 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
6104
6105         * version.c: "Released" 1.4b20.
6106
6107         * README: Update.
6108
6109         * http.c (gethttp): Preset lengths of various headers instead of
6110         calculating them dynamically.
6111         (gethttp): Check for 206 partial contents.
6112
6113 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
6114
6115         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
6116
6117         * http.c (gethttp): Send the port number in the Host: header.
6118
6119 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
6120
6121         * http.c (gethttp): Send host: header.
6122         (gethttp): Add the possibility of user-defined headers.
6123         (gethttp): Move decision about pragma: no-cache to http_loop,
6124         where it belongs.
6125         (gethttp): Pass a struct instead of enormous argument list.
6126         (http_loop): Use a new, fancier display format.
6127         (ftp_loop): Likewise.
6128
6129         * main.c: (hangup): Turn off buffering of the new log file.
6130
6131         * install-sh: Likewise.
6132
6133         * config.sub: Replace with the one in autoconf-2.10
6134
6135         * geturl.1: Update.
6136
6137         * init.c: New options httpuser and httppasswd.
6138
6139         * http.c: (base64_encode_line): New function.
6140         (gethttp): Send authentication.
6141
6142         * connect.c (make_connection): Use store_hostaddress.
6143
6144 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
6145
6146         * host.c (store_hostaddress): New function.
6147
6148         * NEWS: Update.
6149
6150         * http.c (hgetrange): New function.
6151         (gethttp): Use ranges.
6152
6153         * utils.c (numdigit): Accept long instead of int.
6154
6155         * http.c (http_loop): Add restart capabilities.
6156
6157         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
6158         being used uninitialized.
6159         (ftp_retrieve_list): Similar fix.
6160
6161         * host.c (add_hlist): Fixed a bug that could cause cmp being used
6162         uninitialized.
6163
6164         * url.c (construct_relative): New function.
6165
6166         * recur.c (recursive_retrieve): Use it.
6167
6168         * retr.c (convert_links): New function.
6169
6170 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
6171
6172         * url.c (free_urlpos): New function.
6173
6174         * recur.c (recursive_retrieve): Adapt.
6175
6176         * url.c (get_urls_html): Return a linked list instead of a vector.
6177
6178         * url.c (get_urls_file): Return a linked list instead of a vector.
6179
6180         * geturl.1: Update.
6181
6182         * http.c (gethttp): Implement it.
6183
6184         * init.c (setval): New option: SAVEHEADERS
6185
6186         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
6187         be retrieved. Lack of this test caused bugs when the connection
6188         was lost during listing.
6189
6190         * retr.c (retrieve_url): Fixed a bug that caused
6191         coredumps. *newloc is now reset by default.
6192         (retrieve_url): Lift the twenty-tries limit on proxies.
6193
6194         * version.c: Changed version to 1.4b20.
6195
6196 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6197
6198         * version.c: "Released" 1.4b19.
6199
6200 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6201
6202         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6203         (getftp): Changed prototype to accept ccon *.
6204
6205 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6206
6207         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6208         incorrect values to files pointed to by symbolic links.
6209         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6210
6211 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6212
6213         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6214
6215         * main.c (main): New option: --user-agent.
6216
6217         * geturl.1: Ditto.
6218
6219         * init.h: Ditto.
6220
6221         * init.c (setval): Ditto.
6222
6223         * main.c (main): Rename "server-headers" to "server-response".
6224
6225         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6226         executables in 'ls -F' listings.
6227
6228 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6229
6230         * url.c (parseurl): Remove realloc() and sprintf().
6231         (str_url): Get rid of sprintf().
6232
6233         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6234         servers.
6235
6236         * url.h (URL_CLEANSE): Made it else-resistant.
6237         (USE_PROXY): New macro.
6238
6239 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6240
6241         * NEWS: Update.
6242
6243         * version.c: Changed version to 1.4b19.
6244
6245 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6246
6247         * version.c: "Released" 1.4b18.
6248
6249         * url.c: Made it reallocate space exponentially.
6250
6251 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6252
6253         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6254         the list of stuff to fetch.
6255
6256 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6257
6258         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6259         -Fi.
6260
6261         * html.c (htmlfindurl): Rewrite.
6262
6263         * http.c (gethttp): Use opt.proxy_cache.
6264
6265         * main.c (main): Added --cache option.
6266
6267         * ftp.c (ftp_response): Print server response if opt.print_server
6268         response is set.
6269         (getftp): Print newlines after each request if the server response
6270         is to be printed.
6271         (ftp_response): Copy the last response line to last_respline.
6272
6273         * http.c (gethttp): Add Pragma: nocache for retried
6274         proxy-retrievals.
6275
6276         * ftp.c (getftp): Use it.
6277
6278         * retr.c (buf_discard): New function.
6279
6280         * ftp.c (ftp_response): Use buf_readchar().
6281         (getftp): Flush the control connection buffer before calling
6282         get_contents().
6283
6284         * retr.c (buf_readchar): New function.
6285         (buf_flush): New function.
6286         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6287         (get_contents): Use buf_flush.
6288
6289 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6290
6291         * ftp.c: Incorporate changes to ftp_response.
6292
6293         * ftp.c (ftp_response): Allocate the server response dynamically,
6294         as in read_whole_line and fetch_next_header.
6295
6296         * utils.c (read_whole_line): Fixed a bug that prevented reading
6297         the last line if it is not \n-terminated. Also fixed a possible
6298         memory overflow.
6299
6300         * http.c (fetch_next_header): Return malloc-ed string as large as
6301         needed.
6302         (gethttp): Use new fetch_next_header.
6303
6304 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6305
6306         * http.c (hgetlen): Compute the header length the first time only.
6307         (hgettype): Ditto.
6308         (hgetlocation): Ditto.
6309         (hgetmodified): Ditto.
6310
6311 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6312
6313         * sample.geturlrc: Update.
6314
6315 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6316
6317         * http.c (http_loop): Ditto.
6318
6319         * ftp.c (getftp): Open the output file as binary.
6320
6321         * version.c: Changed version to 1.4b18.
6322
6323 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6324
6325         * version.c: "Released" 1.4b17.
6326
6327         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6328         instead of failed assertion.
6329
6330 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6331
6332         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6333         if a file of that name already exists.
6334
6335 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6336
6337         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6338
6339         * config.h.in: Define gethostbyname as Rgethostbyname when using
6340         Socks.
6341
6342         * configure.in: Check for -lresolv if using Socks.
6343
6344         * version.c: Changed version to 1.4b17.
6345
6346 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6347
6348         * version.c: "Released" 1.4b16.
6349
6350         * http.c (gethttp): More intelligent check for first line of HTTP
6351         response.
6352         (gethttp): Would bug out on time-stamping.
6353
6354         * version.c: Changed version to 1.4b16.
6355
6356 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6357
6358         * version.c: Released 1.4b15.
6359
6360         * http.c (http_loop): Print \n after the loop entry, not before.
6361
6362         * url.c (url_filename): Use ISDOT.
6363
6364         * url.h (ISDOT): New macro.
6365
6366         * recur.c (recursive_retrieve): Change only opt.recursive for
6367         following FTP.
6368
6369 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6370
6371         * socks/geturl.cgi: Fixed version No.
6372
6373         * socks/download-netscape.html: Ditto.
6374
6375         * socks/download.html: Changed socks.html to download.html.
6376
6377 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6378
6379         * url.c (url_filename): Check for opt.dirstruct instead for
6380         opt.recursive && opt.dirstruct.
6381
6382         * init.c (defaults): Ditto.
6383         (defaults): Reset dirstruct by default.
6384         (setval): Set opt.dirstruct whenever setting recursive.
6385
6386         * init.h: Removed FORCEDIRHIER.
6387
6388         * INSTALL: Added -L to socks-description.
6389
6390         * version.c: Changed version to 1.4b15.
6391
6392 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6393
6394         * version.c: "Released" 1.4b14.
6395
6396         * geturl.1: Update AUTHOR to include Rosella as contributor.
6397
6398         * NEWS: Update.
6399
6400         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6401
6402         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6403         (cal_time): Fix == to eq.
6404
6405         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6406
6407         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6408
6409         * Makefile.in: Use @VERSION@.
6410
6411         * configure.in: Check version from version.c.
6412
6413         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6414
6415         * socks/download.html: Created from download-netscape.html, made
6416         HTML-2.0 compliant.
6417
6418         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6419         following FTP links from recursions.
6420
6421 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6422
6423         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6424         absolute directories correctly.
6425
6426         * version.c: Changed version to 1.4b14.
6427
6428 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6429
6430         * version.c: "Released" 1.4b13.
6431
6432         * url.c (make_backup): New function.
6433
6434         * http.c (http_loop): Make a backup copy of the local file (using
6435         rename(2)) before opening it.
6436
6437         * main.c (main): Added --backups.
6438
6439         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6440         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6441         (ftp_getaddress): Check for empty, null or (null) domain.
6442
6443         * url.c (get_urls_html): If this_url is NULL, the base must have a
6444         protocol.
6445         (parseurl): Use has_proto.
6446
6447         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6448         retries.
6449
6450         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6451         if it is not already there.
6452         (has_proto): New function.
6453         (get_urls_html): Eliminate the remaining call to findurl -- use
6454         has_proto.
6455
6456         * geturl.1: Ditto.
6457
6458         * main.c: Change -X to -x.
6459
6460         * url.c (url_filename): Simplify creation of filename if
6461         prefix_files is set.
6462         (url_filename): Simplify everything. And I do mean *everything*.
6463         (mkstruct): Add dir_prefix before hostname.
6464         (path_simplify): Fixed a bug that caused writing outside the path
6465         string in case of "." and ".." path strings.
6466
6467 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6468
6469         * init.c: Added --mirror.
6470
6471         * main.c (main): Added -X to force saving of directory hierarchy.
6472
6473         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6474         (ftp_retrieve_list): Check whether quota is exceeded.
6475
6476         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6477
6478         * http.c (gethttp): Use referer if present.
6479
6480         * recur.c (recursive_retrieve): Set u->referer before calling
6481         retrieve_url.
6482
6483         * url.c (newurl): Use memset to nullify the struct members.
6484         (freeurl): Free the referer field too.
6485
6486         * url.h: Added referer to urlinfo.
6487
6488         * geturl.1: Updated the manual to document some of the new features.
6489
6490         * utils.c (numdigit): Moved from url.c.
6491
6492         * README: Rewritten.
6493
6494         * config.h.in: Add the support for socks.
6495
6496         * configure.in: Add the support for socks.
6497
6498         * url.c (url_filename): If the dir_prefix is ".", work with just
6499         the file name.
6500         (url_filename): Do not look for .n extensions if timestamping if
6501         turned on.
6502
6503         * retr.c (show_progress): Skip the over-abundant restval data, and
6504         print the rest of it with ',' instead of '.'.
6505
6506 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6507
6508         * retr.c (show_progress): Changed second arg. to long (as it
6509         should be).
6510         (show_progress): Moved to retr.c.
6511         (get_contents): Moved to retr.c.
6512
6513         * version.c: Change version to 1.4b13.
6514
6515 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6516
6517         * url.c (in_acclist): Would return after the first suffix.
6518
6519 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6520
6521         * version.c: "Released" 1.4b12.
6522
6523         * url.c (path_simplify): More kludgifications.
6524         (get_urls_html): Use new parameters for htmlfindurl.
6525
6526         * html.c: Removed memorizing "parser states", since the new
6527         organization does not require them.
6528
6529         * init.c (run_geturlrc): Use read_whole_line.
6530
6531         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6532
6533         * recur.c (parse_robots): Use read_whole_line.
6534
6535         * utils.c (read_whole_line): New function.
6536
6537         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6538
6539         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6540         tested on OSF and Ultrix.
6541         (add_hlist): New function.
6542         (free_hlist): New function.
6543         (search_host): New function.
6544         (search_address): New function.
6545         (realhost): Use search_host, search_address and add_hlist.
6546         (same_host): Replaced realloc() with strdupdelim(), made
6547         case-insensitive, fixed a memory leak.
6548
6549         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6550         tm_min, like intended.
6551
6552         * version.c: Change user agent information to
6553         Geturl/version.
6554
6555 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6556
6557         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6558
6559         * url.c (acceptable): Always accept directories.
6560
6561         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6562         servers by stripping trailing @ from symlinks and trailing / from
6563         directories.
6564
6565         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6566
6567         * url.c (skip_url): Use toupper instead of UCASE.
6568
6569         * host.c (sufmatch): Made it case-insensitive.
6570
6571         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6572         (match_backwards): New function, instead of
6573         match_backwards_or_pattern.
6574
6575         * recur.c (recursive_retrieve): Increased performance by
6576         introducing inl, which reduces number of calls to in_slist to only
6577         one.
6578
6579         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
6580         routine to use.
6581
6582         * main.c (printhelp): Removed the warranty stuff.
6583
6584 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
6585
6586         * url.c (add_slist): Simplify.
6587         (match_backwards_or_pattern): New function.
6588         (in_acclist): Use match_backwards_or_pattern.
6589         (matches): Remove.
6590
6591 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
6592
6593         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
6594         recursive.
6595
6596         * html.c (ftp_index): Fixed to work. Beautified the output.
6597
6598         * ftp.c (ftp_retrieve_glob): Another argument to control whether
6599         globbing is to be used.
6600         (ftp_retrieve_list): Compare the time-stamps of local and remote
6601         files to determine whether to download.
6602
6603 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
6604
6605         * ftp.c (rel_constr): New function.
6606
6607         * retr.c (retrieve_from_file): Check for text/html before
6608         retrieving recursively.
6609
6610         * main.c (main): Check whether the file is HTML before going into
6611         recursive HTML retrieving.
6612
6613         * ftp.c (ftp_retrieve_list): Manage directories.
6614         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
6615         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
6616         initialized, causing bugchecks in getftp to fail.
6617
6618         * configure.in: Check for symlink.
6619
6620         * ftp.c (ftp_retrieve_list): Added support for symlinks.
6621
6622         * version.c: "Released" 1.4b10.
6623
6624         * atotm.c (atotm): Redeclared as time_t.
6625
6626         * init.c: New variable "timestamping".
6627
6628         * main.c (main): New option 'N'.
6629
6630         * http.c (hgetlocation): Case-insensitive match.
6631         (hgetmodified): New function.
6632         (http_loop): Implement time-stamping.
6633
6634 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
6635
6636         * version.c: Changed version to 1.4b10
6637
6638         * atotm.c: New file, from phttpd.
6639
6640         * options.h (struct options): New parameter timestamping.
6641
6642         * version.c: 1.4b9 "released".
6643
6644         * recur.c (recursive_retrieve): Used linked list (ulist) for
6645         faster storing of URLs.
6646
6647         * url.c (get_urls_html): Removed the old kludge with comparing the
6648         outputs of htmlfindurl and findurl.
6649         (get_urls_html): Added better protocol support here.
6650         (create_hash): Removed, as well as add_hash and in_hash.
6651         (addslist): New function.
6652         (in_slist): ditto
6653
6654         * version.c: Released 1.4b8, changed version to b9.
6655
6656 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6657
6658         * ftp.c (freefileinfo): New function.
6659         (delelement): New function.
6660
6661         * everywhere: GPL!
6662
6663         * ftp.c (ftp_loop): Use ccon.
6664         (ftp_retrieve_glob): Likewise.
6665
6666         * ftp.h: Define ccon, to define status of control connection.
6667
6668         * ftp.c (ftp_get_listing): New function.
6669         (ftp_retrieve_more): New function.
6670         (ftp_retrieve_glob): New function.
6671
6672 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
6673
6674         * configure.in: Removed the search for cuserid().
6675
6676         * init.c (getmode): Renamed to getperms.
6677
6678 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
6679
6680         * version.c: New version.
6681
6682         * main.c (hangup): New function, that handles hangup. Hangup
6683         signal now causes geturl to stop writing on stdout, and to write
6684         to a log file.
6685
6686         * ftp.c (getftp): "Released" 1.4b7.
6687
6688         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
6689         (ftp_index): Use fileinfo/urlinfo.
6690
6691         * ftp-unix.c (ftp_parse_ls): New function.
6692         (symperms): New function.
6693
6694         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
6695
6696         * retr.c (retrieve_url): Added FTP support.
6697
6698 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6699
6700         * geturl.h: Removed NOTFTP2HTML enum.
6701         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
6702
6703         * ftp.c (getftp): Resynched with urlinfo.
6704         (getftp): Removed HMTL-ization of index.html from getftp.
6705
6706         * version.c: 1.4b6 "released".
6707
6708         * options.h (options): New struct, to keep options in.
6709
6710         * http.c (http_loop,gethttp): Synched with proxy.
6711
6712         * retr.c (retrieve_url): Implemented proxy retrieval.
6713
6714         * main.c (main): Use retrieve_from_file.
6715
6716 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
6717
6718         * retr.c (retrieve_from_file): New function.
6719
6720         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
6721         can be found in u->proto.
6722
6723         * ftp.c (ftp_response): Fixed to accept multi-line responses as
6724         per RFC 959.
6725
6726         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
6727
6728         * url.c (mymkdir): Removed the file of the same name, if one
6729         exists.
6730         (isfile): New function.
6731         (mkstruct): Fixed the '/' glitches.
6732         (path_simplify): Hacked to treat something/.. correctly.
6733
6734 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6735
6736         * http.c (gethttp): Close the socket after error in headers.
6737         (http_loop): HEOF no longer a fatal header.
6738
6739         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6740         simplifies the syntax of calling retrieve_url.
6741
6742         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6743
6744         * url.c (get_urls_file): New function.
6745         (get_urls_html): New function.
6746
6747         * recr.c (recursive_retrieve): Patched up to conform to the
6748         standards.
6749
6750         * http.c (gethttp): Synched with the rest...
6751         (gethttp): Treat only CONREFUSED specially, with connection
6752         errors.
6753
6754         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6755
6756 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6757
6758         * http.c (http_loop): New function.
6759
6760         * loop.c: Removed *lots* of stuff from retrieve_url.
6761
6762         * url.c (parseurl): Changed to work with urlinfo. Integrated
6763         username finding and path parsing.
6764         (newurl): New function.
6765         (freeurl): New function.
6766         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6767         (url_filename): Likewise.
6768         (path_simplify): Accept relative paths too.
6769         (opt_url): Made urlinfo-compliant, removed bogosities.
6770         (path_simplify): Expanded to accept relative paths.
6771         (str_url): A replacement for hide_url
6772         (decode_string): Fixed a bug that caused malfunctioning when
6773         encountering an illegal %.. combination.
6774         (opt_url): Removed the argument. Dot-optimizations are now default.
6775
6776         * nmalloc.c (strdupdelim): New function.
6777
6778         * url.h: Added the urlinfo structure
6779
6780 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6781
6782         * url.c (hide_url): Thrown out the protocol assertion. Do not
6783         change the URL if the protocol if not recognized.
6784         (findurl): Put continue instead of break.
6785
6786 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6787
6788         * sample.geturlrc: Changed the defaults to be commented out and
6789         harmless (previous defaults caused pains if copied to
6790         ~/.geturlrc).
6791
6792         * http.c (gethttp): Print the HTTP request in debug mode.
6793
6794         * connect.c (iread): Added EINTR check loop to select-ing
6795         too. EINTR is now correctly handled with select().
6796
6797         * TODO: new file
6798
6799 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
6800
6801         * host.c (same_host): Made the function a little bit more
6802         intelligent regarding diversified URL syntaxes.
6803
6804         * url.c (skip_url): Spaces are now skipped after URL:
6805
6806         * Released 1.3.1 with the patch to prevent crashing when sending
6807         NULL to robot* functions and the patch to compile "out of the box"
6808         on AIX.
6809
6810         * recr.c (recursive_retrieve): Added checking whether this_url is
6811         NULL when calling the robot functions.
6812
6813         * ChangeLog: New file.