sjero.net Git - wget/blob - src/ChangeLog

   1 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
   2
   3         * ftp.c (getftp): Don't ftruncate stdout.
   4
   5         * http.c (gethttp): Don't ftruncate stdout.
   6
   7 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
   8
   9         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
  10         (get_number): Ditto.
  11         (get_alt_number): Ditto.
  12         (__isleap): New function-like macro used by strptime.
  13         (day_of_the_week): New function used by strptime.
  14         (day_of_the_year): Ditto.
  15         (__mon_yday): Now shared by mktime and strptime implementations.
  16
  17 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
  18
  19         * cookies.c (check_domain_match): Use match_tail in case
  20         insensitive mode.
  21
  22         * utils.c (match_tail): Allow the caller to specify case
  23         insensitive mode.
  24
  25         * cookies.c (store_cookie): When expiry_time is 0, print it as
  26         undefined, not indefinite.
  27
  28 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
  29
  30         * cookies.c (cookie_jar_process_set_cookie): Do not store
  31         discarded cookie.
  32
  33 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
  34
  35         * cookies.c (check_domain_match): Allow cookies to be set for
  36         subdomains of unknown top-level domains under some circumstances.
  37
  38 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
  39
  40         * gen_ssl.c:
  41         - allow checking of server cert
  42         - allow defining client cert type
  43         - allow limit of ssl protocol
  44         - check more return values
  45         - added debug message on break
  46
  47 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
  48
  49         * recur.c (download_child_p): Revert order of items in check
  50         number 6 for clarity.
  51
  52 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
  53
  54         * init.c: Ditto.
  55
  56         * main.c: Ditto.
  57
  58         * http.c: Use the new interface.
  59
  60         * cookies.c: Provide an OO-style "cookie jar" interface to enable
  61         separate cookie jars.
  62
  63         * http.c (http_atotm): Declare argument as const.
  64
  65 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
  66
  67         * cookies.c (cookie_new): Default to PORT_ANY.
  68         (find_cookie_chain_exact): Only search by DOMAIN.
  69         (find_matching_cookie): Also check that PORT matches.
  70         (store_cookie): Only match the domain.
  71         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
  72         is valid for that host rather than discarding it completely.
  73         (find_matching_chains): Don't search by PORT.
  74         (matching_cookie): Also match PORT.
  75         (load_cookies): Set the port if specified, otherwise leave it as
  76         ANY.
  77         (save_cookies_mapper): Save the port if specified, otherwise leave
  78         it empty.
  79
  80 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
  81
  82         * init.c: The option `egdfile' was not in sort order.
  83
  84 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
  85
  86         * ftp.c (getftp): Treat directories that begin with <letter>: as
  87         absolute.
  88         (getftp): Strip trailing slashes from con->id before merging it
  89         with TARGET.
  90
  91 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
  92
  93         * http.c (gethttp): If Content-Type is not given, assume
  94         text/html.
  95
  96 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
  97
  98         * recur.c (download_child_p): Don't ignore rejection of HTML
  99         documents that are themselves leaves of recursion.
 100
 101 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 102
 103         Makefile.in: Updated several dependencies for object files to take
 104         account of nested include files.
 105
 106 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 107
 108         Makefile.in: The target `connect$o' (connect.o) now depends on
 109         `utils.h'
 110
 111 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 112
 113         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
 114         (gethostbyname_with_timeout): Use it.
 115
 116         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
 117         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
 118
 119 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 120
 121         * host.c (getaddrinfo_with_timeout): New function.
 122         (gethostbyname_with_timeout): Ditto.
 123         (lookup_host): Use them.
 124
 125 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 126
 127         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
 128
 129 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 130
 131         * init.c (comind): Use a marginally faster implementation of
 132         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
 133         nanosecond earned."
 134
 135 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 136
 137         * main.c (print_help): Document `--post-data' and `--post-file'.
 138
 139 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 140
 141         * http.c (gethttp): Ditto.
 142
 143         * retr.c (retrieve_url): Initialize variables to appease the
 144         compiler.
 145
 146         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
 147         select_fd.
 148         (ssl_iwrite): Ditto.
 149
 150         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
 151         ETIMEDOUT in case of timeout.
 152         (iread): No need to handle EINTR when calling select_fd.
 153         (iwrite): Ditto.
 154
 155 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 156
 157         * retr.c (retrieve_url): Make sure that POST is not honored for
 158         redirections.
 159
 160         * http.c (gethttp): Send the POST data when requested.
 161         (post_file): New function.
 162         (gethttp): Use it.
 163
 164         * main.c (main): Ditto.
 165
 166         * init.c: Add new options.
 167
 168         * options.h (struct options): New options post_data and
 169         post_file_name.
 170
 171 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 172
 173         * connect.c (connect_with_timeout): Firing SIGALRM can result in
 174         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
 175
 176 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 177
 178         * connect.c (connect_with_timeout): Use it.
 179
 180         * utils.c (run_with_timeout): New function.
 181
 182 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 183
 184         * url.c (getproxy): Accept a struct url argument.  This obviates
 185         the need for USE_PROXY_P.
 186
 187         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
 188
 189         * ftp.c (getftp): Recognize FWTK-style proxy.
 190
 191 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 192
 193         * config.h.in: Only define _VA_LIST when compiled with gcc.
 194
 195 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
 196
 197         * http.c (http_loop): Compensate for MS Windows two-second
 198         granularity of file modification time when comparing timestamps.
 199
 200         * ftp.c (ftp_retrieve_list): Ditto.
 201
 202 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 203
 204         * utils.c (has_html_suffix_p): New function to test filename for
 205         common html extensions.
 206
 207         * utils.h: Declare it.
 208
 209         * http.c (http_loop): Use it instead of previous test.
 210
 211         * retr.c (retrieve_url): Ditto.
 212
 213         * recur.c (download_child_p): Ditto.
 214
 215 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 216
 217         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
 218         declaring va_list.
 219         From Kevin Rodgers <kevinr@ihs.com>.
 220
 221 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 222
 223         * Makefile.in: Specify libtool mode explicitly when linking.
 224
 225 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 226
 227         * connect.c (connect_with_timeout): New function.
 228         (connect_to_one): Use it.
 229
 230         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
 231         HAVE_SETJMP_H.
 232
 233 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 234
 235         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
 236         is present.
 237
 238 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 239
 240         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
 241         TOTAL.
 242         (bar_finish): Likewise.
 243
 244 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 245
 246         * html-url.c (tag_handle_form): New function.  Pick up form
 247         actions and mark them for conversion only.
 248
 249 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 250
 251         * progress.c (struct progress_implementation): Use PARAMS when
 252         declaring the parameters of *create, *update, *finish, and
 253         *set_params.
 254
 255         * netrc.c: Ditto.
 256
 257         * http.c: Reformat some function definitions so that ansi2knr can
 258         read them.
 259
 260         * hash.c (struct hash_table): Use the PARAMS macro around
 261         parameters in the declaration of hash_function and test_function.
 262         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
 263         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
 264         that pre-ANSI compilers can read them.
 265         (find_mapping): Use PARAMS when declaring EQUALS.
 266         (hash_table_put): Ditto.
 267
 268         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
 269
 270         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
 271         which was unsupported by pre-ANSI compilers.
 272
 273         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
 274
 275 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 276
 277         * url.c (url_filename): Use compose_file_name regardless of
 278         whether opt.dirstruct is set.
 279         (mkstruct): Don't handle the query and the reencoding of DIR; that
 280         is done in compose_file_name.
 281
 282 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 283
 284         * wget.h: Ditto for extern char *exec_name.
 285
 286         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
 287         perfectly legal to follow an `extern' with a non-`extern' ones,
 288         provided the types match.
 289
 290         * main.c: Don't define OPTIONS_DEFINED_HERE.
 291
 292 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 293
 294         * progress.c (create_image): Revert to calculating ETA based on
 295         average download speed.
 296         (create_image): Don't print ETA until the download has been active
 297         for at least 3 seconds.
 298         (create_image): When ETA is not available, don't print anything.
 299         The previous version would print --:--.
 300
 301 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 302
 303         * progress.c (bar_update): Keep updating a subinterval until it
 304         reaches or exceeds a watermark.  That way the measurement will be
 305         guaranteed to span a configurable minimum of time.  The current
 306         default is 3s in 30 100ms intervals.
 307
 308 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 309
 310         * progress.c (bar_update): Maintain an array of the time it took
 311         to perform previous 30 network reads.
 312         (create_image): Calculate the download speed and ETA based on the
 313         last 30 reads, not the entire download.
 314         (create_image): Make sure that the ETA is not changed more than
 315         once per second.
 316
 317 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
 318
 319         * mswindows.c (borland_utime): New function conditionally defined
 320         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
 321         `utime()' as Borland's `utime()' function is broken on Windows 9x
 322         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
 323
 324 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 325
 326         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
 327
 328 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
 329
 330         * Makefile.in: Updated several dependencies for object files.
 331
 332 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
 333
 334         * mswindows.c: Include "utils.h".
 335
 336 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
 337
 338         * host.h: Don't include netdb.h on windows.
 339
 340 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 341
 342         * recur.c (retrieve_tree): Handle the case when start_url doesn't
 343         parse.
 344
 345 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
 346
 347         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
 348         calling xmalloc and memcpy.
 349
 350 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 351
 352         * host.h: Include Unix-specific includes #ifndef WINDOWS.
 353         Patch originally provided by Christian Lackas.
 354
 355 2002-02-11  Christian Lackas  <delta@lackas.net>
 356
 357         * recur.c: recurive downloading for https fixed.
 358
 359 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
 360
 361         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
 362
 363         * ftp-basic.c: Also include <netinet/in.h>.
 364
 365 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
 366
 367         * http.c (gethttp): when -c used, mark already fully retrieved
 368         file as successfully retrieved.
 369
 370 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 371
 372         * url.c (url_parse): Don't treat '?' as query string separator
 373         when parsing FTP URLs.
 374
 375 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 376
 377         * html-url.c (tag_handle_meta): Don't crash on <meta
 378         http-equiv=refresh> where content is missing.
 379
 380 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
 381
 382         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
 383         netdb.h on windows.
 384
 385 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 386
 387         * retr.c (retrieve_url): Remove redirection cycle detection.  This
 388         is because some sites legitimately redirect the user back to the
 389         same location, e.g. after an authorization check performed by
 390         another page.  MAX_REDIRECTIONS is still used to prevent infinite
 391         redirection loops.
 392
 393 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 394
 395         * http.c (gethttp): Wrap host name in square brackets if it
 396         contains a colon.
 397
 398 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 399
 400         * url.c (url_parse): Allow all hex digits, not only decimal ones,
 401         to form an IP address.
 402
 403 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 404
 405         * url.c (urlchr_table): Make square braces reserved, so we can
 406         parse http://[::1]/.
 407         (url_parse): Handle host in braces.
 408         (url_string): If url->host contains colons, wrap it in braces.
 409
 410 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 411
 412         * connect.c (resolve_bind_address): New function.
 413         (connect_to_one): Use it.
 414         (bindport): Ditto.
 415
 416         * init.c: Don't resolve bind-address here.
 417
 418         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
 419
 420 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 421
 422         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
 423         offset.
 424         (address_list_new): Use map_ipv4_to_ip.
 425         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
 426         in IPv4 context.
 427
 428 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 429
 430         * source: Integrated IPv6 support.
 431         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
 432
 433 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
 434
 435         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
 436         (cmd_directory): New function. Like cmd_file(), but strips
 437         trailing directory separators.
 438         (commands): Change action for "dirprefix" from `cmd_file' to
 439         `cmd_directory'.
 440
 441         * utils.c (make_directory): Allow intermediate `mkdir' calls to
 442         fail, as not all path components that do not exist should be
 443         directory components, especially under Windows.
 444
 445 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 446
 447         * netrc.c (parse_netrc): Skip leading whitespace before testing
 448         whether the line is empty.  Empty lines still contain the line
 449         terminator.
 450
 451 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 452
 453         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
 454         only if no data is pending in SSL buffers.
 455         From tony@bluetail.com.
 456
 457 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 458
 459         * headers.c (header_get): Strip trailing whitespace from the
 460         header.
 461
 462 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 463
 464         * url.c (parse_uname): URL-decode *USER and *PASSWD.
 465
 466 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
 467
 468         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
 469         starts with "//").
 470
 471 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 472
 473         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
 474         error.
 475
 476 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 477
 478         * version.c: Wget 1.8.1 is released.
 479
 480 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 481
 482         * version.c: Wget 1.8.1-pre3 is released.
 483
 484 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 485
 486         * recur.c (retrieve_tree): Enqueue the canonical representation of
 487         start_url, so that the test against dl_url_file_map works.
 488
 489 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 490
 491         * log.c (logputs): Check for requested verbosity before printing
 492         anything.
 493
 494 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 495
 496         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
 497         inline.
 498
 499 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 500
 501         * recur.c (retrieve_tree): Make a copy of file obtained from
 502         dl_url_file_map because the code calls xfree(file) later.
 503
 504 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 505
 506         * recur.c (register_html): Maintain a hash table of HTML files
 507         along with the list.  Disallow duplicates.
 508         (retrieve_tree): Use downloaded_html_set to check whether the file
 509         found in dl_url_file_map is an HTML file, and descend into it if
 510         so.
 511         (convert_all_links): Don't guard against duplicates in
 512         downloaded_html_list, since they are no longer possible.
 513
 514 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
 515
 516         * recur.c (retrieve_tree): Pass on referring URL when retrieving
 517         recursed URL.
 518
 519 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 520
 521         * version.c: Wget 1.8.1-pre2 is released.
 522
 523 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 524
 525         * retr.c (sleep_between_retrievals): Simplify indentation.
 526
 527 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 528
 529         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
 530         of "randomness" at a time.
 531         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
 532
 533         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
 534         random amount averages in opt.wait.
 535         (sleep_between_retrievals): Don't seed the PRNG; random_number
 536         will do that.
 537
 538         * utils.c (random_number): New function.
 539
 540 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 541
 542         * url.c (path_simplify): Move here from utils.c, and make static.
 543
 544 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 545
 546         * init.c (wgetrc_file_name): Print correct message when loading
 547         getenv("WGETRC") fails.
 548
 549 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 550
 551         * recur.c (register_download): Don't abort when one URL references
 552         two different files.
 553
 554 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 555
 556         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
 557         calling ssl_iwrite.
 558
 559 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 560
 561         * version.c: Wget 1.8.1-pre1 is released.
 562
 563 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 564
 565         * res.c (matches): Fix broken URL in the docstring.
 566
 567 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 568
 569         * html-url.c (tag_url_attributes): Mark <embed href=...> as
 570         external.
 571
 572 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 573
 574         * url.c (get_urls_file): Cosmetic changes.
 575
 576 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 577
 578         * html-url.c (append_one_url): Resurrect warning when unable to
 579         resolve a relative link.
 580
 581 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 582
 583         * html-url.c (collect_tags_mapper): Break into several functions.
 584         (tag_url_attributes): Collect <embed href=...>.
 585
 586 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 587
 588         * host.c: New type ipv4_address.  Use it consistently instead of
 589         `unsigned char[4]' and `unsigned char *'.
 590         (pretty_print_address): Accept a `const void *', to require even
 591         less casting.
 592
 593 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 594
 595         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
 596
 597 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 598
 599         * main.c (main): Initialize progress after fork_to_background, so
 600         that it knows when to use dots.
 601
 602         * mswindows.c (ws_hangup): Call log_request_redirect_output.
 603
 604         * utils.c (fork_to_background): Print the PID of the child
 605         process.
 606
 607         * log.c (log_request_redirect_output): Set a flag that output
 608         redirection has been requested.  Doing anything else in a signal
 609         handler is unsafe.
 610         (check_redirect_output): New function: check whether redirection
 611         has been requested and, if so, call redirect_output().
 612         (logputs): Call check_redirect_output.
 613         (logprintf): Ditto.
 614         (debug_logprintf): Ditto.
 615         (redirect_output): Print clearer messages.
 616
 617         * main.c (redirect_output_signal): Don't call
 618         redirect_output_signal directly.  Instead, call
 619         log_request_redirect_output.
 620
 621         * utils.c (memfatal): Ditto.
 622
 623         * progress.c (display_image): Use it.
 624
 625         * log.c (log_set_save_context): New function: allow the caller to
 626         turn off saving log context lines.
 627
 628 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 629
 630         * host.c (address_list_set_faulty): Uncomment a sanity check.
 631
 632 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 633
 634         * utils.c (long_to_string): Return a pointer after where the
 635         number ends.
 636         (long_to_string): Rename to number_to_string.
 637
 638 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 639
 640         * utils.c (path_simplify): Correctly handle the unlikely case that
 641         b starts out as path + 1.
 642
 643 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 644
 645         * utils.c (path_simplify): Rewrite, with better comments, and
 646         without the use of strcpy to move overlapping blocks.
 647
 648 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 649
 650         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
 651         valid progress type before setting it.
 652
 653 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 654
 655         * main.c (main): Remove stray debugging message.
 656
 657 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 658
 659         * progress.c (create_image): Fix ETA padding when hours are prined.
 660
 661 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 662
 663         * version.c: Wget 1.8 is released.
 664
 665 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 666
 667         * url.c (reencode_string): Declare static.
 668
 669         * res.c (registered_specs): Declare static.
 670
 671         * progress.c (current_impl_locked): Declare static.
 672
 673         * log.c (flush_log_p): Declare static.
 674         (needs_flushing): Ditto.
 675
 676         * http.c (digest_authentication_encode): Declare static.
 677
 678         * html-url.c (init_interesting): Declare static.
 679
 680         * host.c (host_name_addresses_map): Declare static.
 681
 682         * cookies.c (find_matching_chains): Declare static.
 683
 684         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
 685         indicated by lint.
 686
 687         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
 688
 689         * host.c (address_list_set_faulty): Document that INDEX is
 690         currently unused.
 691
 692         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
 693
 694 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 695
 696         * version.c: Wget 1.8-pre2 is released.
 697
 698 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 699
 700         * progress.c (progress_handle_sigwinch): Set up the signal again.
 701
 702         * utils.c: Include <sys/termios.h>, where Solaris defines
 703         TIOCGWINSZ.
 704
 705         * progress.c (bar_create): Don't use the last column on the screen.
 706         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
 707         only until it exceeded them.
 708
 709 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 710
 711         * version.c: Wget 1.8-pre1 is released.
 712
 713 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 714
 715         * progress.c (progress_create): Make sure that, when the output is
 716         redirected, the progress implementation gets changed to the
 717         fallback one.
 718         (bar_set_params): Set current_impl_locked to 1 when "force" is
 719         specified.
 720         (progress_create): Don't change the progress implementation if
 721         current_impl_locked is non-zero.
 722
 723         * main.c (redirect_output_signal): Call
 724         progress_schedule_redirect.
 725
 726         * progress.c (progress_schedule_redirect): New function.
 727
 728 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 729
 730         * log.c (logvprintf): Restructure to allow being called multiple
 731         times.
 732         (logprintf): Call logvprintf in a loop.
 733         (debug_logprintf): Ditto.
 734
 735 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 736
 737         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
 738         setting egd_file it to empty string.
 739
 740         * main.c (main): Change the option name from --sslegdsock to
 741         --egd-file.
 742
 743 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 744
 745         * gen_sslfunc.c (ssl_init_prng): Make the printed message
 746         translatable.
 747
 748 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 749
 750         * url.c (scheme_disable): New function.
 751
 752         * main.c (main): Call ssl_init_prng from here rather than from
 753         init_ssl, so that it has a chance to disable support for https
 754         before a URL has been resolved.
 755
 756         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
 757         failed.
 758         (ssl_init_prng): Disable support for https if seeding the PRNG
 759         fails.
 760
 761 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 762
 763         * utils.c (read_whole_line): Handle lines beginning with \0.
 764
 765 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 766
 767         * recur.c (convert_all_links): Guard against duplicates in
 768         downloaded_html_files.
 769         (register_download): Don't invalidate similar-looking URLs.
 770         (match_except_index): New function.
 771
 772 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 773
 774         * utils.c (path_simplify): Document with test cases.
 775
 776 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 777
 778         * gen_sslfunc.c: Ditto.
 779
 780         * rbuf.c: Include <string.h>.
 781
 782 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 783
 784         * recur.c (retrieve_tree): Check whether the URL was already
 785         downloaded before downloading it again.
 786         (descend_child_p): Renamed to download_child_p.
 787         (register_download): When one URL is downloaded to a file already
 788         "owned" by another URL, delete all references that map any URL to
 789         that file.
 790         (register_delete_file): New function.
 791         (retrieve_tree): Use it after deleting a file.
 792
 793         * url.c (url_parse): Re-canonicalize the URL also if the path is
 794         empty, so that e.g. "http://www.server.com" ->
 795         "http://www.server.com/".
 796         (lowercase_str): Use ISUPPER instead of !ISLOWER.
 797
 798         * retr.c (retrieve_url): Use the canonical URL form when calling
 799         register_download().
 800
 801 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
 802
 803         * snprintf.c (dopr): Use `unsigned int' as the second argument to
 804         va_arg when casting to `unsigned short' is intended.
 805
 806 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
 807
 808         * gen_sslfunc.c: on windows provide ssl crypto random
 809           initialization through RAND_screen(); could possibly
 810           be not enough for strong ssl communication (see the
 811           relevant manual page from the openssl package).
 812
 813 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 814
 815         * url.c (local_quote_string): Reenable quoting of question marks,
 816         but only when `--html-extension' is used.
 817
 818 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 819
 820         * version.c: Wget 1.8-beta3 is released.
 821
 822 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 823
 824         * snprintf.c (dopr): Cast the result of va_arg to short int and
 825         short unsigned int where these types are expected to be used.
 826
 827 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 828
 829         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
 830         with `int' when using it as the second argument to `va_arg'.
 831
 832 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 833
 834         * host.c (address_list_new_one): New function.
 835         (lookup_host): Use it.
 836
 837 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
 838
 839         * host.c (lookup_host): Don't initialize TMPSTORE directly because
 840         it's not legal C.
 841
 842 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 843
 844         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
 845         the socket data.
 846
 847         * ftp.c: Ditto.
 848
 849         * http.c: No need to declare h_errno.
 850
 851         * host.c: Declare h_errno.
 852
 853 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 854
 855         * utils.c (file_merge): If BASE doesn't contain a slash, just
 856         return a copy of FILE.
 857
 858 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 859
 860         * version.c: Wget 1.8-beta2 is released.
 861
 862 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 863
 864         * ftp.c (getftp): When PWD fails, assume "/".
 865
 866         * ftp-basic.c (ftp_syst): Fix indentation.
 867
 868 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 869
 870         * url.c (get_urls_file): If opt.base_href is specified, merge each
 871         URL with the base.
 872
 873 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 874
 875         * main.c (print_help): Don't document the removed `-nh'.
 876
 877 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 878
 879         * url.c (url_full_path): Document better.
 880
 881         * http.c (gethttp): Use the full path when creating digest
 882         authorization.
 883
 884 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 885
 886         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
 887         '/'.
 888
 889 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 890
 891         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
 892         PREFIX does.
 893
 894 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 895
 896         * cookies.c (check_domain_match): Reimplement to match Netscape's
 897         "preliminary specification" for cookies.
 898
 899 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 900
 901         * url.c (replace_attr_refresh_hack): New function.
 902         (convert_links): Call replace_attr_refresh_hack for Refresh
 903         links.  It will add the "TMOUT; URL=" junk before the link.
 904
 905         * html-url.c (collect_tags_mapper): Set ID to the ID of the
 906         "content" attribute, not "http-equiv".
 907         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
 908         instead, store the information that this entry belongs to a
 909         "refresh" link.
 910
 911 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 912
 913         * version.c: Wget 1.8-beta1 is released.
 914
 915 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 916
 917         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
 918         depth by more than one.
 919
 920 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 921
 922         * retr.c (retrieve_url): Don't allow more than 20 redirections.
 923
 924 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 925
 926         * recur.c (retrieve_tree): Skip the non-inline entries when
 927         enqueuing the children of a leaf HTML node in -p mode.
 928         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
 929         "inline".
 930
 931         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
 932         (collect_tags_mapper): When an entry is "inline", mark it as such.
 933
 934         * recur.c (descend_url_p): Fix test when checking for
 935         acceptance/rejection rules.
 936
 937 2001-10-31 Daniel BODEA <dali@dali-designs.com>
 938
 939         * netrc.c (search_netrc): When slack_default is 0, still look for
 940         an account with matching password, just not the "default account".
 941         HTTP Authorization using .netrc should now work as expected.
 942
 943 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
 944
 945         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
 946         test_socket_open fails.
 947
 948 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 949
 950         * progress.c (display_image): Just print one CR to reset the
 951         cursor position.
 952
 953 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
 954
 955         * init.c: New command `ssl_egd_sock'.
 956
 957         * main.c (main): New option `--sslegdsock'.
 958
 959         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
 960
 961 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 962
 963         * cmpt.c (memmove): Include a simple memmove implementation.
 964
 965 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 966
 967         * headers: Guard against header files being included twice.
 968
 969 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 970
 971         * gen-md5.c: Use unsigned char * as the buffer argument to
 972         gen_md5_update.
 973
 974 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 975
 976         * connect.h: Declare select_fd.
 977
 978 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 979
 980         * recur.c (descend_url_p): When resolving no_parent, compare with
 981         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
 982         wouldn't be followed, although the download started from /a/.
 983
 984 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
 985
 986         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
 987         MS VC; somebody with Borland compiler please check and provide
 988         patch if possible;
 989
 990         * cmpt.c: provided a usleep emulation.
 991
 992 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 993
 994         * host.c (address_list_new): Initialize al->faulty.
 995
 996 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 997
 998         * http.c (http_process_range): Accept the broken output of
 999         "JavaWebServer/1.1.1".
1000
1001 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1002
1003         * progress.c (dot_set_params): If PARAMS is unspecified, use
1004         dot_style, if available.
1005
1006         * init.c: Ditto.
1007
1008         * main.c (main): Resurect --dot-style.
1009
1010         * progress.c (dot_finish): Print the quantity if we're left at the
1011         beginning of a row.
1012
1013 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1014
1015         * cmpt.c (random): Removed.
1016
1017         * retr.c (sleep_between_retrievals): Use the more portable rand()
1018         instead of random().
1019
1020 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1021
1022         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1023         prevent seg fault.
1024
1025 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1026
1027         * connect.c (connect_to_many): Use address_list_set_faulty to
1028         prevent the faulty address from being reused.
1029
1030         * host.c (address_list_set_faulty): New function.
1031         (address_list_get_bounds): New function, instead of
1032         address_list_count.
1033
1034 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1035
1036         * url.c (convert_links): Don't translate %d-%d.
1037
1038         * main.c (print_help): Remove stray HAVE_RANDOM code.
1039
1040 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1041
1042         * ftp.c (getftp): Improve output after sending PASV.  Don't
1043         attempt to "look up" the IP address we already know; call
1044         connect_to_one directly.
1045
1046 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1047
1048         * progress.c: Change the default progress implementation to "bar".
1049
1050 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1051
1052         * progress.c (bar_create): Print two newlines.
1053
1054 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1055
1056         * cmpt.c (random): New function, a simple-minded replacement for
1057         random() on systems that don't have it.
1058
1059 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * config.h.in: Put a HAVE_USLEEP stub.
1062
1063         * cmpt.c (usleep): Replacement implementation of usleep using
1064         select.
1065
1066         * init.c: New option init_rate.
1067
1068         * main.c (main): New option --limit-rate.
1069
1070         * retr.c (limit_bandwidth): New function.
1071         (get_contents): Call it to limit the bandwidth used when
1072         downloading.
1073
1074         * progress.c (dot_update): Would print the wrong download speed on
1075         rows other than the first one when the download was continued.
1076         (dot_finish): Ditto.
1077
1078 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1079
1080         * http.c (gethttp): fix undeclared variable 'err' when compiled
1081         with HAVE_SSL.
1082
1083 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1084
1085         * progress.c: Don't allocate new timers; use the timing data
1086         propagated from the caller.
1087
1088         * retr.c (get_contents): Allocate and use a timer.
1089
1090 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1091
1092         * http.c (last_host_ip): Made into an address_list.
1093         (invalidate_persistent): Release pc_last_host_ip.
1094         (register_persistent): Use lookup_host.
1095         (persistent_available_p): Check for equality of hosts using
1096         address_list_match_all.  Call address_list_release.
1097         (http_cleanup): New function.
1098
1099         * ftp.c (getftp): Use lookup_host and connect_to_many.
1100
1101         * http.c (gethttp): Use lookup_host and connect_to_many.
1102
1103         * connect.c (make_connection): Removed.
1104         (connect_to_one): New function.
1105         (connect_to_many): Ditto.
1106         (set_connection_host_name): Ditto.
1107
1108         * host.c (lookup_host): New function; new return type.
1109         (address_list_new): New function.
1110         (address_list_count): Ditto.
1111         (address_list_copy_one): Ditto.
1112         (address_list_delete): Ditto.
1113         (address_list_release): Ditto.
1114         (pretty_print_address): Ditto.
1115
1116 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1117
1118         * recur.c (retrieve_tree): In case of followed redirection,
1119         blacklist the pre-redirection URL.
1120
1121 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1122
1123         * recur.c (descend_redirect_p): New function.
1124         (retrieve_tree): Make sure redirections are not blindly followed.
1125
1126 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1127
1128         * config.h.in: added HAVE_RANDOM.
1129
1130         * options.h: added random_wait to struct options.
1131
1132         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1133         for --random-wait.
1134
1135         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1136         implementation of random wait times.
1137
1138         * init.c (commands): added "randomwait" keyword.
1139
1140 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1141
1142         * recur.c (descend_url_p): Be more conservative with blacklisting
1143         URLs.
1144         (convert_all_links): Print how many files have been converted, and
1145         how long it took.
1146
1147         * progress.c (create_image): Place the number of downloaded bytes
1148         right after the progress bar.
1149
1150         * utils.c (suffix): Return a pointer into the string.
1151
1152 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1153
1154         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1155
1156         * recur.c (retrieve_tree): Ignore download-ignorable children.
1157         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1158
1159         * html-url.c (handle_link): Return the newly created urlpos.
1160         (collect_tags_mapper): When dealing with BASE, store the base
1161         reference and mark it as download-ignorable.
1162
1163 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1164
1165         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1166         linking to local files.  Given up on the attempt, as it breaks
1167         local browsing.
1168
1169 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1170
1171         * main.c (private_initialize): Removed.
1172         (main): Don't call private_initialize.
1173
1174         * http.c: Call lookup_host.
1175
1176         * host.c (host_init): Removed.
1177         (add_host_to_cache): Initialize host_name_address_map here, on
1178         demand.
1179         (ngethostbyname): Commented out.
1180
1181         * connect.c (make_connection): Remove dead code; use lookup_host.
1182
1183         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1184         the args.
1185         Removed host_address_name_map and host_slave_master_map.
1186
1187 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1188
1189         * progress.c (dot_create): Align the "[ skipping ... ]" string
1190         with the dots.
1191
1192         * retr.c (rate): Split into two functions: calc_rate and
1193         retr_rate.
1194
1195         * progress.c (create_image): Draw a dummy progress bar even when
1196         total size is unknown.
1197         (display_image): Place the text cursor at the end of the "image".
1198
1199 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1200
1201         * url.c (reencode_string): Use unsigned char, not char --
1202         otherwise the hex digits come out wrong for 8-bit chars such as
1203         nbsp.
1204         (lowercase_str): New function.
1205         (url_parse): Canonicalize u->url if needed.
1206         (get_urls_file): Parse each URL, and return only the valid ones.
1207         (free_urlpos): Call url_free.
1208         (mkstruct): Add :port if the port is non-standard.
1209         (mkstruct): Append the query string to the file name, if any.
1210         (urlpath_length): Use strpbrk_or_eos.
1211         (uri_merge_1): Handle the cases where LINK is an empty string,
1212         where LINK consists only of query, and where LINK consists only of
1213         fragment.
1214         (convert_links): Count and report both kinds of conversion.
1215         (downloaded_file): Use a hash table, not a list.
1216         (downloaded_files_free): Free the hash table.
1217
1218         * retr.c (retrieve_from_file): Ditto.
1219
1220         * main.c (main): Call either retrieve_url or retrieve_tree
1221         for each URL, not both.
1222
1223         * retr.c (register_all_redirections): New function.
1224         (register_redirections_mapper): Ditto.
1225         (retrieve_url): Register the redirections.
1226         (retrieve_url): Make the string "Error parsing proxy ..."
1227         translatable.
1228
1229         * res.c (add_path): Strip leading slash from robots.txt paths so
1230         that the path representations are "compatible".
1231         (free_specs): Free each individual path, too.
1232         (res_cleanup): New function.
1233         (cleanup_hash_table_mapper): Ditto.
1234
1235         * recur.c (url_queue_new): New function.
1236         (url_queue_delete): Ditto.
1237         (url_enqueue): Ditto.
1238         (url_dequeue): Ditto.
1239         (retrieve_tree): New function, replacement for recursive_retrieve.
1240         (descend_url_p): New function.
1241         (register_redirection): New function.
1242
1243         * progress.c (create_image): Cosmetic changes.
1244
1245         * init.c (cleanup): Do all those complex cleanups only if
1246         DEBUG_MALLOC is defined.
1247
1248         * main.c: Removed --simple-check and the corresponding
1249         simple_host_check in init.c.
1250
1251         * html-url.c (handle_link): Parse the URL here, and propagate the
1252         parsed URL to the caller, who would otherwise have to parse it
1253         again.
1254
1255         * host.c (xstrdup_lower): Moved to utils.c.
1256         (realhost): Removed.
1257         (same_host): Ditto.
1258
1259 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1260
1261         * utils.c (path_simplify): Preserver the (non-)existence of
1262         leading slash.  Return non-zero if changes were made.
1263
1264 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1265
1266         * progress.c (bar_update): Don't modify bp->total_length if it is
1267         zero.
1268
1269 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1270
1271         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1272         print the correct error message rather than "UNKNOWN".
1273
1274 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1275
1276         * progress.c (bar_finish): If the timer didn't record any time
1277         since the download beginning, fake 1ms.
1278
1279 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1280
1281         * recur.c (recursive_retrieve): Fix typo.
1282
1283 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1284
1285         * progress.c (create_image): Don't translate "%ld ".
1286
1287 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1288
1289         * progress.c (bar_set_params): Allow the user to force the use of
1290         the bar.
1291
1292 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1293
1294         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1295
1296 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1297
1298         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1299         and consistency with bar_*.
1300         (print_download_speed): Get rid of the unneeded '@' character.
1301         (create_image): Fix download rate geometry.
1302
1303         * progress.c (print_elapsed): Remove spurious space.
1304         (print_elapsed): Renamed to print_download_speed, since that's
1305         what it does.
1306
1307 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1308
1309         * progress.c (bar_update): If the downloaded amount becomes larger
1310         than the expected amount, adjust the expected amount accordingly.
1311
1312 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1313
1314         * utils.c (determine_screen_width): New function.
1315
1316         * main.c (main): New option `--progress=TYPE'.
1317         (main): Implement compatibility with the old option `--dot-style'.
1318
1319         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1320         dp_set_params.
1321         (cmd_spec_progress): New function.
1322
1323         * retr.c (get_contents): Use the progress_* functions instead of
1324         the old show_progress().
1325         (show_progress): Removed.
1326         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1327         etc.
1328
1329         * progress.c (set_progress_implementation): New function.
1330         (valid_progress_implementation_p): Ditto.
1331         (progress_create): Ditto.
1332         (progress_update): Ditto.
1333         (progress_finish): Ditto.
1334         (dp_create): Ditto.
1335         (dp_update): Ditto.
1336         (dp_finish): Ditto.
1337         (dp_set_params): Ditto.
1338         (print_elapsed): Ditto.
1339
1340 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1341
1342         * retr.c (show_progress): Use it.
1343
1344         * log.c (log_set_flush): New function.
1345
1346 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1347
1348         * utils.c (path_simplify): Don't remove trailing slashes.
1349
1350         * ftp.c (ftp_get_listing): Use it.
1351
1352         * utils.c (file_merge): New function.
1353
1354         * url.c (opt_url): Removed.
1355
1356         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1357
1358         * main.c (main): Use xfree(), not free().
1359
1360         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1361
1362         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1363         internally.
1364
1365         * config.h.in: Include a stub for HAVE_STRPBRK.
1366
1367         * cmpt.c (strpbrk): Include a replacement for systems without
1368         strpbrk().
1369
1370         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1371
1372         * url.c (url_set_dir): New function.
1373         (url_set_file): Ditto.
1374
1375         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1376         parser makes the URL "params" available, so we can do that in this
1377         function.
1378
1379         * retr.c: Ditto.
1380
1381         * ftp.c: Ditto; pass the local file information in `ccon'.
1382
1383         * http.c: Get rid of the ugly kludge that had URL being replaced
1384         with the proxy URL when proxy retrieval was requested.  Use a
1385         separate parameter to http_loop and gethttp for the proxy URL.
1386
1387         * http.c: Changed to reflect the fact that local file, proxy, and
1388         referer information are no longer stored in struct url.  The local
1389         file information is passed in `struct hstat' now.
1390
1391         * url.c: Reworked URL parsing to be more regular.  Reencode the
1392         URL using reencode_string.
1393         Removed non-URL-related information from struct url.  This
1394         includes fields `proxy', `local', and `referer'.
1395
1396 2001-11-22  Jochen Hein  <jochen@jochen.org>
1397
1398         * main.c (main): Split the copyright notice for easier
1399         translation.
1400
1401 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
1402
1403         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
1404           command to server to request file size.
1405         * ftp.h (ftp_size): Export it.
1406         * ftp.c (getftp): Use new ftp_size function if restoring
1407           transfer of a file with unknown size.
1408
1409 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1410
1411         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
1412
1413 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1414
1415         * url.c (getproxy): Handle URL shorthands.
1416
1417 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1418
1419         * main.c: Remove --wait / --waitretry backwards compatibility
1420         code.
1421
1422 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1423
1424         * main.c (main): Use it.
1425
1426         * url.c (rewrite_url_maybe): New function.
1427
1428 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1429
1430         * url.c: Clean up handling of URL schemes.
1431
1432 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1433
1434         * url.c: Get rid of `protostrings'.
1435         (skip_proto): Don't use protostrings.
1436         (has_proto): Ditto.
1437
1438 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1439
1440         * Makefile.in: Conditionally compile getopt.o.
1441
1442 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1443
1444         * md5.h: Renamed to gnu-md5.h.
1445
1446         * md5.c: Renamed to gnu-md5.c.
1447
1448         * http.c: Ditto.
1449
1450         * ftp-opie.c: Use the new macros.
1451
1452         * sysdep.h: Define md5-related macros.
1453
1454         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
1455         depending on which md5 implementation is used.
1456
1457 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1458
1459         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
1460         the compiler.
1461
1462 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1463
1464         * http.c (gethttp): Print the whole response line when printing
1465         headers is requested.
1466
1467 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1468
1469         * res.c: New file.  Implement all RES-related code here.
1470
1471 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1472
1473         * version.c: Wget 1.7.1 is released.
1474
1475 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1476
1477         * headers.c (header_extract_number): Ignore trailing whitespace.
1478
1479 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
1480
1481         * html-url.c (collect_tags_mapper): Fix bug converting links
1482         with -k option for tags with multiple link attributes by
1483         handling links in the order they appear.
1484
1485 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
1486
1487         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
1488           the call to the 'rate' function by moving it past the error
1489           checking for the 'getftp' function return value.
1490
1491 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1492
1493         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
1494         '\"'.  Different compilers' assert macros are broken in different
1495         ways.
1496
1497 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
1498
1499         * http.c (gethttp): print debug output for errors occuring during
1500         the ssl handshake.
1501
1502 2001-11-16  Chris Seawood  <cls@seawood.org>
1503
1504         * init.c: Ditto.
1505
1506         * host.c: Ditto.
1507
1508         * connect.c: Ditto.
1509
1510         * sysdep.h: Support compilation under BEOS.
1511
1512 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1513
1514         * url.c (url_equal): Fix a memory leak when parseurl returns an
1515         error on the second URL. Also, since url_equal is not used at the
1516         moment, do not compile it.
1517
1518         * url.h: Ditto for the prototype of url_equal.
1519
1520 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1521
1522         * html-parse.c (map_html_tags): Support XML-style empty tags.
1523
1524 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1525
1526         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
1527         loop condition because we're no longer setting SIZEVAR here.
1528
1529 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1530
1531         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
1532         call because it needs the old value.
1533
1534 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1535
1536         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
1537         an attribute name.
1538
1539 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1540
1541         * url.c (url_filename): Make sure that slashes that sneak in to
1542         u->file via query string get protected.
1543         (file_name_protect_query_string): New function.
1544
1545 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1546
1547         * recur.c (recursive_retrieve): Also check undesirable_urls with
1548         canonicalized URL.
1549
1550 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1551
1552         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1553         one.
1554
1555 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1556
1557         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1558         define it.
1559
1560 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1561
1562         * ftp.h: Provide correct prototype for ftp_parse_ls().
1563
1564 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1565
1566         * version.c: Wget 1.7 is released.
1567
1568 2001-06-03  Karl Eichwalder  <ke@suse.de>
1569
1570         * ftp-ls.c (ftp_parse_ls): Fix typo.
1571
1572 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1573
1574         * all: Update copyright information.
1575
1576 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1577
1578         * http.c (gethttp): Indicate that the continued download failed
1579         for *this* file.
1580
1581 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1582
1583         * version.c: Wget 1.7-pre1 is released.
1584
1585 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1586
1587         * version.c: Updated version to 1.7-pre1.
1588
1589 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1590
1591         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1592
1593 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1594
1595         * http.c (gethttp): Use real URL data for cookies, not the proxy
1596         stuff.
1597
1598 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1599
1600         * main.c (print_help): Document `--no-http-keep-alive'.
1601
1602         * utils.c (numdigit): Handle negative numbers *correctly*.
1603
1604         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
1605         than the confusing "unsigned".
1606
1607         * utils.c (string_set_contains): Renamed from string_set_exists.
1608
1609         * hash.c (hash_table_contains): Renamed from hash_table_exists.
1610
1611         * cookies.c: Move case-insensitive hash tables to hash.c.
1612
1613 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1614
1615         * http.c (gethttp): Before concluding that the file is already
1616         fully retrieved, make sure that the file existed and `Range' was
1617         actually requested.
1618
1619 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1620
1621         * cookies.c (eliminate_dups): New function.
1622         (build_cookies_request): Use it.
1623         (build_cookies_request): Set chain_store_size after reallocating
1624         all_chains.
1625         (check_domain_match): Annotated for easier future debugging.
1626         (store_cookie): In the debug message, print whether the cookie is
1627         permanent.
1628
1629 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1630
1631         * http.c (http_loop): Reset no_truncate before deciding whether to
1632         set it.
1633         (gethttp): Further clarify "-c conflicts with existing file" error
1634         message, based on input from Herold Heiko.
1635
1636 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
1637
1638         * http.c (http_loop): If restval is set, set no_truncate to 1
1639         unconditionally.
1640
1641 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1642
1643         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1644         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1645         (ftp_parse_vms_ls): Ditto.
1646
1647 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1648
1649         * init.c (cmd_address): Zero SIN before using it; apparently
1650         needed on *BSD.
1651
1652 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1653
1654         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1655         empty.
1656
1657 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1658
1659         * main.c (main): Make `--cookies' respect its argument.
1660
1661 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1662
1663         * main.c (main): Removed undocumented option `--email-address'.
1664
1665         * netrc.c: Use the latest read_whole_line.
1666
1667         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1668
1669         * mswindows.c (pwd_cuserid): Ditto.
1670
1671         * utils.c (pwd_cuserid): Removed.
1672
1673         * host.c (ftp_getaddress): Removed.
1674
1675 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1676
1677         (http_loop): Allocate space for filename_plus_orig_suffix with
1678         alloca; this is more efficient and removes the need to free it
1679         before each and every return.
1680
1681 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1682
1683         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1684         unneeded because the file is already there and fully downloaded,
1685         and -c is specified.
1686         (http_loop): Handle RETRUNNEEDED.
1687
1688         * wget.h (uerr_t): New value RETRUNNEEDED.
1689
1690         * http.c (http_loop): Set no_truncate for files that both exist
1691         and are non-empty.
1692         (gethttp): Consider the download finished when restval >= contlen,
1693         not only when restval==contlen.
1694         (gethttp): Handle redirection before giving up due to -c.
1695         (gethttp): Clarify error message which explains that -c will not
1696         truncate the file.
1697         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1698         the stuff that needs freeing and release the socket.
1699
1700 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1701
1702         * main.c (print_help): Wget booleans accept "off", not "no".
1703
1704 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1705
1706         * http.c (http_loop): If allow_cache is zero, always disable
1707         caching, not only when retrieving through proxy.
1708
1709         * init.c: Ditto.
1710
1711         * options.h (struct options): Rename proxy_cache to allow_cache.
1712
1713 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1714
1715         * http.c (mktime_from_utc): Improve documentation.
1716         (http_atotm): Put format strings into a separate array.
1717
1718 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1719
1720         * safe-ctype.h: Instead of throwing #error when isalpha is
1721         defined, redefine it to something that will throw a compile-time
1722         error if actually *used*.  Do the same for the rest of the
1723         standard C macros.
1724
1725 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1726
1727         * url.c (getproxy): Ignore empty proxy vars.
1728
1729 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1730
1731         * http.c (http_loop): Would load cookies every time.
1732
1733         * cookies.c (load_cookies): Handle cookies whose values contain
1734         embedded spaces.
1735
1736 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1737
1738         * utils.c: Define each DIGITS_* in one line.
1739
1740 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
1741
1742         * http.c (http_atotm): Initialize t.tm_isdst to 0.
1743         (mktime_from_utc): Prevent mktime() from having discontinuities at
1744         DST transition points.
1745
1746 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1747
1748         * html-url.c (get_urls_html): Fix documentation.
1749
1750 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1751
1752         * url.c (UNSAFE_CHAR): Reimplement using a static table.
1753         (url_init): Removed.
1754         (init_unsafe_char_table): Removed.
1755
1756 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1757
1758         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
1759
1760 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1761
1762         * utils.c: Document timer functions.
1763
1764         * retr.c (rate): Use it.
1765         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
1766
1767         * utils.c (wtimer_granularity): New function.
1768
1769 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1770
1771         * retr.c (show_progress): Ditto.
1772
1773         * ftp.c (getftp): Ditto.
1774
1775         * http.c (gethttp): Use new timer functions.
1776
1777         * utils.c (wtimer_allocate): New function.
1778         (wtimer_new): Ditto.
1779         (wtimer_delete): Ditto.
1780         (wtimer_reset): Ditto.
1781         (wtimer_elapsed): Ditto.
1782
1783 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1784
1785         * utils.c (long_to_string): New, faster version.  Favors smaller
1786         numbers; much of the calculation is now done at compile-time.
1787
1788 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1789
1790         * utils.c (numdigit): Handle negative numbers.
1791
1792 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1793
1794         * retr.c (show_progress): Print the download rate even when the
1795         percentages are not available.
1796
1797 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1798
1799         * ftp.c (getftp): Adjust expected_bytes if the length is
1800         authoritative.
1801
1802 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1803
1804         * url.c: Don't declare `construct'.
1805
1806         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
1807         mappings to new locations.
1808         (hash_table_new): Make resize_threshold a field in the hash table,
1809         so we don't have to recalculate it in each hash_table_put.
1810         (grow_hash_table): Update resize_threshold.
1811         (MAX): Remove unused macro.
1812         (prime_size): Made static.
1813
1814 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1815
1816         * retr.c (retrieve_url): Call uri_merge, not url_concat.
1817
1818         * html-url.c (collect_tags_mapper): Call uri_merge, not
1819         url_concat.
1820
1821         * url.c (mkstruct): Use encode_string instead of xstrdup followed
1822         by URL_CLEANSE.
1823         (path_simplify_with_kludge): Deleted.
1824         (contains_unsafe): Deleted.
1825         (construct): Renamed to uri_merge_1.
1826         (url_concat): Renamed to uri_merge.
1827
1828 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1829
1830         * url.c (str_url): Use encode_string instead of the unnecessary
1831         CLEANDUP.
1832         (encode_string_maybe): New function, returns input string if no
1833         encoding is needed.
1834         (encode_string): Call encode_string_maybe to do the dirty work,
1835         xstrdup if no work needed.
1836
1837 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1838
1839         * wget.h (XDIGIT_TO_xchar): Define here.
1840
1841         * url.c (decode_string): Use new name.
1842         (encode_string): Ditto.
1843
1844         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
1845         (dump_hash): Use new name.
1846
1847         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
1848         XDIGIT_TO_XCHAR respectively.
1849
1850 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1851
1852         * init.c: Include cookies.h.
1853
1854         * cookies.h: Declare cookies_cleanup.
1855
1856         * cookies.c (check_domain_match): Remove unused variable.
1857         (save_cookies): Remove extraneous argument from debug statement.
1858
1859         * host.c (same_host): Don't call skip_url.
1860
1861         * url.c (skip_url): Removed.  Removed its calls from various
1862         functions in url.c.
1863
1864 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1865
1866         * cookies.c (unsigned_string_hash): Use the new code in
1867         string_hash as reference.
1868
1869         * hash.c (hash_table_map): Allow deletion and change of the
1870         element processed by MAPFUN.
1871         (string_hash): Use the function from glib.
1872
1873 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1874
1875         * config.h.in: Include #undef stub.
1876
1877         * hash.c (hash_table_remove): Rewrite to actually clear deleted
1878         entries instead of just marking them as deleted.
1879
1880 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1881
1882         * hash.h: Declare hash_table_get_pair and hash_table_count.
1883
1884 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1885
1886         * cookies.c: Declare http_atotm.
1887
1888 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1889
1890         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
1891         permissions.  A compiler that doesn't accept octal constants is
1892         seriously broken and shouldn't be used -- octal constants were
1893         present in K&R C!
1894
1895 2001-01-20  Karl Eichwalder  <ke@suse.de>
1896
1897         * Makefile.in: Provide and use DESTDIR according to the Coding
1898         Standards.
1899
1900 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1901
1902         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
1903         specification.
1904
1905 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1906
1907         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
1908         because that strips the *leading* slash, thus forcing relative
1909         FTP retrieval.
1910
1911 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1912
1913         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
1914         notation for VMS servers.
1915         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
1916         odir is an empty string.
1917
1918 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1919
1920         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
1921         effective. Suggested by Edward J. Sabol.
1922
1923 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1924
1925         * cookies.c (build_cookies_request): Use and sort cookies from all
1926         matching domains.
1927         (build_cookies_request): Check for duplicates before generating
1928         the `Cookies' header.
1929
1930         * main.c (main): Don't load cookies here.
1931         (main): Make loadcookies and savecookies call the correct command.
1932
1933         * http.c (http_loop): Load cookies on-demand.
1934
1935 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1936
1937         * http.c (gethttp): Fix indentation of SSL ifdef.
1938
1939 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1940
1941         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
1942         that hack is no longer necessary.
1943         (getftp): Prepend initial directory to *non*-absolute u->dir's.
1944
1945 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1946
1947         * init.c (cmd_file): New function.
1948         (enable_tilde_expansion): New variable.
1949         (run_wgetrc): Use it.
1950         (cmd_file): Use it.
1951
1952 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1953
1954         * init.c: Include cookie-related options.
1955
1956         * main.c (main): Include cookie-specific options.
1957         (main): Load cookies before download is finished.
1958         (main): Save cookies when done.
1959
1960         * http.c (gethttp): Process the `Set-Cookie' header.
1961         (gethttp): Include cookies in the response.
1962
1963         * cookies.c: New file.
1964
1965 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1966
1967         * utils.c (datetime_str): New function.
1968
1969 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1970
1971         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
1972         12:01PM == 00:01, which was obviously wrong. Taken care of this
1973         anomaly.
1974
1975         * ChangeLog: Removed an excess conflict marker. Reformatted the
1976         entry by Philipp Thomas from 2001-03-09.
1977
1978         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
1979         between 0 and 23. Elminate unused variable `sec'.
1980
1981 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1982
1983         * hash.c (hash_table_count): New function.
1984
1985 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1986
1987         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
1988         Digital Unix cc.
1989
1990 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1991
1992         * config.h.in: Oops, do the namespace tweaks only on systems we
1993         know about.
1994
1995 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1996
1997         * hash.c: Include <string.h>.
1998
1999 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2000
2001         * config.h.in: Define "compilation environment" options that work
2002         under Linux and Solaris.  To be reviewed on other OS'es.
2003
2004 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2005
2006         * http.c (gethttp): Prepend literal newline with `\n\'.
2007
2008 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2009
2010         * sysdep.h: Don't define VERY_LONG_FORMAT.
2011
2012         * utils.c (very_long_to_string): New function.
2013         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2014
2015 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2016
2017         * url.c (parse_uname): Would run past the end of the string if the
2018         username was present, but the URL did not contain a slash, e.g.
2019         http://foo:bar@myhost.
2020
2021 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2022
2023         * http.c (http_atotm): Use %A instead of %a to match full
2024         weekday.  (On most systems there is no difference.)
2025
2026 2001-04-03  Paul Bludov  <paul@ozero.net>
2027
2028         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2029         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2030         leak.
2031         (ws_mypath): Use GetModuleFileName instead of argv[0].
2032         (ws_startup): Use data.wVersion for comparison.
2033
2034 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2035
2036         * http.c (http_loop): Ditto.
2037
2038         * ftp.c (ftp_loop_internal): Made the check whether to continue
2039         retrieval `-O'-friendly.
2040
2041 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2042
2043         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2044         they will be handled as whitespace.
2045         (parse_netrc): Correctly handle lines that end with whitespace.
2046
2047 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2048
2049         * retr.c (retrieve_url): New variable global_download_count used
2050         to identify first retrieval.
2051
2052         * ftp.c (getftp): Ditto.
2053
2054         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2055
2056 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2057
2058         * init.c (cmd_address): Heap-allocate the address that gets stored
2059         to CLOSURE.  Old code would simply assign an address on the stack.
2060
2061 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2062
2063         * ftp.c (ftp_get_listing): Propagate error status.
2064         (ftp_retrieve_glob): Use it.
2065         (ftp_loop): Ditto.
2066
2067 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2068
2069         * main.c (main): Add -C to the string that is the third arg to
2070         getopt_long().
2071
2072 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2073
2074         * ftp.c (getftp): Don't start the download from scratch if `-c'
2075         was specified, but the file is already fully downloaded.
2076
2077         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2078         specified and the server doesn't support continued download.
2079         (gethttp): Don't start the download from scratch if `-c' was
2080         specified, but the file is already fully downloaded.
2081
2082 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2083
2084         (recursive_retrieve): Don't clear the hash tables at this point at
2085         all; it interferes with the normal operation of register_download.
2086
2087 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2088
2089         * recur.c (recursive_retrieve): Clear the hash tables only when
2090         they are defined.
2091
2092 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2093
2094         * http.c (gethttp): Make sure the socket is closed with
2095         CLOSE_INVALIDATE before we have drained the body.
2096
2097 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2098
2099         * retr.c (retrieve_url): Call register_download() for downloaded
2100         files and register_html() for downloaded HTML files.
2101
2102         * recur.c (register_download): New function; register here that a
2103         file has been downloaded, rather than in recursive_retrieve().
2104         (register_html): New function; enqueue the location of HTML files
2105         here rather than in recursive_retrieve().
2106
2107 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2108
2109         * main.c (print_help): Use multiple fputs instead of a single ugly
2110         printf().
2111         (main): Consistently assign numbers >128 to options without a
2112         corresponding character.
2113
2114 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2115
2116         * safe-ctype.h: New file. Locale independent ctype.h replacement
2117         taken from libiberty.
2118
2119         * safe-ctype.c: New file. Tables for above.
2120
2121         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2122         safe-ctype$o.
2123
2124         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2125         isspace.
2126
2127         * ftp-basic.c: Don't include ctype.h.
2128
2129         * ftp-ls.c: Likewise.
2130
2131         * ftp.c: Likewise.
2132
2133         * headers.c: Likewise.
2134
2135         * host.c: Likewise.
2136
2137         * html-parse.c: Likewise.
2138
2139         * html-url.c: Likewise.
2140
2141         * http.c: Likewise.
2142
2143         * init.c: Likewise.
2144
2145         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2146
2147         * netrc.c: Likewise.
2148
2149         * recur.c: Likewise.
2150
2151         * retr.c: Likewise.
2152
2153         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2154         instead of isdigit.
2155
2156         * sysdep.h: Remove defines of ctype macros as they aren't needed
2157         for safe-ctype-h.
2158
2159         * url.c: Don't include ctype.h.
2160
2161         * utils.c: Likewise.
2162
2163         * wget.h: Include safe-ctype.h.
2164
2165 2001-03-27  Dan Harkless  <wget@harkless.org>
2166
2167         * Makefile.in: Moved top_builddir out of "User configuration
2168         section" of top Makefile and analogous spot in this one.
2169
2170 2001-03-17  Dan Harkless  <wget@harkless.org>
2171
2172         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2173         Define top_builddir.  Link wget with libtool so the user doesn't
2174         have to supply a bunch of custom environment variables to
2175         correctly link with the OpenSSL shared libraries.
2176
2177 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2178
2179         * http.c (gethttp): skip :port in host header if it is the
2180         DEFAULT_HTTPS_PORT when using SSL.
2181
2182         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2183         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2184         rest of the code.
2185         * url.h: Ditto
2186
2187 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2188
2189         * retr.c (show_progress): Correctly calculate the number of bytes
2190         in the first line of the download that have been actually
2191         downloaded in this run.
2192
2193 2001-02-23  Dan Harkless  <wget@harkless.org>
2194
2195         * main.c (print_help): --help documentation for -N said it would
2196         re-download files if they had the _same_ timestamp on server.
2197         (print_help): -nr belongs in "FTP options" section of --help
2198         output, not "Recursive retrieval" section.  Alphabetized FTP
2199         options by long option name.
2200
2201 2001-02-16  Dan Harkless  <wget@harkless.org>
2202
2203         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2204         that "httpsproxy" had been inserted into commands[] out of
2205         alphabetical order, causing "BUG: unknown command `httpuser'".
2206
2207 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2208
2209         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2210         listing without correct permissons).
2211
2212         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2213         FTP server.
2214
2215         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2216         shall be donwloaded only when it's newer than the local copy or
2217         when it has the same timeestamp but its size is different. ST_VMS
2218         and ST_MACOS as special cases that lie about file size.
2219
2220         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2221
2222         * Makefile.in: Removed dependency on ftpparse library due to unclear
2223         copyright issues and absence of any feedback to our queries.
2224
2225         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2226         copyright issues and absence of any feedback to our queries.
2227         (ftp_parse_ls): Added a warning message when remote server system
2228         does not seem to be suported by wget.
2229         (ftp_parse_vms_ls): New function for parsing VMS ftp
2230         server listing output.
2231         (clean_line): New function responsible for removing
2232         end-of-line characters from FTP listing texts.
2233
2234         * ftp.c (getftp): Global variables pwd and host_type are now
2235         member of the ccon structure under names ccon.id and ccon.rs.
2236
2237         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2238         enum stype rs (remote system identification) and char *id (initial
2239         working directory), as suggested by Hrvoje.
2240
2241         * url.c (parse_uname): Added support for passwords containing '@'
2242         characters.
2243         (skip_uname): Ditto.
2244
2245 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2246
2247         * ftp.c (ftp_loop): Reset con.
2248
2249 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2250
2251         * url.c (parse_uname): Added support for passwords containing '@'
2252         characters.
2253         (skip_uname): Ditto.
2254
2255 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2256
2257         * url.c (parseurl): Debug-print u->ftp_type.
2258
2259 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2260
2261         * ftp.c (ftp_loop_internal): Disable padding.
2262         (getftp): Ditto.
2263
2264         * http.c (http_loop): Disable padding.
2265
2266         * retr.c (show_progress): Use it to enable padding.
2267
2268         * retr.c (rate): Optional parameter PAD for padding the rate.
2269
2270 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2271
2272         * retr.c (show_progress): Make sure that the last output line
2273         includes progress.
2274
2275 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2276
2277         * retr.c (show_progress): Print the download rate along with the
2278         percentages.
2279         Along with Anders Thorsby <anders@thorsby.dk>.
2280
2281 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2282
2283         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2284         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2285         net/if.h.
2286
2287 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2288
2289         * gen_sslfunc.c: verify_callback is now static
2290
2291         * gen_sslfunc.c (init_ssl): load certificate if specified
2292
2293         * gen_sslfunc.c (ssl_printerr): new function
2294
2295         * init.c: added new --sslcertfile and --sslcertkey switches
2296
2297         * main.c: ditto
2298
2299         * options.h: ditto
2300
2301         * http.c (gethttp): abort when init_ssl fails
2302
2303 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2304
2305         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2306
2307 2001-01-10  Dan Harkless  <wget@harkless.org>
2308
2309         * url.c (str_url): Clarified this function's comment header after
2310         Hrvoje answered my question on the list as to when hide != 1.
2311         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2312
2313 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2314
2315         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2316         Drazen Kacar <dave@arsdigita.com>.
2317         (conaddr): Ditto.
2318
2319 2001-01-09  Dan Harkless  <wget@harkless.org>
2320
2321         * html-url.c: A bunch of fixup of `--page-requisites'-related
2322         comments to reflect Hrvoje's changes to my code when transplanting
2323         it into this new file, to fix spelling mistakes, to clarify, etc.
2324
2325         * url.c (write_backup_file): Clarified a comment.
2326         (str_url): Henrik van Ginhoven pointed out on the list that we
2327         shouldn't give away the number of characters in the password by
2328         replacing each character with a 'x'.  Use "<password>" instead.
2329
2330         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2331         directories didn't work if logging in put you in a directory other
2332         than "/" is fixed now.  Removed the comment here warning of the bug.
2333
2334         * main.c (print_help): --continue's description was misleading.
2335         We don't "restart", we "resume".  Also, better to say
2336         "partially-downloaded file" rather than just "existing file".
2337
2338 2001-01-06  Dan Harkless  <wget@harkless.org>
2339
2340         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2341         the best way to go about my aim.  Removed them in favor of:
2342
2343         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2344
2345 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2346
2347         * url.c (replace_attr): New function, to be used by both
2348         TO_COMPLETE and TO_RELATIVE case in convert_links.
2349         (find_fragment): New function for finding URL fragments.
2350         (replace_attr): Better handle the case where the original string
2351         is not quoted.  Use find_fragment.
2352         (convert_links): Use replace_attr().
2353
2354 2000-12-31  Dan Harkless  <wget@harkless.org>
2355
2356         * ChangeLog: Since this flat file doesn't have multiple branches,
2357         looking at the dates would make you think that things went into
2358         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2359         in 1.6 branch.]" where appropriate to clarify.
2360
2361 2000-12-30  Dan Harkless  <wget@harkless.org>
2362
2363         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2364         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2365
2366 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2367
2368         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2369
2370 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2371
2372         * http.c (check_end): Fix test for '+' or '-'.
2373
2374 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2375
2376         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2377         clash with the function top-level-declared variable i.
2378         (str_url): Likewise, rename inner-loop i to j.
2379
2380         * recur.c (parse_robots): Don't declare LEN at top of function.
2381         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2382         global variable.
2383
2384         * main.c (main): Change erroneous use of bitwise and to logical.
2385
2386         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
2387         the stack because it will be copied to closure.
2388
2389         Thanks to Csaba Raduly's run of PC-LINT over the sources.
2390
2391 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2392
2393         * http.c (basic_authentication_encode): Use xmalloc(), not
2394         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
2395         sources.
2396
2397 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
2398
2399         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
2400         compilation.
2401
2402 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2403
2404         * mswindows.c: Include <errno.h>.
2405
2406         * gen_sslfunc.c: Include <errno.h>.
2407
2408         * ftp-basic.c: Don't attempt to declare errno or h_errno because
2409         they're not used.
2410
2411         * main.c: Include <errno.h> because errno is used.
2412
2413         * ftp.c: Ditto.
2414
2415         * http.c: Include <netdb.h> for h_errno.
2416
2417 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2418
2419         * html-parse.c (advance_declaration): MSVC assert() chokes on
2420         '\"'.  Use '"' instead.
2421
2422 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2423
2424         * utils.c (xfree_real): Removed.
2425         (xfree_debug): Just call free().
2426
2427         * wget.h (xfree): Make it an alias for free.
2428
2429 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2430
2431         * http.c (http_loop): Furthermore, touch output_document only if
2432         it is known to be an existing regular file.
2433
2434 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2435
2436         * ftp.c (ftp_retrieve_list): Ditto.
2437
2438         * http.c (http_loop): Touch output_document if that is used for
2439         output.
2440
2441 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2442
2443         * http.c: Include gen_sslfunc.h after including Wget's headers.
2444         (persistent_available_p): Needed coma before `int ssl'.
2445
2446 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2447
2448         * ftp.c (ftp_loop_internal): Ditto.
2449
2450         * http.c (http_loop): Use it.
2451
2452         * retr.c (sleep_between_retrievals): New function that handles the
2453         logic of opt.wait and opt.waitretry.
2454
2455 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2456
2457         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
2458         rbuf_read_bufferful when the buffer is depleted.
2459
2460         * rbuf.c (rbuf_read_bufferful): New function.
2461
2462 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2463
2464         * gen_sslfunc.h: Use ansi2knr style function declarations.
2465
2466         * gen_sslfunc.c: Reformat according to the GNU coding standards.
2467         More should be done.
2468
2469         * http.c (persistent_available_p): Place the cheap SSL test nearer
2470         the top of the function.
2471         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
2472
2473 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2474
2475         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
2476         char.
2477
2478 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
2479
2480         * Makefile.in: added gen_sslfunc object
2481         * config.h.in: added HAVE_SSL define
2482         * connect.c: changed select_fd from static int to int
2483         * connect.h: ditto
2484         * gen_sslfunc.h: New file
2485         * gen_sslfunc.c: ditto
2486         * http.c: added HTTPS fuctionality
2487         * retrc.c: ditto
2488         * url.c: ditto
2489         * init.c: added opt.httpsproxy
2490         * options.h: ditto
2491         * rbuf.h: added alternate rbuf struct
2492         * wget.h: added CONSSLERR
2493         * rbuf.c: ditto
2494
2495         * http.c: Added HTTPS fuctionality.
2496
2497         * retrc.c: Ditto.
2498
2499         * url.c: Ditto.
2500
2501         * init.c: Added opt.httpsproxy.
2502
2503         * options.h: Ditto.
2504
2505         * rbuf.h: Added alternate rbuf struct.
2506
2507         * wget.h: Added CONSSLERR.
2508
2509         * rbuf.c: Ditto.
2510
2511 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2512
2513         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2514         "ignore_perms" to ignore file and directory permissions for
2515         Windows NT FTP server listings.
2516         (ftp_parse_winnt_ls): New function.
2517         (ftp_parse_ls): Parses UNIX and Windows NT listings
2518         separately. Simple heuristics for distinguishing between UNIX and
2519         MS-DOS-like FTP listing provided by Windows NT FTP service.
2520
2521 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2522
2523         * ftpparse.c, ftpparse.h: New files.
2524
2525         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2526         only. Use ftp_parse_nonunix_ls otherwise.
2527         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2528         exotic FTP servers.
2529
2530         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2531         FTP servers.
2532
2533         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2534         (getftp): Support for VMS. Support for FTP servers that do not
2535         place you in the root directory after login.
2536         (ftp_retrieve_list): VMS is silent about the real file size, issue
2537         a more appropriate message.
2538         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2539
2540         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2541
2542 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2543
2544         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2545         "ignore_perms" to ignore file and directory permissions for
2546         Windows NT FTP server listings.
2547         (ftp_parse_winnt_ls): New function.
2548         (ftp_parse_ls): Parses UNIX and Windows NT listings
2549         separately. Simple heuristics for distinguishing between UNIX
2550         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2551
2552 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2553
2554         * netrc.c (parse_netrc): Get rid of line ending.
2555
2556 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2557
2558         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2559         Dan.
2560
2561 2000-11-24  Karl Eichwalder  <ke@suse.de>
2562
2563         * main.c (print_help): Untabify.
2564
2565 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2566
2567         * utils.c (xrealloc_debug): Do the unregister/register thing only
2568         if the pointer has actually changed.
2569         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2570         (xfree_real): Ditto.
2571         (xrealloc_real): Ditto.
2572         (xstrdup_real): Ditto.
2573
2574 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2575
2576         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2577         string; no need to strdup() it.
2578         (getftp): Make pwd_len a local variable.
2579         (ftp_loop): Free PWD before returning.
2580
2581         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2582
2583 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2584
2585         * all: Use xfree() instead of free.
2586
2587         * utils.c (xfree): New function.
2588
2589 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2590
2591         * url.c (convert_links): HTML-quote the converted string.
2592
2593         * utils.c (html_quote_string): Move here from ftp-ls.c
2594         (html_quote_string): Make non-static; declare in utils.h.
2595         (html_quote_string): Convert SP to &#32;.
2596
2597 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2598
2599         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2600         standards; remove (debugging?) printf's; use '\0' for the ASCII
2601         zero character.  Use alloca() instead of malloc() for
2602         inter-function temporary allocations.
2603
2604 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2605
2606         * ftpparse.c, ftpparse.h: New files.
2607
2608         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2609         only. Use ftp_parse_nonunix_ls otherwise.
2610         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2611         exotic FTP servers.
2612
2613         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2614         FTP servers.
2615
2616         * ftp.c: New static wariables host_type, pwd, and pwd_len.
2617         (getftp): Support for VMS. Support for FTP servers that do not
2618         place you in the root directory after login.
2619         (ftp_retrieve_list): VMS is silent about the real file size, issue
2620         a more appropriate message.
2621         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2622
2623         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2624
2625 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2626
2627         * hash.c (hash_table_put): Don't overwrite deleted mappings.
2628
2629 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2630
2631         * hash.c (find_mapping): New function.
2632         (hash_table_get): Use it.
2633         (hash_table_get_pair): Ditto.
2634         (hash_table_exists): Ditto.
2635         (hash_table_remove): Ditto.
2636         (hash_table_remove): Really delete the entry if the mapping
2637         following LOCATION is empty.
2638
2639         * utils.c (string_set_add): Check whether the element has existed
2640         before.
2641
2642         * hash.c (hash_table_get_pair): New function.
2643
2644 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2645
2646         * http.c (http_process_type): Ignore trailing whitespace; use
2647         strdupdelim().
2648
2649         * recur.c (recursive_retrieve): Use the new `convert' field.
2650         (convert_all_links): Ditto.
2651         (convert_all_links): Don't respect meta_disallow_follow.
2652
2653         * html-url.c (handle_link): Fill out link_relative_p and
2654         link_complete_p.
2655
2656         * url.h (struct _urlpos): Make elements more readable.
2657
2658         * recur.c (recursive_retrieve): Call slist_prepend instead of
2659         slist_append.
2660         (convert_all_links): Call slist_nreverse before iterating through
2661         urls_html.
2662
2663         * utils.c (slist_prepend): New function.
2664         (slist_nreverse): Ditto.
2665
2666 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2667
2668         * http.c (check_end): Constify.
2669
2670 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2671
2672         * http.c (http_loop): If username and password are known, try the
2673         `Basic' authentication scheme by default.
2674
2675         * connect.h: Declare test_socket_open.
2676
2677 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2678
2679         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2680
2681 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2682
2683         * http.c (gethttp): Don't use the return value of sprintf().
2684         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2685
2686 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2687
2688         * recur.c (recursive_retrieve): Print the "so we don't load"
2689         debugging message only if we really don't load.
2690
2691         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2692         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2693
2694 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2695
2696         * http.c (gethttp): Make the HTTP persistent connections more
2697         robust.
2698
2699 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2700
2701         * retr.c (get_contents): If use_expected, make sure that the
2702         appropriate amount of data is being read.
2703
2704         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2705         `Connection: Keep-Alive'.
2706
2707         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2708         turned on.
2709
2710 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2711
2712         * http.c (connection_available_p): Use it.
2713
2714         * connect.c (test_socket_open): New function.
2715
2716         * http.c (gethttp): Support persistent connections.  Based on the
2717         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
2718         (register_persistent): New function.
2719         (connection_available_p): Ditto.
2720         (invalidate_connection): Ditto.
2721
2722 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2723
2724         * url.c (convert_links): Handle UREL2ABS case.
2725
2726         * recur.c (recursive_retrieve): Instead of the list
2727         urls_downloaded, use hash tables dl_file_url_map and
2728         dl_url_file_map.
2729         (convert_all_links): Use them to retrieve data.
2730
2731         * host.c (clean_hosts): Free the hash tables.
2732
2733         * main.c (private_initialize): Call host_init().
2734
2735         * host.c (store_hostaddress): Use a saner, hash table-based data
2736         model.
2737         (realhost): Ditto.
2738         (host_init): Initialize the hash tables.
2739
2740 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2741
2742         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
2743         used for what the sorted slists used to be used for.
2744         (slist_contains): Don't rely on the list being sorted.
2745         (slist_append): Simplify the code.
2746
2747         * recur.c (recursive_cleanup): Use free_string_set.
2748
2749         * utils.c (string_set_add, string_set_exists, string_set_free):
2750         New functions for easier freeing of hash tables whose keys are
2751         strdup'ed strings.
2752
2753         * recur.c (recursive_retrieve): Use the hash table functions for
2754         storing undesirable URLs.
2755
2756         * hash.c: New file.
2757
2758 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2759
2760         * main.c (private_initialize): Call url_init.
2761         (main): Call private_initialize.
2762
2763         * url.c (unsafe_char_table): New table.
2764         (UNSAFE_CHAR): Use it.
2765         (init_unsafe_char_table): New function.
2766         (url_init): New function; call init_unsafe_char_table.
2767
2768 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2769
2770         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
2771         _vsnprintf respectively.
2772
2773 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2774
2775         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
2776         on Linux.
2777
2778 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2779
2780         * html-url.c (handle_link): Handle HTML fragment identifiers.
2781
2782         * recur.c (recursive_retrieve): If norobot info is respected and
2783         the file is specified not to be followed by robots, respect that.
2784
2785         * html-url.c (collect_tags_mapper): Handle <meta name=robots
2786         content=X>.  For us the important cases are where X is NONE or
2787         where X contains NOFOLLOW.
2788         (get_urls_html): Propagate that information to the caller.
2789
2790 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2791
2792         * url.c (convert_links): Unlink the file we might be reading from
2793         before writing to it.
2794         (convert_links): Use alloca instead of malloc for
2795         filename_plus_orig_suffix.
2796
2797 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2798
2799         * host.c (realhost): Add HOST to the list with quality==0 only if
2800         it wasn't already there.
2801         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
2802
2803 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2804
2805         * url.c (get_urls_file): Ditto.
2806         (convert_links): Ditto.
2807
2808         * html-url.c (get_urls_html): Use read_file() instead of
2809         load_file().
2810
2811         * utils.c (read_file): New function, instead of the old
2812         load_file().
2813         (read_file_free): Ditto.
2814
2815         * url.c (findurl): Search only for the supported protocols.
2816         (convert_links): Use fwrite() when writing out a region of
2817         characters.
2818
2819 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2820
2821         * ftp-ls.c: Move html_quote_string and ftp_index here.
2822
2823         * url.c: Remove get_urls_html, since that's now in html-url.c.
2824
2825         * html-url.c: New file.
2826
2827         * html-parse.c: New file.
2828
2829 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2830
2831         * init.c (run_wgetrc): Don't bother killing off '\r' since
2832         pars_line() skips whitespace at end of line anyway.
2833         (parse_line): Oops, it didn't.  Now it does.
2834
2835         * recur.c (parse_robots): Ditto here.
2836
2837         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
2838         manually because read_whole_line no longer does.
2839
2840         * utils.c (read_whole_line): Rewrite to: a) use less memory
2841         (reallocates to needed size after work), b) work faster -->
2842         fgets() instead of getc, c) be more correct --> doesn't kill the
2843         newline character at the end of line.
2844
2845 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2846
2847         * init.c (comind): Initialize MAX to array size - 1.
2848
2849 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2850
2851         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
2852         Suggested by Edward J. Sabol.
2853
2854 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2855
2856         * url.c (construct): Handle the case where host name is not
2857         followed by a slash.
2858
2859 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2860
2861         * init.c: commands[] need to be sorted!  ("base" wasn't.)
2862
2863 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2864
2865         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
2866         `if'.
2867
2868 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2869
2870         * url.c (construct): Insert unneeded initialization for the
2871         compiler to shut up.
2872
2873         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
2874         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
2875         otherwise gets lost when you define _XOPEN_SOURCE.
2876
2877         * utils.c (touch): Include the file name in the error message.
2878         From Debian.
2879
2880 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2881
2882         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
2883         resize the buffer to fit the formated message.  That way, messages
2884         of arbitrary size may be printed.
2885         (logvprintf): Use saved_append() to optionally log the last
2886         several lines of output.
2887         (logputs): Ditto.
2888         (log_close): Adapt to new data structures.
2889         (log_dump): Ditto.
2890         (redirect_output): Print messages to stderr, not to stdout.
2891
2892         * log.c (saved_append_1): New function.  Replaces the old logging
2893         system ("log all output until 10M characters") with a new, much
2894         more reasonable one ("log last screenful of text").
2895         (saved_append): New function; call saved_append_1.
2896         (free_log_line): New function.
2897
2898 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2899
2900         * url.c (construct): Fix comment.
2901         (find_last_char): Document.
2902
2903 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2904
2905         * snprintf.c: New file.
2906
2907 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2908
2909         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
2910         types to logprintf() and debug_logprintf().
2911
2912 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2913
2914         * ftp.c (ftp_loop_internal): Hide the password from the URL when
2915         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
2916         <darekm@bydg.lomac.com.pl>.
2917
2918 2000-11-02  Junio Hamano  <junio@twinsun.com>
2919
2920         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
2921
2922 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
2923
2924         * http.c (known_authentication_scheme_p): Recognize NTML
2925         authentication.
2926         (create_authorization_line): Treat NTML the same as `Basic'.
2927
2928 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2929
2930         * retr.c (retrieve_url): Free url before returning.
2931         (retrieve_url): Free mynewloc before returning.
2932         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2933
2934 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2935
2936         * url.c (parseurl): Remove possible reading past the end of
2937         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2938
2939 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2940
2941         * main.c (main): In case of opt.downloaded overflowing, print
2942         <overflow> instead of a totally bogus random value.
2943
2944         * retr.c (retrieve_from_file): Ditto.
2945
2946         * recur.c (recursive_retrieve): Ditto.
2947
2948         * main.c (main): Ditto.
2949
2950         * http.c (http_loop): Ditto.
2951
2952         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
2953         `+=', and downloaded_exceeds_quota() instead of the simple-minded
2954         check.
2955         (ftp_retrieve_list): Ditto.
2956         (ftp_retrieve_dirs): Ditto.
2957         (ftp_retrieve_glob): Ditto.
2958
2959         * retr.c (downloaded_increase): New function.  Notice overflows of
2960         opt.downloaded.
2961         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
2962         used if it overflowed.
2963
2964         * options.h (struct options): New member downloaded_overflow.
2965
2966 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2967
2968         * wget.h (enum): Remove extra space after last enumeration.
2969
2970 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2971
2972         * main.c (main): Use legible_very_long() for printing
2973         opt.downloaded.
2974
2975         * utils.c (legible_1): New function that operates on strings and
2976         does the brunt of legible()'s work.
2977         (legible): Use legible_1().
2978         (legible_very_long): New function; dump the argument with
2979         sprintf(), and call legible_1().
2980
2981         * options.h (struct options): Use VERY_LONG_TYPE for
2982         opt.downloaded.
2983
2984         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
2985         type.
2986
2987         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
2988         defined.  Define HAVE_LONG_LONG if long long is available.
2989
2990 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2991
2992         * utils.c (long_to_string): Update with a later, better version.
2993
2994 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2995
2996         * url.c (path_simplify_with_kludge): New function.
2997         (path_simplify_with_kludge): Disable it.  Instead...
2998         (parse_dir): ...make sure that at this point the right thing is
2999         done, i.e. that "query" part of the URL (?...) is always assigned
3000         to the file, never to the directory portion of the path.
3001
3002 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3003
3004         * retr.c (retrieve_url): Detect redirection cycles.
3005
3006 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3007
3008         * url.c (get_urls_html): Decode HTML entities using
3009         html_decode_entities.
3010
3011         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3012         (&#NNN;) as an HTML fragemnt.
3013         (html_decode_entities): New function.
3014
3015 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3016
3017         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3018
3019 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3020
3021         * url.c (construct): Rewritten for clarity.  Avoids the
3022         unnecessary copying and stack-allocation the old version
3023         performed.
3024
3025 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3026
3027         * ftp.c (getftp): Ditto.
3028
3029         * http.c (gethttp): Rewind the stream when retrying from scratch.
3030
3031 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3032
3033         * retr.c (retrieve_url): Use url_concat() to handle relative
3034         redirections instead of /ad hoc/ code.
3035
3036         * url.c (url_concat): New function encapsulating weird
3037         construct().
3038         (urllen_http_hack): New function.
3039         (construct): When constructing new URLs, recognize that `?' does
3040         not form part of the file name in HTTP.
3041
3042 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3043
3044         * retr.c: Add msec timing support for WINDOWS.
3045         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3046         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3047
3048 2000-10-27  Dan Harkless  <wget@harkless.org>
3049
3050         * retr.c (retrieve_url): Manually applied T. Bharath
3051         <TBharath@responsenetworks.com>'s patch to get wget to grok
3052         illegal relative URL redirects.  Reformatted and re-commented it.
3053
3054 2000-10-23  Dan Harkless  <wget@harkless.org>
3055
3056         * connect.c (make_connection and bindport): Manually applied Rob
3057         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3058         changing coding style to GNU's.
3059
3060         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3061         files downloaded via FTP.  Per a comment, .listing files were not
3062         counted towards number of bytes and files downloaded because they're
3063         deleted anyway.  Well, they aren't under -nr, so count them then.
3064
3065         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3066         --bind-address, alphabetizing, changing coding style to GNU's,
3067         commenting, and renaming cmd_ip_address() to cmd_address() to
3068         imply hostnames also okay.
3069
3070         * main.c (main): --delete-after didn't delete the root of the
3071         tree.  Ignore --convert-links if --delete-after was specified.
3072         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3073         fixing duplicate use of added-since-1.5.3 case value.
3074         (print_help): Clarified that --delete-after deletes local files.
3075         Rob forgot to add a line for his new --bind-address option.
3076
3077         * options.h (struct options): Manually applied Rob Mayoff's patch
3078         to add --bind-address (bind_address structure member).
3079
3080         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3081         Ignore --convert-links if --delete-after was specified.
3082
3083         * retr.c (retrieve_from_file): Just added a DEBUGP().
3084
3085 2000-10-19  Dan Harkless  <wget@harkless.org>
3086
3087         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3088         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3089         patch to work around FTP servers that incorrectly respond to the
3090         "REST" command with the remaining size rather than the total file size.
3091
3092         * http.c (gethttp): Improved a comment and added code to tack on
3093         ".html" to text/html files without that extension when -E specified.
3094         (http_loop): Use new downloaded_file() enumerators and deal with
3095         the case of gethttp() called xrealloc() on u->local.
3096
3097         * init.c (commands): Added new "htmlextension" command.
3098         Also renamed John Daily's cmd_quad() to the more descriptive
3099         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3100         removed duplicate cmd_boolean() declaration.
3101
3102         * main.c (print_help): Added my new -E / --html-extension option.
3103         (main): Undocumented --email-address option previously used -E synonym.
3104         Stole it away for the much more deserving --html-extension's use.
3105
3106         * options.h (struct options): Added html_extension field.
3107
3108         * url.c (convert_links): URL X that we saved as X.html locally due
3109         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3110         (downloaded_file): Now remembers if we added .html extension to a file.
3111
3112         * url.h (downloaded_file_t): Added extra enumerators to support above.
3113         (downloaded_file): Now takes and returns a downloaded_file_t.
3114
3115         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3116
3117 2000-10-09  Dan Harkless  <wget@harkless.org>
3118
3119         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3120
3121         * main.c (print_help): Clarified what --retr-symlinks does.
3122
3123 2000-09-15  John Daily  <jdaily@cyberdude.com>
3124
3125         * init.c: Add support for "always" and "never" values to allow
3126         .wgetrc to override commandline (useful e.g. with .pm files
3127         calling `wget --passive-ftp' when your firewall doesn't allow that).
3128
3129         * ftp.c (getftp): passive_ftp is first option to support always/never.
3130
3131 2000-08-30  Dan Harkless  <wget@harkless.org>
3132
3133         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3134
3135         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3136         Wrapped some > 80-column lines.  When -p is specified and we're at a
3137         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
3138         <LINK REL="stylesheet">.
3139
3140         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3141
3142         * init.c: Added new -p / --page-requisites / page_requisites option.
3143
3144         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3145         infinite recursion.  Changed the unhelpful --mirrior description
3146         to simply give the options it's equivalent to.  Added new -p option.
3147         (main): Added some comments; handle new -p / --page-requisites.
3148
3149         * options.h (struct options): Added new page_requisites field.
3150
3151         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3152         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3153         get_urls_html().  Use new INFINITE_RECURSION #define.
3154
3155         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3156         final `dash_p_leaf_HTML' parameter.
3157
3158         * url.c: get_urls_html() and htmlfindurl() now take final
3159         `dash_p_leaf_HTML' parameter.
3160
3161         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3162
3163         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3164
3165 2000-08-23  Dan Harkless  <wget@harkless.org>
3166
3167         * main.c (print_help): -B / --base was not mentioned.
3168
3169 2000-08-22  Dan Harkless  <wget@harkless.org>
3170
3171         * main.c (print_help): Modified -nc description to mention that it
3172         also prevents the creation of multiple versions of the same file
3173         with ".<number>" suffixes.
3174
3175 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3176
3177         * retr.c (retrieve_url): Consistently strdup opt.referer when
3178         setting u->referer.
3179
3180 2000-06-09  Dan Harkless  <wget@harkless.org>
3181
3182         * main.c (print_help): --help output for --waitretry was over 80 cols.
3183
3184 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3185
3186         * url.c (encode_string): Fix comment.
3187         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3188
3189 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3190
3191         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3192         files.
3193
3194 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3195
3196         * url.c (str_url): Print the port number only if it's different
3197         from the default port number for that protocol.
3198
3199 2000-05-22  Dan Harkless  <wget@harkless.org>
3200
3201         * main.c (print_help): Added --help line for Damir Dzeko
3202         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3203         Removed comments that --referer and --waitretry were undocumented.
3204         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3205         line for --execute.
3206
3207 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3208
3209         * ftp.c (getftp): Ditto.
3210
3211         * http.c (gethttp): Check for return value of fclose/fflush.
3212
3213 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3214
3215         * host.c (store_hostaddress): Instead of shifting ADDR, start
3216         copying from the correct address.
3217
3218 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3219
3220         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3221         alloca().
3222         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3223
3224 2000-04-04  Dan Harkless  <wget@harkless.org>
3225
3226         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3227         "left shift count >= width of type" warning on 32-bit
3228         architectures.  Got rid of it by tricking the compiler w/ a variable.
3229
3230         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3231         characters per RFC1738, namely everything above '~'.  It also
3232         generated a warning on OSes where char =~ unsigned char.  Fixed.
3233
3234 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3235
3236         * http.c (http_process_type): Removed needless strdup(), a memory
3237         leak.
3238
3239 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3240
3241         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3242
3243 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3244
3245         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3246
3247 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3248
3249         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3250
3251 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3252
3253         * url.c (UNSAFE_CHAR): New macro.
3254         (contains_unsafe): Use it.
3255         (encode_string): Ditto.
3256
3257 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3258
3259         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3260
3261 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3262
3263         * Use TOUPPER/TOLOWER.
3264
3265 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3266
3267         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3268
3269 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3270
3271         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3272
3273         * sysdep.h (ISALNUM): New macro.
3274         (TOLOWER): Ditto.
3275         (TOUPPER): Ditto.
3276
3277 2000-03-10  Dan Harkless  <wget@harkless.org>
3278
3279         * html.c (idmatch): Implemented checking of my new --follow-tags
3280         and --ignore-tags options.
3281
3282         * init.c (commands): Added comment reminding people adding new
3283         entries doing allocation to add corresponding freeing in cleanup().
3284         (commands): Added new followtags and ignoretags commands.
3285         (cleanup): Free storage for new followtags and ignoretags.
3286
3287         * main.c: Use of "comma-separated list" was random -- normalized
3288         it.  Did some alphabetization.  Added comments pointing out
3289         "Options without arguments" and "Options accepting an argument"
3290         sections of long_options[].  Added new options --follow-tags and
3291         -G / --ignore-tags.  Added comment that Damir's --referer is
3292         currently undocumented.  Added comment that Heiko's --waitretry is
3293         partially undocumented (mentioned in --help but not in
3294         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3295
3296         * options.h (struct options): Added new fields follow_tags and
3297         ignore_tags.
3298
3299         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3300
3301 2000-03-02  Dan Harkless  <wget@harkless.org>
3302
3303         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3304         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3305
3306         * http.c (gethttp): Dan Berger's query string patch is totally
3307         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3308         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3309         second will overwrite the first.  Also, parameters to implicit
3310         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3311         be printed with trailing garbage characters, and could seg fault.
3312         Backing out the patch, which Dan B. informed me by email was just
3313         a kludge to download StarOffice from Sun made necessary due to
3314         wget's unconditional escaping of certain characters (room for an
3315         option there?).
3316         (http_loop): Heiko introduced "suggest explicit braces to avoid
3317         ambiguous `else'" warnings.  Eliminated them.
3318
3319         * main.c: Heiko's --wait / --waitretry backwards compatibility
3320         code looks to have been totally untested -- automatic variable
3321         'wr' was used without being initialized, and a long int was passed
3322         into setval()'s char* val parameter.
3323
3324         * recur.c (parse_robots): Applied Edward J. Sabol
3325         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3326         problem with "User-agent:<space>*<space>" lines in robots.txt.
3327
3328         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3329         http.c above for explanation).
3330
3331 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3332
3333         * ftp.c: Respect new option waitretry.
3334
3335 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3336
3337         * http.c (gethttp): Send custom Referer, if required.
3338
3339 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3340
3341         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3342
3343         * netrc.c (parse_netrc): New function.
3344
3345 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3346
3347         * http.c (gethttp): Send it.
3348
3349         * url.c (parseurl): Detect query string in HTTP URL-s.
3350         (str_url): Print it.
3351
3352 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3353
3354         * html.c (html_allow): Add <link href=...> and <script src=...>.
3355
3356 1999-05-02  andrew deryabin  <djsf@softhome.net>
3357
3358         * http.c (gethttp): Specify port in `Host' header only if it's
3359         different from 80.
3360
3361 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3362
3363         * recur.c (recursive_retrieve): If a finite maximum depth is
3364         specified, and we're are already at that depth, don't download the
3365         HTML file for parsing.
3366
3367 2000-03-01  Dan Harkless  <wget@harkless.org>
3368
3369         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3370         even though we don't do conversion on HTML files retrieved via
3371         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
3372         (ftp_retrieve_list): Added a comment saying where we need to
3373         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3374         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3375         a lie -- reworded as "Server file no newer than local file '%s' --".
3376
3377         * http.c (http_loop): Fixed a typo and clarified a comment.
3378         (http_loop): When -K and -N are specified together, compare size
3379         and timestamp of server file X against local file X.orig (if
3380         extant) rather than converted local file X.
3381         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3382         -- reworded as "Server file no newer than local file '%s' --".
3383         (http_loop): Call new downloaded_file() function to prevent
3384         wrongful overwriting of .orig file when -N is specified.
3385
3386         * url.c (convert_links): When -K specified, only rename X to
3387         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
3388         file X due to -N, we clobber an X.orig from a previous invocation.
3389         (convert_links): Call the failsafe xstrdup(), not the real strdup().
3390         (convert_links): Added a note asking anyone who understands how
3391         multiple URLs can correspond to a single file to comment it.
3392         (downloaded_file): Added this new function.
3393
3394         * url.h (downloaded_file): Added prototype for this new function
3395         as well as its downloaded_file_t enum type.
3396
3397         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
3398
3399 2000-02-29  Dan Harkless  <wget@harkless.org>
3400
3401         * version.c: Upped version to developer-only "1.5.3+dev".
3402
3403 2000-02-18  Dan Harkless  <wget@harkless.org>
3404
3405         * init.c (backup_converted): Added this new option.
3406
3407         * main.c (-K / --backup-converted): Added this new option.
3408
3409         * options.h (backup_converted): Added this new option.
3410
3411         * url.c (convert_links): When backup_converted is specified, save
3412         file X as X.orig before converting.
3413
3414         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
3415
3416 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3417
3418         * version.c: Wget 1.5.3 is released.
3419
3420 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3421
3422         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
3423         address doesn't yield FQDN.
3424
3425 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3426
3427         * cmpt.c (strerror): Fix declaration of sys_errlist.
3428
3429 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3430
3431         * main.c (main): Don't use an array subscript as the first
3432         argument to STRDUP_ALLOCA.
3433         From Kaveh R. Ghazi.
3434
3435 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
3436
3437         * html.c (htmlfindurl): Download table background.
3438
3439 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
3440
3441         * init.c (parse_line): Would free *com before allocating it.
3442         (parse_line): Would free com instead of *com.
3443
3444 1998-09-10  Howard Gayle  <howard@fjst.com>
3445
3446         * url.c (get_urls_html): Would drop the last character of the
3447         link.
3448
3449 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3450
3451         * http.c (http_loop): Don't print status code if quiet.
3452
3453 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3454
3455         * log.c: Use <stdarg.h> only when __STDC__.
3456
3457 1998-09-10  Adam D. Moss  <adam@foxbox.org>
3458
3459         * html.c (htmlfindurl): Download <layer src=...>.
3460
3461 1998-09-10  Howard Gayle  <howard@fjst.com>
3462
3463         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
3464         not retrieved.
3465
3466 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3467
3468         * utils.c: Include <libc.h> on NeXT.
3469
3470 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
3471
3472         * url.c (get_urls_html): Fix calculation of URL position.
3473
3474 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3475
3476         * version.c: Wget 1.5.2 is released.
3477
3478 1998-06-23  Dave Love  <d.love@dl.ac.uk>
3479
3480         * ftp.c, init.c, netrc.c: Include errno.h.
3481
3482         * http.c: Include errno.h and time header.
3483
3484         * Makefile.in (exext): Define.
3485         (install.bin, uninstall.bin): Use it.
3486
3487 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3488
3489         * http.c (http_loop): Don't attempt to compare local and remote
3490         sizes if the remote size is unknown.
3491
3492 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
3493
3494         * url.c (get_urls_html): Use malloc() instead of alloca in the
3495         loop.
3496
3497 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3498
3499         * version.c: Wget 1.5.2-b4 is released.
3500
3501 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3502
3503         * url.c (get_urls_html): Ignore spaces before and after the URI.
3504
3505 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
3506
3507         * ftp.c (getftp): Translate `done'.
3508
3509 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3510
3511         * version.c: Wget 1.5.2-b3 is released.
3512
3513 1998-06-06  Alexander Kourakos  <awk@bnt.com>
3514
3515         * init.c (cleanup): Close dfp, don't free it.
3516
3517 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3518
3519         * utils.c (make_directory): Twiddle.
3520
3521         * config.h.in: Added template for access().
3522
3523 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
3524
3525         * html.c (htmlfindurl): Download <input src=...>
3526
3527 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
3528
3529         * utils.c (file_exists_p): Use access() with two arguments.
3530
3531 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
3532
3533         * netrc.c (parse_netrc): Correct logic.
3534
3535 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
3536
3537         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
3538         <ljm@ljm.wownet.net>.
3539
3540 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3541
3542         * version.c: Wget 1.5.2-b2 is released.
3543
3544 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3545
3546         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3547
3548 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3549
3550         * retr.c (elapsed_time): Return correct value when
3551         HAVE_GETTIMEOFDAY is undefined.
3552
3553 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3554
3555         * version.c: Wget 1.5.2-b1 is released.
3556
3557 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3558
3559         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3560         (_getopt_internal): Don't translate `#if 0'-ed strings.
3561
3562 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3563
3564         * mswindows.c (ws_handler): Use fork_to_background().
3565
3566 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3567
3568         * version.c: Wget 1.5.1 is released.
3569
3570 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3571
3572         * http.c (parse_http_status_line): Avoid `minor' and `major'
3573         names.
3574
3575 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3576
3577         * utils.c (mkdirhier): Renamed to make_directory.
3578
3579 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3580
3581         * mswindows.c (fork_to_background): Define under Windows.
3582
3583         * utils.c (fork_to_background): New function.
3584
3585         * html.c (htmlfindurl): Removed rerdundant casts.
3586
3587 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3588
3589         * mswindows.c (ws_mypath): Cache the path.
3590
3591 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3592
3593         * ftp.h: Prefix enum ftype members with FT_.
3594
3595         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3596
3597         * mswindows.h: Use stat under Borland, _stat under MSVC.
3598
3599 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3600
3601         * http.c (known_authentication_scheme_p): New function.
3602         (gethttp): Handle authorization more correctly.
3603
3604         * ftp-basic.h: Removed.
3605
3606         * cmpt.h: Removed.
3607
3608         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
3609         with gcc 2.8.
3610         (numdigit): Use `while' loop.
3611
3612         * http.c (create_authorization_line): Detect authentication
3613         schemes case-insensitively.
3614
3615         * http.c (extract_header_attr): Use strdupdelim().
3616         (digest_authentication_encode): Move declaration of local
3617         variables to smaller scope.
3618         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
3619         (create_authorization_line): Detect authentication schemes
3620         case-insensitively.
3621
3622         * utils.c (touch): Constify.
3623
3624         * http.c (gethttp): Report a nicer error when no data is received.
3625
3626         * rbuf.h (RBUF_READCHAR): Ditto.
3627
3628         * ftp-basic.c (ftp_response): Use sizeof.
3629
3630 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
3631
3632         * retr.c (print_percentage): EXPECTED is long, not int.
3633         (print_percentage): Use floating-point arithmetic to avoid
3634         overflow with large files' sizes multiplied with 100.
3635
3636 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
3637
3638         * config.h.in: Added pid_t stub.
3639
3640         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
3641         define it).
3642
3643 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3644
3645         * version.c: Wget 1.5.0 is released.
3646
3647 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3648
3649         * url.c (str_url): Ditto.
3650
3651         * ftp-basic.c (ftp_rest): Use new name.
3652
3653         * utils.c (long_to_string): Renamed from prnum().
3654
3655 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3656
3657         * version.c: Wget 1.5-b17 is released.
3658
3659 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3660
3661         * headers.c (header_get): New argument FLAGS.
3662
3663         * http.c (gethttp): If request is malformed, bail out of the
3664         header loop.
3665         (gethttp): Check for empty header *after* the status line checks.
3666         (gethttp): Disallow continuations for status line.
3667
3668 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3669
3670         * version.c: Wget 1.5-b16 is released.
3671
3672 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3673
3674         * init.c (commands): Renamed `always_rest' to `continue'.
3675
3676 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3677
3678         * all: Use it.
3679
3680         * log.c (logputs): New argument.
3681         (logvprintf): Ditto.
3682         (logprintf): Ditto.
3683
3684 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3685
3686         * http.c (http_atotm): Update comment.
3687
3688         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3689
3690         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3691
3692         * main.c (i18n_initialize): New function.
3693         (main): Use it.
3694
3695         * log.c: Include <unistd.h>.
3696
3697         * retr.c (show_progress): Cast alloca to char *.
3698
3699 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3700
3701         * version.c: Wget 1.5-b15 is released.
3702
3703 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3704
3705         * utils.h: Declare file_non_directory_p().
3706
3707 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3708
3709         * main.c (main): It's `tries', not `numtries' now.
3710
3711 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3712
3713         * init.c (getperms): Removed.
3714
3715 1998-04-01  Tim Charron  <tcharron@interlog.com>
3716
3717         * log.c (logvprintf): Don't use ARGS twice.
3718
3719 1998-04-01  John  <john@futuresguide.com>
3720
3721         * mswindows.c: Cleaned up.
3722
3723 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3724
3725         * version.c: Wget 1.5-b14 is released.
3726
3727 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3728
3729         * ftp-opie.c (STRLEN4): New macro.
3730         (btoe): Use it.
3731
3732 1998-04-01  Junio Hamano  <junio@twinsun.com>
3733
3734         * http.c: Document all the Digest functions.
3735
3736 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3737
3738         * utils.c (file_non_directory_p): Renamed from isfile().
3739
3740         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
3741
3742 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3743
3744         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
3745
3746         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
3747         style.
3748         (cmd_permissions): Removed.
3749
3750         * config.h.in: Add template for WORDS_BIGENDIAN.
3751
3752 1998-03-31  Junio Hamano  <junio@twinsun.com>
3753
3754         * http.c (HEXD2asc): New macro.
3755         (dump_hash): Use it.
3756
3757 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3758
3759         * version.c: Wget 1.5-b13 is released.
3760
3761 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3762
3763         * main.c (main): Don't try to use `com'.
3764
3765 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3766
3767         * init.c (cmd_permissions): New function.
3768
3769 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3770
3771         * version.c: Wget 1.5-b12 is released.
3772
3773 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3774
3775         * init.c (commands): Renamed `numtries' to `tries'.
3776         (cmd_spec_debug): Removed.
3777         (home_dir): Under Windows, return `C:\' if HOME is undefined.
3778
3779 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3780
3781         * config.h.in: Define _XOPEN_SOURCE.
3782
3783         * init.c (check_user_specified_header): New function.
3784         (cmd_spec_header): Use it.
3785         (cmd_spec_useragent): New function.
3786
3787 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3788
3789         * version.c: Wget 1.5-b11 is released.
3790
3791 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
3792
3793         * wget.h: Include <libintl.h> only if NLS is enabled.
3794
3795 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
3796
3797         * options.h (struct options): Made `wait' a long.
3798         (struct options): Ditto for `timeout'.
3799
3800 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
3801
3802         * utils.c (exists): Renamed to file_exists_p.
3803         (file_exists_p): Use access() if available.
3804
3805 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
3806
3807         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
3808         infloop.
3809
3810         * log.c: do_logging -> save_log_p.
3811
3812         * config.h.in: Added template for HAVE_VSNPRINTF.
3813
3814 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3815
3816         * init.c: Ditto.
3817
3818         * http.c: Protect declaration against non-ANSI compiler.
3819
3820         * log.c (logvprintf): Use vsnprintf() if available.
3821
3822         * getopt.c (main): Don't translate test stuff.
3823
3824 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3825
3826         * version.c: Wget 1.5-b10 is released.
3827
3828 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
3829
3830         * ftp.c (getftp): Don't translate "CWD %s".
3831
3832         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
3833
3834 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3835
3836         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
3837
3838         * log.c (logputs): New function.
3839         (logvprintf): Renamed from vlogmsg; use logputs().
3840
3841         * retr.c (show_progress): Print `[100%]' when the retrieval is
3842         finished.
3843
3844         * init.c (run_wgetrc): Use FILE, not PATH.
3845         (wgetrc_file_name): Ditto.
3846
3847 1998-03-07  Tim Adam  <tma@osa.com.au>
3848
3849         * recur.c (parse_robots): Correctly reset `entries' on empty
3850         disallow.
3851
3852 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3853
3854         * init.c (cmd_spec_debug): Use cmd_boolean().
3855
3856 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
3857
3858         * http.c (gethttp): Create proxy-authorization correctly.
3859
3860 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3861
3862         * md5.c: Ditto.
3863
3864         * getopt.c: Use ANSI function definitions.
3865
3866         * ftp-opie.c: New file.
3867
3868         * options.h: Don't redefine EXTERN.
3869
3870         * init.c: Sort it correctly.
3871
3872 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3873
3874         * version.c: Wget 1.5-b9 is released.
3875
3876 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3877
3878         * recur.c (recursive_retrieve): Reset `first_time'.
3879
3880         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
3881
3882         * rbuf.c (rbuf_peek): Simplified.
3883         (rbuf_flush): Use MINVAL.
3884
3885         * wget.h (MINVAL): Moved from url.h.
3886
3887         * rbuf.h (RBUF_FD): New macro.
3888
3889         * url.c (add_url): Add to the head of the list.
3890
3891         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
3892         file.
3893         (getftp): Set the default permissions to 0600.
3894
3895 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
3896
3897         * url.c (get_urls_html): Ditto.
3898         (convert_links): Ditto.
3899
3900         * recur.c (parse_robots): Ditto.
3901
3902         * html.c (ftp_index): Ditto.
3903
3904         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
3905
3906         * init.c (defaults): Initialize `opt' to zero via memset.
3907
3908         * http.c (digest_authentication_encode): goto considered harmful.
3909
3910 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
3911
3912         * ftp.c (delelement): Simplify and fix leak.
3913
3914 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
3915
3916         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
3917
3918         * url.h (HEXD2ASC): Removed warning.
3919
3920         * init.c (comind): Use binary search.
3921         (commands): Reorganized.
3922         (setval): Ditto.
3923         (cmd_boolean): New function.
3924         (cmd_number): Ditto.
3925         (cmd_number_inf): Ditto.
3926         (cmd_string): Ditto.
3927         (cmd_vector): Ditto.
3928         (cmd_directory_vector): Ditto.
3929         (cmd_bytes): Ditto.
3930         (cmd_time): Ditto.
3931         (cmd_spec_debug): Ditto.
3932         (cmd_spec_dirmode): Ditto.
3933         (cmd_spec_dirstruct): Ditto.
3934         (cmd_spec_dotstyle): Ditto.
3935         (cmd_spec_header): Ditto.
3936         (cmd_spec_htmlify): Ditto.
3937         (cmd_spec_mirror): Ditto.
3938         (cmd_spec_outputdocument): Ditto.
3939         (cmd_spec_recursive): Ditto.
3940         (settime): Merged with cmd_time().
3941         (setbytes): Merged with cmd_bytes().
3942         (setonoff): Merged with cmd_boolean().
3943         (onoff): Ditto.
3944
3945 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3946
3947         * Makefile.in (distclean): Remove `config.h'.
3948
3949 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3950
3951         * version.c: Wget 1.5-b8 is released.
3952
3953 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3954
3955         * http.c (digest_authentication_encode): New function.
3956         (create_authorization_line): Use it.
3957         (dump_hash): New function.
3958         (digest_authentication_encode): Use it.
3959
3960         * fnmatch.c: Renamed from `mtch.c'.
3961
3962 1998-02-15  Karl Eichwalder  <ke@suse.de>
3963
3964         * main.c (main): Tag "Written by..." string as translatable.
3965
3966 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3967
3968         * wget.h (FREE_MAYBE): New macro.
3969
3970         * http.c (create_authorization_line): Don't use ANSI C string
3971         concatenation feature.
3972         (basic_authentication_encode): Use alloca() for temporary
3973         variables.
3974
3975         * recur.h: Ditto.
3976
3977         * http.c: Ditto.
3978
3979         * headers.h: Ditto.
3980
3981         * ftp-basic.c: Protect declaration against non-ANSI compiler.
3982
3983         * http.c (create_authorization_line): Cast `unsigned char *' to
3984         `char *' for sprintf, to shut up the noisy Digital Unix cc.
3985
3986 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3987
3988         * version.c: Wget 1.5-b7 is released.
3989
3990 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3991
3992         * cmpt.c (strstr): Synched with glibc-2.0.6.
3993
3994         * ftp-basic.c (calculate_skey_response): Ditto.
3995         (calculate_skey_response): Use alloca().
3996
3997         * http.c (create_authorization_line): Work with FSF's version of
3998         md5.c.
3999
4000         * md5.c: New file, from GNU libc.
4001
4002 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4003
4004         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4005
4006 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4007
4008         * http.c (basic_authentication_encode): New function, instead of
4009         the macro.
4010
4011 1998-02-13  Junio Hamano  <junio@twinsun.com>
4012
4013         * http.c: Add HTTP-DA support.
4014         * ftp-basic.c: Add Opie/S-key support.
4015         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4016         * md5.c, md5.h: New files.
4017
4018 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4019
4020         * http.c (http_process_range): Renamed from hprocrange().
4021         (http_process_range): Parse the whole header.
4022
4023         * headers.c: New file.
4024         (header_process): New function.
4025         (header_get): Renamed from fetch_next_header.
4026
4027         * all: Include utils.h only where necessary.
4028
4029         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4030
4031         * wget.h: Add provisions for dmalloc.
4032
4033 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4034
4035         * version.c: Wget 1.5-b6 is released.
4036
4037 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4038
4039         * ftp.c (ftp_loop): Determine `filename' more precisely.
4040
4041         * init.c (setval): Don't set `opt.quiet' if output-document is
4042         `-'.
4043
4044         * log.c (log_init): Print to STDERR instead of STDOUT.
4045         (vlogmsg): Use STDERR by default.
4046         (logflush): Ditto.
4047
4048 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4049
4050         * host.c: Use addr_in again.
4051
4052 1998-02-08  Karl Eichwalder  <karl@suse.de>
4053
4054         * http.c (gethttp): Fixed typo.
4055
4056 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4057
4058         * version.c: Wget 1.5-b5 is released.
4059
4060 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4061
4062         * retr.c (show_progress): Use it.
4063
4064         * log.c (logflush): New function.
4065
4066         * wget.h: Utilize __attribute__ if on gcc.
4067
4068 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4069
4070         * http.c (base64_encode_line): New argument LENGTH.
4071         (BASIC_AUTHENTICATION_ENCODE): Use it.
4072         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4073
4074         * main.c (main): Fixed fprintf() format mismatch.
4075
4076 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4077
4078         * version.c: Wget 1.5-b4 is released.
4079
4080 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4081
4082         * host.c: use sockaddr_in instead of addr_in.
4083
4084 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4085
4086         * init.c (cleanup): Use it.
4087
4088         * recur.c (recursive_cleanup): New function.
4089
4090         * retr.c (retrieve_from_file): Ditto.
4091
4092         * main.c (main): Use it.
4093
4094         * recur.c (recursive_reset): New function.
4095
4096         * retr.c (retrieve_from_file): Ditto.
4097
4098         * main.c (main): Simplify call to recursive_retrieve().
4099
4100         * recur.c (recursive_retrieve): Removed FLAGS argument.
4101
4102         * http.c (gethttp): Changed call to iwrite().
4103
4104 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4105
4106         * url.c (get_urls_html): Ditto.
4107         (free_urlpos): Ditto.
4108         (mkstruct): Ditto.
4109         (construct): Ditto.
4110
4111         * retr.c (retrieve_url): Move declaration of local variables to
4112         smaller scope.
4113
4114         * url.c (urlproto): Use it.
4115         (parseurl): Ditto.
4116         (str_url): Ditto.
4117         (get_urls_html): Ditto.
4118
4119         * utils.h (ARRAY_SIZE): New macro.
4120
4121         * url.c (proto): Moved from url.h.
4122
4123         * url.h (URL_CLEANSE): Reformatted.
4124         (USE_PROXY_P): Renamed from USE_PROXY.
4125
4126         * ftp-basic.c: Adjust to the new interface of iwrite().
4127
4128         * ftp-basic.c (ftp_port): Use alloca().
4129
4130 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4131
4132         * version.c: Wget 1.5-b3 is released.
4133
4134         * host.c (ftp_getaddress): Don't print to stderr directly.
4135
4136         * init.c (setbytes): Support `g' for gigabytes.
4137         (cmdtype): New specification CTIME.
4138         (setval): Use it with settime().
4139         (commands): Use it for WAIT and TIMEOUT.
4140
4141 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4142
4143         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4144         (gethttp): Use it.
4145
4146         * utils.c (unique_name_1): Moved from url.c.
4147         (unique_name): Ditto.
4148
4149         * url.c (url_filename): Ditto.
4150
4151         * log.c (redirect_output): Changed call to unique_name().
4152
4153         * url.c (unique_name_1): Renamed from unique_name().
4154         (unique_name): Changed interface.
4155
4156         * init.c (enum cmdid): Moved from init.h.
4157         (cmdtype): Ditto.
4158         (struct cmd): Ditto.
4159
4160         * main.c (main): Use it.
4161         (main): Moved `--backups' to not have a short option.
4162
4163         * options.h (struct options): New member BACKGROUND.
4164
4165         * main.c (print_help): Rearranged.
4166         (main): New long options for -n* short options: --no-directories,
4167         --no-host-directories, --non-verbose, --no-host-lookup and
4168         --dont-remove-listing.
4169
4170 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4171
4172         * main.c (main): Use log_close().
4173
4174         * log.c: New variable LOGFP.
4175         (vlogmsg): Use it.
4176         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4177         instead.
4178         (log_close): New function.
4179
4180         * options.h (struct options): Removed LFILE.
4181
4182         * log.c (log_enable): Removed.
4183
4184         * main.c (main): Use it.
4185
4186         * log.c (log_init): New function.
4187
4188         * url.c (get_urls_html): Removed needless assignment to BASE.
4189
4190         * host.c (add_hlist): Don't set CMP needlessly.
4191
4192         * utils.c (match_backwards): Ditto.
4193         (in_acclist): Ditto.
4194
4195         * url.c (findurl): Ditto.
4196
4197         * netrc.c (parse_netrc): Ditto.
4198
4199         * log.c (log_dump): Ditto.
4200
4201         * html.c (html_quote_string): Ditto.
4202
4203         * ftp-basic.c (ftp_request): Made static.
4204
4205         * connect.c: Made global variables static.
4206
4207         * url.c (construct): Ditto.
4208
4209         * init.c (init_path): Avoid assignment inside `if'-condition.
4210
4211         * ftp.c: Don't include in.h or winsock.h.
4212
4213         * ftp.c (ftp_loop): Use SZ.
4214
4215         * connect.c (bindport): Cast &addrlen to int *.
4216         (conaddr): Ditto.
4217
4218         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4219
4220 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4221
4222         * ftp.c (getftp): Initialize opt.ftp_pass here.
4223         (ftp_retrieve_dirs): Use alloca().
4224
4225         * init.c (defaults): Don't initialize opt.ftp_pass.
4226
4227         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4228         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4229
4230 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4231
4232         * recur.c (parse_robots): Check for comments more correctly.
4233
4234         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4235         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4236         hostname.
4237
4238 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4239
4240         * version.c: Wget 1.5-b2 is released.
4241
4242         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4243
4244         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4245
4246         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4247         char.
4248
4249         * log.c: Don't attempt to hide arguments from ansi2knr.
4250
4251         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4252
4253         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4254
4255         * ftp.c (getftp): Ditto.
4256
4257         * http.c (gethttp): Use it.
4258
4259         * retr.c (get_contents): New argument EXPECTED; pass it to
4260         show_progress().
4261         (show_progress): New argument EXPECTED; use it to display
4262         percentages.
4263
4264         * init.c (setval): Ditto.
4265
4266         * http.c (gethttp): Ditto.
4267         (http_loop): Ditto.
4268
4269         * ftp.c (getftp): Ditto.
4270         (ftp_loop_internal): Ditto.
4271
4272         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4273
4274         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4275
4276         * netrc.c (search_netrc): Use alloca().
4277
4278         * init.c (defaults): Initialize no_flush.
4279
4280         * log.c (vlogmsg): Don't flush if no_flush.
4281
4282         * options.h (struct options): New variable no_flush.
4283
4284         * main.c (main): Don't play games with buffering.
4285
4286         * log.c (vlogmsg): Flush the output after every message.
4287
4288 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4289
4290         * init.c (parse_line): Ditto.
4291
4292         * url.c (get_urls_html): Ditto.
4293
4294         * main.c (main): Don't cast to unsigned char.
4295
4296         * init.c (run_wgetrc): Don't cast to unsigned char.
4297         (parse_line): Accept char instead of unsigned char.
4298
4299         * html.c (htmlfindurl): Use char instead of unsigned char.
4300
4301         * all: Use them.
4302
4303         * sysdep.h: Add wrappers to ctype macros to make them
4304         eight-bit-clean:
4305
4306 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4307
4308         * html.c (htmlfindurl): Download <img lowsrc=...>
4309
4310         * main.c (main): Ignore SIGPIPE.
4311
4312         * connect.c (select_fd): New argument WRITEP.
4313         (iwrite): Call select_fd().
4314
4315 1997-02-27  Fila Kolodny <fila@ibi.com>
4316
4317         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4318         one already exists, just skip it.
4319
4320 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4321
4322         * http.c (gethttp): Cosmetic changes.
4323
4324         * http.c (check_end): Allow `+D...' instead of `GMT'.
4325         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4326
4327         * url.c (process_ftp_type): New function.
4328         (parseurl): Use it.
4329
4330         * connect.c (iwrite): Allow writing in a few chunks.
4331         (bindport): Made SRV static, so addr can point to it.
4332         (select_fd): Removed HPUX kludge.
4333
4334         * host.c (free_hlist): Incorporated into clean_hosts().
4335
4336 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4337
4338         * host.c (hlist): Made static.
4339         (search_address): Cosmetic change.
4340
4341 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4342
4343         * version.c: Wget v1.5-b1 is released.
4344
4345         * http.c (hgetlen): Use sizeof() to get the header length.
4346         (hgetrange): Ditto.
4347         (hgettype): Ditto.
4348         (hgetlocation): Ditto.
4349         (hgetmodified): Ditto.
4350         (haccepts_none): Ditto.
4351
4352         * main.c (main): Updated `--version' and `--help' output, as per
4353         Francois Pinard's suggestions.
4354
4355         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
4356         textdomain().
4357
4358         * config.h.in: Define stubs for I18N3.
4359
4360         * wget.h: Include libintl.h.
4361
4362 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4363
4364         * url.c (mkstruct): Check for opt.cut_dirs.
4365         (mkstruct): alloca()-te more, xmalloc() less.
4366
4367         * utils.c (load_file): Check for ferror().
4368
4369         * url.c (get_urls_file): Close only the files we opened.
4370         (get_urls_html): Ditto.
4371         (count_slashes): New function.
4372
4373         * http.h: Removed.
4374
4375         * http.c (gethttp): Respect username and password provided by
4376         proxy URL.
4377         (base64_encode_line): Write into an existing buffer instead of
4378         malloc-ing a new one.
4379         (struct http_stat): Moved from http.h
4380
4381         * retr.c (retrieve_url): Free SUF.
4382
4383         * all: Removed lots of unnecessary .h dependencies.
4384
4385         * html.c (global_state): Made static.
4386
4387         * utils.h (ALLOCA_ARRAY): New macro.
4388
4389         * main.c (main): New option `--cut-dirs'.
4390
4391         * url.c (construct): Use alloca() for T.
4392
4393         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
4394
4395         * host.c (_host_t): Moved from host.h.
4396         (struct host): Renamed from _host_t.
4397         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
4398         (realhost): Ditto.
4399
4400         * host.h: Don't include url.h.
4401
4402         * ftp.c (LIST_FILENAME): Moved from ftp.h.
4403
4404         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
4405
4406         * main.c (main): Enable log if the output goes to a TTY.
4407
4408         * connect.h: Removed unused constant `BACKLOG'.
4409
4410         * config.h.in: Check for isatty().
4411
4412         * Makefile.in (LINK): Use CFLAGS when linking.
4413
4414 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4415
4416         * mswindows.c (ws_hangup): Use redirect_output().
4417
4418         * main.c (redirect_output_signal): New function; use
4419         redirect_output().
4420
4421         * log.c (redirect_output): New function, based on hangup(), which
4422         is deleted.
4423
4424         * log.c (vlogmsg): New function.
4425
4426         * wget.h (DEBUGP): Use debug_logmsg().
4427
4428         * main.c (hangup): Use it.
4429
4430         * log.c (log_dump): New function.
4431
4432         * utils.h (DO_REALLOC): Use `long' for various sizes.
4433
4434         * http.c (hskip_lws): Use `while', for clarity.
4435         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
4436         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
4437
4438         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
4439         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
4440
4441         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
4442         (LEGIBLE_SEPARATOR): Ditto.
4443         (FILE_BUFFER_SIZE): Ditto.
4444
4445         * retr.c (BUFFER_SIZE): Moved from retr.h.
4446
4447         * log.c: New file.
4448         (logmsg): Moved from utils.c.
4449         (debug_logmsg): New function.
4450
4451         * mswindows.h: Include it here.
4452
4453         * init.c: Ditto.
4454
4455         * utils.c: Don't include <windows.h>.
4456
4457 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
4458
4459         * host.c (ftp_getaddress): Ditto.
4460
4461         * main.c (main): Use it.
4462
4463         * utils.h (STRDUP_ALLOCA): New macro.
4464
4465         * init.c: Prepend `wget: ' to error messages printed on stderr.
4466
4467         * utils.c (mkdirhier): Renamed from mymkdir.
4468         (touch): Renamed from my_touch.
4469         (pwd_cuserid): Renamed from my_cuserid().
4470
4471 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
4472
4473         * utils.c (accdir): Process wildcards.
4474         (proclist): New function.
4475         (accdir): Use it to avoid code repetition.
4476
4477 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4478
4479         * recur.c (parse_robots): Respect opt.useragent; use alloca().
4480
4481         * http.c (gethttp): Construct useragent accordingly.
4482
4483         * version.c: Changed version string to numbers-only.
4484
4485         * main.c (print_help): List all the options.
4486
4487         * mswindows.c (windows_main_junk): Initialize argv0 here.
4488
4489 1998-01-24  Karl Heuer  <kwzh@gnu.org>
4490
4491         * netrc.c (search_netrc): Initialize `l' only after processing
4492         netrc.
4493
4494         * main.c (main): Don't trap SIGHUP if it's being ignored.
4495
4496 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4497
4498         * all: Use logmsg().
4499
4500         * utils.c (time_str): Moved from retr.c.
4501         (logmsg): New function.
4502         (logmsg_noflush): Ditto.
4503
4504         * rbuf.c: New file, moved buf_* functions here.
4505
4506         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
4507
4508         * ftp-basic.c (ftp_rest): Use prnum().
4509
4510         * ftp-basic.c: Ditto.
4511
4512         * ftp.c: Use the new reading functions and macros.
4513
4514         * retr.c (buf_initialize): New function.
4515         (buf_initialized_p): Ditto.
4516         (buf_uninitialize): Ditto.
4517         (buf_fd): Ditto.
4518
4519         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
4520         efficiency.
4521         (gethttp): Use alloca() where appropriate.
4522
4523         * retr.c (buf_readchar): Use it.
4524         (buf_peek): Use rstreams.
4525
4526         * retr.h (BUF_READCHAR): New macro.
4527
4528         * init.c (home_dir): Rewritten for clarity.
4529         (init_path): Ditto.
4530
4531         * mswindows.c (ws_backgnd): Made static.
4532         (read_registry): Ditto.
4533         (ws_cleanup): Ditto.
4534         (ws_handler): Ditto.
4535
4536 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4537
4538         * alloca.c: New file.
4539
4540         * Makefile.in (ALLOCA): Define.
4541
4542         * mswindows.c (ws_help): Constify.
4543         (ws_help): Use alloca.
4544
4545         * mswindows.c: Reformat.
4546
4547         * all: Added _(...) annotations for I18N snarfing and translation.
4548
4549         * host.c (ftp_getaddress): Nuke SYSINFO.
4550         (ftp_getaddress): Don't use getdomainname().
4551         (ftp_getaddress): Use uname(), where available.
4552
4553         * http.c (gethttp): Protect a stray fprintf().
4554
4555         * init.c (settime): New function.
4556         (setval): Treat WAIT specially, allowing suffixes like `m' for
4557         minutes, etc.
4558
4559 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4560
4561         * url.c (get_urls_html): Use alloca() for TEMP.
4562
4563 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4564
4565         * url.c (rotate_backups): New function.
4566
4567         * http.c (gethttp): Ditto.
4568
4569         * ftp.c (getftp): Rotate backups.
4570
4571 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4572
4573         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4574         xrealloc() and xstrdup().  Use the new functions.
4575
4576         * url.c (decode_string): Made static.
4577         (has_proto): Ditto.
4578         (parse_dir): Ditto.
4579         (parse_uname): Ditto.
4580         (mkstruct): Ditto.
4581         (construct): Ditto.
4582         (construct_relative): Ditto.
4583
4584         * retr.c (show_progress): Made static.
4585
4586         * recur.c (robots_url): Made static.
4587         (retrieve_robots): Ditto.
4588         (parse_robots): Ditto.
4589         (robots_match): Ditto.
4590
4591         * main.h: Removed.
4592
4593         * main.c (printhelp): Made static.
4594         (hangup): Ditto.
4595
4596         * init.c (comind): Made static.
4597         (defaults): Ditto.
4598         (init_path): Ditto.
4599         (run_wgetrc): Ditto.
4600         (onoff): Ditto.
4601         (setonoff): Ditto.
4602         (setnum): Ditto.
4603         (myatoi): Ditto.
4604         (getperms): Ditto.
4605         (setbytes): Ditto.
4606
4607         * http.c (fetch_next_header): Made static.
4608         (hparsestatline): Ditto.
4609         (hskip_lws): Ditto.
4610         (hgetlen): Ditto.
4611         (hgetrange): Ditto.
4612         (hgettype): Ditto.
4613         (hgetlocation): Ditto.
4614         (hgetmodified): Ditto.
4615         (haccepts_none): Ditto.
4616         (gethttp): Ditto.
4617         (base64_encode_line): Ditto.
4618         (mktime_from_utc): Ditto.
4619         (http_atotm): Ditto.
4620
4621         * html.c (idmatch): Made static.
4622
4623         * host.c (search_host): Made static.
4624         (search_address): Ditto.
4625         (free_hlist): Ditto.
4626
4627         * ftp.c (getftp): Made static.
4628         (ftp_loop_internal): Ditto.
4629         (ftp_get_listing): Ditto.
4630         (ftp_retrieve_list): Ditto.
4631         (ftp_retrieve_dirs): Ditto.
4632         (ftp_retrieve_glob): Ditto.
4633         (freefileinfo): Ditto.
4634         (delelement): Ditto.
4635
4636         * ftp-ls.c (symperms): Made static.
4637         (ftp_parse_unix_ls): Ditto.
4638
4639         * connect.c (select_fd): Made static.
4640
4641         * utils.c (xmalloc): Renamed from nmalloc.
4642         (xrealloc): Renamed from nrealloc.
4643         (xstrdup): Renamed from nstrdup.
4644
4645         * getopt.c (exchange): Use alloca.
4646
4647         * mswindows.c (mycuserid): Use strncpy.
4648
4649         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4650         systhings.h, windecl.h and winjunk.h removed.
4651
4652         * mswindows.c (sleep): New function.
4653
4654         * utils.c: Include <windows.h> under Windows.
4655
4656 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4657
4658         * url.h (URL_UNSAFE): Change default under Windows.
4659
4660         * retr.c (retrieve_from_file): Respect opt.delete_after.
4661
4662         * main.c (main): Call ws_help on Windows.
4663
4664         * winjunk.c (windows_main_junk): New function.
4665
4666         * main.c (main): Junk-process argv[0].
4667
4668         * http.c (mktime_from_utc): Return -1 if mktime failed.
4669
4670         * http.c (http_loop): Ditto.
4671
4672         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4673         new URL.
4674
4675         * winjunk.c (getdomainname): Lots of functions.
4676
4677 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4678
4679         * cmpt.c (strptime_internal): Handle years more correctly for
4680         `%y'.
4681
4682 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4683
4684         * http.c (gethttp): Allocate enough space for
4685         `Proxy-Authorization' header.
4686
4687 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4688
4689         * version.c: Wget/1.4.5 is released.
4690
4691 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4692
4693         * retr.c (get_contents): Check return value of fwrite more
4694         carefully.
4695
4696 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4697
4698         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4699         year, regardless of century.
4700
4701 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4702
4703         * utils.c (isfile): Use `lstat' instead of `stat'.
4704
4705 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4706
4707         * utils.c (numdigit): Use explicit test.
4708
4709 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4710
4711         * http.c (http_loop): Always use `url_filename' to get u->local.
4712
4713 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4714
4715         * url.c: Recognize https.
4716
4717 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
4718
4719         * recur.c (recursive_retrieve): Lowercase just the host name.
4720
4721 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
4722
4723         * url.c (get_urls_file): Use the correct test.
4724         (get_urls_html): Ditto.
4725
4726 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4727
4728         * connect.c: Reverted addrlen to int.
4729
4730         * init.c (parse_line): Check for -1 instead of NONE.
4731
4732         * version.c: Changed version to 1.4.5.
4733
4734 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4735
4736         * init.c: New option netrc.
4737         (initialize): Don't parse .netrc.
4738
4739         * cmpt.c (recursive): Return rp.
4740         (strptime_internal): Match the long strings first, the abbreviated
4741         second.
4742
4743 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
4744
4745         * http.c (check_end): New function.
4746         (http_atotm): Use it.
4747
4748 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
4749
4750         * http.c (gethttp): Use them.
4751
4752         * init.c: New options proxy_user and proxy_passwd.
4753
4754 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4755
4756         * ftp.c (ftp_retrieve_list): Create links even if not relative.
4757
4758 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
4759
4760         * recur.c (recursive_retrieve): Lowercase the host name, if the
4761         URL is not "optimized".
4762
4763         * host.c (realhost): Return l->hostname, even if it matches with
4764         host.
4765
4766 1997-02-10  Marin Purgar  <pmc@asgard.hr>
4767
4768         * connect.c: Make addrlen size_t instead of int.
4769         (conaddr): Ditto.
4770
4771 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4772
4773         * systhings.h: Define S_ISLNK on NeXT too.
4774
4775 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
4776
4777         * version.c: Released 1.4.3.
4778
4779         * url.c: Futher update to list of protostrings.
4780         (skip_proto): Skip `//' correctly for FTP and HTTP.
4781
4782         * url.c (get_urls_html): Handle bogus `http:' things a little
4783         different.
4784
4785         * main.c (main): Removed `follow-ftp' from `f'.
4786         (main): Dumped the `prefix-files' and `file-prefix' options and
4787         features; old and bogus.
4788         (main): Exit on failed setval() in `-e'.
4789
4790         * http.c (fetch_next_header): Use it to detect header continuation
4791         correctly.
4792
4793         * retr.c (buf_peek): New function.
4794
4795 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4796
4797         * wget.h: Include time.h and stuff.
4798
4799 1997-02-08  Roger Beeman  <beeman@cisco.com>
4800
4801         * ftp.c: Include <time.h>
4802
4803 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4804
4805         * url.c (findurl): Would read over buffer limits.
4806
4807 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4808
4809         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
4810
4811 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
4812
4813         * http.c (http_atotm): Initialize tm.is_dst.
4814
4815 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4816
4817         * http.c (gethttp): Don't print the number of retrieved headers.
4818
4819         * main.c (main): New option `--no-clobber', alias for `-nc'.
4820
4821         * url.c: Recognize `https://'.
4822
4823 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4824
4825         * host.c (herrmsg): Don't use h_errno.
4826
4827 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4828
4829         * host.c (accept_domain): Use it.
4830
4831         * main.c (main): New option `--exclude-domains'.
4832
4833         * retr.c (retrieve_url): Use it.
4834         (retrieve_url): Bail out when an URL is redirecting to itself.
4835
4836         * url.c (url_equal): New function.
4837
4838 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4839
4840         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
4841
4842         * http.c (mk_utc_time): New function.
4843         (http_atotm): Use it; handle time zones correctly.
4844
4845 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4846
4847         * http.c: Ditto.
4848
4849         * ftp-basic.c: Use it instead of WRITE.
4850
4851         * connect.c (iwrite): New function.
4852
4853 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4854
4855         * cmpt.c (mktime): New function.
4856
4857         * netrc.c: Include <sys/types.h>.
4858
4859         * main.c (main): Wouldn't recognize --spider.
4860
4861         * retr.c (rate): Use `B', `KB' and `MB'.
4862         (reset_timer,elapsed_time): Moved from utils.c.
4863
4864         * ftp.c (ftp_retrieve_list): Ditto.
4865
4866         * http.c (http_loop): Don't touch the file if opt.dfp.
4867
4868 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4869
4870         * cmpt.c: New file.
4871
4872         * ftp.c (ftp_retrieve_glob): New argument semantics.
4873         (ftp_retrieve_dirs): Use it.
4874         (ftp_loop): Ditto.
4875
4876         * html.c (htmlfindurl): Recognize `'' as the quote char.
4877
4878 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4879
4880         * ftp.c (ftp_loop_internal): Use it.
4881
4882         * utils.c (remove_link): New function.
4883
4884 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
4885
4886         * retr.c (retrieve_url): Require STRICT redirection URL.
4887
4888         * url.c (parseurl): New argument STRICT.
4889
4890         * http.c (hparsestatline): Be a little-bit less strict about
4891         status line format.
4892
4893 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4894
4895         * http.c (gethttp): Use it.
4896
4897         * main.c (main): Don't use '<digit>' as options.
4898
4899         * init.c: New option ignore_length.
4900
4901         * http.c (gethttp): Ditto.
4902         (http_loop): Check for redirection without Location:.
4903         (gethttp): Don't print Length unless RETROKF.
4904
4905         * ftp.c (getftp): Use it.
4906
4907         * url.c (mkalldirs): New function.
4908
4909         * utils.c (mymkdir): Don't check for existing non-directory.
4910
4911         * url.c (mkstruct): Don't create the directory.
4912
4913 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
4914
4915         * init.c (setval): Removed NO_RECURSION checks.
4916
4917 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
4918
4919         * version.c: "Released" 1.4.3-pre2.
4920
4921         * recur.c (recursive_retrieve): Bypass host checking only if URL
4922         is ftp AND parent URL is not ftp.
4923
4924         * ftp-basic.c (ftp_request): Print out Turtle Power.
4925
4926         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
4927         wildcard.
4928         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
4929         not glob.
4930
4931         * http.c (gethttp): Be a little bit smarter about status codes.
4932
4933         * recur.c (recursive_retrieve): Always reset opt.recursive when
4934         dealing with FTP.
4935
4936 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
4937
4938         * retr.c (retrieve_url): New variable location_changed; use it for
4939         tests instead of mynewloc.
4940         (retrieve_url): Allow heuristic adding of html.
4941
4942         * url.c (url_filename): Don't use the `%' in Windows file names.
4943
4944         * http.c (http_loop): Always time-stamp the local file.
4945
4946         * http.c (http_loop): Ditto.
4947
4948         * ftp.c (ftp_retrieve_list): Use it.
4949
4950         * utils.c (my_touch): New function.
4951
4952         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
4953         instead of #ifndef NeXT.
4954
4955         * utils.c (strptime): New version, by Ulrich Drepper.
4956
4957 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
4958
4959         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
4960         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
4961         (http_loop): Would remove ACCEPTRANGES.
4962
4963         * ftp.c (getftp): Call ftp_list with NULL.
4964
4965 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
4966
4967         * html.c (ftp_index): Don't print minutes and seconds if we don't
4968         know them; beautify the output.
4969
4970         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
4971
4972 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
4973
4974         * utils.c (strptime): New function.
4975         (strptime): Don't use get_alt_number.
4976         (strptime): Don't use locale.
4977         (match_string): Made it a function.
4978
4979 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
4980
4981         * http.c (http_atotm): New function.
4982         (http_loop): Use it.
4983
4984         * atotm.c: Removed from the distribution.
4985
4986         * http.c (base64_encode_line): Rewrite.
4987
4988 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
4989
4990         * ftp.c (getftp): Use ftp_expected_bytes; print size.
4991
4992         * ftp-basic.c (ftp_response): Use ftp_last_respline.
4993         (ftp_expected_bytes): New function.
4994
4995         * ftp.c (getftp): Print the unauthoritative file length.
4996
4997         * ftp-ls.c: Renamed from ftp-unix.c.
4998         (ftp_parse_ls): Moved from ftp.c.
4999         (ftp_parse_unix_ls): Recognize seconds in time spec.
5000         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5001         year.
5002
5003 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5004
5005         * ftp-basic.c: Don't declare errno if #defined.
5006
5007         * host.c (ftp_getaddress): Check for sysinfo legally.
5008
5009 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5010
5011         * connect.c (iread): Use READ.
5012
5013 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5014
5015         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5016         schemes.
5017
5018 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5019
5020         * host.c (ftp_getaddress): Allow `.' in hostname.
5021
5022 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5023
5024         * wget.h: READ and WRITE macros for use instead of read and write
5025         on sockets, grep READ *.c, grep WRITE *.c
5026
5027         * wsstartup.c: new file - startup for winsock
5028
5029         * wsstartup.h: new file
5030
5031         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5032
5033         * configure.bat: Configure utility for MSVC
5034
5035         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5036
5037 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5038
5039         * version.c: Released 1.4.3-pre.
5040
5041         * utils.c (prnum): Accept long.
5042         (legible): Use prnum().
5043
5044         * connect.c (make_connection): Accept port as short.
5045         (bindport): Ditto.
5046
5047         * http.c (gethttp): Use search_netrc.
5048
5049 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5050
5051         * ftp.c (getftp): Use search_netrc.
5052
5053         * netrc.c (free_netrc): New function.
5054
5055         * init.c (home_dir): New function.
5056
5057         * url.c (convert_links): Allow REL2ABS changes.
5058
5059 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5060
5061         * netrc.c: New file.
5062         (parse_netrc, maybe_add_to_list): New functions.
5063
5064 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5065
5066         * retr.c (retrieve_url): Reset opt.recursion before calling
5067         ftp_loop if it is reached through newloc.
5068
5069         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5070         error; don't use "Syntax error", since we don't know if it is
5071         really a syntax error.
5072
5073 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5074
5075         * utils.c (acceptable): Extract the filename part of the path.
5076
5077         * recur.c (recursive_retrieve): Call acceptable() with the right
5078         argument; would bug out on wildcards.
5079
5080         * init.c (parse_line): Likewise.
5081
5082         * html.c (htmlfindurl): Cast to char * when calling stuff.
5083
5084 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5085
5086         * ftp.c (getftp): Use ftp_pasv.
5087
5088         * ftp-basic.c (ftp_request): Accept NULL value.
5089         (ftp_pasv): New function.
5090
5091         * options.h (struct options): Add passive FTP option.
5092
5093 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5094
5095         * url.c (parseurl): Debug output.
5096
5097         * utils.c (path_simplify): New one, adapted from bash's
5098         canonicalize_pathname().
5099
5100 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5101
5102         * ftp.c (getftp): Don't discard the buffer.
5103
5104         * retr.c (get_contents): New parameter nobuf.
5105
5106 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5107
5108         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5109
5110         * init.c (setval): Strip the trailing slashes on CVECDIR.
5111
5112 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5113
5114         * init.c: Make excludes and includes under CVECDIR instead of
5115         CVEC.
5116
5117 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5118
5119         * url.c (get_urls_html): Skip "http:".
5120
5121 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5122
5123         * utils.c (strcasecmp): From glibc.
5124         (strncasecmp): Also.
5125         (strstr): Also.
5126
5127         * url.c: Added javascript: to the list of URLs prefixes.
5128
5129 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5130
5131         * recur.c (retrieve_robots): Print the warning message only if
5132         verbose.
5133
5134 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5135
5136         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5137
5138 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5139
5140         * systhings.h: New file.
5141
5142         * ../configure.in: Check for utime.h
5143
5144         * ftp.c: Check whether we have unistd.h.
5145
5146 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5147
5148         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5149         (recursive_retrieve): Call get_urls_html with the canonical URL.
5150
5151 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5152
5153         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5154         ansi2knr support for compilers which don't support ANSI style
5155         function prototypes and signatures.
5156
5157         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5158
5159 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5160
5161         * url.c: Use it; Recognize paths ending with "." and ".." as
5162         directories.
5163         (url_filename): Append .n whenever file exists and could be a
5164         directory.
5165
5166         * url.h (ISDDOT): New macro.
5167
5168         * init.c (parse_line): Use unsigned char.
5169
5170         * url.c (get_urls_html): Cast to unsigned char * when calling
5171         htmlfindurl.
5172
5173         * html.c (htmlfindurl): Use unsigned char.
5174
5175         * version.c: Changed version to 1.4.3.
5176
5177 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5178
5179         * version.c: Released 1.4.2.
5180
5181         * ftp.c (getftp): Simplified assertion.
5182         (ftp_loop_internal): Remove symlink before downloading.
5183         (ftp_retrieve_list): Unlink the symlink name before attempting to
5184         create a symlink!
5185
5186         * options.h (struct options): Renamed print_server_response to
5187         server_response.
5188
5189         * ftp.c (rel_constr): Removed.
5190         (ftp_retrieve_list): Don't use it.
5191         (ftp_retrieve_list): Use opt.retr_symlinks.
5192
5193 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5194
5195         * main.c (main): New option retr_symlinks.
5196
5197         * url.c (convert_links): Print verbose message.
5198
5199 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5200
5201         * http.c (http_loop): Reset newloc in the beginning of function;
5202         would cause FMR in retrieve_url.
5203
5204 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5205
5206         * recur.c (convert_all_links): Find the URL of each HTML document,
5207         and feed it to get_urls_html; would bug out.
5208         (convert_all_links): Check for l2 instead of dl; removed dl.
5209
5210         * url.c (convert_links): Don't refer to freed newname.
5211
5212         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5213
5214         * main.c (main): Print the OS_TYPE in the debug output, too.
5215
5216         * recur.c (recursive_retrieve): Check for opt.delete_after.
5217
5218         * main.c (main): New option delete-after.
5219
5220         * init.c (setval): Cleaned up.
5221
5222 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5223
5224         * Makefile.in (wget): Make `wget' the default target.
5225
5226         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5227         loop.
5228         (ftp_retrieve_list): Warn about non-matching sizes.
5229
5230         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5231
5232         * init.c (setnum): Renamed from setnuminf; New argument flags.
5233         (setval): Use it.
5234
5235         * main.c (main): Sorted the options.
5236         (main): New option --wait.
5237
5238 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5239
5240         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5241         quotes.
5242
5243 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5244
5245         * version.c: Changed version to 1.4.2.
5246
5247 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5248
5249         * version.c: Released 1.4.1.
5250
5251         * html.c (html_quote_string): New function.
5252         (ftp_index): Use it.
5253         (htmlfindurl): A more gentle ending debug message.
5254
5255         * ftp.c (ftp_loop): Check for opt.htmlify.
5256
5257         * init.c: New command htmlify.
5258
5259         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5260         strings.
5261         (ftp_loop): Print size of index.html.
5262
5263         * init.c (setval): Implement "styles".
5264
5265         * main.c (main): New option dotstyle.
5266
5267 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5268
5269         * ftp.c (getftp): Close the master socket in case of errors, after
5270         bindport().
5271
5272         * connect.c (bindport): Initialize msock to -1.
5273
5274         * ftp.c (getftp): Initialize dtsock to -1.
5275
5276         * connect.c (closeport): Don't close sock if sock == -1.
5277
5278 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5279
5280         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5281         (setval): Don't send default values.
5282         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5283
5284         * options.h (struct options): Use long for dot_bytes.
5285
5286         * init.c (setquota): Renamed to setbytes.
5287         (setval): Use setbytes on DOTBYTES.
5288
5289 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5290
5291         * ftp.c (getftp): Initialize con->dltime.
5292
5293         * recur.c (recursive_retrieve): Use same_host instead of
5294         try_robots; simply load robots_txt whenever the host is changed.
5295         (recursive_retrieve): Free forbidden before calling parse_robots.
5296
5297 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5298
5299         * retr.c (show_progress): Use them.
5300
5301         * options.h (struct options): New options dot_bytes, dots_on_line
5302         and dot_spacing.
5303
5304 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5305
5306         * recur.c (recursive_retrieve): Retrieve directories regardless of
5307         acc/rej rules; check for empty u->file.
5308
5309 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5310
5311         * init.c (setval): Use it.
5312
5313         * utils.c (merge_vecs): New function.
5314
5315         * init.c (setval): Reset the list-type functions when encountering
5316         "".
5317
5318 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5319
5320         * recur.c (recursive_retrieve): Use base_url instead of this_url
5321         for no_parent.
5322
5323 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5324
5325         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5326
5327 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5328
5329         * utils.c (sepstring): Rewrote; don't use strtok.
5330
5331         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5332         when running the first time.
5333         (retrieve_robots): Warn to ignore errors when robots are loaded.
5334
5335         * utils.c (load_file): Moved from url.c.
5336
5337         * http.c: Made static variables const too in h* functions.
5338
5339         * main.c (main): Renamed --continue-ftp to --continue.
5340
5341         * recur.c (recursive_retrieve): Use it.
5342
5343         * utils.c (frontcmp): New function.
5344
5345         * url.c (accdir): New function.
5346
5347         * html.c (htmlfindurl): Recognize <area href=...>.
5348
5349         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5350
5351         * init.c (setval): Free the existing opt.excludes and
5352         opt.includes, if available.
5353
5354         * main.c (main): New option -I.
5355
5356 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5357
5358         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5359
5360         * version.c: Changed version to 1.4.1.
5361
5362 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5363
5364         * version.c: Released 1.4.0.
5365
5366 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5367
5368         * main.c (main): Free com and val after parse_line.
5369         (printhelp): Reorder the listing.
5370
5371         * http.c: More robust header parsing.
5372
5373         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5374         (hskip_lws): New function.
5375         (haccepts_bytes): New function.
5376         (gethttp): Use it.
5377
5378         * init.c (setval): Check header sanity.
5379         (setval): Allow resetting of headers.
5380
5381 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5382
5383         * http.c (http_loop): Don't use has_wildcards.
5384
5385         * http.c (gethttp): Free all_headers -- would leak.
5386
5387         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
5388         0 -- this fixes a long-standing bug in -rl.
5389
5390 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
5391
5392         * ftp.c: Use -1 as "impossible" value for con->fd.
5393
5394         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
5395
5396         * init.c (parse_line): Use isalpha.
5397
5398         * ftp-unix.c: Use HAVE_UNISTD_H.
5399
5400         * mtch.c (has_wildcards): Don't match \.
5401
5402         * http.c (http_loop): Warn on HTTP wildcard usage.
5403
5404 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
5405
5406         * url.c (url_filename): Do not create numbered suffixes if
5407         opt.noclobber -- would bug out on -nc.
5408
5409 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
5410
5411         * recur.c (parse_robots): Don't chuck out the commands without
5412         arguments (`Disallow:<empty>' didn't work).
5413         (parse_robots): Compare versions lowercase.
5414         (parse_robots): Match on base_version, not version_string!
5415         (parse_robots): Handle comments properly.
5416         (parse_robots): Match versions in a sane way.
5417
5418         * init.c: Print nicer error messages.
5419
5420         * version.c: Changed version to 1.4.0.
5421
5422 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5423
5424         * version.c: Released 1.4.0-test2.
5425
5426         * init.c (run_wgetrc): Close fp.
5427
5428         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
5429         u->dir.
5430
5431 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5432
5433         * init.c (setquota): Allow inf as quota specification.
5434
5435 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
5436
5437         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
5438         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
5439
5440         * main.c (main): Check for quota by comparison with downloaded
5441         stuff, not from status.
5442
5443         * connect.c (select_fd): Should compile on HPUX without warnings now.
5444
5445         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
5446         returned RETROK.
5447
5448 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
5449
5450         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
5451         (getftp): Return FTPRETRINT on control connection error.
5452
5453         * html.c (htmlfindurl): Recognize <embed src=...> and
5454         <bgsound src=...>.
5455         (ftp_index): Handle username and password correctly.
5456
5457         * main.c (main): Made `-np' a synonim for --no-parent.
5458
5459 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5460
5461         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
5462         ftp_retrieve_glob.
5463
5464         * version.c: Changed version to 1.4.0-test2.
5465
5466 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5467
5468         * version.c: Released 1.4.0-test1.
5469
5470         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
5471         directory.
5472         (convert_links): Removed definition of make_backup.
5473
5474         * http.h: Removed definition of MAX_ERROR_LENGTH.
5475
5476         * host.c (ftp_getaddress): Check for "(none)" domains.
5477
5478         * ftp.c (ftp_retrieve_dirs): Docfix.
5479
5480         * http.c (gethttp): Use ou->referer instead of u->referer.
5481
5482         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
5483         this was known to cause coredumps on Linux.
5484
5485         * html.c (ftp_index): Cast the argument to local_time to time_t *.
5486
5487 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
5488
5489         * connect.c (select_fd): Use exceptfds -- once and for all.
5490
5491         * retr.c (retrieve_from_file): Free filename after
5492         recursive_retrieve.
5493         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
5494         first-time retrieval.
5495         (retrieve_from_file): Return uerr_t; new argument, count.
5496         (retrieve_from_file): Break on QUOTEXC.
5497
5498         * init.c (setquota): Fixed a bug that caused rejection of
5499         non-postfixed values..
5500
5501 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
5502
5503         * version.c: Changed name to wget.
5504
5505         * connect.c (iread): Smarter use of select.
5506         (select_fd): Set errno on timeout.  If not timeout, return 1
5507         instead of 0.
5508
5509 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
5510
5511         * ftp.c (ftp_loop_internal): Don't use con->cmd before
5512         establishing it.
5513
5514 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
5515
5516         * http.c (gethttp): Send correct referer when using proxy.
5517         (gethttp): Use struct urlinfo ou to access the relevant data; send
5518         correct authorization in all cases.
5519
5520         * host.c (same_host): Use skip_uname to skip username and
5521         password.
5522
5523         * url.c (skip_uname): New function.
5524         (parseurl): Use it.
5525
5526         * host.c (same_host): Do not assume HTTP -- same_host should now
5527         be totally foolproof.
5528
5529         * url.c (skip_proto): New function.
5530         (parse_uname): Use it.
5531
5532         * http.c (gethttp): Create local user and passwd from what is
5533         given.
5534
5535         * url.c (parseurl): Check for HTTP username and password too.
5536
5537 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
5538
5539         * config.h.in: Removed #define gethostbyname R...
5540
5541 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5542
5543         * version.c: Changed version to 1.4.0-test1.
5544
5545 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5546
5547         * version.c: "Released" 1.4b29.
5548
5549         * recur.c (recursive_retrieve): Check for no_parent.
5550
5551         * init.c (setval): Option update.
5552
5553         * main.c (main): New option no-parent.
5554
5555         * options.h (struct options): New variable no_parent.
5556
5557         * recur.c (recursive_retrieve): Only files are checked for
5558         opt.accepts and opt.rejects.
5559         (recursive_retrieve): Check directories for opt.excludes.
5560         (recursive_retrieve): Make the dir absolute when checking
5561         opt.excludes.
5562
5563         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5564         src=...>
5565
5566 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5567
5568         * ftp.c (getftp): Do not line-break assert entries at all.
5569         (ftp_retrieve_dirs): docfix.
5570
5571         * connect.c (select_fd): Use fd + 1 as nfds.
5572
5573         * version.c: Changed version to 1.4b29.
5574
5575 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5576
5577         * version.c: "Released" 1.4b28.
5578
5579         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5580         don't continue the loop if it is.
5581         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5582
5583 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5584
5585         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5586         (getftp): Do not use multiline assert.
5587
5588         * http.c (hparsestatline): Use mjr and mnr instead of major and
5589         minor, which don't compile on Ultrix.
5590         (http_loop): Use strcpy() to initialize tmp.
5591
5592         * all: Geturl -> Fetch
5593
5594 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5595
5596         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5597         ':'.
5598
5599         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5600         moving `bufsize &&' to the beginning of each check in for-loops.
5601
5602         * recur.c (parse_robots): Close fp on exit.
5603
5604         * url.c (mymkdir): Check for each directory before creating.
5605
5606 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5607
5608         * version.c: Changed version to 1.4b28.
5609
5610 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5611
5612         * version.c: "Released" 1.4b27.
5613
5614         * init.c (parse_line): Use isspace.
5615         (parse_line): Free *com on all errors.
5616
5617         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
5618         (delelement): Use next instead of f->next and prev instead of
5619         f->prev.
5620         (delelement): Free the members of the deleted element.
5621
5622         * http.c (http_loop): Do not return RETROK on code != 20x.
5623
5624         * init.c (cleanup): Free opt.user_header.
5625         (cleanup): Free opt.domains.
5626
5627         * url.c (freelists): Moved to cleanup().
5628
5629         * http.c (hparsestatline): Docfix.
5630
5631         * main.c (main): Return with error status on unsuccesful
5632         retrieval.
5633
5634         * init.c (setval): Do not remove listing when mirroring.
5635
5636         * url.c (url_filename): Use opt.fileprefix.
5637
5638         * ftp.c (ftp_get_listing): Use url_filename to get filename for
5639         .listing.
5640
5641         * main.c (main): New option: -rn.
5642
5643 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5644
5645         * Makefile.in (RM): Added RM = rm -f.
5646
5647         * host.c (clean_hosts): New function.
5648         (free_hlist): Just free the list, no reset.
5649
5650         * version.c: Changed version to 1.4b27.
5651
5652 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5653
5654         * version.c: "Released" 1.4b26.
5655
5656         * retr.c (retrieve_from_file): If call get_urls_html with
5657         opt.spider to make it silent in spider mode.
5658
5659         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5660
5661         * url.h (CLEANDUP): New macro.
5662
5663         * http.c (gethttp): Fixed a bug that freed location only when it
5664         was NULL.
5665
5666         * retr.c (retrieve_url): Free url if it will not be stored,
5667         i.e. newloc is NULL.
5668
5669         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5670         old version would bug out on <a href="x#a"href="y">.
5671
5672         * html.h (state_t): New member in_quote.
5673
5674         * html.c (htmlfindurl): Free s->attr at the beginning of
5675         attr-loop.
5676
5677         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5678         (tried_robots): Make hosts a global variable.
5679         (recursive_retrieve): Free constr after URL host optimization.
5680         (tried_robots): Free urlinfo before exiting.
5681
5682         * utils.c (free_slist): New function.
5683
5684         * recur.c (recursive_retrieve): Use flags to add cleanup
5685         possibility.
5686
5687         * main.c (main): Free filename after recursive_retrieve.
5688
5689         * http.c (gethttp): Store successful responses too.
5690
5691 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5692
5693         * all: Constified the whole source.  This required some minor
5694         changes in many functions in url.c, possibly introducing bugs -- I
5695         hope not.
5696
5697         * ftp-basic.c: Removed last_respline.
5698
5699         * http.c (gethttp): Free type.
5700
5701         * host.c (same_host): Free real1 and real2.
5702
5703         * main.c (main): New option --spider.
5704
5705         * retr.c (get_contents): Don't reset errno.
5706
5707         * main.c (main): Sorted the options.
5708
5709         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5710         uninitialized by select().
5711
5712         * http.c (http_loop): Print the time when the connection is
5713         closed.
5714         (gethttp): Debug-print the HTTP request.
5715
5716 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
5717
5718         * connect.c (iread): Do not try reading after timeout.
5719
5720         * main.c (main): Would bug out on -T.
5721
5722         * connect.c (select_fd): Do not use exceptfds.
5723         (iread): Set ETIMEDOUT on select_fd <= 0.
5724
5725         * version.c: Changed version to 1.4b26.
5726
5727 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
5728
5729         * version.c: "Released" 1.4b25.
5730
5731         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
5732         or link name.
5733
5734         * http.c (gethttp): Add errcode to struct hstat.
5735         (http_loop): Use it.
5736
5737         * url.c (no_proxy_match): Simplify using char** for no_proxy.
5738
5739         * options.h (struct options): Make opt.no_proxy a vector.
5740
5741         * utils.c (sepstring): Use !*s instead of !strlen(s).
5742
5743         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
5744         (getperms): Use ISODIGIT instead of isdigit.
5745
5746         * ftp.c (getftp): Print time.
5747
5748         * main.c (main): Use legible output of downloaded quantity.
5749
5750         * ftp.c (getftp): Use elapsed_time().
5751         (ftp_loop_internal): Use rate().
5752
5753         * http.c (http_loop): Add download ratio output; Use rate().
5754
5755         * utils.c (rate): New function.
5756
5757 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
5758
5759         * http.c (http_loop): Use timer.
5760
5761         * ftp.c: Split to ftp-basic.c and ftp.c
5762
5763         * utils.c (reset_timer): New function.
5764         (elapsed_time): New function.
5765
5766         * retr.c (show_progress): Make bytes_in_line and offs long; should
5767         work on 16-bit machines.
5768
5769 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
5770
5771         * url.c (in_acclist): New argument backward.
5772
5773         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
5774         a file should be retrieved according to suffix.
5775         (ftp_get_listing): Check the return value of unlink; Do not call
5776         ftp_retrieve_dirs if depth reached maxreclevel.
5777         (ftp_retrieve_dirs): Check whether the directory is in
5778         exclude-list.
5779
5780         * main.c (main): Print the version number at the beginning of
5781         DEBUG output.
5782         (main): Use strrchr when creating exec_name.
5783
5784         * ftp.c (ftp_retrieve_glob): Do not close control connection.
5785
5786         * version.c: Changed version to 1.4b25.
5787
5788 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
5789
5790         * version.c: "Released" 1.4b24.
5791
5792         * Makefile.in: Rewrite.
5793
5794         * ftp.c (ftp_loop_internal): Likewise.
5795
5796         * retr.c (time_str): Check for failed time().
5797
5798         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
5799         HTML3.0.
5800
5801         * retr.c (time_str): Return time_t *.
5802
5803         * connect.c (bindport): Close msock on unsuccesful bind.
5804         (bindport): The same for getsockname and listen.
5805
5806         * retr.c (retrieve_url): Allow any number of retries on
5807         proxy.
5808
5809         * http.c (gethttp): Do not treat errno == 0 as timeout.
5810         (http_loop): Likewise.
5811         (http_loop): Cosmetic changes.
5812
5813         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
5814
5815         * retr.c (get_contents): Reset errno.
5816
5817         * ftp.c (getftp): Minor fixes.
5818
5819 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5820
5821         * http.c: Do not use backups.
5822
5823         * geturl.1 (WARNING): Warn that man-page could be obsolete.
5824
5825         * getopt.c (getopt_long): Moved to getopt.c
5826
5827         * geturl.texi: Enhanced.
5828
5829         * main.c (main): Use it.
5830
5831         * recur.c (convert_all_links): New function.
5832
5833         * utils.c (add_slist): New argument flags.
5834
5835         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
5836         (parse_robots): Do not chuck out empty value fields.
5837         (parse_robots): Make yourself welcome on empty Disallow.
5838
5839         * version.c: Changed version to 1.4b24.
5840
5841 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5842
5843         * version.c: "Released" 1.4b23.
5844
5845         * ftp.c (ftp_loop_internal): Get the time after getftp.
5846
5847         * Makefile.in (install.info): New target.
5848         (install): Use it.
5849
5850         * http.c (http_loop): Fix output when doing -O.
5851
5852 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5853
5854         * geturl.texi: New file.
5855
5856         * main.c (main): Do not print the warnings and download summary if
5857         opt.quiet is set.
5858
5859         * version.c: Changed version to 1.4b23.
5860
5861 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5862
5863         * "Released" 1.4b22.
5864
5865         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
5866         to avoid redefinition warnings.
5867
5868         * host.c (store_hostaddress): Use memcpy() to copy the address
5869         returned by inet_addr.
5870
5871         * version.c: Changed version to 1.4b22.
5872
5873 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
5874
5875         * version.c: "Released" 1.4b21.
5876
5877         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
5878
5879         * ftp.c (ftp_port): Use conaddr.
5880         (getftp): Print the file length.
5881         (ftp_retrieve_list): Check the stamps of plain files only.
5882
5883         * connect.c (closeport): Do not call shutdown().
5884         (conaddr): New function.
5885
5886         * html.c (ftp_index): Made it dfp-aware.
5887
5888         * init.c (cleanup): New name of freemem. Close opt.dfp.
5889
5890         * ftp.c (getftp): Use opt.dfp if it is set.
5891
5892         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
5893
5894         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
5895         CWDs to be sent with recursive FTP retrievals.
5896
5897 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
5898
5899         * recur.c (parse_robots): Made it more compliant with "official"
5900         specifications.
5901
5902         * http.c: New function.
5903
5904         * ftp-unix.c (ftp_parse_ls): Added better debug output.
5905
5906         * ftp.c (getftp): Print out the LIST in case of
5907         opt.print_server_response.
5908
5909         * version.c: Changed version to 1.4b21.
5910
5911 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
5912
5913         * version.c: "Released" 1.4b20.
5914
5915         * README: Update.
5916
5917         * http.c (gethttp): Preset lengths of various headers instead of
5918         calculating them dynamically.
5919         (gethttp): Check for 206 partial contents.
5920
5921 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
5922
5923         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
5924
5925         * http.c (gethttp): Send the port number in the Host: header.
5926
5927 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
5928
5929         * http.c (gethttp): Send host: header.
5930         (gethttp): Add the possibility of user-defined headers.
5931         (gethttp): Move decision about pragma: no-cache to http_loop,
5932         where it belongs.
5933         (gethttp): Pass a struct instead of enormous argument list.
5934         (http_loop): Use a new, fancier display format.
5935         (ftp_loop): Likewise.
5936
5937         * main.c: (hangup): Turn off buffering of the new log file.
5938
5939         * install-sh: Likewise.
5940
5941         * config.sub: Replace with the one in autoconf-2.10
5942
5943         * geturl.1: Update.
5944
5945         * init.c: New options httpuser and httppasswd.
5946
5947         * http.c: (base64_encode_line): New function.
5948         (gethttp): Send authentication.
5949
5950         * connect.c (make_connection): Use store_hostaddress.
5951
5952 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
5953
5954         * host.c (store_hostaddress): New function.
5955
5956         * NEWS: Update.
5957
5958         * http.c (hgetrange): New function.
5959         (gethttp): Use ranges.
5960
5961         * utils.c (numdigit): Accept long instead of int.
5962
5963         * http.c (http_loop): Add restart capabilities.
5964
5965         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
5966         being used uninitialized.
5967         (ftp_retrieve_list): Similar fix.
5968
5969         * host.c (add_hlist): Fixed a bug that could cause cmp being used
5970         uninitialized.
5971
5972         * url.c (construct_relative): New function.
5973
5974         * recur.c (recursive_retrieve): Use it.
5975
5976         * retr.c (convert_links): New function.
5977
5978 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
5979
5980         * url.c (free_urlpos): New function.
5981
5982         * recur.c (recursive_retrieve): Adapt.
5983
5984         * url.c (get_urls_html): Return a linked list instead of a vector.
5985
5986         * url.c (get_urls_file): Return a linked list instead of a vector.
5987
5988         * geturl.1: Update.
5989
5990         * http.c (gethttp): Implement it.
5991
5992         * init.c (setval): New option: SAVEHEADERS
5993
5994         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
5995         be retrieved. Lack of this test caused bugs when the connection
5996         was lost during listing.
5997
5998         * retr.c (retrieve_url): Fixed a bug that caused
5999         coredumps. *newloc is now reset by default.
6000         (retrieve_url): Lift the twenty-tries limit on proxies.
6001
6002         * version.c: Changed version to 1.4b20.
6003
6004 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6005
6006         * version.c: "Released" 1.4b19.
6007
6008 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6009
6010         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6011         (getftp): Changed prototype to accept ccon *.
6012
6013 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6014
6015         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6016         incorrect values to files pointed to by symbolic links.
6017         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6018
6019 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6020
6021         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6022
6023         * main.c (main): New option: --user-agent.
6024
6025         * geturl.1: Ditto.
6026
6027         * init.h: Ditto.
6028
6029         * init.c (setval): Ditto.
6030
6031         * main.c (main): Rename "server-headers" to "server-response".
6032
6033         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6034         executables in 'ls -F' listings.
6035
6036 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6037
6038         * url.c (parseurl): Remove realloc() and sprintf().
6039         (str_url): Get rid of sprintf().
6040
6041         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6042         servers.
6043
6044         * url.h (URL_CLEANSE): Made it else-resistant.
6045         (USE_PROXY): New macro.
6046
6047 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6048
6049         * NEWS: Update.
6050
6051         * version.c: Changed version to 1.4b19.
6052
6053 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6054
6055         * version.c: "Released" 1.4b18.
6056
6057         * url.c: Made it reallocate space exponentially.
6058
6059 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6060
6061         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6062         the list of stuff to fetch.
6063
6064 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6065
6066         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6067         -Fi.
6068
6069         * html.c (htmlfindurl): Rewrite.
6070
6071         * http.c (gethttp): Use opt.proxy_cache.
6072
6073         * main.c (main): Added --cache option.
6074
6075         * ftp.c (ftp_response): Print server response if opt.print_server
6076         response is set.
6077         (getftp): Print newlines after each request if the server response
6078         is to be printed.
6079         (ftp_response): Copy the last response line to last_respline.
6080
6081         * http.c (gethttp): Add Pragma: nocache for retried
6082         proxy-retrievals.
6083
6084         * ftp.c (getftp): Use it.
6085
6086         * retr.c (buf_discard): New function.
6087
6088         * ftp.c (ftp_response): Use buf_readchar().
6089         (getftp): Flush the control connection buffer before calling
6090         get_contents().
6091
6092         * retr.c (buf_readchar): New function.
6093         (buf_flush): New function.
6094         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6095         (get_contents): Use buf_flush.
6096
6097 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6098
6099         * ftp.c: Incorporate changes to ftp_response.
6100
6101         * ftp.c (ftp_response): Allocate the server response dynamically,
6102         as in read_whole_line and fetch_next_header.
6103
6104         * utils.c (read_whole_line): Fixed a bug that prevented reading
6105         the last line if it is not \n-terminated. Also fixed a possible
6106         memory overflow.
6107
6108         * http.c (fetch_next_header): Return malloc-ed string as large as
6109         needed.
6110         (gethttp): Use new fetch_next_header.
6111
6112 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6113
6114         * http.c (hgetlen): Compute the header length the first time only.
6115         (hgettype): Ditto.
6116         (hgetlocation): Ditto.
6117         (hgetmodified): Ditto.
6118
6119 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6120
6121         * sample.geturlrc: Update.
6122
6123 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6124
6125         * http.c (http_loop): Ditto.
6126
6127         * ftp.c (getftp): Open the output file as binary.
6128
6129         * version.c: Changed version to 1.4b18.
6130
6131 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6132
6133         * version.c: "Released" 1.4b17.
6134
6135         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6136         instead of failed assertion.
6137
6138 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6139
6140         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6141         if a file of that name already exists.
6142
6143 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6144
6145         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6146
6147         * config.h.in: Define gethostbyname as Rgethostbyname when using
6148         Socks.
6149
6150         * configure.in: Check for -lresolv if using Socks.
6151
6152         * version.c: Changed version to 1.4b17.
6153
6154 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6155
6156         * version.c: "Released" 1.4b16.
6157
6158         * http.c (gethttp): More intelligent check for first line of HTTP
6159         response.
6160         (gethttp): Would bug out on time-stamping.
6161
6162         * version.c: Changed version to 1.4b16.
6163
6164 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6165
6166         * version.c: Released 1.4b15.
6167
6168         * http.c (http_loop): Print \n after the loop entry, not before.
6169
6170         * url.c (url_filename): Use ISDOT.
6171
6172         * url.h (ISDOT): New macro.
6173
6174         * recur.c (recursive_retrieve): Change only opt.recursive for
6175         following FTP.
6176
6177 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6178
6179         * socks/geturl.cgi: Fixed version No.
6180
6181         * socks/download-netscape.html: Ditto.
6182
6183         * socks/download.html: Changed socks.html to download.html.
6184
6185 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6186
6187         * url.c (url_filename): Check for opt.dirstruct instead for
6188         opt.recursive && opt.dirstruct.
6189
6190         * init.c (defaults): Ditto.
6191         (defaults): Reset dirstruct by default.
6192         (setval): Set opt.dirstruct whenever setting recursive.
6193
6194         * init.h: Removed FORCEDIRHIER.
6195
6196         * INSTALL: Added -L to socks-description.
6197
6198         * version.c: Changed version to 1.4b15.
6199
6200 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6201
6202         * version.c: "Released" 1.4b14.
6203
6204         * geturl.1: Update AUTHOR to include Rosella as contributor.
6205
6206         * NEWS: Update.
6207
6208         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6209
6210         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6211         (cal_time): Fix == to eq.
6212
6213         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6214
6215         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6216
6217         * Makefile.in: Use @VERSION@.
6218
6219         * configure.in: Check version from version.c.
6220
6221         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6222
6223         * socks/download.html: Created from download-netscape.html, made
6224         HTML-2.0 compliant.
6225
6226         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6227         following FTP links from recursions.
6228
6229 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6230
6231         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6232         absolute directories correctly.
6233
6234         * version.c: Changed version to 1.4b14.
6235
6236 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6237
6238         * version.c: "Released" 1.4b13.
6239
6240         * url.c (make_backup): New function.
6241
6242         * http.c (http_loop): Make a backup copy of the local file (using
6243         rename(2)) before opening it.
6244
6245         * main.c (main): Added --backups.
6246
6247         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6248         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6249         (ftp_getaddress): Check for empty, null or (null) domain.
6250
6251         * url.c (get_urls_html): If this_url is NULL, the base must have a
6252         protocol.
6253         (parseurl): Use has_proto.
6254
6255         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6256         retries.
6257
6258         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6259         if it is not already there.
6260         (has_proto): New function.
6261         (get_urls_html): Eliminate the remaining call to findurl -- use
6262         has_proto.
6263
6264         * geturl.1: Ditto.
6265
6266         * main.c: Change -X to -x.
6267
6268         * url.c (url_filename): Simplify creation of filename if
6269         prefix_files is set.
6270         (url_filename): Simplify everything. And I do mean *everything*.
6271         (mkstruct): Add dir_prefix before hostname.
6272         (path_simplify): Fixed a bug that caused writing outside the path
6273         string in case of "." and ".." path strings.
6274
6275 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6276
6277         * init.c: Added --mirror.
6278
6279         * main.c (main): Added -X to force saving of directory hierarchy.
6280
6281         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6282         (ftp_retrieve_list): Check whether quota is exceeded.
6283
6284         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6285
6286         * http.c (gethttp): Use referer if present.
6287
6288         * recur.c (recursive_retrieve): Set u->referer before calling
6289         retrieve_url.
6290
6291         * url.c (newurl): Use memset to nullify the struct members.
6292         (freeurl): Free the referer field too.
6293
6294         * url.h: Added referer to urlinfo.
6295
6296         * geturl.1: Updated the manual to document some of the new features.
6297
6298         * utils.c (numdigit): Moved from url.c.
6299
6300         * README: Rewritten.
6301
6302         * config.h.in: Add the support for socks.
6303
6304         * configure.in: Add the support for socks.
6305
6306         * url.c (url_filename): If the dir_prefix is ".", work with just
6307         the file name.
6308         (url_filename): Do not look for .n extensions if timestamping if
6309         turned on.
6310
6311         * retr.c (show_progress): Skip the over-abundant restval data, and
6312         print the rest of it with ',' instead of '.'.
6313
6314 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6315
6316         * retr.c (show_progress): Changed second arg. to long (as it
6317         should be).
6318         (show_progress): Moved to retr.c.
6319         (get_contents): Moved to retr.c.
6320
6321         * version.c: Change version to 1.4b13.
6322
6323 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6324
6325         * url.c (in_acclist): Would return after the first suffix.
6326
6327 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6328
6329         * version.c: "Released" 1.4b12.
6330
6331         * url.c (path_simplify): More kludgifications.
6332         (get_urls_html): Use new parameters for htmlfindurl.
6333
6334         * html.c: Removed memorizing "parser states", since the new
6335         organization does not require them.
6336
6337         * init.c (run_geturlrc): Use read_whole_line.
6338
6339         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6340
6341         * recur.c (parse_robots): Use read_whole_line.
6342
6343         * utils.c (read_whole_line): New function.
6344
6345         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6346
6347         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6348         tested on OSF and Ultrix.
6349         (add_hlist): New function.
6350         (free_hlist): New function.
6351         (search_host): New function.
6352         (search_address): New function.
6353         (realhost): Use search_host, search_address and add_hlist.
6354         (same_host): Replaced realloc() with strdupdelim(), made
6355         case-insensitive, fixed a memory leak.
6356
6357         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6358         tm_min, like intended.
6359
6360         * version.c: Change user agent information to
6361         Geturl/version.
6362
6363 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6364
6365         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6366
6367         * url.c (acceptable): Always accept directories.
6368
6369         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6370         servers by stripping trailing @ from symlinks and trailing / from
6371         directories.
6372
6373         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6374
6375         * url.c (skip_url): Use toupper instead of UCASE.
6376
6377         * host.c (sufmatch): Made it case-insensitive.
6378
6379         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6380         (match_backwards): New function, instead of
6381         match_backwards_or_pattern.
6382
6383         * recur.c (recursive_retrieve): Increased performance by
6384         introducing inl, which reduces number of calls to in_slist to only
6385         one.
6386
6387         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
6388         routine to use.
6389
6390         * main.c (printhelp): Removed the warranty stuff.
6391
6392 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
6393
6394         * url.c (add_slist): Simplify.
6395         (match_backwards_or_pattern): New function.
6396         (in_acclist): Use match_backwards_or_pattern.
6397         (matches): Remove.
6398
6399 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
6400
6401         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
6402         recursive.
6403
6404         * html.c (ftp_index): Fixed to work. Beautified the output.
6405
6406         * ftp.c (ftp_retrieve_glob): Another argument to control whether
6407         globbing is to be used.
6408         (ftp_retrieve_list): Compare the time-stamps of local and remote
6409         files to determine whether to download.
6410
6411 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
6412
6413         * ftp.c (rel_constr): New function.
6414
6415         * retr.c (retrieve_from_file): Check for text/html before
6416         retrieving recursively.
6417
6418         * main.c (main): Check whether the file is HTML before going into
6419         recursive HTML retrieving.
6420
6421         * ftp.c (ftp_retrieve_list): Manage directories.
6422         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
6423         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
6424         initialized, causing bugchecks in getftp to fail.
6425
6426         * configure.in: Check for symlink.
6427
6428         * ftp.c (ftp_retrieve_list): Added support for symlinks.
6429
6430         * version.c: "Released" 1.4b10.
6431
6432         * atotm.c (atotm): Redeclared as time_t.
6433
6434         * init.c: New variable "timestamping".
6435
6436         * main.c (main): New option 'N'.
6437
6438         * http.c (hgetlocation): Case-insensitive match.
6439         (hgetmodified): New function.
6440         (http_loop): Implement time-stamping.
6441
6442 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
6443
6444         * version.c: Changed version to 1.4b10
6445
6446         * atotm.c: New file, from phttpd.
6447
6448         * options.h (struct options): New parameter timestamping.
6449
6450         * version.c: 1.4b9 "released".
6451
6452         * recur.c (recursive_retrieve): Used linked list (ulist) for
6453         faster storing of URLs.
6454
6455         * url.c (get_urls_html): Removed the old kludge with comparing the
6456         outputs of htmlfindurl and findurl.
6457         (get_urls_html): Added better protocol support here.
6458         (create_hash): Removed, as well as add_hash and in_hash.
6459         (addslist): New function.
6460         (in_slist): ditto
6461
6462         * version.c: Released 1.4b8, changed version to b9.
6463
6464 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6465
6466         * ftp.c (freefileinfo): New function.
6467         (delelement): New function.
6468
6469         * everywhere: GPL!
6470
6471         * ftp.c (ftp_loop): Use ccon.
6472         (ftp_retrieve_glob): Likewise.
6473
6474         * ftp.h: Define ccon, to define status of control connection.
6475
6476         * ftp.c (ftp_get_listing): New function.
6477         (ftp_retrieve_more): New function.
6478         (ftp_retrieve_glob): New function.
6479
6480 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
6481
6482         * configure.in: Removed the search for cuserid().
6483
6484         * init.c (getmode): Renamed to getperms.
6485
6486 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
6487
6488         * version.c: New version.
6489
6490         * main.c (hangup): New function, that handles hangup. Hangup
6491         signal now causes geturl to stop writing on stdout, and to write
6492         to a log file.
6493
6494         * ftp.c (getftp): "Released" 1.4b7.
6495
6496         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
6497         (ftp_index): Use fileinfo/urlinfo.
6498
6499         * ftp-unix.c (ftp_parse_ls): New function.
6500         (symperms): New function.
6501
6502         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
6503
6504         * retr.c (retrieve_url): Added FTP support.
6505
6506 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6507
6508         * geturl.h: Removed NOTFTP2HTML enum.
6509         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
6510
6511         * ftp.c (getftp): Resynched with urlinfo.
6512         (getftp): Removed HMTL-ization of index.html from getftp.
6513
6514         * version.c: 1.4b6 "released".
6515
6516         * options.h (options): New struct, to keep options in.
6517
6518         * http.c (http_loop,gethttp): Synched with proxy.
6519
6520         * retr.c (retrieve_url): Implemented proxy retrieval.
6521
6522         * main.c (main): Use retrieve_from_file.
6523
6524 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
6525
6526         * retr.c (retrieve_from_file): New function.
6527
6528         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
6529         can be found in u->proto.
6530
6531         * ftp.c (ftp_response): Fixed to accept multi-line responses as
6532         per RFC 959.
6533
6534         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
6535
6536         * url.c (mymkdir): Removed the file of the same name, if one
6537         exists.
6538         (isfile): New function.
6539         (mkstruct): Fixed the '/' glitches.
6540         (path_simplify): Hacked to treat something/.. correctly.
6541
6542 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6543
6544         * http.c (gethttp): Close the socket after error in headers.
6545         (http_loop): HEOF no longer a fatal header.
6546
6547         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6548         simplifies the syntax of calling retrieve_url.
6549
6550         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6551
6552         * url.c (get_urls_file): New function.
6553         (get_urls_html): New function.
6554
6555         * recr.c (recursive_retrieve): Patched up to conform to the
6556         standards.
6557
6558         * http.c (gethttp): Synched with the rest...
6559         (gethttp): Treat only CONREFUSED specially, with connection
6560         errors.
6561
6562         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6563
6564 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6565
6566         * http.c (http_loop): New function.
6567
6568         * loop.c: Removed *lots* of stuff from retrieve_url.
6569
6570         * url.c (parseurl): Changed to work with urlinfo. Integrated
6571         username finding and path parsing.
6572         (newurl): New function.
6573         (freeurl): New function.
6574         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6575         (url_filename): Likewise.
6576         (path_simplify): Accept relative paths too.
6577         (opt_url): Made urlinfo-compliant, removed bogosities.
6578         (path_simplify): Expanded to accept relative paths.
6579         (str_url): A replacement for hide_url
6580         (decode_string): Fixed a bug that caused malfunctioning when
6581         encountering an illegal %.. combination.
6582         (opt_url): Removed the argument. Dot-optimizations are now default.
6583
6584         * nmalloc.c (strdupdelim): New function.
6585
6586         * url.h: Added the urlinfo structure
6587
6588 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6589
6590         * url.c (hide_url): Thrown out the protocol assertion. Do not
6591         change the URL if the protocol if not recognized.
6592         (findurl): Put continue instead of break.
6593
6594 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6595
6596         * sample.geturlrc: Changed the defaults to be commented out and
6597         harmless (previous defaults caused pains if copied to
6598         ~/.geturlrc).
6599
6600         * http.c (gethttp): Print the HTTP request in debug mode.
6601
6602         * connect.c (iread): Added EINTR check loop to select-ing
6603         too. EINTR is now correctly handled with select().
6604
6605         * TODO: new file
6606
6607 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
6608
6609         * host.c (same_host): Made the function a little bit more
6610         intelligent regarding diversified URL syntaxes.
6611
6612         * url.c (skip_url): Spaces are now skipped after URL:
6613
6614         * Released 1.3.1 with the patch to prevent crashing when sending
6615         NULL to robot* functions and the patch to compile "out of the box"
6616         on AIX.
6617
6618         * recr.c (recursive_retrieve): Added checking whether this_url is
6619         NULL when calling the robot functions.
6620
6621         * ChangeLog: New file.