sjero.net Git - wget/blob - src/ChangeLog

   1 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * retr.c (show_progress): Use it.
   4
   5         * log.c (log_set_flush): New function.
   6
   7 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
   8
   9         * utils.c (path_simplify): Don't remove trailing slashes.
  10
  11         * ftp.c (ftp_get_listing): Use it.
  12
  13         * utils.c (file_merge): New function.
  14
  15         * url.c (opt_url): Removed.
  16
  17         * recur.c (recursive_retrieve): Inline "opt_url" logic.
  18
  19         * main.c (main): Use xfree(), not free().
  20
  21         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
  22
  23         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
  24         internally.
  25
  26         * config.h.in: Include a stub for HAVE_STRPBRK.
  27
  28         * cmpt.c (strpbrk): Include a replacement for systems without
  29         strpbrk().
  30
  31         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
  32
  33         * url.c (url_set_dir): New function.
  34         (url_set_file): Ditto.
  35
  36         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
  37         parser makes the URL "params" available, so we can do that in this
  38         function.
  39
  40         * retr.c: Ditto.
  41
  42         * ftp.c: Ditto; pass the local file information in `ccon'.
  43
  44         * http.c: Get rid of the ugly kludge that had URL being replaced
  45         with the proxy URL when proxy retrieval was requested.  Use a
  46         separate parameter to http_loop and gethttp for the proxy URL.
  47
  48         * http.c: Changed to reflect the fact that local file, proxy, and
  49         referer information are no longer stored in struct url.  The local
  50         file information is passed in `struct hstat' now.
  51
  52         * url.c: Reworked URL parsing to be more regular.  Reencode the
  53         URL using reencode_string.
  54         Removed non-URL-related information from struct url.  This
  55         includes fields `proxy', `local', and `referer'.
  56
  57 2001-11-22  Jochen Hein  <jochen@jochen.org>
  58
  59         * main.c (main): Split the copyright notice for easier
  60         translation.
  61
  62 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
  63
  64         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
  65           command to server to request file size.
  66         * ftp.h (ftp_size): Export it.
  67         * ftp.c (getftp): Use new ftp_size function if restoring
  68           transfer of a file with unknown size.
  69
  70 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
  71
  72         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
  73
  74 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  75
  76         * url.c (getproxy): Handle URL shorthands.
  77
  78 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  79
  80         * main.c: Remove --wait / --waitretry backwards compatibility
  81         code.
  82
  83 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  84
  85         * main.c (main): Use it.
  86
  87         * url.c (rewrite_url_maybe): New function.
  88
  89 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  90
  91         * url.c: Clean up handling of URL schemes.
  92
  93 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
  94
  95         * url.c: Get rid of `protostrings'.
  96         (skip_proto): Don't use protostrings.
  97         (has_proto): Ditto.
  98
  99 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 100
 101         * Makefile.in: Conditionally compile getopt.o.
 102
 103 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 104
 105         * md5.h: Renamed to gnu-md5.h.
 106
 107         * md5.c: Renamed to gnu-md5.c.
 108
 109         * http.c: Ditto.
 110
 111         * ftp-opie.c: Use the new macros.
 112
 113         * sysdep.h: Define md5-related macros.
 114
 115         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
 116         depending on which md5 implementation is used.
 117
 118 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 119
 120         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
 121         the compiler.
 122
 123 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 124
 125         * http.c (gethttp): Print the whole response line when printing
 126         headers is requested.
 127
 128 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 129
 130         * res.c: New file.  Implement all RES-related code here.
 131
 132 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 133
 134         * version.c: Wget 1.7.1 is released.
 135
 136 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 137
 138         * headers.c (header_extract_number): Ignore trailing whitespace.
 139
 140 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
 141
 142         * html-url.c (collect_tags_mapper): Fix bug converting links
 143         with -k option for tags with multiple link attributes by
 144         handling links in the order they appear.
 145
 146 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
 147
 148         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
 149           the call to the 'rate' function by moving it past the error
 150           checking for the 'getftp' function return value.
 151
 152 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 153
 154         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
 155         '\"'.  Different compilers' assert macros are broken in different
 156         ways.
 157
 158 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
 159
 160         * http.c (gethttp): print debug output for errors occuring during
 161         the ssl handshake.
 162
 163 2001-11-16  Chris Seawood  <cls@seawood.org>
 164
 165         * init.c: Ditto.
 166
 167         * host.c: Ditto.
 168
 169         * connect.c: Ditto.
 170
 171         * sysdep.h: Support compilation under BEOS.
 172
 173 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
 174
 175         * url.c (url_equal): Fix a memory leak when parseurl returns an
 176         error on the second URL. Also, since url_equal is not used at the
 177         moment, do not compile it.
 178
 179         * url.h: Ditto for the prototype of url_equal.
 180
 181 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 182
 183         * html-parse.c (map_html_tags): Support XML-style empty tags.
 184
 185 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 186
 187         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
 188         loop condition because we're no longer setting SIZEVAR here.
 189
 190 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 191
 192         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
 193         call because it needs the old value.
 194
 195 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 196
 197         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
 198         an attribute name.
 199
 200 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 201
 202         * url.c (url_filename): Make sure that slashes that sneak in to
 203         u->file via query string get protected.
 204         (file_name_protect_query_string): New function.
 205
 206 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 207
 208         * recur.c (recursive_retrieve): Also check undesirable_urls with
 209         canonicalized URL.
 210
 211 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 212
 213         * http.c (gethttp): Search `.netrc' with real host, not the proxy
 214         one.
 215
 216 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 217
 218         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
 219         define it.
 220
 221 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 222
 223         * ftp.h: Provide correct prototype for ftp_parse_ls().
 224
 225 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 226
 227         * version.c: Wget 1.7 is released.
 228
 229 2001-06-03  Karl Eichwalder  <ke@suse.de>
 230
 231         * ftp-ls.c (ftp_parse_ls): Fix typo.
 232
 233 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 234
 235         * all: Update copyright information.
 236
 237 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 238
 239         * http.c (gethttp): Indicate that the continued download failed
 240         for *this* file.
 241
 242 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 243
 244         * version.c: Wget 1.7-pre1 is released.
 245
 246 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 247
 248         * version.c: Updated version to 1.7-pre1.
 249
 250 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 251
 252         * gen_sslfunc.c: Don't include <sys/time.h> directly.
 253
 254 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 255
 256         * http.c (gethttp): Use real URL data for cookies, not the proxy
 257         stuff.
 258
 259 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 260
 261         * main.c (print_help): Document `--no-http-keep-alive'.
 262
 263         * utils.c (numdigit): Handle negative numbers *correctly*.
 264
 265         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
 266         than the confusing "unsigned".
 267
 268         * utils.c (string_set_contains): Renamed from string_set_exists.
 269
 270         * hash.c (hash_table_contains): Renamed from hash_table_exists.
 271
 272         * cookies.c: Move case-insensitive hash tables to hash.c.
 273
 274 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 275
 276         * http.c (gethttp): Before concluding that the file is already
 277         fully retrieved, make sure that the file existed and `Range' was
 278         actually requested.
 279
 280 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 281
 282         * cookies.c (eliminate_dups): New function.
 283         (build_cookies_request): Use it.
 284         (build_cookies_request): Set chain_store_size after reallocating
 285         all_chains.
 286         (check_domain_match): Annotated for easier future debugging.
 287         (store_cookie): In the debug message, print whether the cookie is
 288         permanent.
 289
 290 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 291
 292         * http.c (http_loop): Reset no_truncate before deciding whether to
 293         set it.
 294         (gethttp): Further clarify "-c conflicts with existing file" error
 295         message, based on input from Herold Heiko.
 296
 297 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
 298
 299         * http.c (http_loop): If restval is set, set no_truncate to 1
 300         unconditionally.
 301
 302 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 303
 304         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
 305         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
 306         (ftp_parse_vms_ls): Ditto.
 307
 308 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
 309
 310         * init.c (cmd_address): Zero SIN before using it; apparently
 311         needed on *BSD.
 312
 313 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 314
 315         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
 316         empty.
 317
 318 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
 319
 320         * main.c (main): Make `--cookies' respect its argument.
 321
 322 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
 323
 324         * main.c (main): Removed undocumented option `--email-address'.
 325
 326         * netrc.c: Use the latest read_whole_line.
 327
 328         * init.c (defaults): Set opt.ftp_pass to "-wget@".
 329
 330         * mswindows.c (pwd_cuserid): Ditto.
 331
 332         * utils.c (pwd_cuserid): Removed.
 333
 334         * host.c (ftp_getaddress): Removed.
 335
 336 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
 337
 338         (http_loop): Allocate space for filename_plus_orig_suffix with
 339         alloca; this is more efficient and removes the need to free it
 340         before each and every return.
 341
 342 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
 343
 344         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
 345         unneeded because the file is already there and fully downloaded,
 346         and -c is specified.
 347         (http_loop): Handle RETRUNNEEDED.
 348
 349         * wget.h (uerr_t): New value RETRUNNEEDED.
 350
 351         * http.c (http_loop): Set no_truncate for files that both exist
 352         and are non-empty.
 353         (gethttp): Consider the download finished when restval >= contlen,
 354         not only when restval==contlen.
 355         (gethttp): Handle redirection before giving up due to -c.
 356         (gethttp): Clarify error message which explains that -c will not
 357         truncate the file.
 358         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
 359         the stuff that needs freeing and release the socket.
 360
 361 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 362
 363         * main.c (print_help): Wget booleans accept "off", not "no".
 364
 365 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 366
 367         * http.c (http_loop): If allow_cache is zero, always disable
 368         caching, not only when retrieving through proxy.
 369
 370         * init.c: Ditto.
 371
 372         * options.h (struct options): Rename proxy_cache to allow_cache.
 373
 374 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 375
 376         * http.c (mktime_from_utc): Improve documentation.
 377         (http_atotm): Put format strings into a separate array.
 378
 379 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 380
 381         * safe-ctype.h: Instead of throwing #error when isalpha is
 382         defined, redefine it to something that will throw a compile-time
 383         error if actually *used*.  Do the same for the rest of the
 384         standard C macros.
 385
 386 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
 387
 388         * url.c (getproxy): Ignore empty proxy vars.
 389
 390 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 391
 392         * http.c (http_loop): Would load cookies every time.
 393
 394         * cookies.c (load_cookies): Handle cookies whose values contain
 395         embedded spaces.
 396
 397 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 398
 399         * utils.c: Define each DIGITS_* in one line.
 400
 401 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
 402
 403         * http.c (http_atotm): Initialize t.tm_isdst to 0.
 404         (mktime_from_utc): Prevent mktime() from having discontinuities at
 405         DST transition points.
 406
 407 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 408
 409         * html-url.c (get_urls_html): Fix documentation.
 410
 411 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 412
 413         * url.c (UNSAFE_CHAR): Reimplement using a static table.
 414         (url_init): Removed.
 415         (init_unsafe_char_table): Removed.
 416
 417 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 418
 419         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
 420
 421 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 422
 423         * utils.c: Document timer functions.
 424
 425         * retr.c (rate): Use it.
 426         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
 427
 428         * utils.c (wtimer_granularity): New function.
 429
 430 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 431
 432         * retr.c (show_progress): Ditto.
 433
 434         * ftp.c (getftp): Ditto.
 435
 436         * http.c (gethttp): Use new timer functions.
 437
 438         * utils.c (wtimer_allocate): New function.
 439         (wtimer_new): Ditto.
 440         (wtimer_delete): Ditto.
 441         (wtimer_reset): Ditto.
 442         (wtimer_elapsed): Ditto.
 443
 444 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 445
 446         * utils.c (long_to_string): New, faster version.  Favors smaller
 447         numbers; much of the calculation is now done at compile-time.
 448
 449 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 450
 451         * utils.c (numdigit): Handle negative numbers.
 452
 453 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 454
 455         * retr.c (show_progress): Print the download rate even when the
 456         percentages are not available.
 457
 458 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 459
 460         * ftp.c (getftp): Adjust expected_bytes if the length is
 461         authoritative.
 462
 463 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 464
 465         * url.c: Don't declare `construct'.
 466
 467         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
 468         mappings to new locations.
 469         (hash_table_new): Make resize_threshold a field in the hash table,
 470         so we don't have to recalculate it in each hash_table_put.
 471         (grow_hash_table): Update resize_threshold.
 472         (MAX): Remove unused macro.
 473         (prime_size): Made static.
 474
 475 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 476
 477         * retr.c (retrieve_url): Call uri_merge, not url_concat.
 478
 479         * html-url.c (collect_tags_mapper): Call uri_merge, not
 480         url_concat.
 481
 482         * url.c (mkstruct): Use encode_string instead of xstrdup followed
 483         by URL_CLEANSE.
 484         (path_simplify_with_kludge): Deleted.
 485         (contains_unsafe): Deleted.
 486         (construct): Renamed to uri_merge_1.
 487         (url_concat): Renamed to uri_merge.
 488
 489 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 490
 491         * url.c (str_url): Use encode_string instead of the unnecessary
 492         CLEANDUP.
 493         (encode_string_maybe): New function, returns input string if no
 494         encoding is needed.
 495         (encode_string): Call encode_string_maybe to do the dirty work,
 496         xstrdup if no work needed.
 497
 498 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 499
 500         * wget.h (XDIGIT_TO_xchar): Define here.
 501
 502         * url.c (decode_string): Use new name.
 503         (encode_string): Ditto.
 504
 505         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
 506         (dump_hash): Use new name.
 507
 508         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
 509         XDIGIT_TO_XCHAR respectively.
 510
 511 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 512
 513         * init.c: Include cookies.h.
 514
 515         * cookies.h: Declare cookies_cleanup.
 516
 517         * cookies.c (check_domain_match): Remove unused variable.
 518         (save_cookies): Remove extraneous argument from debug statement.
 519
 520         * host.c (same_host): Don't call skip_url.
 521
 522         * url.c (skip_url): Removed.  Removed its calls from various
 523         functions in url.c.
 524
 525 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 526
 527         * cookies.c (unsigned_string_hash): Use the new code in
 528         string_hash as reference.
 529
 530         * hash.c (hash_table_map): Allow deletion and change of the
 531         element processed by MAPFUN.
 532         (string_hash): Use the function from glib.
 533
 534 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 535
 536         * config.h.in: Include #undef stub.
 537
 538         * hash.c (hash_table_remove): Rewrite to actually clear deleted
 539         entries instead of just marking them as deleted.
 540
 541 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 542
 543         * hash.h: Declare hash_table_get_pair and hash_table_count.
 544
 545 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 546
 547         * cookies.c: Declare http_atotm.
 548
 549 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 550
 551         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
 552         permissions.  A compiler that doesn't accept octal constants is
 553         seriously broken and shouldn't be used -- octal constants were
 554         present in K&R C!
 555
 556 2001-01-20  Karl Eichwalder  <ke@suse.de>
 557
 558         * Makefile.in: Provide and use DESTDIR according to the Coding
 559         Standards.
 560
 561 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 562
 563         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
 564         specification.
 565
 566 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 567
 568         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
 569         because that strips the *leading* slash, thus forcing relative
 570         FTP retrieval.
 571
 572 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 573
 574         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
 575         notation for VMS servers.
 576         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
 577         odir is an empty string.
 578
 579 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 580
 581         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
 582         effective. Suggested by Edward J. Sabol.
 583
 584 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 585
 586         * cookies.c (build_cookies_request): Use and sort cookies from all
 587         matching domains.
 588         (build_cookies_request): Check for duplicates before generating
 589         the `Cookies' header.
 590
 591         * main.c (main): Don't load cookies here.
 592         (main): Make loadcookies and savecookies call the correct command.
 593
 594         * http.c (http_loop): Load cookies on-demand.
 595
 596 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 597
 598         * http.c (gethttp): Fix indentation of SSL ifdef.
 599
 600 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 601
 602         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
 603         that hack is no longer necessary.
 604         (getftp): Prepend initial directory to *non*-absolute u->dir's.
 605
 606 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 607
 608         * init.c (cmd_file): New function.
 609         (enable_tilde_expansion): New variable.
 610         (run_wgetrc): Use it.
 611         (cmd_file): Use it.
 612
 613 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 614
 615         * init.c: Include cookie-related options.
 616
 617         * main.c (main): Include cookie-specific options.
 618         (main): Load cookies before download is finished.
 619         (main): Save cookies when done.
 620
 621         * http.c (gethttp): Process the `Set-Cookie' header.
 622         (gethttp): Include cookies in the response.
 623
 624         * cookies.c: New file.
 625
 626 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 627
 628         * utils.c (datetime_str): New function.
 629
 630 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 631
 632         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
 633         12:01PM == 00:01, which was obviously wrong. Taken care of this
 634         anomaly.
 635
 636         * ChangeLog: Removed an excess conflict marker. Reformatted the
 637         entry by Philipp Thomas from 2001-03-09.
 638
 639         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
 640         between 0 and 23. Elminate unused variable `sec'.
 641
 642 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 643
 644         * hash.c (hash_table_count): New function.
 645
 646 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 647
 648         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
 649         Digital Unix cc.
 650
 651 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 652
 653         * config.h.in: Oops, do the namespace tweaks only on systems we
 654         know about.
 655
 656 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 657
 658         * hash.c: Include <string.h>.
 659
 660 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 661
 662         * config.h.in: Define "compilation environment" options that work
 663         under Linux and Solaris.  To be reviewed on other OS'es.
 664
 665 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 666
 667         * http.c (gethttp): Prepend literal newline with `\n\'.
 668
 669 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 670
 671         * sysdep.h: Don't define VERY_LONG_FORMAT.
 672
 673         * utils.c (very_long_to_string): New function.
 674         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
 675
 676 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
 677
 678         * url.c (parse_uname): Would run past the end of the string if the
 679         username was present, but the URL did not contain a slash, e.g.
 680         http://foo:bar@myhost.
 681
 682 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
 683
 684         * http.c (http_atotm): Use %A instead of %a to match full
 685         weekday.  (On most systems there is no difference.)
 686
 687 2001-04-03  Paul Bludov  <paul@ozero.net>
 688
 689         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
 690         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
 691         leak.
 692         (ws_mypath): Use GetModuleFileName instead of argv[0].
 693         (ws_startup): Use data.wVersion for comparison.
 694
 695 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 696
 697         * http.c (http_loop): Ditto.
 698
 699         * ftp.c (ftp_loop_internal): Made the check whether to continue
 700         retrieval `-O'-friendly.
 701
 702 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 703
 704         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
 705         they will be handled as whitespace.
 706         (parse_netrc): Correctly handle lines that end with whitespace.
 707
 708 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 709
 710         * retr.c (retrieve_url): New variable global_download_count used
 711         to identify first retrieval.
 712
 713         * ftp.c (getftp): Ditto.
 714
 715         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
 716
 717 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 718
 719         * init.c (cmd_address): Heap-allocate the address that gets stored
 720         to CLOSURE.  Old code would simply assign an address on the stack.
 721
 722 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
 723
 724         * ftp.c (ftp_get_listing): Propagate error status.
 725         (ftp_retrieve_glob): Use it.
 726         (ftp_loop): Ditto.
 727
 728 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
 729
 730         * main.c (main): Add -C to the string that is the third arg to
 731         getopt_long().
 732
 733 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 734
 735         * ftp.c (getftp): Don't start the download from scratch if `-c'
 736         was specified, but the file is already fully downloaded.
 737
 738         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
 739         specified and the server doesn't support continued download.
 740         (gethttp): Don't start the download from scratch if `-c' was
 741         specified, but the file is already fully downloaded.
 742
 743 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 744
 745         (recursive_retrieve): Don't clear the hash tables at this point at
 746         all; it interferes with the normal operation of register_download.
 747
 748 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 749
 750         * recur.c (recursive_retrieve): Clear the hash tables only when
 751         they are defined.
 752
 753 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 754
 755         * http.c (gethttp): Make sure the socket is closed with
 756         CLOSE_INVALIDATE before we have drained the body.
 757
 758 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 759
 760         * retr.c (retrieve_url): Call register_download() for downloaded
 761         files and register_html() for downloaded HTML files.
 762
 763         * recur.c (register_download): New function; register here that a
 764         file has been downloaded, rather than in recursive_retrieve().
 765         (register_html): New function; enqueue the location of HTML files
 766         here rather than in recursive_retrieve().
 767
 768 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 769
 770         * main.c (print_help): Use multiple fputs instead of a single ugly
 771         printf().
 772         (main): Consistently assign numbers >128 to options without a
 773         corresponding character.
 774
 775 2001-03-09  Philipp Thomas  <pthomas@suse.de>
 776
 777         * safe-ctype.h: New file. Locale independent ctype.h replacement
 778         taken from libiberty.
 779
 780         * safe-ctype.c: New file. Tables for above.
 781
 782         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
 783         safe-ctype$o.
 784
 785         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
 786         isspace.
 787
 788         * ftp-basic.c: Don't include ctype.h.
 789
 790         * ftp-ls.c: Likewise.
 791
 792         * ftp.c: Likewise.
 793
 794         * headers.c: Likewise.
 795
 796         * host.c: Likewise.
 797
 798         * html-parse.c: Likewise.
 799
 800         * html-url.c: Likewise.
 801
 802         * http.c: Likewise.
 803
 804         * init.c: Likewise.
 805
 806         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
 807
 808         * netrc.c: Likewise.
 809
 810         * recur.c: Likewise.
 811
 812         * retr.c: Likewise.
 813
 814         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
 815         instead of isdigit.
 816
 817         * sysdep.h: Remove defines of ctype macros as they aren't needed
 818         for safe-ctype-h.
 819
 820         * url.c: Don't include ctype.h.
 821
 822         * utils.c: Likewise.
 823
 824         * wget.h: Include safe-ctype.h.
 825
 826 2001-03-27  Dan Harkless  <wget@harkless.org>
 827
 828         * Makefile.in: Moved top_builddir out of "User configuration
 829         section" of top Makefile and analogous spot in this one.
 830
 831 2001-03-17  Dan Harkless  <wget@harkless.org>
 832
 833         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
 834         Define top_builddir.  Link wget with libtool so the user doesn't
 835         have to supply a bunch of custom environment variables to
 836         correctly link with the OpenSSL shared libraries.
 837
 838 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
 839
 840         * http.c (gethttp): skip :port in host header if it is the
 841         DEFAULT_HTTPS_PORT when using SSL.
 842
 843         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
 844         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
 845         rest of the code.
 846         * url.h: Ditto
 847
 848 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
 849
 850         * retr.c (show_progress): Correctly calculate the number of bytes
 851         in the first line of the download that have been actually
 852         downloaded in this run.
 853
 854 2001-02-23  Dan Harkless  <wget@harkless.org>
 855
 856         * main.c (print_help): --help documentation for -N said it would
 857         re-download files if they had the _same_ timestamp on server.
 858         (print_help): -nr belongs in "FTP options" section of --help
 859         output, not "Recursive retrieval" section.  Alphabetized FTP
 860         options by long option name.
 861
 862 2001-02-16  Dan Harkless  <wget@harkless.org>
 863
 864         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
 865         that "httpsproxy" had been inserted into commands[] out of
 866         alphabetical order, causing "BUG: unknown command `httpuser'".
 867
 868 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 869
 870         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
 871         listing without correct permissons).
 872
 873         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
 874         FTP server.
 875
 876         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
 877         shall be donwloaded only when it's newer than the local copy or
 878         when it has the same timeestamp but its size is different. ST_VMS
 879         and ST_MACOS as special cases that lie about file size.
 880
 881         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
 882
 883         * Makefile.in: Removed dependency on ftpparse library due to unclear
 884         copyright issues and absence of any feedback to our queries.
 885
 886         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
 887         copyright issues and absence of any feedback to our queries.
 888         (ftp_parse_ls): Added a warning message when remote server system
 889         does not seem to be suported by wget.
 890         (ftp_parse_vms_ls): New function for parsing VMS ftp
 891         server listing output.
 892         (clean_line): New function responsible for removing
 893         end-of-line characters from FTP listing texts.
 894
 895         * ftp.c (getftp): Global variables pwd and host_type are now
 896         member of the ccon structure under names ccon.id and ccon.rs.
 897
 898         * ftp.h (struct ccon): Added formed global variables from ftp.c,
 899         enum stype rs (remote system identification) and char *id (initial
 900         working directory), as suggested by Hrvoje.
 901
 902         * url.c (parse_uname): Added support for passwords containing '@'
 903         characters.
 904         (skip_uname): Ditto.
 905
 906 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 907
 908         * ftp.c (ftp_loop): Reset con.
 909
 910 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 911
 912         * url.c (parse_uname): Added support for passwords containing '@'
 913         characters.
 914         (skip_uname): Ditto.
 915
 916 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
 917
 918         * url.c (parseurl): Debug-print u->ftp_type.
 919
 920 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 921
 922         * ftp.c (ftp_loop_internal): Disable padding.
 923         (getftp): Ditto.
 924
 925         * http.c (http_loop): Disable padding.
 926
 927         * retr.c (show_progress): Use it to enable padding.
 928
 929         * retr.c (rate): Optional parameter PAD for padding the rate.
 930
 931 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 932
 933         * retr.c (show_progress): Make sure that the last output line
 934         includes progress.
 935
 936 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
 937
 938         * retr.c (show_progress): Print the download rate along with the
 939         percentages.
 940         Along with Anders Thorsby <anders@thorsby.dk>.
 941
 942 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
 943
 944         * ftp.h: Rename enums `command' to `wget_ftp_command' and
 945         `fstatus' to `wget_ftp_status' because old names clash with Tru64
 946         net/if.h.
 947
 948 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
 949
 950         * gen_sslfunc.c: verify_callback is now static
 951
 952         * gen_sslfunc.c (init_ssl): load certificate if specified
 953
 954         * gen_sslfunc.c (ssl_printerr): new function
 955
 956         * init.c: added new --sslcertfile and --sslcertkey switches
 957
 958         * main.c: ditto
 959
 960         * options.h: ditto
 961
 962         * http.c (gethttp): abort when init_ssl fails
 963
 964 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
 965
 966         * mswindows.h: Include <malloc.h>; it's needed for alloca().
 967
 968 2001-01-10  Dan Harkless  <wget@harkless.org>
 969
 970         * url.c (str_url): Clarified this function's comment header after
 971         Hrvoje answered my question on the list as to when hide != 1.
 972         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
 973
 974 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 975
 976         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
 977         Drazen Kacar <dave@arsdigita.com>.
 978         (conaddr): Ditto.
 979
 980 2001-01-09  Dan Harkless  <wget@harkless.org>
 981
 982         * html-url.c: A bunch of fixup of `--page-requisites'-related
 983         comments to reflect Hrvoje's changes to my code when transplanting
 984         it into this new file, to fix spelling mistakes, to clarify, etc.
 985
 986         * url.c (write_backup_file): Clarified a comment.
 987         (str_url): Henrik van Ginhoven pointed out on the list that we
 988         shouldn't give away the number of characters in the password by
 989         replacing each character with a 'x'.  Use "<password>" instead.
 990
 991         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
 992         directories didn't work if logging in put you in a directory other
 993         than "/" is fixed now.  Removed the comment here warning of the bug.
 994
 995         * main.c (print_help): --continue's description was misleading.
 996         We don't "restart", we "resume".  Also, better to say
 997         "partially-downloaded file" rather than just "existing file".
 998
 999 2001-01-06  Dan Harkless  <wget@harkless.org>
1000
1001         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
1002         the best way to go about my aim.  Removed them in favor of:
1003
1004         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
1005
1006 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1007
1008         * url.c (replace_attr): New function, to be used by both
1009         TO_COMPLETE and TO_RELATIVE case in convert_links.
1010         (find_fragment): New function for finding URL fragments.
1011         (replace_attr): Better handle the case where the original string
1012         is not quoted.  Use find_fragment.
1013         (convert_links): Use replace_attr().
1014
1015 2000-12-31  Dan Harkless  <wget@harkless.org>
1016
1017         * ChangeLog: Since this flat file doesn't have multiple branches,
1018         looking at the dates would make you think that things went into
1019         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
1020         in 1.6 branch.]" where appropriate to clarify.
1021
1022 2000-12-30  Dan Harkless  <wget@harkless.org>
1023
1024         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
1025         patch to deal with h_errno not being defined in netdb.h under Cygwin.
1026
1027 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
1028
1029         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
1030
1031 2000-12-17  Igor Khristophorov  <igor@atdot.org>
1032
1033         * http.c (check_end): Fix test for '+' or '-'.
1034
1035 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1036
1037         * url.c (parseurl): Rename inner loop var from i to ind to avoid
1038         clash with the function top-level-declared variable i.
1039         (str_url): Likewise, rename inner-loop i to j.
1040
1041         * recur.c (parse_robots): Don't declare LEN at top of function.
1042         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
1043         global variable.
1044
1045         * main.c (main): Change erroneous use of bitwise and to logical.
1046
1047         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
1048         the stack because it will be copied to closure.
1049
1050         Thanks to Csaba Raduly's run of PC-LINT over the sources.
1051
1052 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1053
1054         * http.c (basic_authentication_encode): Use xmalloc(), not
1055         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
1056         sources.
1057
1058 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
1059
1060         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
1061         compilation.
1062
1063 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1064
1065         * mswindows.c: Include <errno.h>.
1066
1067         * gen_sslfunc.c: Include <errno.h>.
1068
1069         * ftp-basic.c: Don't attempt to declare errno or h_errno because
1070         they're not used.
1071
1072         * main.c: Include <errno.h> because errno is used.
1073
1074         * ftp.c: Ditto.
1075
1076         * http.c: Include <netdb.h> for h_errno.
1077
1078 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1079
1080         * html-parse.c (advance_declaration): MSVC assert() chokes on
1081         '\"'.  Use '"' instead.
1082
1083 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1084
1085         * utils.c (xfree_real): Removed.
1086         (xfree_debug): Just call free().
1087
1088         * wget.h (xfree): Make it an alias for free.
1089
1090 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1091
1092         * http.c (http_loop): Furthermore, touch output_document only if
1093         it is known to be an existing regular file.
1094
1095 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1096
1097         * ftp.c (ftp_retrieve_list): Ditto.
1098
1099         * http.c (http_loop): Touch output_document if that is used for
1100         output.
1101
1102 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1103
1104         * http.c: Include gen_sslfunc.h after including Wget's headers.
1105         (persistent_available_p): Needed coma before `int ssl'.
1106
1107 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1108
1109         * ftp.c (ftp_loop_internal): Ditto.
1110
1111         * http.c (http_loop): Use it.
1112
1113         * retr.c (sleep_between_retrievals): New function that handles the
1114         logic of opt.wait and opt.waitretry.
1115
1116 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1117
1118         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
1119         rbuf_read_bufferful when the buffer is depleted.
1120
1121         * rbuf.c (rbuf_read_bufferful): New function.
1122
1123 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1124
1125         * gen_sslfunc.h: Use ansi2knr style function declarations.
1126
1127         * gen_sslfunc.c: Reformat according to the GNU coding standards.
1128         More should be done.
1129
1130         * http.c (persistent_available_p): Place the cheap SSL test nearer
1131         the top of the function.
1132         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
1133
1134 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1135
1136         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
1137         char.
1138
1139 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
1140
1141         * Makefile.in: added gen_sslfunc object
1142         * config.h.in: added HAVE_SSL define
1143         * connect.c: changed select_fd from static int to int
1144         * connect.h: ditto
1145         * gen_sslfunc.h: New file
1146         * gen_sslfunc.c: ditto
1147         * http.c: added HTTPS fuctionality
1148         * retrc.c: ditto
1149         * url.c: ditto
1150         * init.c: added opt.httpsproxy
1151         * options.h: ditto
1152         * rbuf.h: added alternate rbuf struct
1153         * wget.h: added CONSSLERR
1154         * rbuf.c: ditto
1155
1156         * http.c: Added HTTPS fuctionality.
1157
1158         * retrc.c: Ditto.
1159
1160         * url.c: Ditto.
1161
1162         * init.c: Added opt.httpsproxy.
1163
1164         * options.h: Ditto.
1165
1166         * rbuf.h: Added alternate rbuf struct.
1167
1168         * wget.h: Added CONSSLERR.
1169
1170         * rbuf.c: Ditto.
1171
1172 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1173
1174         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
1175         "ignore_perms" to ignore file and directory permissions for
1176         Windows NT FTP server listings.
1177         (ftp_parse_winnt_ls): New function.
1178         (ftp_parse_ls): Parses UNIX and Windows NT listings
1179         separately. Simple heuristics for distinguishing between UNIX and
1180         MS-DOS-like FTP listing provided by Windows NT FTP service.
1181
1182 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1183
1184         * ftpparse.c, ftpparse.h: New files.
1185
1186         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
1187         only. Use ftp_parse_nonunix_ls otherwise.
1188         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
1189         exotic FTP servers.
1190
1191         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
1192         FTP servers.
1193
1194         * ftp.c: New static wariables host_type, pwd, and pwd_len.
1195         (getftp): Support for VMS. Support for FTP servers that do not
1196         place you in the root directory after login.
1197         (ftp_retrieve_list): VMS is silent about the real file size, issue
1198         a more appropriate message.
1199         (ftp_get_listing): Pass host_type to ftp_parse_ls.
1200
1201         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
1202
1203 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1204
1205         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
1206         "ignore_perms" to ignore file and directory permissions for
1207         Windows NT FTP server listings.
1208         (ftp_parse_winnt_ls): New function.
1209         (ftp_parse_ls): Parses UNIX and Windows NT listings
1210         separately. Simple heuristics for distinguishing between UNIX
1211         and MS-DOS-like FTP listing provided by Windows NT FTP service.
1212
1213 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
1214
1215         * netrc.c (parse_netrc): Get rid of line ending.
1216
1217 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1218
1219         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
1220         Dan.
1221
1222 2000-11-24  Karl Eichwalder  <ke@suse.de>
1223
1224         * main.c (print_help): Untabify.
1225
1226 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1227
1228         * utils.c (xrealloc_debug): Do the unregister/register thing only
1229         if the pointer has actually changed.
1230         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
1231         (xfree_real): Ditto.
1232         (xrealloc_real): Ditto.
1233         (xstrdup_real): Ditto.
1234
1235 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1236
1237         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
1238         string; no need to strdup() it.
1239         (getftp): Make pwd_len a local variable.
1240         (ftp_loop): Free PWD before returning.
1241
1242         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
1243
1244 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1245
1246         * all: Use xfree() instead of free.
1247
1248         * utils.c (xfree): New function.
1249
1250 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1251
1252         * url.c (convert_links): HTML-quote the converted string.
1253
1254         * utils.c (html_quote_string): Move here from ftp-ls.c
1255         (html_quote_string): Make non-static; declare in utils.h.
1256         (html_quote_string): Convert SP to &#32;.
1257
1258 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1259
1260         * ftp.c (getftp): Reformat Jan's code according to GNU coding
1261         standards; remove (debugging?) printf's; use '\0' for the ASCII
1262         zero character.  Use alloca() instead of malloc() for
1263         inter-function temporary allocations.
1264
1265 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1266
1267         * ftpparse.c, ftpparse.h: New files.
1268
1269         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
1270         only. Use ftp_parse_nonunix_ls otherwise.
1271         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
1272         exotic FTP servers.
1273
1274         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
1275         FTP servers.
1276
1277         * ftp.c: New static wariables host_type, pwd, and pwd_len.
1278         (getftp): Support for VMS. Support for FTP servers that do not
1279         place you in the root directory after login.
1280         (ftp_retrieve_list): VMS is silent about the real file size, issue
1281         a more appropriate message.
1282         (ftp_get_listing): Pass host_type to ftp_parse_ls.
1283
1284         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
1285
1286 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1287
1288         * hash.c (hash_table_put): Don't overwrite deleted mappings.
1289
1290 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1291
1292         * hash.c (find_mapping): New function.
1293         (hash_table_get): Use it.
1294         (hash_table_get_pair): Ditto.
1295         (hash_table_exists): Ditto.
1296         (hash_table_remove): Ditto.
1297         (hash_table_remove): Really delete the entry if the mapping
1298         following LOCATION is empty.
1299
1300         * utils.c (string_set_add): Check whether the element has existed
1301         before.
1302
1303         * hash.c (hash_table_get_pair): New function.
1304
1305 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1306
1307         * http.c (http_process_type): Ignore trailing whitespace; use
1308         strdupdelim().
1309
1310         * recur.c (recursive_retrieve): Use the new `convert' field.
1311         (convert_all_links): Ditto.
1312         (convert_all_links): Don't respect meta_disallow_follow.
1313
1314         * html-url.c (handle_link): Fill out link_relative_p and
1315         link_complete_p.
1316
1317         * url.h (struct _urlpos): Make elements more readable.
1318
1319         * recur.c (recursive_retrieve): Call slist_prepend instead of
1320         slist_append.
1321         (convert_all_links): Call slist_nreverse before iterating through
1322         urls_html.
1323
1324         * utils.c (slist_prepend): New function.
1325         (slist_nreverse): Ditto.
1326
1327 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1328
1329         * http.c (check_end): Constify.
1330
1331 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1332
1333         * http.c (http_loop): If username and password are known, try the
1334         `Basic' authentication scheme by default.
1335
1336         * connect.h: Declare test_socket_open.
1337
1338 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1339
1340         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
1341
1342 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1343
1344         * http.c (gethttp): Don't use the return value of sprintf().
1345         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
1346
1347 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1348
1349         * recur.c (recursive_retrieve): Print the "so we don't load"
1350         debugging message only if we really don't load.
1351
1352         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
1353         (gethttp): Don't request keep-alive if keep-alive is inhibited.
1354
1355 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1356
1357         * http.c (gethttp): Make the HTTP persistent connections more
1358         robust.
1359
1360 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1361
1362         * retr.c (get_contents): If use_expected, make sure that the
1363         appropriate amount of data is being read.
1364
1365         * http.c (gethttp): Check for both `Keep-Alive: ...' and
1366         `Connection: Keep-Alive'.
1367
1368         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
1369         turned on.
1370
1371 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1372
1373         * http.c (connection_available_p): Use it.
1374
1375         * connect.c (test_socket_open): New function.
1376
1377         * http.c (gethttp): Support persistent connections.  Based on the
1378         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
1379         (register_persistent): New function.
1380         (connection_available_p): Ditto.
1381         (invalidate_connection): Ditto.
1382
1383 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1384
1385         * url.c (convert_links): Handle UREL2ABS case.
1386
1387         * recur.c (recursive_retrieve): Instead of the list
1388         urls_downloaded, use hash tables dl_file_url_map and
1389         dl_url_file_map.
1390         (convert_all_links): Use them to retrieve data.
1391
1392         * host.c (clean_hosts): Free the hash tables.
1393
1394         * main.c (private_initialize): Call host_init().
1395
1396         * host.c (store_hostaddress): Use a saner, hash table-based data
1397         model.
1398         (realhost): Ditto.
1399         (host_init): Initialize the hash tables.
1400
1401 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1402
1403         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
1404         used for what the sorted slists used to be used for.
1405         (slist_contains): Don't rely on the list being sorted.
1406         (slist_append): Simplify the code.
1407
1408         * recur.c (recursive_cleanup): Use free_string_set.
1409
1410         * utils.c (string_set_add, string_set_exists, string_set_free):
1411         New functions for easier freeing of hash tables whose keys are
1412         strdup'ed strings.
1413
1414         * recur.c (recursive_retrieve): Use the hash table functions for
1415         storing undesirable URLs.
1416
1417         * hash.c: New file.
1418
1419 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1420
1421         * main.c (private_initialize): Call url_init.
1422         (main): Call private_initialize.
1423
1424         * url.c (unsafe_char_table): New table.
1425         (UNSAFE_CHAR): Use it.
1426         (init_unsafe_char_table): New function.
1427         (url_init): New function; call init_unsafe_char_table.
1428
1429 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1430
1431         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
1432         _vsnprintf respectively.
1433
1434 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1435
1436         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
1437         on Linux.
1438
1439 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1440
1441         * html-url.c (handle_link): Handle HTML fragment identifiers.
1442
1443         * recur.c (recursive_retrieve): If norobot info is respected and
1444         the file is specified not to be followed by robots, respect that.
1445
1446         * html-url.c (collect_tags_mapper): Handle <meta name=robots
1447         content=X>.  For us the important cases are where X is NONE or
1448         where X contains NOFOLLOW.
1449         (get_urls_html): Propagate that information to the caller.
1450
1451 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1452
1453         * url.c (convert_links): Unlink the file we might be reading from
1454         before writing to it.
1455         (convert_links): Use alloca instead of malloc for
1456         filename_plus_orig_suffix.
1457
1458 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1459
1460         * host.c (realhost): Add HOST to the list with quality==0 only if
1461         it wasn't already there.
1462         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
1463
1464 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1465
1466         * url.c (get_urls_file): Ditto.
1467         (convert_links): Ditto.
1468
1469         * html-url.c (get_urls_html): Use read_file() instead of
1470         load_file().
1471
1472         * utils.c (read_file): New function, instead of the old
1473         load_file().
1474         (read_file_free): Ditto.
1475
1476         * url.c (findurl): Search only for the supported protocols.
1477         (convert_links): Use fwrite() when writing out a region of
1478         characters.
1479
1480 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1481
1482         * ftp-ls.c: Move html_quote_string and ftp_index here.
1483
1484         * url.c: Remove get_urls_html, since that's now in html-url.c.
1485
1486         * html-url.c: New file.
1487
1488         * html-parse.c: New file.
1489
1490 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1491
1492         * init.c (run_wgetrc): Don't bother killing off '\r' since
1493         pars_line() skips whitespace at end of line anyway.
1494         (parse_line): Oops, it didn't.  Now it does.
1495
1496         * recur.c (parse_robots): Ditto here.
1497
1498         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
1499         manually because read_whole_line no longer does.
1500
1501         * utils.c (read_whole_line): Rewrite to: a) use less memory
1502         (reallocates to needed size after work), b) work faster -->
1503         fgets() instead of getc, c) be more correct --> doesn't kill the
1504         newline character at the end of line.
1505
1506 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1507
1508         * init.c (comind): Initialize MAX to array size - 1.
1509
1510 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1511
1512         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
1513         Suggested by Edward J. Sabol.
1514
1515 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1516
1517         * url.c (construct): Handle the case where host name is not
1518         followed by a slash.
1519
1520 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1521
1522         * init.c: commands[] need to be sorted!  ("base" wasn't.)
1523
1524 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1525
1526         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
1527         `if'.
1528
1529 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1530
1531         * url.c (construct): Insert unneeded initialization for the
1532         compiler to shut up.
1533
1534         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
1535         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
1536         otherwise gets lost when you define _XOPEN_SOURCE.
1537
1538         * utils.c (touch): Include the file name in the error message.
1539         From Debian.
1540
1541 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1542
1543         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
1544         resize the buffer to fit the formated message.  That way, messages
1545         of arbitrary size may be printed.
1546         (logvprintf): Use saved_append() to optionally log the last
1547         several lines of output.
1548         (logputs): Ditto.
1549         (log_close): Adapt to new data structures.
1550         (log_dump): Ditto.
1551         (redirect_output): Print messages to stderr, not to stdout.
1552
1553         * log.c (saved_append_1): New function.  Replaces the old logging
1554         system ("log all output until 10M characters") with a new, much
1555         more reasonable one ("log last screenful of text").
1556         (saved_append): New function; call saved_append_1.
1557         (free_log_line): New function.
1558
1559 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1560
1561         * url.c (construct): Fix comment.
1562         (find_last_char): Document.
1563
1564 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1565
1566         * snprintf.c: New file.
1567
1568 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1569
1570         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
1571         types to logprintf() and debug_logprintf().
1572
1573 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1574
1575         * ftp.c (ftp_loop_internal): Hide the password from the URL when
1576         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
1577         <darekm@bydg.lomac.com.pl>.
1578
1579 2000-11-02  Junio Hamano  <junio@twinsun.com>
1580
1581         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
1582
1583 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
1584
1585         * http.c (known_authentication_scheme_p): Recognize NTML
1586         authentication.
1587         (create_authorization_line): Treat NTML the same as `Basic'.
1588
1589 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1590
1591         * retr.c (retrieve_url): Free url before returning.
1592         (retrieve_url): Free mynewloc before returning.
1593         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
1594
1595 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1596
1597         * url.c (parseurl): Remove possible reading past the end of
1598         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
1599
1600 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1601
1602         * main.c (main): In case of opt.downloaded overflowing, print
1603         <overflow> instead of a totally bogus random value.
1604
1605         * retr.c (retrieve_from_file): Ditto.
1606
1607         * recur.c (recursive_retrieve): Ditto.
1608
1609         * main.c (main): Ditto.
1610
1611         * http.c (http_loop): Ditto.
1612
1613         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
1614         `+=', and downloaded_exceeds_quota() instead of the simple-minded
1615         check.
1616         (ftp_retrieve_list): Ditto.
1617         (ftp_retrieve_dirs): Ditto.
1618         (ftp_retrieve_glob): Ditto.
1619
1620         * retr.c (downloaded_increase): New function.  Notice overflows of
1621         opt.downloaded.
1622         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
1623         used if it overflowed.
1624
1625         * options.h (struct options): New member downloaded_overflow.
1626
1627 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1628
1629         * wget.h (enum): Remove extra space after last enumeration.
1630
1631 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1632
1633         * main.c (main): Use legible_very_long() for printing
1634         opt.downloaded.
1635
1636         * utils.c (legible_1): New function that operates on strings and
1637         does the brunt of legible()'s work.
1638         (legible): Use legible_1().
1639         (legible_very_long): New function; dump the argument with
1640         sprintf(), and call legible_1().
1641
1642         * options.h (struct options): Use VERY_LONG_TYPE for
1643         opt.downloaded.
1644
1645         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
1646         type.
1647
1648         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
1649         defined.  Define HAVE_LONG_LONG if long long is available.
1650
1651 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1652
1653         * utils.c (long_to_string): Update with a later, better version.
1654
1655 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1656
1657         * url.c (path_simplify_with_kludge): New function.
1658         (path_simplify_with_kludge): Disable it.  Instead...
1659         (parse_dir): ...make sure that at this point the right thing is
1660         done, i.e. that "query" part of the URL (?...) is always assigned
1661         to the file, never to the directory portion of the path.
1662
1663 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1664
1665         * retr.c (retrieve_url): Detect redirection cycles.
1666
1667 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1668
1669         * url.c (get_urls_html): Decode HTML entities using
1670         html_decode_entities.
1671
1672         * html.c (htmlfindurl): Don't count the `#' in numeric entities
1673         (&#NNN;) as an HTML fragemnt.
1674         (html_decode_entities): New function.
1675
1676 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1677
1678         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
1679
1680 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1681
1682         * url.c (construct): Rewritten for clarity.  Avoids the
1683         unnecessary copying and stack-allocation the old version
1684         performed.
1685
1686 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1687
1688         * ftp.c (getftp): Ditto.
1689
1690         * http.c (gethttp): Rewind the stream when retrying from scratch.
1691
1692 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1693
1694         * retr.c (retrieve_url): Use url_concat() to handle relative
1695         redirections instead of /ad hoc/ code.
1696
1697         * url.c (url_concat): New function encapsulating weird
1698         construct().
1699         (urllen_http_hack): New function.
1700         (construct): When constructing new URLs, recognize that `?' does
1701         not form part of the file name in HTTP.
1702
1703 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
1704
1705         * retr.c: Add msec timing support for WINDOWS.
1706         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
1707         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
1708
1709 2000-10-27  Dan Harkless  <wget@harkless.org>
1710
1711         * retr.c (retrieve_url): Manually applied T. Bharath
1712         <TBharath@responsenetworks.com>'s patch to get wget to grok
1713         illegal relative URL redirects.  Reformatted and re-commented it.
1714
1715 2000-10-23  Dan Harkless  <wget@harkless.org>
1716
1717         * connect.c (make_connection and bindport): Manually applied Rob
1718         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
1719         changing coding style to GNU's.
1720
1721         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
1722         files downloaded via FTP.  Per a comment, .listing files were not
1723         counted towards number of bytes and files downloaded because they're
1724         deleted anyway.  Well, they aren't under -nr, so count them then.
1725
1726         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
1727         --bind-address, alphabetizing, changing coding style to GNU's,
1728         commenting, and renaming cmd_ip_address() to cmd_address() to
1729         imply hostnames also okay.
1730
1731         * main.c (main): --delete-after didn't delete the root of the
1732         tree.  Ignore --convert-links if --delete-after was specified.
1733         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
1734         fixing duplicate use of added-since-1.5.3 case value.
1735         (print_help): Clarified that --delete-after deletes local files.
1736         Rob forgot to add a line for his new --bind-address option.
1737
1738         * options.h (struct options): Manually applied Rob Mayoff's patch
1739         to add --bind-address (bind_address structure member).
1740
1741         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
1742         Ignore --convert-links if --delete-after was specified.
1743
1744         * retr.c (retrieve_from_file): Just added a DEBUGP().
1745
1746 2000-10-19  Dan Harkless  <wget@harkless.org>
1747
1748         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
1749         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
1750         patch to work around FTP servers that incorrectly respond to the
1751         "REST" command with the remaining size rather than the total file size.
1752
1753         * http.c (gethttp): Improved a comment and added code to tack on
1754         ".html" to text/html files without that extension when -E specified.
1755         (http_loop): Use new downloaded_file() enumerators and deal with
1756         the case of gethttp() called xrealloc() on u->local.
1757
1758         * init.c (commands): Added new "htmlextension" command.
1759         Also renamed John Daily's cmd_quad() to the more descriptive
1760         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
1761         removed duplicate cmd_boolean() declaration.
1762
1763         * main.c (print_help): Added my new -E / --html-extension option.
1764         (main): Undocumented --email-address option previously used -E synonym.
1765         Stole it away for the much more deserving --html-extension's use.
1766
1767         * options.h (struct options): Added html_extension field.
1768
1769         * url.c (convert_links): URL X that we saved as X.html locally due
1770         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
1771         (downloaded_file): Now remembers if we added .html extension to a file.
1772
1773         * url.h (downloaded_file_t): Added extra enumerators to support above.
1774         (downloaded_file): Now takes and returns a downloaded_file_t.
1775
1776         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
1777
1778 2000-10-09  Dan Harkless  <wget@harkless.org>
1779
1780         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
1781
1782         * main.c (print_help): Clarified what --retr-symlinks does.
1783
1784 2000-09-15  John Daily  <jdaily@cyberdude.com>
1785
1786         * init.c: Add support for "always" and "never" values to allow
1787         .wgetrc to override commandline (useful e.g. with .pm files
1788         calling `wget --passive-ftp' when your firewall doesn't allow that).
1789
1790         * ftp.c (getftp): passive_ftp is first option to support always/never.
1791
1792 2000-08-30  Dan Harkless  <wget@harkless.org>
1793
1794         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
1795
1796         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
1797         Wrapped some > 80-column lines.  When -p is specified and we're at a
1798         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
1799         <LINK REL="stylesheet">.
1800
1801         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
1802
1803         * init.c: Added new -p / --page-requisites / page_requisites option.
1804
1805         * main.c (print_help): Clarified that -l inf and -l 0 both allow
1806         infinite recursion.  Changed the unhelpful --mirrior description
1807         to simply give the options it's equivalent to.  Added new -p option.
1808         (main): Added some comments; handle new -p / --page-requisites.
1809
1810         * options.h (struct options): Added new page_requisites field.
1811
1812         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
1813         Calculate and pass down new `dash_p_leaf_HTML' parameter to
1814         get_urls_html().  Use new INFINITE_RECURSION #define.
1815
1816         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
1817         final `dash_p_leaf_HTML' parameter.
1818
1819         * url.c: get_urls_html() and htmlfindurl() now take final
1820         `dash_p_leaf_HTML' parameter.
1821
1822         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
1823
1824         * wget.h: Added some comments and new INFINITE_RECURSION #define.
1825
1826 2000-08-23  Dan Harkless  <wget@harkless.org>
1827
1828         * main.c (print_help): -B / --base was not mentioned.
1829
1830 2000-08-22  Dan Harkless  <wget@harkless.org>
1831
1832         * main.c (print_help): Modified -nc description to mention that it
1833         also prevents the creation of multiple versions of the same file
1834         with ".<number>" suffixes.
1835
1836 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1837
1838         * retr.c (retrieve_url): Consistently strdup opt.referer when
1839         setting u->referer.
1840
1841 2000-06-09  Dan Harkless  <wget@harkless.org>
1842
1843         * main.c (print_help): --help output for --waitretry was over 80 cols.
1844
1845 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
1846
1847         * url.c (encode_string): Fix comment.
1848         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
1849
1850 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
1851
1852         * ftp.c (ftp_retrieve_list): Change permissions only on plain
1853         files.
1854
1855 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
1856
1857         * url.c (str_url): Print the port number only if it's different
1858         from the default port number for that protocol.
1859
1860 2000-05-22  Dan Harkless  <wget@harkless.org>
1861
1862         * main.c (print_help): Added --help line for Damir Dzeko
1863         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
1864         Removed comments that --referer and --waitretry were undocumented.
1865         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
1866         line for --execute.
1867
1868 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
1869
1870         * ftp.c (getftp): Ditto.
1871
1872         * http.c (gethttp): Check for return value of fclose/fflush.
1873
1874 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1875
1876         * host.c (store_hostaddress): Instead of shifting ADDR, start
1877         copying from the correct address.
1878
1879 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1880
1881         * http.c (gethttp): Don't free REQUEST -- it was allocated with
1882         alloca().
1883         Pointed out by Gisle Vanem <gvanem@eunet.no>.
1884
1885 2000-04-04  Dan Harkless  <wget@harkless.org>
1886
1887         * host.c (store_hostaddress): R. K. Owen's patch introduces a
1888         "left shift count >= width of type" warning on 32-bit
1889         architectures.  Got rid of it by tricking the compiler w/ a variable.
1890
1891         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
1892         characters per RFC1738, namely everything above '~'.  It also
1893         generated a warning on OSes where char =~ unsigned char.  Fixed.
1894
1895 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
1896
1897         * http.c (http_process_type): Removed needless strdup(), a memory
1898         leak.
1899
1900 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
1901
1902         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
1903
1904 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
1905
1906         * init.c (wgetrc_file_name): Don't free HOME under Windows.
1907
1908 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
1909
1910         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
1911
1912 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1913
1914         * url.c (UNSAFE_CHAR): New macro.
1915         (contains_unsafe): Use it.
1916         (encode_string): Ditto.
1917
1918 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1919
1920         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
1921
1922 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1923
1924         * Use TOUPPER/TOLOWER.
1925
1926 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
1927
1928         * ftp-opie.c (btoe): Zero-terminate OSTORE.
1929
1930 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
1931
1932         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
1933
1934         * sysdep.h (ISALNUM): New macro.
1935         (TOLOWER): Ditto.
1936         (TOUPPER): Ditto.
1937
1938 2000-03-10  Dan Harkless  <wget@harkless.org>
1939
1940         * html.c (idmatch): Implemented checking of my new --follow-tags
1941         and --ignore-tags options.
1942
1943         * init.c (commands): Added comment reminding people adding new
1944         entries doing allocation to add corresponding freeing in cleanup().
1945         (commands): Added new followtags and ignoretags commands.
1946         (cleanup): Free storage for new followtags and ignoretags.
1947
1948         * main.c: Use of "comma-separated list" was random -- normalized
1949         it.  Did some alphabetization.  Added comments pointing out
1950         "Options without arguments" and "Options accepting an argument"
1951         sections of long_options[].  Added new options --follow-tags and
1952         -G / --ignore-tags.  Added comment that Damir's --referer is
1953         currently undocumented.  Added comment that Heiko's --waitretry is
1954         partially undocumented (mentioned in --help but not in
1955         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
1956
1957         * options.h (struct options): Added new fields follow_tags and
1958         ignore_tags.
1959
1960         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
1961
1962 2000-03-02  Dan Harkless  <wget@harkless.org>
1963
1964         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
1965         braces to avoid ambiguous `else'" warnings.  Eliminated them.
1966
1967         * http.c (gethttp): Dan Berger's query string patch is totally
1968         bogus.  If you have two different URLs, gen_page.cgi?page1 and
1969         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
1970         second will overwrite the first.  Also, parameters to implicit
1971         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
1972         be printed with trailing garbage characters, and could seg fault.
1973         Backing out the patch, which Dan B. informed me by email was just
1974         a kludge to download StarOffice from Sun made necessary due to
1975         wget's unconditional escaping of certain characters (room for an
1976         option there?).
1977         (http_loop): Heiko introduced "suggest explicit braces to avoid
1978         ambiguous `else'" warnings.  Eliminated them.
1979
1980         * main.c: Heiko's --wait / --waitretry backwards compatibility
1981         code looks to have been totally untested -- automatic variable
1982         'wr' was used without being initialized, and a long int was passed
1983         into setval()'s char* val parameter.
1984
1985         * recur.c (parse_robots): Applied Edward J. Sabol
1986         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
1987         problem with "User-agent:<space>*<space>" lines in robots.txt.
1988
1989         * url.c (parseurl, str_url): Removing Dan Berger's code (see
1990         http.c above for explanation).
1991
1992 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
1993
1994         * ftp.c: Respect new option waitretry.
1995
1996 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
1997
1998         * http.c (gethttp): Send custom Referer, if required.
1999
2000 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
2001
2002         * netrc.c (parse_netrc): Allow passwords to contain spaces.
2003
2004         * netrc.c (parse_netrc): New function.
2005
2006 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
2007
2008         * http.c (gethttp): Send it.
2009
2010         * url.c (parseurl): Detect query string in HTTP URL-s.
2011         (str_url): Print it.
2012
2013 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
2014
2015         * html.c (html_allow): Add <link href=...> and <script src=...>.
2016
2017 1999-05-02  andrew deryabin  <djsf@softhome.net>
2018
2019         * http.c (gethttp): Specify port in `Host' header only if it's
2020         different from 80.
2021
2022 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
2023
2024         * recur.c (recursive_retrieve): If a finite maximum depth is
2025         specified, and we're are already at that depth, don't download the
2026         HTML file for parsing.
2027
2028 2000-03-01  Dan Harkless  <wget@harkless.org>
2029
2030         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
2031         even though we don't do conversion on HTML files retrieved via
2032         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
2033         (ftp_retrieve_list): Added a comment saying where we need to
2034         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
2035         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
2036         a lie -- reworded as "Server file no newer than local file '%s' --".
2037
2038         * http.c (http_loop): Fixed a typo and clarified a comment.
2039         (http_loop): When -K and -N are specified together, compare size
2040         and timestamp of server file X against local file X.orig (if
2041         extant) rather than converted local file X.
2042         (http_loop): "Local file '%s' is more recent," is sometimes a lie
2043         -- reworded as "Server file no newer than local file '%s' --".
2044         (http_loop): Call new downloaded_file() function to prevent
2045         wrongful overwriting of .orig file when -N is specified.
2046
2047         * url.c (convert_links): When -K specified, only rename X to
2048         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
2049         file X due to -N, we clobber an X.orig from a previous invocation.
2050         (convert_links): Call the failsafe xstrdup(), not the real strdup().
2051         (convert_links): Added a note asking anyone who understands how
2052         multiple URLs can correspond to a single file to comment it.
2053         (downloaded_file): Added this new function.
2054
2055         * url.h (downloaded_file): Added prototype for this new function
2056         as well as its downloaded_file_t enum type.
2057
2058         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
2059
2060 2000-02-29  Dan Harkless  <wget@harkless.org>
2061
2062         * version.c: Upped version to developer-only "1.5.3+dev".
2063
2064 2000-02-18  Dan Harkless  <wget@harkless.org>
2065
2066         * init.c (backup_converted): Added this new option.
2067
2068         * main.c (-K / --backup-converted): Added this new option.
2069
2070         * options.h (backup_converted): Added this new option.
2071
2072         * url.c (convert_links): When backup_converted is specified, save
2073         file X as X.orig before converting.
2074
2075         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
2076
2077 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
2078
2079         * version.c: Wget 1.5.3 is released.
2080
2081 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
2082
2083         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
2084         address doesn't yield FQDN.
2085
2086 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2087
2088         * cmpt.c (strerror): Fix declaration of sys_errlist.
2089
2090 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
2091
2092         * main.c (main): Don't use an array subscript as the first
2093         argument to STRDUP_ALLOCA.
2094         From Kaveh R. Ghazi.
2095
2096 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
2097
2098         * html.c (htmlfindurl): Download table background.
2099
2100 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
2101
2102         * init.c (parse_line): Would free *com before allocating it.
2103         (parse_line): Would free com instead of *com.
2104
2105 1998-09-10  Howard Gayle  <howard@fjst.com>
2106
2107         * url.c (get_urls_html): Would drop the last character of the
2108         link.
2109
2110 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
2111
2112         * http.c (http_loop): Don't print status code if quiet.
2113
2114 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2115
2116         * log.c: Use <stdarg.h> only when __STDC__.
2117
2118 1998-09-10  Adam D. Moss  <adam@foxbox.org>
2119
2120         * html.c (htmlfindurl): Download <layer src=...>.
2121
2122 1998-09-10  Howard Gayle  <howard@fjst.com>
2123
2124         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
2125         not retrieved.
2126
2127 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
2128
2129         * utils.c: Include <libc.h> on NeXT.
2130
2131 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
2132
2133         * url.c (get_urls_html): Fix calculation of URL position.
2134
2135 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
2136
2137         * version.c: Wget 1.5.2 is released.
2138
2139 1998-06-23  Dave Love  <d.love@dl.ac.uk>
2140
2141         * ftp.c, init.c, netrc.c: Include errno.h.
2142
2143         * http.c: Include errno.h and time header.
2144
2145         * Makefile.in (exext): Define.
2146         (install.bin, uninstall.bin): Use it.
2147
2148 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
2149
2150         * http.c (http_loop): Don't attempt to compare local and remote
2151         sizes if the remote size is unknown.
2152
2153 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
2154
2155         * url.c (get_urls_html): Use malloc() instead of alloca in the
2156         loop.
2157
2158 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
2159
2160         * version.c: Wget 1.5.2-b4 is released.
2161
2162 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
2163
2164         * url.c (get_urls_html): Ignore spaces before and after the URI.
2165
2166 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
2167
2168         * ftp.c (getftp): Translate `done'.
2169
2170 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
2171
2172         * version.c: Wget 1.5.2-b3 is released.
2173
2174 1998-06-06  Alexander Kourakos  <awk@bnt.com>
2175
2176         * init.c (cleanup): Close dfp, don't free it.
2177
2178 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
2179
2180         * utils.c (make_directory): Twiddle.
2181
2182         * config.h.in: Added template for access().
2183
2184 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
2185
2186         * html.c (htmlfindurl): Download <input src=...>
2187
2188 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
2189
2190         * utils.c (file_exists_p): Use access() with two arguments.
2191
2192 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
2193
2194         * netrc.c (parse_netrc): Correct logic.
2195
2196 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
2197
2198         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
2199         <ljm@ljm.wownet.net>.
2200
2201 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
2202
2203         * version.c: Wget 1.5.2-b2 is released.
2204
2205 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
2206
2207         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
2208
2209 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
2210
2211         * retr.c (elapsed_time): Return correct value when
2212         HAVE_GETTIMEOFDAY is undefined.
2213
2214 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
2215
2216         * version.c: Wget 1.5.2-b1 is released.
2217
2218 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
2219
2220         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
2221         (_getopt_internal): Don't translate `#if 0'-ed strings.
2222
2223 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
2224
2225         * mswindows.c (ws_handler): Use fork_to_background().
2226
2227 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
2228
2229         * version.c: Wget 1.5.1 is released.
2230
2231 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
2232
2233         * http.c (parse_http_status_line): Avoid `minor' and `major'
2234         names.
2235
2236 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
2237
2238         * utils.c (mkdirhier): Renamed to make_directory.
2239
2240 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
2241
2242         * mswindows.c (fork_to_background): Define under Windows.
2243
2244         * utils.c (fork_to_background): New function.
2245
2246         * html.c (htmlfindurl): Removed rerdundant casts.
2247
2248 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
2249
2250         * mswindows.c (ws_mypath): Cache the path.
2251
2252 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
2253
2254         * ftp.h: Prefix enum ftype members with FT_.
2255
2256         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
2257
2258         * mswindows.h: Use stat under Borland, _stat under MSVC.
2259
2260 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
2261
2262         * http.c (known_authentication_scheme_p): New function.
2263         (gethttp): Handle authorization more correctly.
2264
2265         * ftp-basic.h: Removed.
2266
2267         * cmpt.h: Removed.
2268
2269         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
2270         with gcc 2.8.
2271         (numdigit): Use `while' loop.
2272
2273         * http.c (create_authorization_line): Detect authentication
2274         schemes case-insensitively.
2275
2276         * http.c (extract_header_attr): Use strdupdelim().
2277         (digest_authentication_encode): Move declaration of local
2278         variables to smaller scope.
2279         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
2280         (create_authorization_line): Detect authentication schemes
2281         case-insensitively.
2282
2283         * utils.c (touch): Constify.
2284
2285         * http.c (gethttp): Report a nicer error when no data is received.
2286
2287         * rbuf.h (RBUF_READCHAR): Ditto.
2288
2289         * ftp-basic.c (ftp_response): Use sizeof.
2290
2291 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
2292
2293         * retr.c (print_percentage): EXPECTED is long, not int.
2294         (print_percentage): Use floating-point arithmetic to avoid
2295         overflow with large files' sizes multiplied with 100.
2296
2297 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
2298
2299         * config.h.in: Added pid_t stub.
2300
2301         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
2302         define it).
2303
2304 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
2305
2306         * version.c: Wget 1.5.0 is released.
2307
2308 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
2309
2310         * url.c (str_url): Ditto.
2311
2312         * ftp-basic.c (ftp_rest): Use new name.
2313
2314         * utils.c (long_to_string): Renamed from prnum().
2315
2316 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
2317
2318         * version.c: Wget 1.5-b17 is released.
2319
2320 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
2321
2322         * headers.c (header_get): New argument FLAGS.
2323
2324         * http.c (gethttp): If request is malformed, bail out of the
2325         header loop.
2326         (gethttp): Check for empty header *after* the status line checks.
2327         (gethttp): Disallow continuations for status line.
2328
2329 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
2330
2331         * version.c: Wget 1.5-b16 is released.
2332
2333 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
2334
2335         * init.c (commands): Renamed `always_rest' to `continue'.
2336
2337 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
2338
2339         * all: Use it.
2340
2341         * log.c (logputs): New argument.
2342         (logvprintf): Ditto.
2343         (logprintf): Ditto.
2344
2345 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
2346
2347         * http.c (http_atotm): Update comment.
2348
2349         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
2350
2351         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
2352
2353         * main.c (i18n_initialize): New function.
2354         (main): Use it.
2355
2356         * log.c: Include <unistd.h>.
2357
2358         * retr.c (show_progress): Cast alloca to char *.
2359
2360 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
2361
2362         * version.c: Wget 1.5-b15 is released.
2363
2364 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
2365
2366         * utils.h: Declare file_non_directory_p().
2367
2368 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
2369
2370         * main.c (main): It's `tries', not `numtries' now.
2371
2372 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2373
2374         * init.c (getperms): Removed.
2375
2376 1998-04-01  Tim Charron  <tcharron@interlog.com>
2377
2378         * log.c (logvprintf): Don't use ARGS twice.
2379
2380 1998-04-01  John  <john@futuresguide.com>
2381
2382         * mswindows.c: Cleaned up.
2383
2384 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2385
2386         * version.c: Wget 1.5-b14 is released.
2387
2388 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2389
2390         * ftp-opie.c (STRLEN4): New macro.
2391         (btoe): Use it.
2392
2393 1998-04-01  Junio Hamano  <junio@twinsun.com>
2394
2395         * http.c: Document all the Digest functions.
2396
2397 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
2398
2399         * utils.c (file_non_directory_p): Renamed from isfile().
2400
2401         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
2402
2403 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2404
2405         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
2406
2407         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
2408         style.
2409         (cmd_permissions): Removed.
2410
2411         * config.h.in: Add template for WORDS_BIGENDIAN.
2412
2413 1998-03-31  Junio Hamano  <junio@twinsun.com>
2414
2415         * http.c (HEXD2asc): New macro.
2416         (dump_hash): Use it.
2417
2418 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2419
2420         * version.c: Wget 1.5-b13 is released.
2421
2422 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2423
2424         * main.c (main): Don't try to use `com'.
2425
2426 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2427
2428         * init.c (cmd_permissions): New function.
2429
2430 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2431
2432         * version.c: Wget 1.5-b12 is released.
2433
2434 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2435
2436         * init.c (commands): Renamed `numtries' to `tries'.
2437         (cmd_spec_debug): Removed.
2438         (home_dir): Under Windows, return `C:\' if HOME is undefined.
2439
2440 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2441
2442         * config.h.in: Define _XOPEN_SOURCE.
2443
2444         * init.c (check_user_specified_header): New function.
2445         (cmd_spec_header): Use it.
2446         (cmd_spec_useragent): New function.
2447
2448 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2449
2450         * version.c: Wget 1.5-b11 is released.
2451
2452 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
2453
2454         * wget.h: Include <libintl.h> only if NLS is enabled.
2455
2456 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
2457
2458         * options.h (struct options): Made `wait' a long.
2459         (struct options): Ditto for `timeout'.
2460
2461 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
2462
2463         * utils.c (exists): Renamed to file_exists_p.
2464         (file_exists_p): Use access() if available.
2465
2466 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
2467
2468         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
2469         infloop.
2470
2471         * log.c: do_logging -> save_log_p.
2472
2473         * config.h.in: Added template for HAVE_VSNPRINTF.
2474
2475 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
2476
2477         * init.c: Ditto.
2478
2479         * http.c: Protect declaration against non-ANSI compiler.
2480
2481         * log.c (logvprintf): Use vsnprintf() if available.
2482
2483         * getopt.c (main): Don't translate test stuff.
2484
2485 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
2486
2487         * version.c: Wget 1.5-b10 is released.
2488
2489 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
2490
2491         * ftp.c (getftp): Don't translate "CWD %s".
2492
2493         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
2494
2495 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2496
2497         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
2498
2499         * log.c (logputs): New function.
2500         (logvprintf): Renamed from vlogmsg; use logputs().
2501
2502         * retr.c (show_progress): Print `[100%]' when the retrieval is
2503         finished.
2504
2505         * init.c (run_wgetrc): Use FILE, not PATH.
2506         (wgetrc_file_name): Ditto.
2507
2508 1998-03-07  Tim Adam  <tma@osa.com.au>
2509
2510         * recur.c (parse_robots): Correctly reset `entries' on empty
2511         disallow.
2512
2513 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2514
2515         * init.c (cmd_spec_debug): Use cmd_boolean().
2516
2517 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
2518
2519         * http.c (gethttp): Create proxy-authorization correctly.
2520
2521 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2522
2523         * md5.c: Ditto.
2524
2525         * getopt.c: Use ANSI function definitions.
2526
2527         * ftp-opie.c: New file.
2528
2529         * options.h: Don't redefine EXTERN.
2530
2531         * init.c: Sort it correctly.
2532
2533 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2534
2535         * version.c: Wget 1.5-b9 is released.
2536
2537 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2538
2539         * recur.c (recursive_retrieve): Reset `first_time'.
2540
2541         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
2542
2543         * rbuf.c (rbuf_peek): Simplified.
2544         (rbuf_flush): Use MINVAL.
2545
2546         * wget.h (MINVAL): Moved from url.h.
2547
2548         * rbuf.h (RBUF_FD): New macro.
2549
2550         * url.c (add_url): Add to the head of the list.
2551
2552         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
2553         file.
2554         (getftp): Set the default permissions to 0600.
2555
2556 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
2557
2558         * url.c (get_urls_html): Ditto.
2559         (convert_links): Ditto.
2560
2561         * recur.c (parse_robots): Ditto.
2562
2563         * html.c (ftp_index): Ditto.
2564
2565         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
2566
2567         * init.c (defaults): Initialize `opt' to zero via memset.
2568
2569         * http.c (digest_authentication_encode): goto considered harmful.
2570
2571 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
2572
2573         * ftp.c (delelement): Simplify and fix leak.
2574
2575 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
2576
2577         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
2578
2579         * url.h (HEXD2ASC): Removed warning.
2580
2581         * init.c (comind): Use binary search.
2582         (commands): Reorganized.
2583         (setval): Ditto.
2584         (cmd_boolean): New function.
2585         (cmd_number): Ditto.
2586         (cmd_number_inf): Ditto.
2587         (cmd_string): Ditto.
2588         (cmd_vector): Ditto.
2589         (cmd_directory_vector): Ditto.
2590         (cmd_bytes): Ditto.
2591         (cmd_time): Ditto.
2592         (cmd_spec_debug): Ditto.
2593         (cmd_spec_dirmode): Ditto.
2594         (cmd_spec_dirstruct): Ditto.
2595         (cmd_spec_dotstyle): Ditto.
2596         (cmd_spec_header): Ditto.
2597         (cmd_spec_htmlify): Ditto.
2598         (cmd_spec_mirror): Ditto.
2599         (cmd_spec_outputdocument): Ditto.
2600         (cmd_spec_recursive): Ditto.
2601         (settime): Merged with cmd_time().
2602         (setbytes): Merged with cmd_bytes().
2603         (setonoff): Merged with cmd_boolean().
2604         (onoff): Ditto.
2605
2606 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2607
2608         * Makefile.in (distclean): Remove `config.h'.
2609
2610 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2611
2612         * version.c: Wget 1.5-b8 is released.
2613
2614 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2615
2616         * http.c (digest_authentication_encode): New function.
2617         (create_authorization_line): Use it.
2618         (dump_hash): New function.
2619         (digest_authentication_encode): Use it.
2620
2621         * fnmatch.c: Renamed from `mtch.c'.
2622
2623 1998-02-15  Karl Eichwalder  <ke@suse.de>
2624
2625         * main.c (main): Tag "Written by..." string as translatable.
2626
2627 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2628
2629         * wget.h (FREE_MAYBE): New macro.
2630
2631         * http.c (create_authorization_line): Don't use ANSI C string
2632         concatenation feature.
2633         (basic_authentication_encode): Use alloca() for temporary
2634         variables.
2635
2636         * recur.h: Ditto.
2637
2638         * http.c: Ditto.
2639
2640         * headers.h: Ditto.
2641
2642         * ftp-basic.c: Protect declaration against non-ANSI compiler.
2643
2644         * http.c (create_authorization_line): Cast `unsigned char *' to
2645         `char *' for sprintf, to shut up the noisy Digital Unix cc.
2646
2647 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2648
2649         * version.c: Wget 1.5-b7 is released.
2650
2651 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2652
2653         * cmpt.c (strstr): Synched with glibc-2.0.6.
2654
2655         * ftp-basic.c (calculate_skey_response): Ditto.
2656         (calculate_skey_response): Use alloca().
2657
2658         * http.c (create_authorization_line): Work with FSF's version of
2659         md5.c.
2660
2661         * md5.c: New file, from GNU libc.
2662
2663 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2664
2665         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
2666
2667 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
2668
2669         * http.c (basic_authentication_encode): New function, instead of
2670         the macro.
2671
2672 1998-02-13  Junio Hamano  <junio@twinsun.com>
2673
2674         * http.c: Add HTTP-DA support.
2675         * ftp-basic.c: Add Opie/S-key support.
2676         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
2677         * md5.c, md5.h: New files.
2678
2679 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
2680
2681         * http.c (http_process_range): Renamed from hprocrange().
2682         (http_process_range): Parse the whole header.
2683
2684         * headers.c: New file.
2685         (header_process): New function.
2686         (header_get): Renamed from fetch_next_header.
2687
2688         * all: Include utils.h only where necessary.
2689
2690         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
2691
2692         * wget.h: Add provisions for dmalloc.
2693
2694 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
2695
2696         * version.c: Wget 1.5-b6 is released.
2697
2698 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
2699
2700         * ftp.c (ftp_loop): Determine `filename' more precisely.
2701
2702         * init.c (setval): Don't set `opt.quiet' if output-document is
2703         `-'.
2704
2705         * log.c (log_init): Print to STDERR instead of STDOUT.
2706         (vlogmsg): Use STDERR by default.
2707         (logflush): Ditto.
2708
2709 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
2710
2711         * host.c: Use addr_in again.
2712
2713 1998-02-08  Karl Eichwalder  <karl@suse.de>
2714
2715         * http.c (gethttp): Fixed typo.
2716
2717 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2718
2719         * version.c: Wget 1.5-b5 is released.
2720
2721 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2722
2723         * retr.c (show_progress): Use it.
2724
2725         * log.c (logflush): New function.
2726
2727         * wget.h: Utilize __attribute__ if on gcc.
2728
2729 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2730
2731         * http.c (base64_encode_line): New argument LENGTH.
2732         (BASIC_AUTHENTICATION_ENCODE): Use it.
2733         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
2734
2735         * main.c (main): Fixed fprintf() format mismatch.
2736
2737 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2738
2739         * version.c: Wget 1.5-b4 is released.
2740
2741 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
2742
2743         * host.c: use sockaddr_in instead of addr_in.
2744
2745 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
2746
2747         * init.c (cleanup): Use it.
2748
2749         * recur.c (recursive_cleanup): New function.
2750
2751         * retr.c (retrieve_from_file): Ditto.
2752
2753         * main.c (main): Use it.
2754
2755         * recur.c (recursive_reset): New function.
2756
2757         * retr.c (retrieve_from_file): Ditto.
2758
2759         * main.c (main): Simplify call to recursive_retrieve().
2760
2761         * recur.c (recursive_retrieve): Removed FLAGS argument.
2762
2763         * http.c (gethttp): Changed call to iwrite().
2764
2765 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2766
2767         * url.c (get_urls_html): Ditto.
2768         (free_urlpos): Ditto.
2769         (mkstruct): Ditto.
2770         (construct): Ditto.
2771
2772         * retr.c (retrieve_url): Move declaration of local variables to
2773         smaller scope.
2774
2775         * url.c (urlproto): Use it.
2776         (parseurl): Ditto.
2777         (str_url): Ditto.
2778         (get_urls_html): Ditto.
2779
2780         * utils.h (ARRAY_SIZE): New macro.
2781
2782         * url.c (proto): Moved from url.h.
2783
2784         * url.h (URL_CLEANSE): Reformatted.
2785         (USE_PROXY_P): Renamed from USE_PROXY.
2786
2787         * ftp-basic.c: Adjust to the new interface of iwrite().
2788
2789         * ftp-basic.c (ftp_port): Use alloca().
2790
2791 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2792
2793         * version.c: Wget 1.5-b3 is released.
2794
2795         * host.c (ftp_getaddress): Don't print to stderr directly.
2796
2797         * init.c (setbytes): Support `g' for gigabytes.
2798         (cmdtype): New specification CTIME.
2799         (setval): Use it with settime().
2800         (commands): Use it for WAIT and TIMEOUT.
2801
2802 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2803
2804         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
2805         (gethttp): Use it.
2806
2807         * utils.c (unique_name_1): Moved from url.c.
2808         (unique_name): Ditto.
2809
2810         * url.c (url_filename): Ditto.
2811
2812         * log.c (redirect_output): Changed call to unique_name().
2813
2814         * url.c (unique_name_1): Renamed from unique_name().
2815         (unique_name): Changed interface.
2816
2817         * init.c (enum cmdid): Moved from init.h.
2818         (cmdtype): Ditto.
2819         (struct cmd): Ditto.
2820
2821         * main.c (main): Use it.
2822         (main): Moved `--backups' to not have a short option.
2823
2824         * options.h (struct options): New member BACKGROUND.
2825
2826         * main.c (print_help): Rearranged.
2827         (main): New long options for -n* short options: --no-directories,
2828         --no-host-directories, --non-verbose, --no-host-lookup and
2829         --dont-remove-listing.
2830
2831 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2832
2833         * main.c (main): Use log_close().
2834
2835         * log.c: New variable LOGFP.
2836         (vlogmsg): Use it.
2837         (redirect_output): Don't open /dev/null; set LOGFP to stdin
2838         instead.
2839         (log_close): New function.
2840
2841         * options.h (struct options): Removed LFILE.
2842
2843         * log.c (log_enable): Removed.
2844
2845         * main.c (main): Use it.
2846
2847         * log.c (log_init): New function.
2848
2849         * url.c (get_urls_html): Removed needless assignment to BASE.
2850
2851         * host.c (add_hlist): Don't set CMP needlessly.
2852
2853         * utils.c (match_backwards): Ditto.
2854         (in_acclist): Ditto.
2855
2856         * url.c (findurl): Ditto.
2857
2858         * netrc.c (parse_netrc): Ditto.
2859
2860         * log.c (log_dump): Ditto.
2861
2862         * html.c (html_quote_string): Ditto.
2863
2864         * ftp-basic.c (ftp_request): Made static.
2865
2866         * connect.c: Made global variables static.
2867
2868         * url.c (construct): Ditto.
2869
2870         * init.c (init_path): Avoid assignment inside `if'-condition.
2871
2872         * ftp.c: Don't include in.h or winsock.h.
2873
2874         * ftp.c (ftp_loop): Use SZ.
2875
2876         * connect.c (bindport): Cast &addrlen to int *.
2877         (conaddr): Ditto.
2878
2879         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
2880
2881 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2882
2883         * ftp.c (getftp): Initialize opt.ftp_pass here.
2884         (ftp_retrieve_dirs): Use alloca().
2885
2886         * init.c (defaults): Don't initialize opt.ftp_pass.
2887
2888         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
2889         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
2890
2891 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2892
2893         * recur.c (parse_robots): Check for comments more correctly.
2894
2895         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
2896         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
2897         hostname.
2898
2899 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2900
2901         * version.c: Wget 1.5-b2 is released.
2902
2903         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
2904
2905         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
2906
2907         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
2908         char.
2909
2910         * log.c: Don't attempt to hide arguments from ansi2knr.
2911
2912         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
2913
2914         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
2915
2916         * ftp.c (getftp): Ditto.
2917
2918         * http.c (gethttp): Use it.
2919
2920         * retr.c (get_contents): New argument EXPECTED; pass it to
2921         show_progress().
2922         (show_progress): New argument EXPECTED; use it to display
2923         percentages.
2924
2925         * init.c (setval): Ditto.
2926
2927         * http.c (gethttp): Ditto.
2928         (http_loop): Ditto.
2929
2930         * ftp.c (getftp): Ditto.
2931         (ftp_loop_internal): Ditto.
2932
2933         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
2934
2935         * sysdep.h (CLOSE): Simplify; use DEBUGP.
2936
2937         * netrc.c (search_netrc): Use alloca().
2938
2939         * init.c (defaults): Initialize no_flush.
2940
2941         * log.c (vlogmsg): Don't flush if no_flush.
2942
2943         * options.h (struct options): New variable no_flush.
2944
2945         * main.c (main): Don't play games with buffering.
2946
2947         * log.c (vlogmsg): Flush the output after every message.
2948
2949 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2950
2951         * init.c (parse_line): Ditto.
2952
2953         * url.c (get_urls_html): Ditto.
2954
2955         * main.c (main): Don't cast to unsigned char.
2956
2957         * init.c (run_wgetrc): Don't cast to unsigned char.
2958         (parse_line): Accept char instead of unsigned char.
2959
2960         * html.c (htmlfindurl): Use char instead of unsigned char.
2961
2962         * all: Use them.
2963
2964         * sysdep.h: Add wrappers to ctype macros to make them
2965         eight-bit-clean:
2966
2967 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2968
2969         * html.c (htmlfindurl): Download <img lowsrc=...>
2970
2971         * main.c (main): Ignore SIGPIPE.
2972
2973         * connect.c (select_fd): New argument WRITEP.
2974         (iwrite): Call select_fd().
2975
2976 1997-02-27  Fila Kolodny <fila@ibi.com>
2977
2978         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
2979         one already exists, just skip it.
2980
2981 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2982
2983         * http.c (gethttp): Cosmetic changes.
2984
2985         * http.c (check_end): Allow `+D...' instead of `GMT'.
2986         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
2987
2988         * url.c (process_ftp_type): New function.
2989         (parseurl): Use it.
2990
2991         * connect.c (iwrite): Allow writing in a few chunks.
2992         (bindport): Made SRV static, so addr can point to it.
2993         (select_fd): Removed HPUX kludge.
2994
2995         * host.c (free_hlist): Incorporated into clean_hosts().
2996
2997 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2998
2999         * host.c (hlist): Made static.
3000         (search_address): Cosmetic change.
3001
3002 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3003
3004         * version.c: Wget v1.5-b1 is released.
3005
3006         * http.c (hgetlen): Use sizeof() to get the header length.
3007         (hgetrange): Ditto.
3008         (hgettype): Ditto.
3009         (hgetlocation): Ditto.
3010         (hgetmodified): Ditto.
3011         (haccepts_none): Ditto.
3012
3013         * main.c (main): Updated `--version' and `--help' output, as per
3014         Francois Pinard's suggestions.
3015
3016         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
3017         textdomain().
3018
3019         * config.h.in: Define stubs for I18N3.
3020
3021         * wget.h: Include libintl.h.
3022
3023 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
3024
3025         * url.c (mkstruct): Check for opt.cut_dirs.
3026         (mkstruct): alloca()-te more, xmalloc() less.
3027
3028         * utils.c (load_file): Check for ferror().
3029
3030         * url.c (get_urls_file): Close only the files we opened.
3031         (get_urls_html): Ditto.
3032         (count_slashes): New function.
3033
3034         * http.h: Removed.
3035
3036         * http.c (gethttp): Respect username and password provided by
3037         proxy URL.
3038         (base64_encode_line): Write into an existing buffer instead of
3039         malloc-ing a new one.
3040         (struct http_stat): Moved from http.h
3041
3042         * retr.c (retrieve_url): Free SUF.
3043
3044         * all: Removed lots of unnecessary .h dependencies.
3045
3046         * html.c (global_state): Made static.
3047
3048         * utils.h (ALLOCA_ARRAY): New macro.
3049
3050         * main.c (main): New option `--cut-dirs'.
3051
3052         * url.c (construct): Use alloca() for T.
3053
3054         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
3055
3056         * host.c (_host_t): Moved from host.h.
3057         (struct host): Renamed from _host_t.
3058         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
3059         (realhost): Ditto.
3060
3061         * host.h: Don't include url.h.
3062
3063         * ftp.c (LIST_FILENAME): Moved from ftp.h.
3064
3065         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
3066
3067         * main.c (main): Enable log if the output goes to a TTY.
3068
3069         * connect.h: Removed unused constant `BACKLOG'.
3070
3071         * config.h.in: Check for isatty().
3072
3073         * Makefile.in (LINK): Use CFLAGS when linking.
3074
3075 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
3076
3077         * mswindows.c (ws_hangup): Use redirect_output().
3078
3079         * main.c (redirect_output_signal): New function; use
3080         redirect_output().
3081
3082         * log.c (redirect_output): New function, based on hangup(), which
3083         is deleted.
3084
3085         * log.c (vlogmsg): New function.
3086
3087         * wget.h (DEBUGP): Use debug_logmsg().
3088
3089         * main.c (hangup): Use it.
3090
3091         * log.c (log_dump): New function.
3092
3093         * utils.h (DO_REALLOC): Use `long' for various sizes.
3094
3095         * http.c (hskip_lws): Use `while', for clarity.
3096         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
3097         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
3098
3099         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
3100         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
3101
3102         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
3103         (LEGIBLE_SEPARATOR): Ditto.
3104         (FILE_BUFFER_SIZE): Ditto.
3105
3106         * retr.c (BUFFER_SIZE): Moved from retr.h.
3107
3108         * log.c: New file.
3109         (logmsg): Moved from utils.c.
3110         (debug_logmsg): New function.
3111
3112         * mswindows.h: Include it here.
3113
3114         * init.c: Ditto.
3115
3116         * utils.c: Don't include <windows.h>.
3117
3118 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
3119
3120         * host.c (ftp_getaddress): Ditto.
3121
3122         * main.c (main): Use it.
3123
3124         * utils.h (STRDUP_ALLOCA): New macro.
3125
3126         * init.c: Prepend `wget: ' to error messages printed on stderr.
3127
3128         * utils.c (mkdirhier): Renamed from mymkdir.
3129         (touch): Renamed from my_touch.
3130         (pwd_cuserid): Renamed from my_cuserid().
3131
3132 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
3133
3134         * utils.c (accdir): Process wildcards.
3135         (proclist): New function.
3136         (accdir): Use it to avoid code repetition.
3137
3138 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3139
3140         * recur.c (parse_robots): Respect opt.useragent; use alloca().
3141
3142         * http.c (gethttp): Construct useragent accordingly.
3143
3144         * version.c: Changed version string to numbers-only.
3145
3146         * main.c (print_help): List all the options.
3147
3148         * mswindows.c (windows_main_junk): Initialize argv0 here.
3149
3150 1998-01-24  Karl Heuer  <kwzh@gnu.org>
3151
3152         * netrc.c (search_netrc): Initialize `l' only after processing
3153         netrc.
3154
3155         * main.c (main): Don't trap SIGHUP if it's being ignored.
3156
3157 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3158
3159         * all: Use logmsg().
3160
3161         * utils.c (time_str): Moved from retr.c.
3162         (logmsg): New function.
3163         (logmsg_noflush): Ditto.
3164
3165         * rbuf.c: New file, moved buf_* functions here.
3166
3167         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
3168
3169         * ftp-basic.c (ftp_rest): Use prnum().
3170
3171         * ftp-basic.c: Ditto.
3172
3173         * ftp.c: Use the new reading functions and macros.
3174
3175         * retr.c (buf_initialize): New function.
3176         (buf_initialized_p): Ditto.
3177         (buf_uninitialize): Ditto.
3178         (buf_fd): Ditto.
3179
3180         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
3181         efficiency.
3182         (gethttp): Use alloca() where appropriate.
3183
3184         * retr.c (buf_readchar): Use it.
3185         (buf_peek): Use rstreams.
3186
3187         * retr.h (BUF_READCHAR): New macro.
3188
3189         * init.c (home_dir): Rewritten for clarity.
3190         (init_path): Ditto.
3191
3192         * mswindows.c (ws_backgnd): Made static.
3193         (read_registry): Ditto.
3194         (ws_cleanup): Ditto.
3195         (ws_handler): Ditto.
3196
3197 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
3198
3199         * alloca.c: New file.
3200
3201         * Makefile.in (ALLOCA): Define.
3202
3203         * mswindows.c (ws_help): Constify.
3204         (ws_help): Use alloca.
3205
3206         * mswindows.c: Reformat.
3207
3208         * all: Added _(...) annotations for I18N snarfing and translation.
3209
3210         * host.c (ftp_getaddress): Nuke SYSINFO.
3211         (ftp_getaddress): Don't use getdomainname().
3212         (ftp_getaddress): Use uname(), where available.
3213
3214         * http.c (gethttp): Protect a stray fprintf().
3215
3216         * init.c (settime): New function.
3217         (setval): Treat WAIT specially, allowing suffixes like `m' for
3218         minutes, etc.
3219
3220 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
3221
3222         * url.c (get_urls_html): Use alloca() for TEMP.
3223
3224 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
3225
3226         * url.c (rotate_backups): New function.
3227
3228         * http.c (gethttp): Ditto.
3229
3230         * ftp.c (getftp): Rotate backups.
3231
3232 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
3233
3234         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
3235         xrealloc() and xstrdup().  Use the new functions.
3236
3237         * url.c (decode_string): Made static.
3238         (has_proto): Ditto.
3239         (parse_dir): Ditto.
3240         (parse_uname): Ditto.
3241         (mkstruct): Ditto.
3242         (construct): Ditto.
3243         (construct_relative): Ditto.
3244
3245         * retr.c (show_progress): Made static.
3246
3247         * recur.c (robots_url): Made static.
3248         (retrieve_robots): Ditto.
3249         (parse_robots): Ditto.
3250         (robots_match): Ditto.
3251
3252         * main.h: Removed.
3253
3254         * main.c (printhelp): Made static.
3255         (hangup): Ditto.
3256
3257         * init.c (comind): Made static.
3258         (defaults): Ditto.
3259         (init_path): Ditto.
3260         (run_wgetrc): Ditto.
3261         (onoff): Ditto.
3262         (setonoff): Ditto.
3263         (setnum): Ditto.
3264         (myatoi): Ditto.
3265         (getperms): Ditto.
3266         (setbytes): Ditto.
3267
3268         * http.c (fetch_next_header): Made static.
3269         (hparsestatline): Ditto.
3270         (hskip_lws): Ditto.
3271         (hgetlen): Ditto.
3272         (hgetrange): Ditto.
3273         (hgettype): Ditto.
3274         (hgetlocation): Ditto.
3275         (hgetmodified): Ditto.
3276         (haccepts_none): Ditto.
3277         (gethttp): Ditto.
3278         (base64_encode_line): Ditto.
3279         (mktime_from_utc): Ditto.
3280         (http_atotm): Ditto.
3281
3282         * html.c (idmatch): Made static.
3283
3284         * host.c (search_host): Made static.
3285         (search_address): Ditto.
3286         (free_hlist): Ditto.
3287
3288         * ftp.c (getftp): Made static.
3289         (ftp_loop_internal): Ditto.
3290         (ftp_get_listing): Ditto.
3291         (ftp_retrieve_list): Ditto.
3292         (ftp_retrieve_dirs): Ditto.
3293         (ftp_retrieve_glob): Ditto.
3294         (freefileinfo): Ditto.
3295         (delelement): Ditto.
3296
3297         * ftp-ls.c (symperms): Made static.
3298         (ftp_parse_unix_ls): Ditto.
3299
3300         * connect.c (select_fd): Made static.
3301
3302         * utils.c (xmalloc): Renamed from nmalloc.
3303         (xrealloc): Renamed from nrealloc.
3304         (xstrdup): Renamed from nstrdup.
3305
3306         * getopt.c (exchange): Use alloca.
3307
3308         * mswindows.c (mycuserid): Use strncpy.
3309
3310         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
3311         systhings.h, windecl.h and winjunk.h removed.
3312
3313         * mswindows.c (sleep): New function.
3314
3315         * utils.c: Include <windows.h> under Windows.
3316
3317 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
3318
3319         * url.h (URL_UNSAFE): Change default under Windows.
3320
3321         * retr.c (retrieve_from_file): Respect opt.delete_after.
3322
3323         * main.c (main): Call ws_help on Windows.
3324
3325         * winjunk.c (windows_main_junk): New function.
3326
3327         * main.c (main): Junk-process argv[0].
3328
3329         * http.c (mktime_from_utc): Return -1 if mktime failed.
3330
3331         * http.c (http_loop): Ditto.
3332
3333         * ftp.c (ftp_loop_internal): Change title on Windows when using a
3334         new URL.
3335
3336         * winjunk.c (getdomainname): Lots of functions.
3337
3338 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
3339
3340         * cmpt.c (strptime_internal): Handle years more correctly for
3341         `%y'.
3342
3343 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
3344
3345         * http.c (gethttp): Allocate enough space for
3346         `Proxy-Authorization' header.
3347
3348 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
3349
3350         * version.c: Wget/1.4.5 is released.
3351
3352 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
3353
3354         * retr.c (get_contents): Check return value of fwrite more
3355         carefully.
3356
3357 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3358
3359         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
3360         year, regardless of century.
3361
3362 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3363
3364         * utils.c (isfile): Use `lstat' instead of `stat'.
3365
3366 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3367
3368         * utils.c (numdigit): Use explicit test.
3369
3370 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
3371
3372         * http.c (http_loop): Always use `url_filename' to get u->local.
3373
3374 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
3375
3376         * url.c: Recognize https.
3377
3378 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
3379
3380         * recur.c (recursive_retrieve): Lowercase just the host name.
3381
3382 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
3383
3384         * url.c (get_urls_file): Use the correct test.
3385         (get_urls_html): Ditto.
3386
3387 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3388
3389         * connect.c: Reverted addrlen to int.
3390
3391         * init.c (parse_line): Check for -1 instead of NONE.
3392
3393         * version.c: Changed version to 1.4.5.
3394
3395 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3396
3397         * init.c: New option netrc.
3398         (initialize): Don't parse .netrc.
3399
3400         * cmpt.c (recursive): Return rp.
3401         (strptime_internal): Match the long strings first, the abbreviated
3402         second.
3403
3404 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
3405
3406         * http.c (check_end): New function.
3407         (http_atotm): Use it.
3408
3409 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
3410
3411         * http.c (gethttp): Use them.
3412
3413         * init.c: New options proxy_user and proxy_passwd.
3414
3415 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
3416
3417         * ftp.c (ftp_retrieve_list): Create links even if not relative.
3418
3419 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
3420
3421         * recur.c (recursive_retrieve): Lowercase the host name, if the
3422         URL is not "optimized".
3423
3424         * host.c (realhost): Return l->hostname, even if it matches with
3425         host.
3426
3427 1997-02-10  Marin Purgar  <pmc@asgard.hr>
3428
3429         * connect.c: Make addrlen size_t instead of int.
3430         (conaddr): Ditto.
3431
3432 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3433
3434         * systhings.h: Define S_ISLNK on NeXT too.
3435
3436 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
3437
3438         * version.c: Released 1.4.3.
3439
3440         * url.c: Futher update to list of protostrings.
3441         (skip_proto): Skip `//' correctly for FTP and HTTP.
3442
3443         * url.c (get_urls_html): Handle bogus `http:' things a little
3444         different.
3445
3446         * main.c (main): Removed `follow-ftp' from `f'.
3447         (main): Dumped the `prefix-files' and `file-prefix' options and
3448         features; old and bogus.
3449         (main): Exit on failed setval() in `-e'.
3450
3451         * http.c (fetch_next_header): Use it to detect header continuation
3452         correctly.
3453
3454         * retr.c (buf_peek): New function.
3455
3456 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3457
3458         * wget.h: Include time.h and stuff.
3459
3460 1997-02-08  Roger Beeman  <beeman@cisco.com>
3461
3462         * ftp.c: Include <time.h>
3463
3464 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
3465
3466         * url.c (findurl): Would read over buffer limits.
3467
3468 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
3469
3470         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
3471
3472 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
3473
3474         * http.c (http_atotm): Initialize tm.is_dst.
3475
3476 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
3477
3478         * http.c (gethttp): Don't print the number of retrieved headers.
3479
3480         * main.c (main): New option `--no-clobber', alias for `-nc'.
3481
3482         * url.c: Recognize `https://'.
3483
3484 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
3485
3486         * host.c (herrmsg): Don't use h_errno.
3487
3488 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3489
3490         * host.c (accept_domain): Use it.
3491
3492         * main.c (main): New option `--exclude-domains'.
3493
3494         * retr.c (retrieve_url): Use it.
3495         (retrieve_url): Bail out when an URL is redirecting to itself.
3496
3497         * url.c (url_equal): New function.
3498
3499 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3500
3501         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
3502
3503         * http.c (mk_utc_time): New function.
3504         (http_atotm): Use it; handle time zones correctly.
3505
3506 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
3507
3508         * http.c: Ditto.
3509
3510         * ftp-basic.c: Use it instead of WRITE.
3511
3512         * connect.c (iwrite): New function.
3513
3514 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
3515
3516         * cmpt.c (mktime): New function.
3517
3518         * netrc.c: Include <sys/types.h>.
3519
3520         * main.c (main): Wouldn't recognize --spider.
3521
3522         * retr.c (rate): Use `B', `KB' and `MB'.
3523         (reset_timer,elapsed_time): Moved from utils.c.
3524
3525         * ftp.c (ftp_retrieve_list): Ditto.
3526
3527         * http.c (http_loop): Don't touch the file if opt.dfp.
3528
3529 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3530
3531         * cmpt.c: New file.
3532
3533         * ftp.c (ftp_retrieve_glob): New argument semantics.
3534         (ftp_retrieve_dirs): Use it.
3535         (ftp_loop): Ditto.
3536
3537         * html.c (htmlfindurl): Recognize `'' as the quote char.
3538
3539 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
3540
3541         * ftp.c (ftp_loop_internal): Use it.
3542
3543         * utils.c (remove_link): New function.
3544
3545 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
3546
3547         * retr.c (retrieve_url): Require STRICT redirection URL.
3548
3549         * url.c (parseurl): New argument STRICT.
3550
3551         * http.c (hparsestatline): Be a little-bit less strict about
3552         status line format.
3553
3554 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
3555
3556         * http.c (gethttp): Use it.
3557
3558         * main.c (main): Don't use '<digit>' as options.
3559
3560         * init.c: New option ignore_length.
3561
3562         * http.c (gethttp): Ditto.
3563         (http_loop): Check for redirection without Location:.
3564         (gethttp): Don't print Length unless RETROKF.
3565
3566         * ftp.c (getftp): Use it.
3567
3568         * url.c (mkalldirs): New function.
3569
3570         * utils.c (mymkdir): Don't check for existing non-directory.
3571
3572         * url.c (mkstruct): Don't create the directory.
3573
3574 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
3575
3576         * init.c (setval): Removed NO_RECURSION checks.
3577
3578 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
3579
3580         * version.c: "Released" 1.4.3-pre2.
3581
3582         * recur.c (recursive_retrieve): Bypass host checking only if URL
3583         is ftp AND parent URL is not ftp.
3584
3585         * ftp-basic.c (ftp_request): Print out Turtle Power.
3586
3587         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
3588         wildcard.
3589         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
3590         not glob.
3591
3592         * http.c (gethttp): Be a little bit smarter about status codes.
3593
3594         * recur.c (recursive_retrieve): Always reset opt.recursive when
3595         dealing with FTP.
3596
3597 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
3598
3599         * retr.c (retrieve_url): New variable location_changed; use it for
3600         tests instead of mynewloc.
3601         (retrieve_url): Allow heuristic adding of html.
3602
3603         * url.c (url_filename): Don't use the `%' in Windows file names.
3604
3605         * http.c (http_loop): Always time-stamp the local file.
3606
3607         * http.c (http_loop): Ditto.
3608
3609         * ftp.c (ftp_retrieve_list): Use it.
3610
3611         * utils.c (my_touch): New function.
3612
3613         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
3614         instead of #ifndef NeXT.
3615
3616         * utils.c (strptime): New version, by Ulrich Drepper.
3617
3618 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
3619
3620         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
3621         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
3622         (http_loop): Would remove ACCEPTRANGES.
3623
3624         * ftp.c (getftp): Call ftp_list with NULL.
3625
3626 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
3627
3628         * html.c (ftp_index): Don't print minutes and seconds if we don't
3629         know them; beautify the output.
3630
3631         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
3632
3633 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
3634
3635         * utils.c (strptime): New function.
3636         (strptime): Don't use get_alt_number.
3637         (strptime): Don't use locale.
3638         (match_string): Made it a function.
3639
3640 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
3641
3642         * http.c (http_atotm): New function.
3643         (http_loop): Use it.
3644
3645         * atotm.c: Removed from the distribution.
3646
3647         * http.c (base64_encode_line): Rewrite.
3648
3649 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
3650
3651         * ftp.c (getftp): Use ftp_expected_bytes; print size.
3652
3653         * ftp-basic.c (ftp_response): Use ftp_last_respline.
3654         (ftp_expected_bytes): New function.
3655
3656         * ftp.c (getftp): Print the unauthoritative file length.
3657
3658         * ftp-ls.c: Renamed from ftp-unix.c.
3659         (ftp_parse_ls): Moved from ftp.c.
3660         (ftp_parse_unix_ls): Recognize seconds in time spec.
3661         (ftp_parse_unix_ls): Recognize year-less dates of the previous
3662         year.
3663
3664 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
3665
3666         * ftp-basic.c: Don't declare errno if #defined.
3667
3668         * host.c (ftp_getaddress): Check for sysinfo legally.
3669
3670 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
3671
3672         * connect.c (iread): Use READ.
3673
3674 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
3675
3676         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
3677         schemes.
3678
3679 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
3680
3681         * host.c (ftp_getaddress): Allow `.' in hostname.
3682
3683 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
3684
3685         * wget.h: READ and WRITE macros for use instead of read and write
3686         on sockets, grep READ *.c, grep WRITE *.c
3687
3688         * wsstartup.c: new file - startup for winsock
3689
3690         * wsstartup.h: new file
3691
3692         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
3693
3694         * configure.bat: Configure utility for MSVC
3695
3696         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
3697
3698 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
3699
3700         * version.c: Released 1.4.3-pre.
3701
3702         * utils.c (prnum): Accept long.
3703         (legible): Use prnum().
3704
3705         * connect.c (make_connection): Accept port as short.
3706         (bindport): Ditto.
3707
3708         * http.c (gethttp): Use search_netrc.
3709
3710 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
3711
3712         * ftp.c (getftp): Use search_netrc.
3713
3714         * netrc.c (free_netrc): New function.
3715
3716         * init.c (home_dir): New function.
3717
3718         * url.c (convert_links): Allow REL2ABS changes.
3719
3720 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
3721
3722         * netrc.c: New file.
3723         (parse_netrc, maybe_add_to_list): New functions.
3724
3725 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
3726
3727         * retr.c (retrieve_url): Reset opt.recursion before calling
3728         ftp_loop if it is reached through newloc.
3729
3730         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
3731         error; don't use "Syntax error", since we don't know if it is
3732         really a syntax error.
3733
3734 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
3735
3736         * utils.c (acceptable): Extract the filename part of the path.
3737
3738         * recur.c (recursive_retrieve): Call acceptable() with the right
3739         argument; would bug out on wildcards.
3740
3741         * init.c (parse_line): Likewise.
3742
3743         * html.c (htmlfindurl): Cast to char * when calling stuff.
3744
3745 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
3746
3747         * ftp.c (getftp): Use ftp_pasv.
3748
3749         * ftp-basic.c (ftp_request): Accept NULL value.
3750         (ftp_pasv): New function.
3751
3752         * options.h (struct options): Add passive FTP option.
3753
3754 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
3755
3756         * url.c (parseurl): Debug output.
3757
3758         * utils.c (path_simplify): New one, adapted from bash's
3759         canonicalize_pathname().
3760
3761 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
3762
3763         * ftp.c (getftp): Don't discard the buffer.
3764
3765         * retr.c (get_contents): New parameter nobuf.
3766
3767 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
3768
3769         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
3770
3771         * init.c (setval): Strip the trailing slashes on CVECDIR.
3772
3773 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
3774
3775         * init.c: Make excludes and includes under CVECDIR instead of
3776         CVEC.
3777
3778 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
3779
3780         * url.c (get_urls_html): Skip "http:".
3781
3782 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
3783
3784         * utils.c (strcasecmp): From glibc.
3785         (strncasecmp): Also.
3786         (strstr): Also.
3787
3788         * url.c: Added javascript: to the list of URLs prefixes.
3789
3790 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
3791
3792         * recur.c (retrieve_robots): Print the warning message only if
3793         verbose.
3794
3795 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3796
3797         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
3798
3799 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
3800
3801         * systhings.h: New file.
3802
3803         * ../configure.in: Check for utime.h
3804
3805         * ftp.c: Check whether we have unistd.h.
3806
3807 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
3808
3809         * recur.c (recursive_retrieve): Send the canonical URL as referer.
3810         (recursive_retrieve): Call get_urls_html with the canonical URL.
3811
3812 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3813
3814         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
3815         ansi2knr support for compilers which don't support ANSI style
3816         function prototypes and signatures.
3817
3818         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
3819
3820 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
3821
3822         * url.c: Use it; Recognize paths ending with "." and ".." as
3823         directories.
3824         (url_filename): Append .n whenever file exists and could be a
3825         directory.
3826
3827         * url.h (ISDDOT): New macro.
3828
3829         * init.c (parse_line): Use unsigned char.
3830
3831         * url.c (get_urls_html): Cast to unsigned char * when calling
3832         htmlfindurl.
3833
3834         * html.c (htmlfindurl): Use unsigned char.
3835
3836         * version.c: Changed version to 1.4.3.
3837
3838 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
3839
3840         * version.c: Released 1.4.2.
3841
3842         * ftp.c (getftp): Simplified assertion.
3843         (ftp_loop_internal): Remove symlink before downloading.
3844         (ftp_retrieve_list): Unlink the symlink name before attempting to
3845         create a symlink!
3846
3847         * options.h (struct options): Renamed print_server_response to
3848         server_response.
3849
3850         * ftp.c (rel_constr): Removed.
3851         (ftp_retrieve_list): Don't use it.
3852         (ftp_retrieve_list): Use opt.retr_symlinks.
3853
3854 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3855
3856         * main.c (main): New option retr_symlinks.
3857
3858         * url.c (convert_links): Print verbose message.
3859
3860 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3861
3862         * http.c (http_loop): Reset newloc in the beginning of function;
3863         would cause FMR in retrieve_url.
3864
3865 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
3866
3867         * recur.c (convert_all_links): Find the URL of each HTML document,
3868         and feed it to get_urls_html; would bug out.
3869         (convert_all_links): Check for l2 instead of dl; removed dl.
3870
3871         * url.c (convert_links): Don't refer to freed newname.
3872
3873         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
3874
3875         * main.c (main): Print the OS_TYPE in the debug output, too.
3876
3877         * recur.c (recursive_retrieve): Check for opt.delete_after.
3878
3879         * main.c (main): New option delete-after.
3880
3881         * init.c (setval): Cleaned up.
3882
3883 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
3884
3885         * Makefile.in (wget): Make `wget' the default target.
3886
3887         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
3888         loop.
3889         (ftp_retrieve_list): Warn about non-matching sizes.
3890
3891         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
3892
3893         * init.c (setnum): Renamed from setnuminf; New argument flags.
3894         (setval): Use it.
3895
3896         * main.c (main): Sorted the options.
3897         (main): New option --wait.
3898
3899 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
3900
3901         * html.c (htmlfindurl): Reset s->in_quote after getting out of
3902         quotes.
3903
3904 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3905
3906         * version.c: Changed version to 1.4.2.
3907
3908 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3909
3910         * version.c: Released 1.4.1.
3911
3912         * html.c (html_quote_string): New function.
3913         (ftp_index): Use it.
3914         (htmlfindurl): A more gentle ending debug message.
3915
3916         * ftp.c (ftp_loop): Check for opt.htmlify.
3917
3918         * init.c: New command htmlify.
3919
3920         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
3921         strings.
3922         (ftp_loop): Print size of index.html.
3923
3924         * init.c (setval): Implement "styles".
3925
3926         * main.c (main): New option dotstyle.
3927
3928 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
3929
3930         * ftp.c (getftp): Close the master socket in case of errors, after
3931         bindport().
3932
3933         * connect.c (bindport): Initialize msock to -1.
3934
3935         * ftp.c (getftp): Initialize dtsock to -1.
3936
3937         * connect.c (closeport): Don't close sock if sock == -1.
3938
3939 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
3940
3941         * init.c (setnuminf): Nuked default value -- just leave unchanged.
3942         (setval): Don't send default values.
3943         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
3944
3945         * options.h (struct options): Use long for dot_bytes.
3946
3947         * init.c (setquota): Renamed to setbytes.
3948         (setval): Use setbytes on DOTBYTES.
3949
3950 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
3951
3952         * ftp.c (getftp): Initialize con->dltime.
3953
3954         * recur.c (recursive_retrieve): Use same_host instead of
3955         try_robots; simply load robots_txt whenever the host is changed.
3956         (recursive_retrieve): Free forbidden before calling parse_robots.
3957
3958 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
3959
3960         * retr.c (show_progress): Use them.
3961
3962         * options.h (struct options): New options dot_bytes, dots_on_line
3963         and dot_spacing.
3964
3965 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
3966
3967         * recur.c (recursive_retrieve): Retrieve directories regardless of
3968         acc/rej rules; check for empty u->file.
3969
3970 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
3971
3972         * init.c (setval): Use it.
3973
3974         * utils.c (merge_vecs): New function.
3975
3976         * init.c (setval): Reset the list-type functions when encountering
3977         "".
3978
3979 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3980
3981         * recur.c (recursive_retrieve): Use base_url instead of this_url
3982         for no_parent.
3983
3984 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3985
3986         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
3987
3988 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
3989
3990         * utils.c (sepstring): Rewrote; don't use strtok.
3991
3992         * recur.c (recursive_retrieve): Enter assorted this_url to slist
3993         when running the first time.
3994         (retrieve_robots): Warn to ignore errors when robots are loaded.
3995
3996         * utils.c (load_file): Moved from url.c.
3997
3998         * http.c: Made static variables const too in h* functions.
3999
4000         * main.c (main): Renamed --continue-ftp to --continue.
4001
4002         * recur.c (recursive_retrieve): Use it.
4003
4004         * utils.c (frontcmp): New function.
4005
4006         * url.c (accdir): New function.
4007
4008         * html.c (htmlfindurl): Recognize <area href=...>.
4009
4010         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
4011
4012         * init.c (setval): Free the existing opt.excludes and
4013         opt.includes, if available.
4014
4015         * main.c (main): New option -I.
4016
4017 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
4018
4019         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
4020
4021         * version.c: Changed version to 1.4.1.
4022
4023 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
4024
4025         * version.c: Released 1.4.0.
4026
4027 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
4028
4029         * main.c (main): Free com and val after parse_line.
4030         (printhelp): Reorder the listing.
4031
4032         * http.c: More robust header parsing.
4033
4034         * http.c: Allow any number of spaces, or no spaces, precede ':'.
4035         (hskip_lws): New function.
4036         (haccepts_bytes): New function.
4037         (gethttp): Use it.
4038
4039         * init.c (setval): Check header sanity.
4040         (setval): Allow resetting of headers.
4041
4042 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
4043
4044         * http.c (http_loop): Don't use has_wildcards.
4045
4046         * http.c (gethttp): Free all_headers -- would leak.
4047
4048         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
4049         0 -- this fixes a long-standing bug in -rl.
4050
4051 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
4052
4053         * ftp.c: Use -1 as "impossible" value for con->fd.
4054
4055         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
4056
4057         * init.c (parse_line): Use isalpha.
4058
4059         * ftp-unix.c: Use HAVE_UNISTD_H.
4060
4061         * mtch.c (has_wildcards): Don't match \.
4062
4063         * http.c (http_loop): Warn on HTTP wildcard usage.
4064
4065 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
4066
4067         * url.c (url_filename): Do not create numbered suffixes if
4068         opt.noclobber -- would bug out on -nc.
4069
4070 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
4071
4072         * recur.c (parse_robots): Don't chuck out the commands without
4073         arguments (`Disallow:<empty>' didn't work).
4074         (parse_robots): Compare versions lowercase.
4075         (parse_robots): Match on base_version, not version_string!
4076         (parse_robots): Handle comments properly.
4077         (parse_robots): Match versions in a sane way.
4078
4079         * init.c: Print nicer error messages.
4080
4081         * version.c: Changed version to 1.4.0.
4082
4083 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
4084
4085         * version.c: Released 1.4.0-test2.
4086
4087         * init.c (run_wgetrc): Close fp.
4088
4089         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
4090         u->dir.
4091
4092 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
4093
4094         * init.c (setquota): Allow inf as quota specification.
4095
4096 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
4097
4098         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
4099         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
4100
4101         * main.c (main): Check for quota by comparison with downloaded
4102         stuff, not from status.
4103
4104         * connect.c (select_fd): Should compile on HPUX without warnings now.
4105
4106         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
4107         returned RETROK.
4108
4109 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
4110
4111         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
4112         (getftp): Return FTPRETRINT on control connection error.
4113
4114         * html.c (htmlfindurl): Recognize <embed src=...> and
4115         <bgsound src=...>.
4116         (ftp_index): Handle username and password correctly.
4117
4118         * main.c (main): Made `-np' a synonim for --no-parent.
4119
4120 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
4121
4122         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
4123         ftp_retrieve_glob.
4124
4125         * version.c: Changed version to 1.4.0-test2.
4126
4127 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
4128
4129         * version.c: Released 1.4.0-test1.
4130
4131         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
4132         directory.
4133         (convert_links): Removed definition of make_backup.
4134
4135         * http.h: Removed definition of MAX_ERROR_LENGTH.
4136
4137         * host.c (ftp_getaddress): Check for "(none)" domains.
4138
4139         * ftp.c (ftp_retrieve_dirs): Docfix.
4140
4141         * http.c (gethttp): Use ou->referer instead of u->referer.
4142
4143         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
4144         this was known to cause coredumps on Linux.
4145
4146         * html.c (ftp_index): Cast the argument to local_time to time_t *.
4147
4148 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
4149
4150         * connect.c (select_fd): Use exceptfds -- once and for all.
4151
4152         * retr.c (retrieve_from_file): Free filename after
4153         recursive_retrieve.
4154         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
4155         first-time retrieval.
4156         (retrieve_from_file): Return uerr_t; new argument, count.
4157         (retrieve_from_file): Break on QUOTEXC.
4158
4159         * init.c (setquota): Fixed a bug that caused rejection of
4160         non-postfixed values..
4161
4162 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
4163
4164         * version.c: Changed name to wget.
4165
4166         * connect.c (iread): Smarter use of select.
4167         (select_fd): Set errno on timeout.  If not timeout, return 1
4168         instead of 0.
4169
4170 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
4171
4172         * ftp.c (ftp_loop_internal): Don't use con->cmd before
4173         establishing it.
4174
4175 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
4176
4177         * http.c (gethttp): Send correct referer when using proxy.
4178         (gethttp): Use struct urlinfo ou to access the relevant data; send
4179         correct authorization in all cases.
4180
4181         * host.c (same_host): Use skip_uname to skip username and
4182         password.
4183
4184         * url.c (skip_uname): New function.
4185         (parseurl): Use it.
4186
4187         * host.c (same_host): Do not assume HTTP -- same_host should now
4188         be totally foolproof.
4189
4190         * url.c (skip_proto): New function.
4191         (parse_uname): Use it.
4192
4193         * http.c (gethttp): Create local user and passwd from what is
4194         given.
4195
4196         * url.c (parseurl): Check for HTTP username and password too.
4197
4198 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
4199
4200         * config.h.in: Removed #define gethostbyname R...
4201
4202 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
4203
4204         * version.c: Changed version to 1.4.0-test1.
4205
4206 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
4207
4208         * version.c: "Released" 1.4b29.
4209
4210         * recur.c (recursive_retrieve): Check for no_parent.
4211
4212         * init.c (setval): Option update.
4213
4214         * main.c (main): New option no-parent.
4215
4216         * options.h (struct options): New variable no_parent.
4217
4218         * recur.c (recursive_retrieve): Only files are checked for
4219         opt.accepts and opt.rejects.
4220         (recursive_retrieve): Check directories for opt.excludes.
4221         (recursive_retrieve): Make the dir absolute when checking
4222         opt.excludes.
4223
4224         * html.c (htmlfindurl): Recognize <applet code=...> and <script
4225         src=...>
4226
4227 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
4228
4229         * ftp.c (getftp): Do not line-break assert entries at all.
4230         (ftp_retrieve_dirs): docfix.
4231
4232         * connect.c (select_fd): Use fd + 1 as nfds.
4233
4234         * version.c: Changed version to 1.4b29.
4235
4236 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
4237
4238         * version.c: "Released" 1.4b28.
4239
4240         * ftp.c (ftp_loop_internal): Check whether f->size == len and
4241         don't continue the loop if it is.
4242         (ftp_get_listing): Remove list_filename on unsuccesful loop.
4243
4244 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
4245
4246         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
4247         (getftp): Do not use multiline assert.
4248
4249         * http.c (hparsestatline): Use mjr and mnr instead of major and
4250         minor, which don't compile on Ultrix.
4251         (http_loop): Use strcpy() to initialize tmp.
4252
4253         * all: Geturl -> Fetch
4254
4255 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
4256
4257         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
4258         ':'.
4259
4260         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
4261         moving `bufsize &&' to the beginning of each check in for-loops.
4262
4263         * recur.c (parse_robots): Close fp on exit.
4264
4265         * url.c (mymkdir): Check for each directory before creating.
4266
4267 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
4268
4269         * version.c: Changed version to 1.4b28.
4270
4271 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
4272
4273         * version.c: "Released" 1.4b27.
4274
4275         * init.c (parse_line): Use isspace.
4276         (parse_line): Free *com on all errors.
4277
4278         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
4279         (delelement): Use next instead of f->next and prev instead of
4280         f->prev.
4281         (delelement): Free the members of the deleted element.
4282
4283         * http.c (http_loop): Do not return RETROK on code != 20x.
4284
4285         * init.c (cleanup): Free opt.user_header.
4286         (cleanup): Free opt.domains.
4287
4288         * url.c (freelists): Moved to cleanup().
4289
4290         * http.c (hparsestatline): Docfix.
4291
4292         * main.c (main): Return with error status on unsuccesful
4293         retrieval.
4294
4295         * init.c (setval): Do not remove listing when mirroring.
4296
4297         * url.c (url_filename): Use opt.fileprefix.
4298
4299         * ftp.c (ftp_get_listing): Use url_filename to get filename for
4300         .listing.
4301
4302         * main.c (main): New option: -rn.
4303
4304 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
4305
4306         * Makefile.in (RM): Added RM = rm -f.
4307
4308         * host.c (clean_hosts): New function.
4309         (free_hlist): Just free the list, no reset.
4310
4311         * version.c: Changed version to 1.4b27.
4312
4313 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
4314
4315         * version.c: "Released" 1.4b26.
4316
4317         * retr.c (retrieve_from_file): If call get_urls_html with
4318         opt.spider to make it silent in spider mode.
4319
4320         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
4321
4322         * url.h (CLEANDUP): New macro.
4323
4324         * http.c (gethttp): Fixed a bug that freed location only when it
4325         was NULL.
4326
4327         * retr.c (retrieve_url): Free url if it will not be stored,
4328         i.e. newloc is NULL.
4329
4330         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
4331         old version would bug out on <a href="x#a"href="y">.
4332
4333         * html.h (state_t): New member in_quote.
4334
4335         * html.c (htmlfindurl): Free s->attr at the beginning of
4336         attr-loop.
4337
4338         * recur.c (recursive_retrieve): Recognize RCLEANUP.
4339         (tried_robots): Make hosts a global variable.
4340         (recursive_retrieve): Free constr after URL host optimization.
4341         (tried_robots): Free urlinfo before exiting.
4342
4343         * utils.c (free_slist): New function.
4344
4345         * recur.c (recursive_retrieve): Use flags to add cleanup
4346         possibility.
4347
4348         * main.c (main): Free filename after recursive_retrieve.
4349
4350         * http.c (gethttp): Store successful responses too.
4351
4352 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
4353
4354         * all: Constified the whole source.  This required some minor
4355         changes in many functions in url.c, possibly introducing bugs -- I
4356         hope not.
4357
4358         * ftp-basic.c: Removed last_respline.
4359
4360         * http.c (gethttp): Free type.
4361
4362         * host.c (same_host): Free real1 and real2.
4363
4364         * main.c (main): New option --spider.
4365
4366         * retr.c (get_contents): Don't reset errno.
4367
4368         * main.c (main): Sorted the options.
4369
4370         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
4371         uninitialized by select().
4372
4373         * http.c (http_loop): Print the time when the connection is
4374         closed.
4375         (gethttp): Debug-print the HTTP request.
4376
4377 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
4378
4379         * connect.c (iread): Do not try reading after timeout.
4380
4381         * main.c (main): Would bug out on -T.
4382
4383         * connect.c (select_fd): Do not use exceptfds.
4384         (iread): Set ETIMEDOUT on select_fd <= 0.
4385
4386         * version.c: Changed version to 1.4b26.
4387
4388 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
4389
4390         * version.c: "Released" 1.4b25.
4391
4392         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
4393         or link name.
4394
4395         * http.c (gethttp): Add errcode to struct hstat.
4396         (http_loop): Use it.
4397
4398         * url.c (no_proxy_match): Simplify using char** for no_proxy.
4399
4400         * options.h (struct options): Make opt.no_proxy a vector.
4401
4402         * utils.c (sepstring): Use !*s instead of !strlen(s).
4403
4404         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
4405         (getperms): Use ISODIGIT instead of isdigit.
4406
4407         * ftp.c (getftp): Print time.
4408
4409         * main.c (main): Use legible output of downloaded quantity.
4410
4411         * ftp.c (getftp): Use elapsed_time().
4412         (ftp_loop_internal): Use rate().
4413
4414         * http.c (http_loop): Add download ratio output; Use rate().
4415
4416         * utils.c (rate): New function.
4417
4418 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
4419
4420         * http.c (http_loop): Use timer.
4421
4422         * ftp.c: Split to ftp-basic.c and ftp.c
4423
4424         * utils.c (reset_timer): New function.
4425         (elapsed_time): New function.
4426
4427         * retr.c (show_progress): Make bytes_in_line and offs long; should
4428         work on 16-bit machines.
4429
4430 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
4431
4432         * url.c (in_acclist): New argument backward.
4433
4434         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
4435         a file should be retrieved according to suffix.
4436         (ftp_get_listing): Check the return value of unlink; Do not call
4437         ftp_retrieve_dirs if depth reached maxreclevel.
4438         (ftp_retrieve_dirs): Check whether the directory is in
4439         exclude-list.
4440
4441         * main.c (main): Print the version number at the beginning of
4442         DEBUG output.
4443         (main): Use strrchr when creating exec_name.
4444
4445         * ftp.c (ftp_retrieve_glob): Do not close control connection.
4446
4447         * version.c: Changed version to 1.4b25.
4448
4449 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
4450
4451         * version.c: "Released" 1.4b24.
4452
4453         * Makefile.in: Rewrite.
4454
4455         * ftp.c (ftp_loop_internal): Likewise.
4456
4457         * retr.c (time_str): Check for failed time().
4458
4459         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
4460         HTML3.0.
4461
4462         * retr.c (time_str): Return time_t *.
4463
4464         * connect.c (bindport): Close msock on unsuccesful bind.
4465         (bindport): The same for getsockname and listen.
4466
4467         * retr.c (retrieve_url): Allow any number of retries on
4468         proxy.
4469
4470         * http.c (gethttp): Do not treat errno == 0 as timeout.
4471         (http_loop): Likewise.
4472         (http_loop): Cosmetic changes.
4473
4474         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
4475
4476         * retr.c (get_contents): Reset errno.
4477
4478         * ftp.c (getftp): Minor fixes.
4479
4480 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
4481
4482         * http.c: Do not use backups.
4483
4484         * geturl.1 (WARNING): Warn that man-page could be obsolete.
4485
4486         * getopt.c (getopt_long): Moved to getopt.c
4487
4488         * geturl.texi: Enhanced.
4489
4490         * main.c (main): Use it.
4491
4492         * recur.c (convert_all_links): New function.
4493
4494         * utils.c (add_slist): New argument flags.
4495
4496         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
4497         (parse_robots): Do not chuck out empty value fields.
4498         (parse_robots): Make yourself welcome on empty Disallow.
4499
4500         * version.c: Changed version to 1.4b24.
4501
4502 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
4503
4504         * version.c: "Released" 1.4b23.
4505
4506         * ftp.c (ftp_loop_internal): Get the time after getftp.
4507
4508         * Makefile.in (install.info): New target.
4509         (install): Use it.
4510
4511         * http.c (http_loop): Fix output when doing -O.
4512
4513 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
4514
4515         * geturl.texi: New file.
4516
4517         * main.c (main): Do not print the warnings and download summary if
4518         opt.quiet is set.
4519
4520         * version.c: Changed version to 1.4b23.
4521
4522 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
4523
4524         * "Released" 1.4b22.
4525
4526         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
4527         to avoid redefinition warnings.
4528
4529         * host.c (store_hostaddress): Use memcpy() to copy the address
4530         returned by inet_addr.
4531
4532         * version.c: Changed version to 1.4b22.
4533
4534 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
4535
4536         * version.c: "Released" 1.4b21.
4537
4538         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
4539
4540         * ftp.c (ftp_port): Use conaddr.
4541         (getftp): Print the file length.
4542         (ftp_retrieve_list): Check the stamps of plain files only.
4543
4544         * connect.c (closeport): Do not call shutdown().
4545         (conaddr): New function.
4546
4547         * html.c (ftp_index): Made it dfp-aware.
4548
4549         * init.c (cleanup): New name of freemem. Close opt.dfp.
4550
4551         * ftp.c (getftp): Use opt.dfp if it is set.
4552
4553         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
4554
4555         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
4556         CWDs to be sent with recursive FTP retrievals.
4557
4558 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
4559
4560         * recur.c (parse_robots): Made it more compliant with "official"
4561         specifications.
4562
4563         * http.c: New function.
4564
4565         * ftp-unix.c (ftp_parse_ls): Added better debug output.
4566
4567         * ftp.c (getftp): Print out the LIST in case of
4568         opt.print_server_response.
4569
4570         * version.c: Changed version to 1.4b21.
4571
4572 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
4573
4574         * version.c: "Released" 1.4b20.
4575
4576         * README: Update.
4577
4578         * http.c (gethttp): Preset lengths of various headers instead of
4579         calculating them dynamically.
4580         (gethttp): Check for 206 partial contents.
4581
4582 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
4583
4584         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
4585
4586         * http.c (gethttp): Send the port number in the Host: header.
4587
4588 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
4589
4590         * http.c (gethttp): Send host: header.
4591         (gethttp): Add the possibility of user-defined headers.
4592         (gethttp): Move decision about pragma: no-cache to http_loop,
4593         where it belongs.
4594         (gethttp): Pass a struct instead of enormous argument list.
4595         (http_loop): Use a new, fancier display format.
4596         (ftp_loop): Likewise.
4597
4598         * main.c: (hangup): Turn off buffering of the new log file.
4599
4600         * install-sh: Likewise.
4601
4602         * config.sub: Replace with the one in autoconf-2.10
4603
4604         * geturl.1: Update.
4605
4606         * init.c: New options httpuser and httppasswd.
4607
4608         * http.c: (base64_encode_line): New function.
4609         (gethttp): Send authentication.
4610
4611         * connect.c (make_connection): Use store_hostaddress.
4612
4613 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
4614
4615         * host.c (store_hostaddress): New function.
4616
4617         * NEWS: Update.
4618
4619         * http.c (hgetrange): New function.
4620         (gethttp): Use ranges.
4621
4622         * utils.c (numdigit): Accept long instead of int.
4623
4624         * http.c (http_loop): Add restart capabilities.
4625
4626         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
4627         being used uninitialized.
4628         (ftp_retrieve_list): Similar fix.
4629
4630         * host.c (add_hlist): Fixed a bug that could cause cmp being used
4631         uninitialized.
4632
4633         * url.c (construct_relative): New function.
4634
4635         * recur.c (recursive_retrieve): Use it.
4636
4637         * retr.c (convert_links): New function.
4638
4639 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
4640
4641         * url.c (free_urlpos): New function.
4642
4643         * recur.c (recursive_retrieve): Adapt.
4644
4645         * url.c (get_urls_html): Return a linked list instead of a vector.
4646
4647         * url.c (get_urls_file): Return a linked list instead of a vector.
4648
4649         * geturl.1: Update.
4650
4651         * http.c (gethttp): Implement it.
4652
4653         * init.c (setval): New option: SAVEHEADERS
4654
4655         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
4656         be retrieved. Lack of this test caused bugs when the connection
4657         was lost during listing.
4658
4659         * retr.c (retrieve_url): Fixed a bug that caused
4660         coredumps. *newloc is now reset by default.
4661         (retrieve_url): Lift the twenty-tries limit on proxies.
4662
4663         * version.c: Changed version to 1.4b20.
4664
4665 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
4666
4667         * version.c: "Released" 1.4b19.
4668
4669 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
4670
4671         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
4672         (getftp): Changed prototype to accept ccon *.
4673
4674 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
4675
4676         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
4677         incorrect values to files pointed to by symbolic links.
4678         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
4679
4680 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
4681
4682         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
4683
4684         * main.c (main): New option: --user-agent.
4685
4686         * geturl.1: Ditto.
4687
4688         * init.h: Ditto.
4689
4690         * init.c (setval): Ditto.
4691
4692         * main.c (main): Rename "server-headers" to "server-response".
4693
4694         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
4695         executables in 'ls -F' listings.
4696
4697 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
4698
4699         * url.c (parseurl): Remove realloc() and sprintf().
4700         (str_url): Get rid of sprintf().
4701
4702         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
4703         servers.
4704
4705         * url.h (URL_CLEANSE): Made it else-resistant.
4706         (USE_PROXY): New macro.
4707
4708 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
4709
4710         * NEWS: Update.
4711
4712         * version.c: Changed version to 1.4b19.
4713
4714 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
4715
4716         * version.c: "Released" 1.4b18.
4717
4718         * url.c: Made it reallocate space exponentially.
4719
4720 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
4721
4722         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
4723         the list of stuff to fetch.
4724
4725 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
4726
4727         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
4728         -Fi.
4729
4730         * html.c (htmlfindurl): Rewrite.
4731
4732         * http.c (gethttp): Use opt.proxy_cache.
4733
4734         * main.c (main): Added --cache option.
4735
4736         * ftp.c (ftp_response): Print server response if opt.print_server
4737         response is set.
4738         (getftp): Print newlines after each request if the server response
4739         is to be printed.
4740         (ftp_response): Copy the last response line to last_respline.
4741
4742         * http.c (gethttp): Add Pragma: nocache for retried
4743         proxy-retrievals.
4744
4745         * ftp.c (getftp): Use it.
4746
4747         * retr.c (buf_discard): New function.
4748
4749         * ftp.c (ftp_response): Use buf_readchar().
4750         (getftp): Flush the control connection buffer before calling
4751         get_contents().
4752
4753         * retr.c (buf_readchar): New function.
4754         (buf_flush): New function.
4755         (get_contents): Use buf_readchar() instead of read(x, x, 1).
4756         (get_contents): Use buf_flush.
4757
4758 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
4759
4760         * ftp.c: Incorporate changes to ftp_response.
4761
4762         * ftp.c (ftp_response): Allocate the server response dynamically,
4763         as in read_whole_line and fetch_next_header.
4764
4765         * utils.c (read_whole_line): Fixed a bug that prevented reading
4766         the last line if it is not \n-terminated. Also fixed a possible
4767         memory overflow.
4768
4769         * http.c (fetch_next_header): Return malloc-ed string as large as
4770         needed.
4771         (gethttp): Use new fetch_next_header.
4772
4773 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
4774
4775         * http.c (hgetlen): Compute the header length the first time only.
4776         (hgettype): Ditto.
4777         (hgetlocation): Ditto.
4778         (hgetmodified): Ditto.
4779
4780 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4781
4782         * sample.geturlrc: Update.
4783
4784 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4785
4786         * http.c (http_loop): Ditto.
4787
4788         * ftp.c (getftp): Open the output file as binary.
4789
4790         * version.c: Changed version to 1.4b18.
4791
4792 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4793
4794         * version.c: "Released" 1.4b17.
4795
4796         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
4797         instead of failed assertion.
4798
4799 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
4800
4801         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
4802         if a file of that name already exists.
4803
4804 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
4805
4806         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
4807
4808         * config.h.in: Define gethostbyname as Rgethostbyname when using
4809         Socks.
4810
4811         * configure.in: Check for -lresolv if using Socks.
4812
4813         * version.c: Changed version to 1.4b17.
4814
4815 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
4816
4817         * version.c: "Released" 1.4b16.
4818
4819         * http.c (gethttp): More intelligent check for first line of HTTP
4820         response.
4821         (gethttp): Would bug out on time-stamping.
4822
4823         * version.c: Changed version to 1.4b16.
4824
4825 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4826
4827         * version.c: Released 1.4b15.
4828
4829         * http.c (http_loop): Print \n after the loop entry, not before.
4830
4831         * url.c (url_filename): Use ISDOT.
4832
4833         * url.h (ISDOT): New macro.
4834
4835         * recur.c (recursive_retrieve): Change only opt.recursive for
4836         following FTP.
4837
4838 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
4839
4840         * socks/geturl.cgi: Fixed version No.
4841
4842         * socks/download-netscape.html: Ditto.
4843
4844         * socks/download.html: Changed socks.html to download.html.
4845
4846 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4847
4848         * url.c (url_filename): Check for opt.dirstruct instead for
4849         opt.recursive && opt.dirstruct.
4850
4851         * init.c (defaults): Ditto.
4852         (defaults): Reset dirstruct by default.
4853         (setval): Set opt.dirstruct whenever setting recursive.
4854
4855         * init.h: Removed FORCEDIRHIER.
4856
4857         * INSTALL: Added -L to socks-description.
4858
4859         * version.c: Changed version to 1.4b15.
4860
4861 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
4862
4863         * version.c: "Released" 1.4b14.
4864
4865         * geturl.1: Update AUTHOR to include Rosella as contributor.
4866
4867         * NEWS: Update.
4868
4869         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
4870
4871         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
4872         (cal_time): Fix == to eq.
4873
4874         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
4875
4876         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
4877
4878         * Makefile.in: Use @VERSION@.
4879
4880         * configure.in: Check version from version.c.
4881
4882         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
4883
4884         * socks/download.html: Created from download-netscape.html, made
4885         HTML-2.0 compliant.
4886
4887         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
4888         following FTP links from recursions.
4889
4890 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4891
4892         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
4893         absolute directories correctly.
4894
4895         * version.c: Changed version to 1.4b14.
4896
4897 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4898
4899         * version.c: "Released" 1.4b13.
4900
4901         * url.c (make_backup): New function.
4902
4903         * http.c (http_loop): Make a backup copy of the local file (using
4904         rename(2)) before opening it.
4905
4906         * main.c (main): Added --backups.
4907
4908         * host.c (ftp_getaddress): Bail out on failed mycuserid().
4909         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
4910         (ftp_getaddress): Check for empty, null or (null) domain.
4911
4912         * url.c (get_urls_html): If this_url is NULL, the base must have a
4913         protocol.
4914         (parseurl): Use has_proto.
4915
4916         * retr.c (retrieve_url): Warn when proxy is used with more than 20
4917         retries.
4918
4919         * url.c (mkstruct): Create the directory (calling mymkdir()) only
4920         if it is not already there.
4921         (has_proto): New function.
4922         (get_urls_html): Eliminate the remaining call to findurl -- use
4923         has_proto.
4924
4925         * geturl.1: Ditto.
4926
4927         * main.c: Change -X to -x.
4928
4929         * url.c (url_filename): Simplify creation of filename if
4930         prefix_files is set.
4931         (url_filename): Simplify everything. And I do mean *everything*.
4932         (mkstruct): Add dir_prefix before hostname.
4933         (path_simplify): Fixed a bug that caused writing outside the path
4934         string in case of "." and ".." path strings.
4935
4936 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
4937
4938         * init.c: Added --mirror.
4939
4940         * main.c (main): Added -X to force saving of directory hierarchy.
4941
4942         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
4943         (ftp_retrieve_list): Check whether quota is exceeded.
4944
4945         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
4946
4947         * http.c (gethttp): Use referer if present.
4948
4949         * recur.c (recursive_retrieve): Set u->referer before calling
4950         retrieve_url.
4951
4952         * url.c (newurl): Use memset to nullify the struct members.
4953         (freeurl): Free the referer field too.
4954
4955         * url.h: Added referer to urlinfo.
4956
4957         * geturl.1: Updated the manual to document some of the new features.
4958
4959         * utils.c (numdigit): Moved from url.c.
4960
4961         * README: Rewritten.
4962
4963         * config.h.in: Add the support for socks.
4964
4965         * configure.in: Add the support for socks.
4966
4967         * url.c (url_filename): If the dir_prefix is ".", work with just
4968         the file name.
4969         (url_filename): Do not look for .n extensions if timestamping if
4970         turned on.
4971
4972         * retr.c (show_progress): Skip the over-abundant restval data, and
4973         print the rest of it with ',' instead of '.'.
4974
4975 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
4976
4977         * retr.c (show_progress): Changed second arg. to long (as it
4978         should be).
4979         (show_progress): Moved to retr.c.
4980         (get_contents): Moved to retr.c.
4981
4982         * version.c: Change version to 1.4b13.
4983
4984 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
4985
4986         * url.c (in_acclist): Would return after the first suffix.
4987
4988 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
4989
4990         * version.c: "Released" 1.4b12.
4991
4992         * url.c (path_simplify): More kludgifications.
4993         (get_urls_html): Use new parameters for htmlfindurl.
4994
4995         * html.c: Removed memorizing "parser states", since the new
4996         organization does not require them.
4997
4998         * init.c (run_geturlrc): Use read_whole_line.
4999
5000         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
5001
5002         * recur.c (parse_robots): Use read_whole_line.
5003
5004         * utils.c (read_whole_line): New function.
5005
5006         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
5007
5008         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
5009         tested on OSF and Ultrix.
5010         (add_hlist): New function.
5011         (free_hlist): New function.
5012         (search_host): New function.
5013         (search_address): New function.
5014         (realhost): Use search_host, search_address and add_hlist.
5015         (same_host): Replaced realloc() with strdupdelim(), made
5016         case-insensitive, fixed a memory leak.
5017
5018         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
5019         tm_min, like intended.
5020
5021         * version.c: Change user agent information to
5022         Geturl/version.
5023
5024 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
5025
5026         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
5027
5028         * url.c (acceptable): Always accept directories.
5029
5030         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
5031         servers by stripping trailing @ from symlinks and trailing / from
5032         directories.
5033
5034         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
5035
5036         * url.c (skip_url): Use toupper instead of UCASE.
5037
5038         * host.c (sufmatch): Made it case-insensitive.
5039
5040         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
5041         (match_backwards): New function, instead of
5042         match_backwards_or_pattern.
5043
5044         * recur.c (recursive_retrieve): Increased performance by
5045         introducing inl, which reduces number of calls to in_slist to only
5046         one.
5047
5048         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
5049         routine to use.
5050
5051         * main.c (printhelp): Removed the warranty stuff.
5052
5053 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
5054
5055         * url.c (add_slist): Simplify.
5056         (match_backwards_or_pattern): New function.
5057         (in_acclist): Use match_backwards_or_pattern.
5058         (matches): Remove.
5059
5060 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
5061
5062         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
5063         recursive.
5064
5065         * html.c (ftp_index): Fixed to work. Beautified the output.
5066
5067         * ftp.c (ftp_retrieve_glob): Another argument to control whether
5068         globbing is to be used.
5069         (ftp_retrieve_list): Compare the time-stamps of local and remote
5070         files to determine whether to download.
5071
5072 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
5073
5074         * ftp.c (rel_constr): New function.
5075
5076         * retr.c (retrieve_from_file): Check for text/html before
5077         retrieving recursively.
5078
5079         * main.c (main): Check whether the file is HTML before going into
5080         recursive HTML retrieving.
5081
5082         * ftp.c (ftp_retrieve_list): Manage directories.
5083         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
5084         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
5085         initialized, causing bugchecks in getftp to fail.
5086
5087         * configure.in: Check for symlink.
5088
5089         * ftp.c (ftp_retrieve_list): Added support for symlinks.
5090
5091         * version.c: "Released" 1.4b10.
5092
5093         * atotm.c (atotm): Redeclared as time_t.
5094
5095         * init.c: New variable "timestamping".
5096
5097         * main.c (main): New option 'N'.
5098
5099         * http.c (hgetlocation): Case-insensitive match.
5100         (hgetmodified): New function.
5101         (http_loop): Implement time-stamping.
5102
5103 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
5104
5105         * version.c: Changed version to 1.4b10
5106
5107         * atotm.c: New file, from phttpd.
5108
5109         * options.h (struct options): New parameter timestamping.
5110
5111         * version.c: 1.4b9 "released".
5112
5113         * recur.c (recursive_retrieve): Used linked list (ulist) for
5114         faster storing of URLs.
5115
5116         * url.c (get_urls_html): Removed the old kludge with comparing the
5117         outputs of htmlfindurl and findurl.
5118         (get_urls_html): Added better protocol support here.
5119         (create_hash): Removed, as well as add_hash and in_hash.
5120         (addslist): New function.
5121         (in_slist): ditto
5122
5123         * version.c: Released 1.4b8, changed version to b9.
5124
5125 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
5126
5127         * ftp.c (freefileinfo): New function.
5128         (delelement): New function.
5129
5130         * everywhere: GPL!
5131
5132         * ftp.c (ftp_loop): Use ccon.
5133         (ftp_retrieve_glob): Likewise.
5134
5135         * ftp.h: Define ccon, to define status of control connection.
5136
5137         * ftp.c (ftp_get_listing): New function.
5138         (ftp_retrieve_more): New function.
5139         (ftp_retrieve_glob): New function.
5140
5141 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
5142
5143         * configure.in: Removed the search for cuserid().
5144
5145         * init.c (getmode): Renamed to getperms.
5146
5147 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
5148
5149         * version.c: New version.
5150
5151         * main.c (hangup): New function, that handles hangup. Hangup
5152         signal now causes geturl to stop writing on stdout, and to write
5153         to a log file.
5154
5155         * ftp.c (getftp): "Released" 1.4b7.
5156
5157         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
5158         (ftp_index): Use fileinfo/urlinfo.
5159
5160         * ftp-unix.c (ftp_parse_ls): New function.
5161         (symperms): New function.
5162
5163         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
5164
5165         * retr.c (retrieve_url): Added FTP support.
5166
5167 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
5168
5169         * geturl.h: Removed NOTFTP2HTML enum.
5170         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
5171
5172         * ftp.c (getftp): Resynched with urlinfo.
5173         (getftp): Removed HMTL-ization of index.html from getftp.
5174
5175         * version.c: 1.4b6 "released".
5176
5177         * options.h (options): New struct, to keep options in.
5178
5179         * http.c (http_loop,gethttp): Synched with proxy.
5180
5181         * retr.c (retrieve_url): Implemented proxy retrieval.
5182
5183         * main.c (main): Use retrieve_from_file.
5184
5185 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
5186
5187         * retr.c (retrieve_from_file): New function.
5188
5189         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
5190         can be found in u->proto.
5191
5192         * ftp.c (ftp_response): Fixed to accept multi-line responses as
5193         per RFC 959.
5194
5195         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
5196
5197         * url.c (mymkdir): Removed the file of the same name, if one
5198         exists.
5199         (isfile): New function.
5200         (mkstruct): Fixed the '/' glitches.
5201         (path_simplify): Hacked to treat something/.. correctly.
5202
5203 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
5204
5205         * http.c (gethttp): Close the socket after error in headers.
5206         (http_loop): HEOF no longer a fatal header.
5207
5208         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
5209         simplifies the syntax of calling retrieve_url.
5210
5211         * recr.c (recursive_retrieve): Modified to use get_urls_html.
5212
5213         * url.c (get_urls_file): New function.
5214         (get_urls_html): New function.
5215
5216         * recr.c (recursive_retrieve): Patched up to conform to the
5217         standards.
5218
5219         * http.c (gethttp): Synched with the rest...
5220         (gethttp): Treat only CONREFUSED specially, with connection
5221         errors.
5222
5223         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
5224
5225 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
5226
5227         * http.c (http_loop): New function.
5228
5229         * loop.c: Removed *lots* of stuff from retrieve_url.
5230
5231         * url.c (parseurl): Changed to work with urlinfo. Integrated
5232         username finding and path parsing.
5233         (newurl): New function.
5234         (freeurl): New function.
5235         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
5236         (url_filename): Likewise.
5237         (path_simplify): Accept relative paths too.
5238         (opt_url): Made urlinfo-compliant, removed bogosities.
5239         (path_simplify): Expanded to accept relative paths.
5240         (str_url): A replacement for hide_url
5241         (decode_string): Fixed a bug that caused malfunctioning when
5242         encountering an illegal %.. combination.
5243         (opt_url): Removed the argument. Dot-optimizations are now default.
5244
5245         * nmalloc.c (strdupdelim): New function.
5246
5247         * url.h: Added the urlinfo structure
5248
5249 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
5250
5251         * url.c (hide_url): Thrown out the protocol assertion. Do not
5252         change the URL if the protocol if not recognized.
5253         (findurl): Put continue instead of break.
5254
5255 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
5256
5257         * sample.geturlrc: Changed the defaults to be commented out and
5258         harmless (previous defaults caused pains if copied to
5259         ~/.geturlrc).
5260
5261         * http.c (gethttp): Print the HTTP request in debug mode.
5262
5263         * connect.c (iread): Added EINTR check loop to select-ing
5264         too. EINTR is now correctly handled with select().
5265
5266         * TODO: new file
5267
5268 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
5269
5270         * host.c (same_host): Made the function a little bit more
5271         intelligent regarding diversified URL syntaxes.
5272
5273         * url.c (skip_url): Spaces are now skipped after URL:
5274
5275         * Released 1.3.1 with the patch to prevent crashing when sending
5276         NULL to robot* functions and the patch to compile "out of the box"
5277         on AIX.
5278
5279         * recr.c (recursive_retrieve): Added checking whether this_url is
5280         NULL when calling the robot functions.
5281
5282         * ChangeLog: New file.