sjero.net Git - wget/blob - src/ChangeLog

   1 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * html-url.c (get_urls_html): Parse the appropriate flags to
   4         html-parse.c.
   5
   6         * html-parse.c (map_html_tags): Accept FLAGS from the caller
   7         instead of examining OPT.
   8
   9 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
  10
  11         * html-url.c (find_tag): Switch to binary search.
  12
  13 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
  14
  15         * main.c (print_help): Fix typo; stured -> stored.
  16
  17 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
  18
  19         * getopt.c: Add definitions of getopt_long and getopt_long_only.
  20
  21 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
  22
  23         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
  24         think, a better name, because it implies that debugging output is
  25         merely possible, not "on by default", as might be construed from
  26         just DEBUG.
  27
  28 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
  29
  30         * ftp.c (has_insecure_name_p): Define it here.
  31
  32         * utils.c (has_wildcards_p): Define it here.
  33
  34         * sysdep.h: Declare fnmatch-related macros here, if not using
  35         system fnmatch().  Update .c files to not declare fnmatch.h
  36         directly.
  37
  38         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
  39
  40 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
  41
  42         * getopt.c: Newer version, imported from Free libit.
  43
  44 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
  45
  46         * cookies.c (struct cookie): Remove unused backpointer to cookie
  47         jar.
  48
  49 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
  50
  51         * cmpt.c (memmove): Comment out, since it's no longer used.
  52
  53         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
  54         chains in one pass.
  55         (find_chains_of_host): Assume that the caller has allocated DEST
  56         to be sufficiently large to take all the data.
  57         (eliminate_dups): Run through the array and eliminate dups on the
  58         fly instead of using memmove.
  59         (cookie_jar_process_set_cookie): Free cookie->domain before
  60         re-setting it.
  61
  62 2003-10-05  Gisle Vanem  <giva@bgnett.no>
  63
  64         * mswindows.c (set_sleep_mode): Fix type of
  65         _SetThreadExecutionState.
  66
  67 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
  68
  69         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
  70         to this patch, wget --post-file=nosuchfile dumped core.
  71
  72 2003-10-04  Gisle Vanem  <giva@bgnett.no>
  73
  74         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
  75         for thread termination.
  76
  77 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
  78
  79         * log.c: Use `...' in function definitions; ansi2knr will convert
  80         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
  81         VA_START_2 macros.
  82
  83 2003-10-03  Gisle Vanem  <giva@bgnett.no>
  84
  85         * connect.c: And don't include them here.
  86
  87         * mswindows.h: Include winsock headers here.
  88
  89 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
  90
  91         * html-parse.c (convert_and_copy): Move variable declarations
  92         before statements.
  93
  94 2003-10-02  Gisle Vanem  <giva@bgnett.no>
  95
  96         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
  97         thread via a helper function. Continually query the thread's
  98         exit-code until finished or timed out.
  99
 100 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 101
 102         * wget.h (XMALLOC_ARRAY): Removed.
 103         (ALLOCA_ARRAY): Ditto.
 104
 105         * html-parse.c: Renamed alloca_p to resized.
 106         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
 107         returned it to html-parse.c, since nothing else was using it.
 108
 109 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 110
 111         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
 112         by valgrind.
 113
 114 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 115
 116         * html-parse.c (convert_and_copy): Handle numeric entities in
 117         hexadecimal, &#xHH.
 118         (convert_and_copy): Copy the contents directly to the pool without
 119         a stack-allocated intermediary.
 120
 121 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 122
 123         * utils.c (alarm_set): New function; use either setitimer or alarm
 124         to set up the alarm.
 125         (alarm_cancel): New function; cancel the alarm set up by
 126         alarm_set.
 127         (run_with_timeout): Use them.
 128
 129 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
 130
 131         * url.c (url_parse): Don't leak memory when a reencoded URL turns
 132         out to be invalid.
 133
 134         * url.c (parse_errors): Mark error messages for translation.
 135         (url_error): Translate error messages returned to the caller.
 136
 137 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
 138
 139         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
 140         the compiler.
 141
 142 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 143
 144         * src/mswindows.c: Added ws_percenttitle() showing progress in the
 145         window titlebar. Called from retr.c. Secured ws_mypath().
 146
 147         * windows/config.h.ms: alloca() prototype not needed.  Removed
 148         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
 149         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
 150         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
 151
 152 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
 153
 154         * ftp.c (getftp): --spider option should now work with FTP
 155         downloads.
 156         (ftp_loop_internal): quiet reports and calculations of downloads
 157         when --spider option set, nor try deleting when --delete-after
 158         also set.
 159         (ftp_loop): --spider will skip HTML-ification of .listing file.
 160
 161 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 162
 163         * mswindows.c (read_registry): Removed.
 164         (set_sleep_mode): New function.
 165         (windows_main_junk): Call it.
 166
 167 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 168
 169         * mswindows.c (read_registry): Fix invocation of registry
 170         functions.
 171
 172         * mswindows.c (read_registry): Condition definitions of sleep and
 173         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
 174         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
 175
 176 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
 177
 178         * url.c (url_escape_1): Revert unintentional change to lowercase
 179         xdigit escapes.
 180         (url_escape_dir): Document that this function depends on the
 181         output of url_escape_1.
 182
 183 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
 184
 185         * progress.c (create_image): Print the current ETA if we're done
 186         with the download.
 187         (create_image): Change '-' display char to '+' in the progress bar.
 188
 189         * Makefile.in (clean): Remove .libs.
 190
 191 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
 192
 193         * cookies.c (struct cookie): New flag domain_exact.
 194         (update_cookie_field): Skip leading dot in domain.
 195         (find_matching_chains): Match numeric addresses exactly; don't
 196         needlessly copy HOST to the stack.
 197         (matching_cookie): Added argument HOST.  If cookie->domain_exact
 198         is set, check that HOST is equal to cookie->domain.
 199         (cookie_jar_load): Only use TAB as delimiter.  Document the
 200         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
 201         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
 202         domain_exact to true if DOMAIN-FLAG is false.
 203         (save_cookies_mapper): If domain_exact is false, prepend the
 204         domain with dot, like Mozilla does.
 205
 206 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 207
 208         * progress.c (create_image): Print the initial part of the
 209         download with '-' characters, analogous to how dot progress prints
 210         the initial part with ','.
 211
 212         * hash.c (ptrhash): New function.
 213         (ptrcmp): Ditto.
 214         (hash_table_new): Default to identity hash table.
 215
 216 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 217
 218         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
 219         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
 220         to unsigned short instead.
 221
 222 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 223
 224         * url.c (path_simplify): Instead of calls to memmove, handle "./"
 225         and "../" by advancing pointers.
 226
 227 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 228
 229         * retr.c (getproxy): Moved from url.c.
 230
 231         * convert.c: Split off link conversion from url.c into separate
 232         file.  Also included the book-keeping stuff from recur.c.
 233
 234 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 235
 236         * init.c: Improved documentation of functions.
 237         (cmd_boolean): Attempt to make code that tries to avoid calling
 238         strcmp for "speed" a bit more readable.
 239
 240         * init.c (simple_atof): Report error on encountering non-digit,
 241         non-"." character.
 242         (simple_atoi): Replacement for myatoi(), calling interface
 243         compatible with simple_atof.  Updated myatoi's callers.
 244
 245 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
 246
 247         * url.c (path_simplify): Would read two bytes past the end of the
 248         string in the "./" case.
 249
 250 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
 251
 252         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
 253         as what Wget considers "text/html".
 254
 255 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 256
 257         * connect.c (connect_with_timeout): Made timeout type double.
 258
 259         * options.h (struct options): New members read_timeout,
 260         dns_timeout, and connect_timeout.
 261         Use them.
 262
 263 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 264
 265         * init.c (simple_atof): New function.
 266         (cmd_time): Use it.
 267         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
 268         to parse decimals.
 269
 270         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
 271         previous one.
 272
 273 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 274
 275         * main.c (main): Use setoptval() for setting the options.  Use
 276         run_command for `-e'.
 277
 278         * init.c (parse_line): Rewritten to return COMIND right away.
 279         Changed linkage to static.
 280         (run_wgetrc): Use the available comind when calling setval, so it
 281         doesn't have to be computed twice.
 282         (setval_internal): New function, runs the command's action without
 283         any error checking.
 284         (setoptval): New function, does what setval used to do, but exits
 285         in case of error.
 286         (run_command): New function.
 287
 288 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 289
 290         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
 291         its decimal part.
 292
 293         * retr.c (sleep_between_retrievals): In the random-wait case, use
 294         random_float() to wait between 0 and 2*opt.wait seconds.
 295
 296         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
 297         handle timeout values in (0, 1) range.
 298         (random_float): New function.
 299
 300         * options.h (struct options): Change the types of wait, waitretry,
 301         and timeout to double.
 302
 303         * init.c (cmd_time): Accept floating point time.
 304
 305 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
 306
 307         * retr.c (get_contents): Cosmetic fixes.
 308
 309 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
 310
 311         * url.c (uri_merge): Get rid of uri_merge_1.
 312         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
 313         i.e. don't add an extra slash merely because BASE ends with two
 314         slashes.
 315         (parse_credentials): Renamed from parse_uname.  Rewrittern in
 316         standard [beg, end) calling style.
 317         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
 318         (url_skip_credentials): Include # and ; as terminators.  Old code
 319         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
 320         contain a username.
 321         (url_skip_scheme): Removed because it was unused.
 322         (url_has_scheme): Require "scheme" to be at least one char long.
 323
 324 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 325
 326         * url.c (url_file_name): Expect NULL dir_prefix.
 327
 328         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
 329         WINDOWS.
 330         (defaults): Set dir_prefix to NULL by default.
 331
 332 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 333
 334         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
 335         gcc does.
 336
 337 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 338
 339         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
 340         (ARRAY_SIZE): Renamed to countof.  All callers updated.
 341
 342 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 343
 344         * main.c (main): New option --strict-comments.
 345
 346         * html-parse.c (find_comment_end): New function: simple BM search
 347         for "-->".
 348         (map_html_tags): Use it if looking at a comment and not in strict
 349         comments mode.
 350
 351 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
 352
 353         * ftp.h: Added OS400 system in enum
 354         * ftp-basic.c: recognize OS400 systems
 355         * ftp.c: don't prepend the CWD if talking to OS400, since it
 356         breaks the change in library
 357
 358 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
 359
 360         * retr.c (get_contents): Pass the correct argument to ssl_iread.
 361
 362 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
 363
 364         * safe-ctype.h: Don't #define ctype.h macros to errors because
 365         that loses when someone #include's ctype.h after safe-ctype.h.
 366
 367 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 368
 369         * url.c: Undef U, W, C after use.
 370
 371 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 372
 373         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
 374         be augmented by ",nocontrol" which means don't escape the control
 375         characters, but otherwise keep OS settings.
 376
 377         * url.c (file_unsafe_char): Deleted.
 378         (append_uri_pathel): Query filechr_table directly.
 379         (filechr_table): Separated Unix, Windows, and control-unsafe
 380         characters.
 381
 382 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 383
 384         * url.c (url_escape_1): New function.
 385         (url_escape): Use it.
 386         (sync_path): Handle pathological cases where u->file and u->dir
 387         contain really strange characters.
 388         (ENCODE): Deleted.
 389         (REENCODE): Deleted.
 390
 391 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 392
 393         * url.c (url_file_name): Don't reallocate FNAME if the file
 394         doesn't exist, as is usually the case.
 395
 396         * utils.c (unique_name): New flag allow_passthrough.
 397
 398 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 399
 400         * utils.c (wtimer_sys_diff): Convert the time difference to signed
 401         __int64, then to double.  This works around MS VC++ 6 which can't
 402         convert unsigned __int64 to double directly.
 403
 404 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 405
 406         * Makefile.in (clean): Also remove the core.<number> files
 407         produced by recent Linux systems.
 408
 409 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 410
 411         * http.c (post_file): Don't pad the file if it's not large
 412         enough.  Bail out instead.
 413
 414 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 415
 416         * retr.c (get_contents): Reduce the buffer size to the amount of
 417         data that may pass through for one second.  This prevents long
 418         sleeps when limiting bandwidth.
 419
 420         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
 421         bandwidth limitation to small values is requested.
 422
 423 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 424
 425         * progress.c (update_speed_ring): Moved the speed ring update to a
 426         separate function and documented it better.
 427
 428         * progress.c: Use `double' for most timers to support granularity
 429         smaller than 1ms.
 430
 431 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 432
 433         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
 434         string.
 435         (XDIGIT_TO_xchar): Ditto.
 436
 437 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 438
 439         * utils.c: Change the type of timer-related functions from long to
 440         double, for better precision.  On machines supporting gettimeofday
 441         the timers now work with granularity of less than one millisecond.
 442
 443 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 444
 445         * cookies.c (parse_set_cookies): Fixed the parser to handle more
 446         edge conditions.
 447         (test_cookies): New function, contains a test suite for
 448         parse_set_cookies.
 449
 450 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 451
 452         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
 453
 454 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 455
 456         * cookies.c (parse_set_cookies): Allow trailing space in
 457         set-cookies header.  Also, allow any amount of whitespace, not
 458         only one character.  Allow empty set-cookies header without
 459         spewing an error.
 460
 461 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
 462
 463         * url.c (append_uri_pathel): Use opt.restrict_file_names when
 464         calling file_unsafe_char.
 465
 466         * init.c: New command restrict_file_names.
 467
 468         * main.c (main): New option --restrict-file-names[=windows,unix].
 469
 470         * url.c (url_file_name): Renamed from url_filename.
 471         (url_file_name): Add directory and hostdir prefix here, not in
 472         mkstruct.
 473         (append_dir_structure): New function, does part of the work that
 474         used to be in mkstruct.  Iterates over path elements in u->path,
 475         calling append_uri_pathel on each one to append it to the file
 476         name.
 477         (append_uri_pathel): URL-unescape a path element and reencode it
 478         with a different set of rules, more appropriate for handling of
 479         files.
 480         (file_unsafe_char): New function, uses a lookup table to decide
 481         whether a character should be escaped for use in file name.
 482         (append_string): New utility function.
 483         (append_char): Ditto.
 484         (file_unsafe_char): New argument restrict_for_windows, decide
 485         whether Windows file names should be escaped in run-time.
 486
 487         * connect.c: Include <stdlib.h> to get prototype for abort().
 488
 489 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
 490
 491         * utils.c (wtimer_sys_set): Extracted the code that sets the
 492         current time here.
 493         (wtimer_reset): Call it.
 494         (wtimer_sys_diff): Extracted the code that calculates the
 495         difference between two system times here.
 496         (wtimer_elapsed): Call it.
 497         (wtimer_elapsed): Don't return a value smaller than the previous
 498         one, which could previously happen when system time is set back.
 499         Instead, reset start time to current time and note the elapsed
 500         offset for future calculations.  The returned times are now
 501         guaranteed to be monotonically nondecreasing.
 502
 503 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 504
 505         * host.c (lookup_host): Print the result of the DNS lookup.
 506
 507 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 508
 509         * init.c (cmd_boolean): Accept yes/no along with on/off.
 510         (cmd_lockable_boolean): Ditto.
 511
 512 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 513
 514         * init.c: New command dns_cache.
 515
 516         * main.c (main): New option --dns-cache[=off].
 517
 518 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 519
 520         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
 521
 522         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
 523         HAVE_GETADDRINFO for getaddrinfo-related stuff.
 524
 525 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 526
 527         * url.c (url_parse): Return an error if the URL contains a [...]
 528         IPv6 numeric address and we don't support IPv6.
 529
 530 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
 531
 532         * url.c (is_valid_ipv6_address): Modified to not require
 533         zero-terminated strings.
 534         (is_valid_ipv4_address): Ditto.
 535
 536 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
 537
 538         src/url.c: added RFC 2732 compliance for URL parsing. The
 539         functions is_*_address valid are a modified version of
 540         glibc 2.3.2 inet_pton's code.
 541
 542 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
 543
 544         * main.c init.c options.h: Added --retry-connrefused option so
 545         that Connection Refused failures are treated as non-fatal (when
 546         trying to retrieve from busy servers).
 547
 548         * wget.h: New CONNECT_ERROR macro for encapsulating this
 549         modification.
 550
 551         * ftp.c http.c : Use CONNECT_ERROR macro in places where
 552         ECONNREFUSED was checked.
 553
 554 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
 555
 556         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
 557         by calling new function has_insecure_name_p.  This is based on a
 558         patch by Red Hat.
 559
 560         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
 561         if filename starts with `/' or contains `../' and is therefore
 562         considered insecure.
 563
 564         * fnmatch.h: Declare has_insecure_name_p().
 565
 566 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
 567
 568         * init.c (cmd_file): Allocate RESULT correctly.
 569
 570 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
 571
 572         * recur.c (retrieve_tree): Check whether downloaded_html_set is
 573         non-NULL before using it.
 574
 575 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 576
 577         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
 578
 579 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 580
 581         * progress.c (bar_set_params): Fall back to dot progress if the
 582         terminal type is "emacs".
 583
 584 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 585
 586         * log.c: Don't #undef WGET_USE_STDARG.
 587
 588 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 589
 590         * hash.c (prime_size): Store the offset of the prime number in the
 591         prime table.  When searching, start with the given offset.
 592         (hash_table_new): Pass the pointer to ht->prime_offset to
 593         prime_size.
 594         (grow_hash_table): Ditto.
 595         (prime_size): Make 13 the first prime to make empty hash tables
 596         slightly smaller.
 597
 598 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 599
 600         * recur.c (download_child_p): Minor optimization to avoid an
 601         unnecessary additional call to schemes_are_similar_p function.
 602
 603 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 604
 605         * url.c (schemes_are_similar_p): New function to test enumerated
 606         scheme codes for similarity.
 607
 608         * url.h: Declare it.
 609
 610         * recur.c (download_child_p): Use it to compare schemes.  This
 611         also fixes a bug that allows hosts to be spanned (without the
 612         -H option) when the parent scheme is https and the child's is
 613         http or vice versa.
 614
 615 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
 616
 617         * ftp.c (getftp): Don't ftruncate stdout.
 618
 619         * http.c (gethttp): Don't ftruncate stdout.
 620
 621 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
 622
 623         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
 624         (get_number): Ditto.
 625         (get_alt_number): Ditto.
 626         (__isleap): New function-like macro used by strptime.
 627         (day_of_the_week): New function used by strptime.
 628         (day_of_the_year): Ditto.
 629         (__mon_yday): Now shared by mktime and strptime implementations.
 630
 631 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 632
 633         * cookies.c (check_domain_match): Use match_tail in case
 634         insensitive mode.
 635
 636         * utils.c (match_tail): Allow the caller to specify case
 637         insensitive mode.
 638
 639         * cookies.c (store_cookie): When expiry_time is 0, print it as
 640         undefined, not indefinite.
 641
 642 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
 643
 644         * cookies.c (cookie_jar_process_set_cookie): Do not store
 645         discarded cookie.
 646
 647 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 648
 649         * cookies.c (check_domain_match): Allow cookies to be set for
 650         subdomains of unknown top-level domains under some circumstances.
 651
 652 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 653
 654         * gen_ssl.c:
 655         - allow checking of server cert
 656         - allow defining client cert type
 657         - allow limit of ssl protocol
 658         - check more return values
 659         - added debug message on break
 660
 661 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 662
 663         * recur.c (download_child_p): Revert order of items in check
 664         number 6 for clarity.
 665
 666 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 667
 668         * init.c: Ditto.
 669
 670         * main.c: Ditto.
 671
 672         * http.c: Use the new interface.
 673
 674         * cookies.c: Provide an OO-style "cookie jar" interface to enable
 675         separate cookie jars.
 676
 677         * http.c (http_atotm): Declare argument as const.
 678
 679 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 680
 681         * cookies.c (cookie_new): Default to PORT_ANY.
 682         (find_cookie_chain_exact): Only search by DOMAIN.
 683         (find_matching_cookie): Also check that PORT matches.
 684         (store_cookie): Only match the domain.
 685         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
 686         is valid for that host rather than discarding it completely.
 687         (find_matching_chains): Don't search by PORT.
 688         (matching_cookie): Also match PORT.
 689         (load_cookies): Set the port if specified, otherwise leave it as
 690         ANY.
 691         (save_cookies_mapper): Save the port if specified, otherwise leave
 692         it empty.
 693
 694 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 695
 696         * init.c: The option `egdfile' was not in sort order.
 697
 698 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 699
 700         * ftp.c (getftp): Treat directories that begin with <letter>: as
 701         absolute.
 702         (getftp): Strip trailing slashes from con->id before merging it
 703         with TARGET.
 704
 705 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 706
 707         * http.c (gethttp): If Content-Type is not given, assume
 708         text/html.
 709
 710 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 711
 712         * recur.c (download_child_p): Don't ignore rejection of HTML
 713         documents that are themselves leaves of recursion.
 714
 715 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 716
 717         Makefile.in: Updated several dependencies for object files to take
 718         account of nested include files.
 719
 720 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 721
 722         Makefile.in: The target `connect$o' (connect.o) now depends on
 723         `utils.h'
 724
 725 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 726
 727         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
 728         (gethostbyname_with_timeout): Use it.
 729
 730         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
 731         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
 732
 733 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 734
 735         * host.c (getaddrinfo_with_timeout): New function.
 736         (gethostbyname_with_timeout): Ditto.
 737         (lookup_host): Use them.
 738
 739 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 740
 741         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
 742
 743 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 744
 745         * init.c (comind): Use a marginally faster implementation of
 746         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
 747         nanosecond earned."
 748
 749 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 750
 751         * main.c (print_help): Document `--post-data' and `--post-file'.
 752
 753 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 754
 755         * http.c (gethttp): Ditto.
 756
 757         * retr.c (retrieve_url): Initialize variables to appease the
 758         compiler.
 759
 760         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
 761         select_fd.
 762         (ssl_iwrite): Ditto.
 763
 764         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
 765         ETIMEDOUT in case of timeout.
 766         (iread): No need to handle EINTR when calling select_fd.
 767         (iwrite): Ditto.
 768
 769 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 770
 771         * retr.c (retrieve_url): Make sure that POST is not honored for
 772         redirections.
 773
 774         * http.c (gethttp): Send the POST data when requested.
 775         (post_file): New function.
 776         (gethttp): Use it.
 777
 778         * main.c (main): Ditto.
 779
 780         * init.c: Add new options.
 781
 782         * options.h (struct options): New options post_data and
 783         post_file_name.
 784
 785 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 786
 787         * connect.c (connect_with_timeout): Firing SIGALRM can result in
 788         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
 789
 790 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 791
 792         * connect.c (connect_with_timeout): Use it.
 793
 794         * utils.c (run_with_timeout): New function.
 795
 796 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 797
 798         * url.c (getproxy): Accept a struct url argument.  This obviates
 799         the need for USE_PROXY_P.
 800
 801         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
 802
 803         * ftp.c (getftp): Recognize FWTK-style proxy.
 804
 805 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 806
 807         * config.h.in: Only define _VA_LIST when compiled with gcc.
 808
 809 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
 810
 811         * http.c (http_loop): Compensate for MS Windows two-second
 812         granularity of file modification time when comparing timestamps.
 813
 814         * ftp.c (ftp_retrieve_list): Ditto.
 815
 816 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 817
 818         * utils.c (has_html_suffix_p): New function to test filename for
 819         common html extensions.
 820
 821         * utils.h: Declare it.
 822
 823         * http.c (http_loop): Use it instead of previous test.
 824
 825         * retr.c (retrieve_url): Ditto.
 826
 827         * recur.c (download_child_p): Ditto.
 828
 829 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 830
 831         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
 832         declaring va_list.
 833         From Kevin Rodgers <kevinr@ihs.com>.
 834
 835 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 836
 837         * Makefile.in: Specify libtool mode explicitly when linking.
 838
 839 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 840
 841         * connect.c (connect_with_timeout): New function.
 842         (connect_to_one): Use it.
 843
 844         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
 845         HAVE_SETJMP_H.
 846
 847 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 848
 849         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
 850         is present.
 851
 852 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 853
 854         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
 855         TOTAL.
 856         (bar_finish): Likewise.
 857
 858 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 859
 860         * html-url.c (tag_handle_form): New function.  Pick up form
 861         actions and mark them for conversion only.
 862
 863 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 864
 865         * progress.c (struct progress_implementation): Use PARAMS when
 866         declaring the parameters of *create, *update, *finish, and
 867         *set_params.
 868
 869         * netrc.c: Ditto.
 870
 871         * http.c: Reformat some function definitions so that ansi2knr can
 872         read them.
 873
 874         * hash.c (struct hash_table): Use the PARAMS macro around
 875         parameters in the declaration of hash_function and test_function.
 876         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
 877         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
 878         that pre-ANSI compilers can read them.
 879         (find_mapping): Use PARAMS when declaring EQUALS.
 880         (hash_table_put): Ditto.
 881
 882         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
 883
 884         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
 885         which was unsupported by pre-ANSI compilers.
 886
 887         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
 888
 889 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 890
 891         * url.c (url_filename): Use compose_file_name regardless of
 892         whether opt.dirstruct is set.
 893         (mkstruct): Don't handle the query and the reencoding of DIR; that
 894         is done in compose_file_name.
 895
 896 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 897
 898         * wget.h: Ditto for extern char *exec_name.
 899
 900         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
 901         perfectly legal to follow an `extern' with a non-`extern' ones,
 902         provided the types match.
 903
 904         * main.c: Don't define OPTIONS_DEFINED_HERE.
 905
 906 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 907
 908         * progress.c (create_image): Revert to calculating ETA based on
 909         average download speed.
 910         (create_image): Don't print ETA until the download has been active
 911         for at least 3 seconds.
 912         (create_image): When ETA is not available, don't print anything.
 913         The previous version would print --:--.
 914
 915 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 916
 917         * progress.c (bar_update): Keep updating a subinterval until it
 918         reaches or exceeds a watermark.  That way the measurement will be
 919         guaranteed to span a configurable minimum of time.  The current
 920         default is 3s in 30 100ms intervals.
 921
 922 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
 923
 924         * progress.c (bar_update): Maintain an array of the time it took
 925         to perform previous 30 network reads.
 926         (create_image): Calculate the download speed and ETA based on the
 927         last 30 reads, not the entire download.
 928         (create_image): Make sure that the ETA is not changed more than
 929         once per second.
 930
 931 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
 932
 933         * mswindows.c (borland_utime): New function conditionally defined
 934         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
 935         `utime()' as Borland's `utime()' function is broken on Windows 9x
 936         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
 937
 938 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 939
 940         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
 941
 942 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
 943
 944         * Makefile.in: Updated several dependencies for object files.
 945
 946 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
 947
 948         * mswindows.c: Include "utils.h".
 949
 950 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
 951
 952         * host.h: Don't include netdb.h on windows.
 953
 954 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 955
 956         * recur.c (retrieve_tree): Handle the case when start_url doesn't
 957         parse.
 958
 959 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
 960
 961         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
 962         calling xmalloc and memcpy.
 963
 964 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 965
 966         * host.h: Include Unix-specific includes #ifndef WINDOWS.
 967         Patch originally provided by Christian Lackas.
 968
 969 2002-02-11  Christian Lackas  <delta@lackas.net>
 970
 971         * recur.c: recurive downloading for https fixed.
 972
 973 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
 974
 975         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
 976
 977         * ftp-basic.c: Also include <netinet/in.h>.
 978
 979 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
 980
 981         * http.c (gethttp): when -c used, mark already fully retrieved
 982         file as successfully retrieved.
 983
 984 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 985
 986         * url.c (url_parse): Don't treat '?' as query string separator
 987         when parsing FTP URLs.
 988
 989 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 990
 991         * html-url.c (tag_handle_meta): Don't crash on <meta
 992         http-equiv=refresh> where content is missing.
 993
 994 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
 995
 996         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
 997         netdb.h on windows.
 998
 999 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1000
1001         * retr.c (retrieve_url): Remove redirection cycle detection.  This
1002         is because some sites legitimately redirect the user back to the
1003         same location, e.g. after an authorization check performed by
1004         another page.  MAX_REDIRECTIONS is still used to prevent infinite
1005         redirection loops.
1006
1007 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1008
1009         * http.c (gethttp): Wrap host name in square brackets if it
1010         contains a colon.
1011
1012 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1013
1014         * url.c (url_parse): Allow all hex digits, not only decimal ones,
1015         to form an IP address.
1016
1017 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1018
1019         * url.c (urlchr_table): Make square braces reserved, so we can
1020         parse http://[::1]/.
1021         (url_parse): Handle host in braces.
1022         (url_string): If url->host contains colons, wrap it in braces.
1023
1024 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1025
1026         * connect.c (resolve_bind_address): New function.
1027         (connect_to_one): Use it.
1028         (bindport): Ditto.
1029
1030         * init.c: Don't resolve bind-address here.
1031
1032         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
1033
1034 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1035
1036         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
1037         offset.
1038         (address_list_new): Use map_ipv4_to_ip.
1039         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
1040         in IPv4 context.
1041
1042 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1043
1044         * source: Integrated IPv6 support.
1045         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
1046
1047 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
1048
1049         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
1050         (cmd_directory): New function. Like cmd_file(), but strips
1051         trailing directory separators.
1052         (commands): Change action for "dirprefix" from `cmd_file' to
1053         `cmd_directory'.
1054
1055         * utils.c (make_directory): Allow intermediate `mkdir' calls to
1056         fail, as not all path components that do not exist should be
1057         directory components, especially under Windows.
1058
1059 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * netrc.c (parse_netrc): Skip leading whitespace before testing
1062         whether the line is empty.  Empty lines still contain the line
1063         terminator.
1064
1065 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1066
1067         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
1068         only if no data is pending in SSL buffers.
1069         From tony@bluetail.com.
1070
1071 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1072
1073         * headers.c (header_get): Strip trailing whitespace from the
1074         header.
1075
1076 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1077
1078         * url.c (parse_uname): URL-decode *USER and *PASSWD.
1079
1080 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
1081
1082         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
1083         starts with "//").
1084
1085 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1086
1087         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
1088         error.
1089
1090 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1091
1092         * version.c: Wget 1.8.1 is released.
1093
1094 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1095
1096         * version.c: Wget 1.8.1-pre3 is released.
1097
1098 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1099
1100         * recur.c (retrieve_tree): Enqueue the canonical representation of
1101         start_url, so that the test against dl_url_file_map works.
1102
1103 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1104
1105         * log.c (logputs): Check for requested verbosity before printing
1106         anything.
1107
1108 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1109
1110         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
1111         inline.
1112
1113 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1114
1115         * recur.c (retrieve_tree): Make a copy of file obtained from
1116         dl_url_file_map because the code calls xfree(file) later.
1117
1118 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1119
1120         * recur.c (register_html): Maintain a hash table of HTML files
1121         along with the list.  Disallow duplicates.
1122         (retrieve_tree): Use downloaded_html_set to check whether the file
1123         found in dl_url_file_map is an HTML file, and descend into it if
1124         so.
1125         (convert_all_links): Don't guard against duplicates in
1126         downloaded_html_list, since they are no longer possible.
1127
1128 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
1129
1130         * recur.c (retrieve_tree): Pass on referring URL when retrieving
1131         recursed URL.
1132
1133 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1134
1135         * version.c: Wget 1.8.1-pre2 is released.
1136
1137 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1138
1139         * retr.c (sleep_between_retrievals): Simplify indentation.
1140
1141 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1142
1143         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
1144         of "randomness" at a time.
1145         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
1146
1147         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
1148         random amount averages in opt.wait.
1149         (sleep_between_retrievals): Don't seed the PRNG; random_number
1150         will do that.
1151
1152         * utils.c (random_number): New function.
1153
1154 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1155
1156         * url.c (path_simplify): Move here from utils.c, and make static.
1157
1158 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1159
1160         * init.c (wgetrc_file_name): Print correct message when loading
1161         getenv("WGETRC") fails.
1162
1163 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1164
1165         * recur.c (register_download): Don't abort when one URL references
1166         two different files.
1167
1168 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1169
1170         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
1171         calling ssl_iwrite.
1172
1173 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1174
1175         * version.c: Wget 1.8.1-pre1 is released.
1176
1177 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1178
1179         * res.c (matches): Fix broken URL in the docstring.
1180
1181 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1182
1183         * html-url.c (tag_url_attributes): Mark <embed href=...> as
1184         external.
1185
1186 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1187
1188         * url.c (get_urls_file): Cosmetic changes.
1189
1190 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1191
1192         * html-url.c (append_one_url): Resurrect warning when unable to
1193         resolve a relative link.
1194
1195 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1196
1197         * html-url.c (collect_tags_mapper): Break into several functions.
1198         (tag_url_attributes): Collect <embed href=...>.
1199
1200 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1201
1202         * host.c: New type ipv4_address.  Use it consistently instead of
1203         `unsigned char[4]' and `unsigned char *'.
1204         (pretty_print_address): Accept a `const void *', to require even
1205         less casting.
1206
1207 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1208
1209         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
1210
1211 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1212
1213         * main.c (main): Initialize progress after fork_to_background, so
1214         that it knows when to use dots.
1215
1216         * mswindows.c (ws_hangup): Call log_request_redirect_output.
1217
1218         * utils.c (fork_to_background): Print the PID of the child
1219         process.
1220
1221         * log.c (log_request_redirect_output): Set a flag that output
1222         redirection has been requested.  Doing anything else in a signal
1223         handler is unsafe.
1224         (check_redirect_output): New function: check whether redirection
1225         has been requested and, if so, call redirect_output().
1226         (logputs): Call check_redirect_output.
1227         (logprintf): Ditto.
1228         (debug_logprintf): Ditto.
1229         (redirect_output): Print clearer messages.
1230
1231         * main.c (redirect_output_signal): Don't call
1232         redirect_output_signal directly.  Instead, call
1233         log_request_redirect_output.
1234
1235         * utils.c (memfatal): Ditto.
1236
1237         * progress.c (display_image): Use it.
1238
1239         * log.c (log_set_save_context): New function: allow the caller to
1240         turn off saving log context lines.
1241
1242 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1243
1244         * host.c (address_list_set_faulty): Uncomment a sanity check.
1245
1246 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1247
1248         * utils.c (long_to_string): Return a pointer after where the
1249         number ends.
1250         (long_to_string): Rename to number_to_string.
1251
1252 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1253
1254         * utils.c (path_simplify): Correctly handle the unlikely case that
1255         b starts out as path + 1.
1256
1257 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1258
1259         * utils.c (path_simplify): Rewrite, with better comments, and
1260         without the use of strcpy to move overlapping blocks.
1261
1262 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1263
1264         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
1265         valid progress type before setting it.
1266
1267 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1268
1269         * main.c (main): Remove stray debugging message.
1270
1271 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1272
1273         * progress.c (create_image): Fix ETA padding when hours are prined.
1274
1275 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1276
1277         * version.c: Wget 1.8 is released.
1278
1279 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1280
1281         * url.c (reencode_string): Declare static.
1282
1283         * res.c (registered_specs): Declare static.
1284
1285         * progress.c (current_impl_locked): Declare static.
1286
1287         * log.c (flush_log_p): Declare static.
1288         (needs_flushing): Ditto.
1289
1290         * http.c (digest_authentication_encode): Declare static.
1291
1292         * html-url.c (init_interesting): Declare static.
1293
1294         * host.c (host_name_addresses_map): Declare static.
1295
1296         * cookies.c (find_matching_chains): Declare static.
1297
1298         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
1299         indicated by lint.
1300
1301         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
1302
1303         * host.c (address_list_set_faulty): Document that INDEX is
1304         currently unused.
1305
1306         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
1307
1308 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1309
1310         * version.c: Wget 1.8-pre2 is released.
1311
1312 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1313
1314         * progress.c (progress_handle_sigwinch): Set up the signal again.
1315
1316         * utils.c: Include <sys/termios.h>, where Solaris defines
1317         TIOCGWINSZ.
1318
1319         * progress.c (bar_create): Don't use the last column on the screen.
1320         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
1321         only until it exceeded them.
1322
1323 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1324
1325         * version.c: Wget 1.8-pre1 is released.
1326
1327 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1328
1329         * progress.c (progress_create): Make sure that, when the output is
1330         redirected, the progress implementation gets changed to the
1331         fallback one.
1332         (bar_set_params): Set current_impl_locked to 1 when "force" is
1333         specified.
1334         (progress_create): Don't change the progress implementation if
1335         current_impl_locked is non-zero.
1336
1337         * main.c (redirect_output_signal): Call
1338         progress_schedule_redirect.
1339
1340         * progress.c (progress_schedule_redirect): New function.
1341
1342 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1343
1344         * log.c (logvprintf): Restructure to allow being called multiple
1345         times.
1346         (logprintf): Call logvprintf in a loop.
1347         (debug_logprintf): Ditto.
1348
1349 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1350
1351         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
1352         setting egd_file it to empty string.
1353
1354         * main.c (main): Change the option name from --sslegdsock to
1355         --egd-file.
1356
1357 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1358
1359         * gen_sslfunc.c (ssl_init_prng): Make the printed message
1360         translatable.
1361
1362 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1363
1364         * url.c (scheme_disable): New function.
1365
1366         * main.c (main): Call ssl_init_prng from here rather than from
1367         init_ssl, so that it has a chance to disable support for https
1368         before a URL has been resolved.
1369
1370         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
1371         failed.
1372         (ssl_init_prng): Disable support for https if seeding the PRNG
1373         fails.
1374
1375 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1376
1377         * utils.c (read_whole_line): Handle lines beginning with \0.
1378
1379 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1380
1381         * recur.c (convert_all_links): Guard against duplicates in
1382         downloaded_html_files.
1383         (register_download): Don't invalidate similar-looking URLs.
1384         (match_except_index): New function.
1385
1386 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1387
1388         * utils.c (path_simplify): Document with test cases.
1389
1390 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1391
1392         * gen_sslfunc.c: Ditto.
1393
1394         * rbuf.c: Include <string.h>.
1395
1396 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1397
1398         * recur.c (retrieve_tree): Check whether the URL was already
1399         downloaded before downloading it again.
1400         (descend_child_p): Renamed to download_child_p.
1401         (register_download): When one URL is downloaded to a file already
1402         "owned" by another URL, delete all references that map any URL to
1403         that file.
1404         (register_delete_file): New function.
1405         (retrieve_tree): Use it after deleting a file.
1406
1407         * url.c (url_parse): Re-canonicalize the URL also if the path is
1408         empty, so that e.g. "http://www.server.com" ->
1409         "http://www.server.com/".
1410         (lowercase_str): Use ISUPPER instead of !ISLOWER.
1411
1412         * retr.c (retrieve_url): Use the canonical URL form when calling
1413         register_download().
1414
1415 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
1416
1417         * snprintf.c (dopr): Use `unsigned int' as the second argument to
1418         va_arg when casting to `unsigned short' is intended.
1419
1420 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
1421
1422         * gen_sslfunc.c: on windows provide ssl crypto random
1423           initialization through RAND_screen(); could possibly
1424           be not enough for strong ssl communication (see the
1425           relevant manual page from the openssl package).
1426
1427 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1428
1429         * url.c (local_quote_string): Reenable quoting of question marks,
1430         but only when `--html-extension' is used.
1431
1432 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1433
1434         * version.c: Wget 1.8-beta3 is released.
1435
1436 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1437
1438         * snprintf.c (dopr): Cast the result of va_arg to short int and
1439         short unsigned int where these types are expected to be used.
1440
1441 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1442
1443         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
1444         with `int' when using it as the second argument to `va_arg'.
1445
1446 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1447
1448         * host.c (address_list_new_one): New function.
1449         (lookup_host): Use it.
1450
1451 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
1452
1453         * host.c (lookup_host): Don't initialize TMPSTORE directly because
1454         it's not legal C.
1455
1456 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1457
1458         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
1459         the socket data.
1460
1461         * ftp.c: Ditto.
1462
1463         * http.c: No need to declare h_errno.
1464
1465         * host.c: Declare h_errno.
1466
1467 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1468
1469         * utils.c (file_merge): If BASE doesn't contain a slash, just
1470         return a copy of FILE.
1471
1472 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1473
1474         * version.c: Wget 1.8-beta2 is released.
1475
1476 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1477
1478         * ftp.c (getftp): When PWD fails, assume "/".
1479
1480         * ftp-basic.c (ftp_syst): Fix indentation.
1481
1482 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1483
1484         * url.c (get_urls_file): If opt.base_href is specified, merge each
1485         URL with the base.
1486
1487 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1488
1489         * main.c (print_help): Don't document the removed `-nh'.
1490
1491 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1492
1493         * url.c (url_full_path): Document better.
1494
1495         * http.c (gethttp): Use the full path when creating digest
1496         authorization.
1497
1498 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1499
1500         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
1501         '/'.
1502
1503 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1504
1505         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
1506         PREFIX does.
1507
1508 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1509
1510         * cookies.c (check_domain_match): Reimplement to match Netscape's
1511         "preliminary specification" for cookies.
1512
1513 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1514
1515         * url.c (replace_attr_refresh_hack): New function.
1516         (convert_links): Call replace_attr_refresh_hack for Refresh
1517         links.  It will add the "TMOUT; URL=" junk before the link.
1518
1519         * html-url.c (collect_tags_mapper): Set ID to the ID of the
1520         "content" attribute, not "http-equiv".
1521         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
1522         instead, store the information that this entry belongs to a
1523         "refresh" link.
1524
1525 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1526
1527         * version.c: Wget 1.8-beta1 is released.
1528
1529 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1530
1531         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
1532         depth by more than one.
1533
1534 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1535
1536         * retr.c (retrieve_url): Don't allow more than 20 redirections.
1537
1538 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1539
1540         * recur.c (retrieve_tree): Skip the non-inline entries when
1541         enqueuing the children of a leaf HTML node in -p mode.
1542         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
1543         "inline".
1544
1545         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
1546         (collect_tags_mapper): When an entry is "inline", mark it as such.
1547
1548         * recur.c (descend_url_p): Fix test when checking for
1549         acceptance/rejection rules.
1550
1551 2001-10-31 Daniel BODEA <dali@dali-designs.com>
1552
1553         * netrc.c (search_netrc): When slack_default is 0, still look for
1554         an account with matching password, just not the "default account".
1555         HTTP Authorization using .netrc should now work as expected.
1556
1557 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
1558
1559         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
1560         test_socket_open fails.
1561
1562 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1563
1564         * progress.c (display_image): Just print one CR to reset the
1565         cursor position.
1566
1567 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
1568
1569         * init.c: New command `ssl_egd_sock'.
1570
1571         * main.c (main): New option `--sslegdsock'.
1572
1573         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
1574
1575 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1576
1577         * cmpt.c (memmove): Include a simple memmove implementation.
1578
1579 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1580
1581         * headers: Guard against header files being included twice.
1582
1583 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1584
1585         * gen-md5.c: Use unsigned char * as the buffer argument to
1586         gen_md5_update.
1587
1588 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1589
1590         * connect.h: Declare select_fd.
1591
1592 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1593
1594         * recur.c (descend_url_p): When resolving no_parent, compare with
1595         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
1596         wouldn't be followed, although the download started from /a/.
1597
1598 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1599
1600         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
1601         MS VC; somebody with Borland compiler please check and provide
1602         patch if possible;
1603
1604         * cmpt.c: provided a usleep emulation.
1605
1606 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1607
1608         * host.c (address_list_new): Initialize al->faulty.
1609
1610 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1611
1612         * http.c (http_process_range): Accept the broken output of
1613         "JavaWebServer/1.1.1".
1614
1615 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1616
1617         * progress.c (dot_set_params): If PARAMS is unspecified, use
1618         dot_style, if available.
1619
1620         * init.c: Ditto.
1621
1622         * main.c (main): Resurect --dot-style.
1623
1624         * progress.c (dot_finish): Print the quantity if we're left at the
1625         beginning of a row.
1626
1627 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1628
1629         * cmpt.c (random): Removed.
1630
1631         * retr.c (sleep_between_retrievals): Use the more portable rand()
1632         instead of random().
1633
1634 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1635
1636         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1637         prevent seg fault.
1638
1639 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1640
1641         * connect.c (connect_to_many): Use address_list_set_faulty to
1642         prevent the faulty address from being reused.
1643
1644         * host.c (address_list_set_faulty): New function.
1645         (address_list_get_bounds): New function, instead of
1646         address_list_count.
1647
1648 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1649
1650         * url.c (convert_links): Don't translate %d-%d.
1651
1652         * main.c (print_help): Remove stray HAVE_RANDOM code.
1653
1654 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1655
1656         * ftp.c (getftp): Improve output after sending PASV.  Don't
1657         attempt to "look up" the IP address we already know; call
1658         connect_to_one directly.
1659
1660 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1661
1662         * progress.c: Change the default progress implementation to "bar".
1663
1664 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1665
1666         * progress.c (bar_create): Print two newlines.
1667
1668 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1669
1670         * cmpt.c (random): New function, a simple-minded replacement for
1671         random() on systems that don't have it.
1672
1673 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1674
1675         * config.h.in: Put a HAVE_USLEEP stub.
1676
1677         * cmpt.c (usleep): Replacement implementation of usleep using
1678         select.
1679
1680         * init.c: New option init_rate.
1681
1682         * main.c (main): New option --limit-rate.
1683
1684         * retr.c (limit_bandwidth): New function.
1685         (get_contents): Call it to limit the bandwidth used when
1686         downloading.
1687
1688         * progress.c (dot_update): Would print the wrong download speed on
1689         rows other than the first one when the download was continued.
1690         (dot_finish): Ditto.
1691
1692 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1693
1694         * http.c (gethttp): fix undeclared variable 'err' when compiled
1695         with HAVE_SSL.
1696
1697 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1698
1699         * progress.c: Don't allocate new timers; use the timing data
1700         propagated from the caller.
1701
1702         * retr.c (get_contents): Allocate and use a timer.
1703
1704 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1705
1706         * http.c (last_host_ip): Made into an address_list.
1707         (invalidate_persistent): Release pc_last_host_ip.
1708         (register_persistent): Use lookup_host.
1709         (persistent_available_p): Check for equality of hosts using
1710         address_list_match_all.  Call address_list_release.
1711         (http_cleanup): New function.
1712
1713         * ftp.c (getftp): Use lookup_host and connect_to_many.
1714
1715         * http.c (gethttp): Use lookup_host and connect_to_many.
1716
1717         * connect.c (make_connection): Removed.
1718         (connect_to_one): New function.
1719         (connect_to_many): Ditto.
1720         (set_connection_host_name): Ditto.
1721
1722         * host.c (lookup_host): New function; new return type.
1723         (address_list_new): New function.
1724         (address_list_count): Ditto.
1725         (address_list_copy_one): Ditto.
1726         (address_list_delete): Ditto.
1727         (address_list_release): Ditto.
1728         (pretty_print_address): Ditto.
1729
1730 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1731
1732         * recur.c (retrieve_tree): In case of followed redirection,
1733         blacklist the pre-redirection URL.
1734
1735 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1736
1737         * recur.c (descend_redirect_p): New function.
1738         (retrieve_tree): Make sure redirections are not blindly followed.
1739
1740 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1741
1742         * config.h.in: added HAVE_RANDOM.
1743
1744         * options.h: added random_wait to struct options.
1745
1746         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1747         for --random-wait.
1748
1749         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1750         implementation of random wait times.
1751
1752         * init.c (commands): added "randomwait" keyword.
1753
1754 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1755
1756         * recur.c (descend_url_p): Be more conservative with blacklisting
1757         URLs.
1758         (convert_all_links): Print how many files have been converted, and
1759         how long it took.
1760
1761         * progress.c (create_image): Place the number of downloaded bytes
1762         right after the progress bar.
1763
1764         * utils.c (suffix): Return a pointer into the string.
1765
1766 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1767
1768         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1769
1770         * recur.c (retrieve_tree): Ignore download-ignorable children.
1771         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1772
1773         * html-url.c (handle_link): Return the newly created urlpos.
1774         (collect_tags_mapper): When dealing with BASE, store the base
1775         reference and mark it as download-ignorable.
1776
1777 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1778
1779         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1780         linking to local files.  Given up on the attempt, as it breaks
1781         local browsing.
1782
1783 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1784
1785         * main.c (private_initialize): Removed.
1786         (main): Don't call private_initialize.
1787
1788         * http.c: Call lookup_host.
1789
1790         * host.c (host_init): Removed.
1791         (add_host_to_cache): Initialize host_name_address_map here, on
1792         demand.
1793         (ngethostbyname): Commented out.
1794
1795         * connect.c (make_connection): Remove dead code; use lookup_host.
1796
1797         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1798         the args.
1799         Removed host_address_name_map and host_slave_master_map.
1800
1801 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1802
1803         * progress.c (dot_create): Align the "[ skipping ... ]" string
1804         with the dots.
1805
1806         * retr.c (rate): Split into two functions: calc_rate and
1807         retr_rate.
1808
1809         * progress.c (create_image): Draw a dummy progress bar even when
1810         total size is unknown.
1811         (display_image): Place the text cursor at the end of the "image".
1812
1813 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1814
1815         * url.c (reencode_string): Use unsigned char, not char --
1816         otherwise the hex digits come out wrong for 8-bit chars such as
1817         nbsp.
1818         (lowercase_str): New function.
1819         (url_parse): Canonicalize u->url if needed.
1820         (get_urls_file): Parse each URL, and return only the valid ones.
1821         (free_urlpos): Call url_free.
1822         (mkstruct): Add :port if the port is non-standard.
1823         (mkstruct): Append the query string to the file name, if any.
1824         (urlpath_length): Use strpbrk_or_eos.
1825         (uri_merge_1): Handle the cases where LINK is an empty string,
1826         where LINK consists only of query, and where LINK consists only of
1827         fragment.
1828         (convert_links): Count and report both kinds of conversion.
1829         (downloaded_file): Use a hash table, not a list.
1830         (downloaded_files_free): Free the hash table.
1831
1832         * retr.c (retrieve_from_file): Ditto.
1833
1834         * main.c (main): Call either retrieve_url or retrieve_tree
1835         for each URL, not both.
1836
1837         * retr.c (register_all_redirections): New function.
1838         (register_redirections_mapper): Ditto.
1839         (retrieve_url): Register the redirections.
1840         (retrieve_url): Make the string "Error parsing proxy ..."
1841         translatable.
1842
1843         * res.c (add_path): Strip leading slash from robots.txt paths so
1844         that the path representations are "compatible".
1845         (free_specs): Free each individual path, too.
1846         (res_cleanup): New function.
1847         (cleanup_hash_table_mapper): Ditto.
1848
1849         * recur.c (url_queue_new): New function.
1850         (url_queue_delete): Ditto.
1851         (url_enqueue): Ditto.
1852         (url_dequeue): Ditto.
1853         (retrieve_tree): New function, replacement for recursive_retrieve.
1854         (descend_url_p): New function.
1855         (register_redirection): New function.
1856
1857         * progress.c (create_image): Cosmetic changes.
1858
1859         * init.c (cleanup): Do all those complex cleanups only if
1860         DEBUG_MALLOC is defined.
1861
1862         * main.c: Removed --simple-check and the corresponding
1863         simple_host_check in init.c.
1864
1865         * html-url.c (handle_link): Parse the URL here, and propagate the
1866         parsed URL to the caller, who would otherwise have to parse it
1867         again.
1868
1869         * host.c (xstrdup_lower): Moved to utils.c.
1870         (realhost): Removed.
1871         (same_host): Ditto.
1872
1873 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1874
1875         * utils.c (path_simplify): Preserver the (non-)existence of
1876         leading slash.  Return non-zero if changes were made.
1877
1878 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1879
1880         * progress.c (bar_update): Don't modify bp->total_length if it is
1881         zero.
1882
1883 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1884
1885         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1886         print the correct error message rather than "UNKNOWN".
1887
1888 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1889
1890         * progress.c (bar_finish): If the timer didn't record any time
1891         since the download beginning, fake 1ms.
1892
1893 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1894
1895         * recur.c (recursive_retrieve): Fix typo.
1896
1897 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1898
1899         * progress.c (create_image): Don't translate "%ld ".
1900
1901 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1902
1903         * progress.c (bar_set_params): Allow the user to force the use of
1904         the bar.
1905
1906 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1907
1908         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1909
1910 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1911
1912         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1913         and consistency with bar_*.
1914         (print_download_speed): Get rid of the unneeded '@' character.
1915         (create_image): Fix download rate geometry.
1916
1917         * progress.c (print_elapsed): Remove spurious space.
1918         (print_elapsed): Renamed to print_download_speed, since that's
1919         what it does.
1920
1921 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1922
1923         * progress.c (bar_update): If the downloaded amount becomes larger
1924         than the expected amount, adjust the expected amount accordingly.
1925
1926 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1927
1928         * utils.c (determine_screen_width): New function.
1929
1930         * main.c (main): New option `--progress=TYPE'.
1931         (main): Implement compatibility with the old option `--dot-style'.
1932
1933         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1934         dp_set_params.
1935         (cmd_spec_progress): New function.
1936
1937         * retr.c (get_contents): Use the progress_* functions instead of
1938         the old show_progress().
1939         (show_progress): Removed.
1940         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1941         etc.
1942
1943         * progress.c (set_progress_implementation): New function.
1944         (valid_progress_implementation_p): Ditto.
1945         (progress_create): Ditto.
1946         (progress_update): Ditto.
1947         (progress_finish): Ditto.
1948         (dp_create): Ditto.
1949         (dp_update): Ditto.
1950         (dp_finish): Ditto.
1951         (dp_set_params): Ditto.
1952         (print_elapsed): Ditto.
1953
1954 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1955
1956         * retr.c (show_progress): Use it.
1957
1958         * log.c (log_set_flush): New function.
1959
1960 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1961
1962         * utils.c (path_simplify): Don't remove trailing slashes.
1963
1964         * ftp.c (ftp_get_listing): Use it.
1965
1966         * utils.c (file_merge): New function.
1967
1968         * url.c (opt_url): Removed.
1969
1970         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1971
1972         * main.c (main): Use xfree(), not free().
1973
1974         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1975
1976         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1977         internally.
1978
1979         * config.h.in: Include a stub for HAVE_STRPBRK.
1980
1981         * cmpt.c (strpbrk): Include a replacement for systems without
1982         strpbrk().
1983
1984         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1985
1986         * url.c (url_set_dir): New function.
1987         (url_set_file): Ditto.
1988
1989         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1990         parser makes the URL "params" available, so we can do that in this
1991         function.
1992
1993         * retr.c: Ditto.
1994
1995         * ftp.c: Ditto; pass the local file information in `ccon'.
1996
1997         * http.c: Get rid of the ugly kludge that had URL being replaced
1998         with the proxy URL when proxy retrieval was requested.  Use a
1999         separate parameter to http_loop and gethttp for the proxy URL.
2000
2001         * http.c: Changed to reflect the fact that local file, proxy, and
2002         referer information are no longer stored in struct url.  The local
2003         file information is passed in `struct hstat' now.
2004
2005         * url.c: Reworked URL parsing to be more regular.  Reencode the
2006         URL using reencode_string.
2007         Removed non-URL-related information from struct url.  This
2008         includes fields `proxy', `local', and `referer'.
2009
2010 2001-11-22  Jochen Hein  <jochen@jochen.org>
2011
2012         * main.c (main): Split the copyright notice for easier
2013         translation.
2014
2015 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
2016
2017         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
2018           command to server to request file size.
2019         * ftp.h (ftp_size): Export it.
2020         * ftp.c (getftp): Use new ftp_size function if restoring
2021           transfer of a file with unknown size.
2022
2023 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2024
2025         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
2026
2027 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2028
2029         * url.c (getproxy): Handle URL shorthands.
2030
2031 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2032
2033         * main.c: Remove --wait / --waitretry backwards compatibility
2034         code.
2035
2036 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2037
2038         * main.c (main): Use it.
2039
2040         * url.c (rewrite_url_maybe): New function.
2041
2042 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2043
2044         * url.c: Clean up handling of URL schemes.
2045
2046 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2047
2048         * url.c: Get rid of `protostrings'.
2049         (skip_proto): Don't use protostrings.
2050         (has_proto): Ditto.
2051
2052 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2053
2054         * Makefile.in: Conditionally compile getopt.o.
2055
2056 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2057
2058         * md5.h: Renamed to gnu-md5.h.
2059
2060         * md5.c: Renamed to gnu-md5.c.
2061
2062         * http.c: Ditto.
2063
2064         * ftp-opie.c: Use the new macros.
2065
2066         * sysdep.h: Define md5-related macros.
2067
2068         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
2069         depending on which md5 implementation is used.
2070
2071 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2072
2073         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
2074         the compiler.
2075
2076 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2077
2078         * http.c (gethttp): Print the whole response line when printing
2079         headers is requested.
2080
2081 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2082
2083         * res.c: New file.  Implement all RES-related code here.
2084
2085 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2086
2087         * version.c: Wget 1.7.1 is released.
2088
2089 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2090
2091         * headers.c (header_extract_number): Ignore trailing whitespace.
2092
2093 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
2094
2095         * html-url.c (collect_tags_mapper): Fix bug converting links
2096         with -k option for tags with multiple link attributes by
2097         handling links in the order they appear.
2098
2099 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
2100
2101         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
2102           the call to the 'rate' function by moving it past the error
2103           checking for the 'getftp' function return value.
2104
2105 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2106
2107         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
2108         '\"'.  Different compilers' assert macros are broken in different
2109         ways.
2110
2111 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
2112
2113         * http.c (gethttp): print debug output for errors occuring during
2114         the ssl handshake.
2115
2116 2001-11-16  Chris Seawood  <cls@seawood.org>
2117
2118         * init.c: Ditto.
2119
2120         * host.c: Ditto.
2121
2122         * connect.c: Ditto.
2123
2124         * sysdep.h: Support compilation under BEOS.
2125
2126 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
2127
2128         * url.c (url_equal): Fix a memory leak when parseurl returns an
2129         error on the second URL. Also, since url_equal is not used at the
2130         moment, do not compile it.
2131
2132         * url.h: Ditto for the prototype of url_equal.
2133
2134 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2135
2136         * html-parse.c (map_html_tags): Support XML-style empty tags.
2137
2138 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2139
2140         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
2141         loop condition because we're no longer setting SIZEVAR here.
2142
2143 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2144
2145         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
2146         call because it needs the old value.
2147
2148 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2149
2150         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
2151         an attribute name.
2152
2153 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2154
2155         * url.c (url_filename): Make sure that slashes that sneak in to
2156         u->file via query string get protected.
2157         (file_name_protect_query_string): New function.
2158
2159 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2160
2161         * recur.c (recursive_retrieve): Also check undesirable_urls with
2162         canonicalized URL.
2163
2164 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2165
2166         * http.c (gethttp): Search `.netrc' with real host, not the proxy
2167         one.
2168
2169 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2170
2171         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
2172         define it.
2173
2174 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2175
2176         * ftp.h: Provide correct prototype for ftp_parse_ls().
2177
2178 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2179
2180         * version.c: Wget 1.7 is released.
2181
2182 2001-06-03  Karl Eichwalder  <ke@suse.de>
2183
2184         * ftp-ls.c (ftp_parse_ls): Fix typo.
2185
2186 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2187
2188         * all: Update copyright information.
2189
2190 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2191
2192         * http.c (gethttp): Indicate that the continued download failed
2193         for *this* file.
2194
2195 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2196
2197         * version.c: Wget 1.7-pre1 is released.
2198
2199 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2200
2201         * version.c: Updated version to 1.7-pre1.
2202
2203 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2204
2205         * gen_sslfunc.c: Don't include <sys/time.h> directly.
2206
2207 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2208
2209         * http.c (gethttp): Use real URL data for cookies, not the proxy
2210         stuff.
2211
2212 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2213
2214         * main.c (print_help): Document `--no-http-keep-alive'.
2215
2216         * utils.c (numdigit): Handle negative numbers *correctly*.
2217
2218         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
2219         than the confusing "unsigned".
2220
2221         * utils.c (string_set_contains): Renamed from string_set_exists.
2222
2223         * hash.c (hash_table_contains): Renamed from hash_table_exists.
2224
2225         * cookies.c: Move case-insensitive hash tables to hash.c.
2226
2227 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2228
2229         * http.c (gethttp): Before concluding that the file is already
2230         fully retrieved, make sure that the file existed and `Range' was
2231         actually requested.
2232
2233 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2234
2235         * cookies.c (eliminate_dups): New function.
2236         (build_cookies_request): Use it.
2237         (build_cookies_request): Set chain_store_size after reallocating
2238         all_chains.
2239         (check_domain_match): Annotated for easier future debugging.
2240         (store_cookie): In the debug message, print whether the cookie is
2241         permanent.
2242
2243 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2244
2245         * http.c (http_loop): Reset no_truncate before deciding whether to
2246         set it.
2247         (gethttp): Further clarify "-c conflicts with existing file" error
2248         message, based on input from Herold Heiko.
2249
2250 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
2251
2252         * http.c (http_loop): If restval is set, set no_truncate to 1
2253         unconditionally.
2254
2255 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2256
2257         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
2258         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
2259         (ftp_parse_vms_ls): Ditto.
2260
2261 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2262
2263         * init.c (cmd_address): Zero SIN before using it; apparently
2264         needed on *BSD.
2265
2266 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2267
2268         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
2269         empty.
2270
2271 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2272
2273         * main.c (main): Make `--cookies' respect its argument.
2274
2275 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2276
2277         * main.c (main): Removed undocumented option `--email-address'.
2278
2279         * netrc.c: Use the latest read_whole_line.
2280
2281         * init.c (defaults): Set opt.ftp_pass to "-wget@".
2282
2283         * mswindows.c (pwd_cuserid): Ditto.
2284
2285         * utils.c (pwd_cuserid): Removed.
2286
2287         * host.c (ftp_getaddress): Removed.
2288
2289 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2290
2291         (http_loop): Allocate space for filename_plus_orig_suffix with
2292         alloca; this is more efficient and removes the need to free it
2293         before each and every return.
2294
2295 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2296
2297         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
2298         unneeded because the file is already there and fully downloaded,
2299         and -c is specified.
2300         (http_loop): Handle RETRUNNEEDED.
2301
2302         * wget.h (uerr_t): New value RETRUNNEEDED.
2303
2304         * http.c (http_loop): Set no_truncate for files that both exist
2305         and are non-empty.
2306         (gethttp): Consider the download finished when restval >= contlen,
2307         not only when restval==contlen.
2308         (gethttp): Handle redirection before giving up due to -c.
2309         (gethttp): Clarify error message which explains that -c will not
2310         truncate the file.
2311         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
2312         the stuff that needs freeing and release the socket.
2313
2314 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2315
2316         * main.c (print_help): Wget booleans accept "off", not "no".
2317
2318 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2319
2320         * http.c (http_loop): If allow_cache is zero, always disable
2321         caching, not only when retrieving through proxy.
2322
2323         * init.c: Ditto.
2324
2325         * options.h (struct options): Rename proxy_cache to allow_cache.
2326
2327 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2328
2329         * http.c (mktime_from_utc): Improve documentation.
2330         (http_atotm): Put format strings into a separate array.
2331
2332 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2333
2334         * safe-ctype.h: Instead of throwing #error when isalpha is
2335         defined, redefine it to something that will throw a compile-time
2336         error if actually *used*.  Do the same for the rest of the
2337         standard C macros.
2338
2339 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2340
2341         * url.c (getproxy): Ignore empty proxy vars.
2342
2343 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2344
2345         * http.c (http_loop): Would load cookies every time.
2346
2347         * cookies.c (load_cookies): Handle cookies whose values contain
2348         embedded spaces.
2349
2350 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2351
2352         * utils.c: Define each DIGITS_* in one line.
2353
2354 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
2355
2356         * http.c (http_atotm): Initialize t.tm_isdst to 0.
2357         (mktime_from_utc): Prevent mktime() from having discontinuities at
2358         DST transition points.
2359
2360 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2361
2362         * html-url.c (get_urls_html): Fix documentation.
2363
2364 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2365
2366         * url.c (UNSAFE_CHAR): Reimplement using a static table.
2367         (url_init): Removed.
2368         (init_unsafe_char_table): Removed.
2369
2370 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2371
2372         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
2373
2374 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2375
2376         * utils.c: Document timer functions.
2377
2378         * retr.c (rate): Use it.
2379         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
2380
2381         * utils.c (wtimer_granularity): New function.
2382
2383 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2384
2385         * retr.c (show_progress): Ditto.
2386
2387         * ftp.c (getftp): Ditto.
2388
2389         * http.c (gethttp): Use new timer functions.
2390
2391         * utils.c (wtimer_allocate): New function.
2392         (wtimer_new): Ditto.
2393         (wtimer_delete): Ditto.
2394         (wtimer_reset): Ditto.
2395         (wtimer_elapsed): Ditto.
2396
2397 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2398
2399         * utils.c (long_to_string): New, faster version.  Favors smaller
2400         numbers; much of the calculation is now done at compile-time.
2401
2402 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2403
2404         * utils.c (numdigit): Handle negative numbers.
2405
2406 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2407
2408         * retr.c (show_progress): Print the download rate even when the
2409         percentages are not available.
2410
2411 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2412
2413         * ftp.c (getftp): Adjust expected_bytes if the length is
2414         authoritative.
2415
2416 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2417
2418         * url.c: Don't declare `construct'.
2419
2420         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
2421         mappings to new locations.
2422         (hash_table_new): Make resize_threshold a field in the hash table,
2423         so we don't have to recalculate it in each hash_table_put.
2424         (grow_hash_table): Update resize_threshold.
2425         (MAX): Remove unused macro.
2426         (prime_size): Made static.
2427
2428 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2429
2430         * retr.c (retrieve_url): Call uri_merge, not url_concat.
2431
2432         * html-url.c (collect_tags_mapper): Call uri_merge, not
2433         url_concat.
2434
2435         * url.c (mkstruct): Use encode_string instead of xstrdup followed
2436         by URL_CLEANSE.
2437         (path_simplify_with_kludge): Deleted.
2438         (contains_unsafe): Deleted.
2439         (construct): Renamed to uri_merge_1.
2440         (url_concat): Renamed to uri_merge.
2441
2442 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2443
2444         * url.c (str_url): Use encode_string instead of the unnecessary
2445         CLEANDUP.
2446         (encode_string_maybe): New function, returns input string if no
2447         encoding is needed.
2448         (encode_string): Call encode_string_maybe to do the dirty work,
2449         xstrdup if no work needed.
2450
2451 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2452
2453         * wget.h (XDIGIT_TO_xchar): Define here.
2454
2455         * url.c (decode_string): Use new name.
2456         (encode_string): Ditto.
2457
2458         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
2459         (dump_hash): Use new name.
2460
2461         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
2462         XDIGIT_TO_XCHAR respectively.
2463
2464 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2465
2466         * init.c: Include cookies.h.
2467
2468         * cookies.h: Declare cookies_cleanup.
2469
2470         * cookies.c (check_domain_match): Remove unused variable.
2471         (save_cookies): Remove extraneous argument from debug statement.
2472
2473         * host.c (same_host): Don't call skip_url.
2474
2475         * url.c (skip_url): Removed.  Removed its calls from various
2476         functions in url.c.
2477
2478 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2479
2480         * cookies.c (unsigned_string_hash): Use the new code in
2481         string_hash as reference.
2482
2483         * hash.c (hash_table_map): Allow deletion and change of the
2484         element processed by MAPFUN.
2485         (string_hash): Use the function from glib.
2486
2487 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2488
2489         * config.h.in: Include #undef stub.
2490
2491         * hash.c (hash_table_remove): Rewrite to actually clear deleted
2492         entries instead of just marking them as deleted.
2493
2494 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2495
2496         * hash.h: Declare hash_table_get_pair and hash_table_count.
2497
2498 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2499
2500         * cookies.c: Declare http_atotm.
2501
2502 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2503
2504         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
2505         permissions.  A compiler that doesn't accept octal constants is
2506         seriously broken and shouldn't be used -- octal constants were
2507         present in K&R C!
2508
2509 2001-01-20  Karl Eichwalder  <ke@suse.de>
2510
2511         * Makefile.in: Provide and use DESTDIR according to the Coding
2512         Standards.
2513
2514 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2515
2516         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
2517         specification.
2518
2519 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2520
2521         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
2522         because that strips the *leading* slash, thus forcing relative
2523         FTP retrieval.
2524
2525 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2526
2527         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
2528         notation for VMS servers.
2529         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
2530         odir is an empty string.
2531
2532 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2533
2534         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
2535         effective. Suggested by Edward J. Sabol.
2536
2537 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2538
2539         * cookies.c (build_cookies_request): Use and sort cookies from all
2540         matching domains.
2541         (build_cookies_request): Check for duplicates before generating
2542         the `Cookies' header.
2543
2544         * main.c (main): Don't load cookies here.
2545         (main): Make loadcookies and savecookies call the correct command.
2546
2547         * http.c (http_loop): Load cookies on-demand.
2548
2549 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2550
2551         * http.c (gethttp): Fix indentation of SSL ifdef.
2552
2553 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2554
2555         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
2556         that hack is no longer necessary.
2557         (getftp): Prepend initial directory to *non*-absolute u->dir's.
2558
2559 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2560
2561         * init.c (cmd_file): New function.
2562         (enable_tilde_expansion): New variable.
2563         (run_wgetrc): Use it.
2564         (cmd_file): Use it.
2565
2566 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2567
2568         * init.c: Include cookie-related options.
2569
2570         * main.c (main): Include cookie-specific options.
2571         (main): Load cookies before download is finished.
2572         (main): Save cookies when done.
2573
2574         * http.c (gethttp): Process the `Set-Cookie' header.
2575         (gethttp): Include cookies in the response.
2576
2577         * cookies.c: New file.
2578
2579 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2580
2581         * utils.c (datetime_str): New function.
2582
2583 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2584
2585         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
2586         12:01PM == 00:01, which was obviously wrong. Taken care of this
2587         anomaly.
2588
2589         * ChangeLog: Removed an excess conflict marker. Reformatted the
2590         entry by Philipp Thomas from 2001-03-09.
2591
2592         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
2593         between 0 and 23. Elminate unused variable `sec'.
2594
2595 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2596
2597         * hash.c (hash_table_count): New function.
2598
2599 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2600
2601         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
2602         Digital Unix cc.
2603
2604 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2605
2606         * config.h.in: Oops, do the namespace tweaks only on systems we
2607         know about.
2608
2609 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2610
2611         * hash.c: Include <string.h>.
2612
2613 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2614
2615         * config.h.in: Define "compilation environment" options that work
2616         under Linux and Solaris.  To be reviewed on other OS'es.
2617
2618 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2619
2620         * http.c (gethttp): Prepend literal newline with `\n\'.
2621
2622 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2623
2624         * sysdep.h: Don't define VERY_LONG_FORMAT.
2625
2626         * utils.c (very_long_to_string): New function.
2627         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2628
2629 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2630
2631         * url.c (parse_uname): Would run past the end of the string if the
2632         username was present, but the URL did not contain a slash, e.g.
2633         http://foo:bar@myhost.
2634
2635 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2636
2637         * http.c (http_atotm): Use %A instead of %a to match full
2638         weekday.  (On most systems there is no difference.)
2639
2640 2001-04-03  Paul Bludov  <paul@ozero.net>
2641
2642         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2643         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2644         leak.
2645         (ws_mypath): Use GetModuleFileName instead of argv[0].
2646         (ws_startup): Use data.wVersion for comparison.
2647
2648 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2649
2650         * http.c (http_loop): Ditto.
2651
2652         * ftp.c (ftp_loop_internal): Made the check whether to continue
2653         retrieval `-O'-friendly.
2654
2655 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2656
2657         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2658         they will be handled as whitespace.
2659         (parse_netrc): Correctly handle lines that end with whitespace.
2660
2661 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2662
2663         * retr.c (retrieve_url): New variable global_download_count used
2664         to identify first retrieval.
2665
2666         * ftp.c (getftp): Ditto.
2667
2668         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2669
2670 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2671
2672         * init.c (cmd_address): Heap-allocate the address that gets stored
2673         to CLOSURE.  Old code would simply assign an address on the stack.
2674
2675 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2676
2677         * ftp.c (ftp_get_listing): Propagate error status.
2678         (ftp_retrieve_glob): Use it.
2679         (ftp_loop): Ditto.
2680
2681 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2682
2683         * main.c (main): Add -C to the string that is the third arg to
2684         getopt_long().
2685
2686 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2687
2688         * ftp.c (getftp): Don't start the download from scratch if `-c'
2689         was specified, but the file is already fully downloaded.
2690
2691         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2692         specified and the server doesn't support continued download.
2693         (gethttp): Don't start the download from scratch if `-c' was
2694         specified, but the file is already fully downloaded.
2695
2696 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2697
2698         (recursive_retrieve): Don't clear the hash tables at this point at
2699         all; it interferes with the normal operation of register_download.
2700
2701 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2702
2703         * recur.c (recursive_retrieve): Clear the hash tables only when
2704         they are defined.
2705
2706 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2707
2708         * http.c (gethttp): Make sure the socket is closed with
2709         CLOSE_INVALIDATE before we have drained the body.
2710
2711 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2712
2713         * retr.c (retrieve_url): Call register_download() for downloaded
2714         files and register_html() for downloaded HTML files.
2715
2716         * recur.c (register_download): New function; register here that a
2717         file has been downloaded, rather than in recursive_retrieve().
2718         (register_html): New function; enqueue the location of HTML files
2719         here rather than in recursive_retrieve().
2720
2721 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2722
2723         * main.c (print_help): Use multiple fputs instead of a single ugly
2724         printf().
2725         (main): Consistently assign numbers >128 to options without a
2726         corresponding character.
2727
2728 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2729
2730         * safe-ctype.h: New file. Locale independent ctype.h replacement
2731         taken from libiberty.
2732
2733         * safe-ctype.c: New file. Tables for above.
2734
2735         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2736         safe-ctype$o.
2737
2738         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2739         isspace.
2740
2741         * ftp-basic.c: Don't include ctype.h.
2742
2743         * ftp-ls.c: Likewise.
2744
2745         * ftp.c: Likewise.
2746
2747         * headers.c: Likewise.
2748
2749         * host.c: Likewise.
2750
2751         * html-parse.c: Likewise.
2752
2753         * html-url.c: Likewise.
2754
2755         * http.c: Likewise.
2756
2757         * init.c: Likewise.
2758
2759         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2760
2761         * netrc.c: Likewise.
2762
2763         * recur.c: Likewise.
2764
2765         * retr.c: Likewise.
2766
2767         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2768         instead of isdigit.
2769
2770         * sysdep.h: Remove defines of ctype macros as they aren't needed
2771         for safe-ctype-h.
2772
2773         * url.c: Don't include ctype.h.
2774
2775         * utils.c: Likewise.
2776
2777         * wget.h: Include safe-ctype.h.
2778
2779 2001-03-27  Dan Harkless  <wget@harkless.org>
2780
2781         * Makefile.in: Moved top_builddir out of "User configuration
2782         section" of top Makefile and analogous spot in this one.
2783
2784 2001-03-17  Dan Harkless  <wget@harkless.org>
2785
2786         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2787         Define top_builddir.  Link wget with libtool so the user doesn't
2788         have to supply a bunch of custom environment variables to
2789         correctly link with the OpenSSL shared libraries.
2790
2791 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2792
2793         * http.c (gethttp): skip :port in host header if it is the
2794         DEFAULT_HTTPS_PORT when using SSL.
2795
2796         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2797         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2798         rest of the code.
2799         * url.h: Ditto
2800
2801 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2802
2803         * retr.c (show_progress): Correctly calculate the number of bytes
2804         in the first line of the download that have been actually
2805         downloaded in this run.
2806
2807 2001-02-23  Dan Harkless  <wget@harkless.org>
2808
2809         * main.c (print_help): --help documentation for -N said it would
2810         re-download files if they had the _same_ timestamp on server.
2811         (print_help): -nr belongs in "FTP options" section of --help
2812         output, not "Recursive retrieval" section.  Alphabetized FTP
2813         options by long option name.
2814
2815 2001-02-16  Dan Harkless  <wget@harkless.org>
2816
2817         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2818         that "httpsproxy" had been inserted into commands[] out of
2819         alphabetical order, causing "BUG: unknown command `httpuser'".
2820
2821 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2822
2823         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2824         listing without correct permissons).
2825
2826         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2827         FTP server.
2828
2829         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2830         shall be donwloaded only when it's newer than the local copy or
2831         when it has the same timeestamp but its size is different. ST_VMS
2832         and ST_MACOS as special cases that lie about file size.
2833
2834         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2835
2836         * Makefile.in: Removed dependency on ftpparse library due to unclear
2837         copyright issues and absence of any feedback to our queries.
2838
2839         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2840         copyright issues and absence of any feedback to our queries.
2841         (ftp_parse_ls): Added a warning message when remote server system
2842         does not seem to be suported by wget.
2843         (ftp_parse_vms_ls): New function for parsing VMS ftp
2844         server listing output.
2845         (clean_line): New function responsible for removing
2846         end-of-line characters from FTP listing texts.
2847
2848         * ftp.c (getftp): Global variables pwd and host_type are now
2849         member of the ccon structure under names ccon.id and ccon.rs.
2850
2851         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2852         enum stype rs (remote system identification) and char *id (initial
2853         working directory), as suggested by Hrvoje.
2854
2855         * url.c (parse_uname): Added support for passwords containing '@'
2856         characters.
2857         (skip_uname): Ditto.
2858
2859 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2860
2861         * ftp.c (ftp_loop): Reset con.
2862
2863 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2864
2865         * url.c (parse_uname): Added support for passwords containing '@'
2866         characters.
2867         (skip_uname): Ditto.
2868
2869 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2870
2871         * url.c (parseurl): Debug-print u->ftp_type.
2872
2873 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2874
2875         * ftp.c (ftp_loop_internal): Disable padding.
2876         (getftp): Ditto.
2877
2878         * http.c (http_loop): Disable padding.
2879
2880         * retr.c (show_progress): Use it to enable padding.
2881
2882         * retr.c (rate): Optional parameter PAD for padding the rate.
2883
2884 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2885
2886         * retr.c (show_progress): Make sure that the last output line
2887         includes progress.
2888
2889 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2890
2891         * retr.c (show_progress): Print the download rate along with the
2892         percentages.
2893         Along with Anders Thorsby <anders@thorsby.dk>.
2894
2895 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2896
2897         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2898         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2899         net/if.h.
2900
2901 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2902
2903         * gen_sslfunc.c: verify_callback is now static
2904
2905         * gen_sslfunc.c (init_ssl): load certificate if specified
2906
2907         * gen_sslfunc.c (ssl_printerr): new function
2908
2909         * init.c: added new --sslcertfile and --sslcertkey switches
2910
2911         * main.c: ditto
2912
2913         * options.h: ditto
2914
2915         * http.c (gethttp): abort when init_ssl fails
2916
2917 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2918
2919         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2920
2921 2001-01-10  Dan Harkless  <wget@harkless.org>
2922
2923         * url.c (str_url): Clarified this function's comment header after
2924         Hrvoje answered my question on the list as to when hide != 1.
2925         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2926
2927 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2928
2929         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2930         Drazen Kacar <dave@arsdigita.com>.
2931         (conaddr): Ditto.
2932
2933 2001-01-09  Dan Harkless  <wget@harkless.org>
2934
2935         * html-url.c: A bunch of fixup of `--page-requisites'-related
2936         comments to reflect Hrvoje's changes to my code when transplanting
2937         it into this new file, to fix spelling mistakes, to clarify, etc.
2938
2939         * url.c (write_backup_file): Clarified a comment.
2940         (str_url): Henrik van Ginhoven pointed out on the list that we
2941         shouldn't give away the number of characters in the password by
2942         replacing each character with a 'x'.  Use "<password>" instead.
2943
2944         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2945         directories didn't work if logging in put you in a directory other
2946         than "/" is fixed now.  Removed the comment here warning of the bug.
2947
2948         * main.c (print_help): --continue's description was misleading.
2949         We don't "restart", we "resume".  Also, better to say
2950         "partially-downloaded file" rather than just "existing file".
2951
2952 2001-01-06  Dan Harkless  <wget@harkless.org>
2953
2954         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2955         the best way to go about my aim.  Removed them in favor of:
2956
2957         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2958
2959 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2960
2961         * url.c (replace_attr): New function, to be used by both
2962         TO_COMPLETE and TO_RELATIVE case in convert_links.
2963         (find_fragment): New function for finding URL fragments.
2964         (replace_attr): Better handle the case where the original string
2965         is not quoted.  Use find_fragment.
2966         (convert_links): Use replace_attr().
2967
2968 2000-12-31  Dan Harkless  <wget@harkless.org>
2969
2970         * ChangeLog: Since this flat file doesn't have multiple branches,
2971         looking at the dates would make you think that things went into
2972         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2973         in 1.6 branch.]" where appropriate to clarify.
2974
2975 2000-12-30  Dan Harkless  <wget@harkless.org>
2976
2977         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2978         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2979
2980 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2981
2982         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2983
2984 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2985
2986         * http.c (check_end): Fix test for '+' or '-'.
2987
2988 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2989
2990         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2991         clash with the function top-level-declared variable i.
2992         (str_url): Likewise, rename inner-loop i to j.
2993
2994         * recur.c (parse_robots): Don't declare LEN at top of function.
2995         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2996         global variable.
2997
2998         * main.c (main): Change erroneous use of bitwise and to logical.
2999
3000         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
3001         the stack because it will be copied to closure.
3002
3003         Thanks to Csaba Raduly's run of PC-LINT over the sources.
3004
3005 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3006
3007         * http.c (basic_authentication_encode): Use xmalloc(), not
3008         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
3009         sources.
3010
3011 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
3012
3013         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
3014         compilation.
3015
3016 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3017
3018         * mswindows.c: Include <errno.h>.
3019
3020         * gen_sslfunc.c: Include <errno.h>.
3021
3022         * ftp-basic.c: Don't attempt to declare errno or h_errno because
3023         they're not used.
3024
3025         * main.c: Include <errno.h> because errno is used.
3026
3027         * ftp.c: Ditto.
3028
3029         * http.c: Include <netdb.h> for h_errno.
3030
3031 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3032
3033         * html-parse.c (advance_declaration): MSVC assert() chokes on
3034         '\"'.  Use '"' instead.
3035
3036 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3037
3038         * utils.c (xfree_real): Removed.
3039         (xfree_debug): Just call free().
3040
3041         * wget.h (xfree): Make it an alias for free.
3042
3043 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3044
3045         * http.c (http_loop): Furthermore, touch output_document only if
3046         it is known to be an existing regular file.
3047
3048 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3049
3050         * ftp.c (ftp_retrieve_list): Ditto.
3051
3052         * http.c (http_loop): Touch output_document if that is used for
3053         output.
3054
3055 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3056
3057         * http.c: Include gen_sslfunc.h after including Wget's headers.
3058         (persistent_available_p): Needed coma before `int ssl'.
3059
3060 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3061
3062         * ftp.c (ftp_loop_internal): Ditto.
3063
3064         * http.c (http_loop): Use it.
3065
3066         * retr.c (sleep_between_retrievals): New function that handles the
3067         logic of opt.wait and opt.waitretry.
3068
3069 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3070
3071         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
3072         rbuf_read_bufferful when the buffer is depleted.
3073
3074         * rbuf.c (rbuf_read_bufferful): New function.
3075
3076 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3077
3078         * gen_sslfunc.h: Use ansi2knr style function declarations.
3079
3080         * gen_sslfunc.c: Reformat according to the GNU coding standards.
3081         More should be done.
3082
3083         * http.c (persistent_available_p): Place the cheap SSL test nearer
3084         the top of the function.
3085         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
3086
3087 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3088
3089         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
3090         char.
3091
3092 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
3093
3094         * Makefile.in: added gen_sslfunc object
3095         * config.h.in: added HAVE_SSL define
3096         * connect.c: changed select_fd from static int to int
3097         * connect.h: ditto
3098         * gen_sslfunc.h: New file
3099         * gen_sslfunc.c: ditto
3100         * http.c: added HTTPS fuctionality
3101         * retrc.c: ditto
3102         * url.c: ditto
3103         * init.c: added opt.httpsproxy
3104         * options.h: ditto
3105         * rbuf.h: added alternate rbuf struct
3106         * wget.h: added CONSSLERR
3107         * rbuf.c: ditto
3108
3109         * http.c: Added HTTPS fuctionality.
3110
3111         * retrc.c: Ditto.
3112
3113         * url.c: Ditto.
3114
3115         * init.c: Added opt.httpsproxy.
3116
3117         * options.h: Ditto.
3118
3119         * rbuf.h: Added alternate rbuf struct.
3120
3121         * wget.h: Added CONSSLERR.
3122
3123         * rbuf.c: Ditto.
3124
3125 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3126
3127         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
3128         "ignore_perms" to ignore file and directory permissions for
3129         Windows NT FTP server listings.
3130         (ftp_parse_winnt_ls): New function.
3131         (ftp_parse_ls): Parses UNIX and Windows NT listings
3132         separately. Simple heuristics for distinguishing between UNIX and
3133         MS-DOS-like FTP listing provided by Windows NT FTP service.
3134
3135 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3136
3137         * ftpparse.c, ftpparse.h: New files.
3138
3139         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
3140         only. Use ftp_parse_nonunix_ls otherwise.
3141         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
3142         exotic FTP servers.
3143
3144         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
3145         FTP servers.
3146
3147         * ftp.c: New static wariables host_type, pwd, and pwd_len.
3148         (getftp): Support for VMS. Support for FTP servers that do not
3149         place you in the root directory after login.
3150         (ftp_retrieve_list): VMS is silent about the real file size, issue
3151         a more appropriate message.
3152         (ftp_get_listing): Pass host_type to ftp_parse_ls.
3153
3154         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
3155
3156 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3157
3158         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
3159         "ignore_perms" to ignore file and directory permissions for
3160         Windows NT FTP server listings.
3161         (ftp_parse_winnt_ls): New function.
3162         (ftp_parse_ls): Parses UNIX and Windows NT listings
3163         separately. Simple heuristics for distinguishing between UNIX
3164         and MS-DOS-like FTP listing provided by Windows NT FTP service.
3165
3166 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
3167
3168         * netrc.c (parse_netrc): Get rid of line ending.
3169
3170 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3171
3172         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
3173         Dan.
3174
3175 2000-11-24  Karl Eichwalder  <ke@suse.de>
3176
3177         * main.c (print_help): Untabify.
3178
3179 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3180
3181         * utils.c (xrealloc_debug): Do the unregister/register thing only
3182         if the pointer has actually changed.
3183         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
3184         (xfree_real): Ditto.
3185         (xrealloc_real): Ditto.
3186         (xstrdup_real): Ditto.
3187
3188 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
3189
3190         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
3191         string; no need to strdup() it.
3192         (getftp): Make pwd_len a local variable.
3193         (ftp_loop): Free PWD before returning.
3194
3195         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
3196
3197 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
3198
3199         * all: Use xfree() instead of free.
3200
3201         * utils.c (xfree): New function.
3202
3203 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3204
3205         * url.c (convert_links): HTML-quote the converted string.
3206
3207         * utils.c (html_quote_string): Move here from ftp-ls.c
3208         (html_quote_string): Make non-static; declare in utils.h.
3209         (html_quote_string): Convert SP to &#32;.
3210
3211 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3212
3213         * ftp.c (getftp): Reformat Jan's code according to GNU coding
3214         standards; remove (debugging?) printf's; use '\0' for the ASCII
3215         zero character.  Use alloca() instead of malloc() for
3216         inter-function temporary allocations.
3217
3218 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3219
3220         * ftpparse.c, ftpparse.h: New files.
3221
3222         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
3223         only. Use ftp_parse_nonunix_ls otherwise.
3224         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
3225         exotic FTP servers.
3226
3227         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
3228         FTP servers.
3229
3230         * ftp.c: New static wariables host_type, pwd, and pwd_len.
3231         (getftp): Support for VMS. Support for FTP servers that do not
3232         place you in the root directory after login.
3233         (ftp_retrieve_list): VMS is silent about the real file size, issue
3234         a more appropriate message.
3235         (ftp_get_listing): Pass host_type to ftp_parse_ls.
3236
3237         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
3238
3239 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3240
3241         * hash.c (hash_table_put): Don't overwrite deleted mappings.
3242
3243 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3244
3245         * hash.c (find_mapping): New function.
3246         (hash_table_get): Use it.
3247         (hash_table_get_pair): Ditto.
3248         (hash_table_exists): Ditto.
3249         (hash_table_remove): Ditto.
3250         (hash_table_remove): Really delete the entry if the mapping
3251         following LOCATION is empty.
3252
3253         * utils.c (string_set_add): Check whether the element has existed
3254         before.
3255
3256         * hash.c (hash_table_get_pair): New function.
3257
3258 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3259
3260         * http.c (http_process_type): Ignore trailing whitespace; use
3261         strdupdelim().
3262
3263         * recur.c (recursive_retrieve): Use the new `convert' field.
3264         (convert_all_links): Ditto.
3265         (convert_all_links): Don't respect meta_disallow_follow.
3266
3267         * html-url.c (handle_link): Fill out link_relative_p and
3268         link_complete_p.
3269
3270         * url.h (struct _urlpos): Make elements more readable.
3271
3272         * recur.c (recursive_retrieve): Call slist_prepend instead of
3273         slist_append.
3274         (convert_all_links): Call slist_nreverse before iterating through
3275         urls_html.
3276
3277         * utils.c (slist_prepend): New function.
3278         (slist_nreverse): Ditto.
3279
3280 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3281
3282         * http.c (check_end): Constify.
3283
3284 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3285
3286         * http.c (http_loop): If username and password are known, try the
3287         `Basic' authentication scheme by default.
3288
3289         * connect.h: Declare test_socket_open.
3290
3291 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3292
3293         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
3294
3295 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3296
3297         * http.c (gethttp): Don't use the return value of sprintf().
3298         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
3299
3300 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3301
3302         * recur.c (recursive_retrieve): Print the "so we don't load"
3303         debugging message only if we really don't load.
3304
3305         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
3306         (gethttp): Don't request keep-alive if keep-alive is inhibited.
3307
3308 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3309
3310         * http.c (gethttp): Make the HTTP persistent connections more
3311         robust.
3312
3313 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3314
3315         * retr.c (get_contents): If use_expected, make sure that the
3316         appropriate amount of data is being read.
3317
3318         * http.c (gethttp): Check for both `Keep-Alive: ...' and
3319         `Connection: Keep-Alive'.
3320
3321         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
3322         turned on.
3323
3324 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3325
3326         * http.c (connection_available_p): Use it.
3327
3328         * connect.c (test_socket_open): New function.
3329
3330         * http.c (gethttp): Support persistent connections.  Based on the
3331         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
3332         (register_persistent): New function.
3333         (connection_available_p): Ditto.
3334         (invalidate_connection): Ditto.
3335
3336 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3337
3338         * url.c (convert_links): Handle UREL2ABS case.
3339
3340         * recur.c (recursive_retrieve): Instead of the list
3341         urls_downloaded, use hash tables dl_file_url_map and
3342         dl_url_file_map.
3343         (convert_all_links): Use them to retrieve data.
3344
3345         * host.c (clean_hosts): Free the hash tables.
3346
3347         * main.c (private_initialize): Call host_init().
3348
3349         * host.c (store_hostaddress): Use a saner, hash table-based data
3350         model.
3351         (realhost): Ditto.
3352         (host_init): Initialize the hash tables.
3353
3354 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3355
3356         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
3357         used for what the sorted slists used to be used for.
3358         (slist_contains): Don't rely on the list being sorted.
3359         (slist_append): Simplify the code.
3360
3361         * recur.c (recursive_cleanup): Use free_string_set.
3362
3363         * utils.c (string_set_add, string_set_exists, string_set_free):
3364         New functions for easier freeing of hash tables whose keys are
3365         strdup'ed strings.
3366
3367         * recur.c (recursive_retrieve): Use the hash table functions for
3368         storing undesirable URLs.
3369
3370         * hash.c: New file.
3371
3372 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3373
3374         * main.c (private_initialize): Call url_init.
3375         (main): Call private_initialize.
3376
3377         * url.c (unsafe_char_table): New table.
3378         (UNSAFE_CHAR): Use it.
3379         (init_unsafe_char_table): New function.
3380         (url_init): New function; call init_unsafe_char_table.
3381
3382 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3383
3384         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
3385         _vsnprintf respectively.
3386
3387 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3388
3389         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
3390         on Linux.
3391
3392 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3393
3394         * html-url.c (handle_link): Handle HTML fragment identifiers.
3395
3396         * recur.c (recursive_retrieve): If norobot info is respected and
3397         the file is specified not to be followed by robots, respect that.
3398
3399         * html-url.c (collect_tags_mapper): Handle <meta name=robots
3400         content=X>.  For us the important cases are where X is NONE or
3401         where X contains NOFOLLOW.
3402         (get_urls_html): Propagate that information to the caller.
3403
3404 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3405
3406         * url.c (convert_links): Unlink the file we might be reading from
3407         before writing to it.
3408         (convert_links): Use alloca instead of malloc for
3409         filename_plus_orig_suffix.
3410
3411 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3412
3413         * host.c (realhost): Add HOST to the list with quality==0 only if
3414         it wasn't already there.
3415         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
3416
3417 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3418
3419         * url.c (get_urls_file): Ditto.
3420         (convert_links): Ditto.
3421
3422         * html-url.c (get_urls_html): Use read_file() instead of
3423         load_file().
3424
3425         * utils.c (read_file): New function, instead of the old
3426         load_file().
3427         (read_file_free): Ditto.
3428
3429         * url.c (findurl): Search only for the supported protocols.
3430         (convert_links): Use fwrite() when writing out a region of
3431         characters.
3432
3433 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3434
3435         * ftp-ls.c: Move html_quote_string and ftp_index here.
3436
3437         * url.c: Remove get_urls_html, since that's now in html-url.c.
3438
3439         * html-url.c: New file.
3440
3441         * html-parse.c: New file.
3442
3443 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3444
3445         * init.c (run_wgetrc): Don't bother killing off '\r' since
3446         pars_line() skips whitespace at end of line anyway.
3447         (parse_line): Oops, it didn't.  Now it does.
3448
3449         * recur.c (parse_robots): Ditto here.
3450
3451         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
3452         manually because read_whole_line no longer does.
3453
3454         * utils.c (read_whole_line): Rewrite to: a) use less memory
3455         (reallocates to needed size after work), b) work faster -->
3456         fgets() instead of getc, c) be more correct --> doesn't kill the
3457         newline character at the end of line.
3458
3459 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3460
3461         * init.c (comind): Initialize MAX to array size - 1.
3462
3463 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3464
3465         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
3466         Suggested by Edward J. Sabol.
3467
3468 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3469
3470         * url.c (construct): Handle the case where host name is not
3471         followed by a slash.
3472
3473 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3474
3475         * init.c: commands[] need to be sorted!  ("base" wasn't.)
3476
3477 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3478
3479         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
3480         `if'.
3481
3482 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3483
3484         * url.c (construct): Insert unneeded initialization for the
3485         compiler to shut up.
3486
3487         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
3488         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
3489         otherwise gets lost when you define _XOPEN_SOURCE.
3490
3491         * utils.c (touch): Include the file name in the error message.
3492         From Debian.
3493
3494 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3495
3496         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
3497         resize the buffer to fit the formated message.  That way, messages
3498         of arbitrary size may be printed.
3499         (logvprintf): Use saved_append() to optionally log the last
3500         several lines of output.
3501         (logputs): Ditto.
3502         (log_close): Adapt to new data structures.
3503         (log_dump): Ditto.
3504         (redirect_output): Print messages to stderr, not to stdout.
3505
3506         * log.c (saved_append_1): New function.  Replaces the old logging
3507         system ("log all output until 10M characters") with a new, much
3508         more reasonable one ("log last screenful of text").
3509         (saved_append): New function; call saved_append_1.
3510         (free_log_line): New function.
3511
3512 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3513
3514         * url.c (construct): Fix comment.
3515         (find_last_char): Document.
3516
3517 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3518
3519         * snprintf.c: New file.
3520
3521 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3522
3523         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
3524         types to logprintf() and debug_logprintf().
3525
3526 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3527
3528         * ftp.c (ftp_loop_internal): Hide the password from the URL when
3529         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
3530         <darekm@bydg.lomac.com.pl>.
3531
3532 2000-11-02  Junio Hamano  <junio@twinsun.com>
3533
3534         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
3535
3536 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
3537
3538         * http.c (known_authentication_scheme_p): Recognize NTML
3539         authentication.
3540         (create_authorization_line): Treat NTML the same as `Basic'.
3541
3542 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3543
3544         * retr.c (retrieve_url): Free url before returning.
3545         (retrieve_url): Free mynewloc before returning.
3546         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3547
3548 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3549
3550         * url.c (parseurl): Remove possible reading past the end of
3551         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3552
3553 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3554
3555         * main.c (main): In case of opt.downloaded overflowing, print
3556         <overflow> instead of a totally bogus random value.
3557
3558         * retr.c (retrieve_from_file): Ditto.
3559
3560         * recur.c (recursive_retrieve): Ditto.
3561
3562         * main.c (main): Ditto.
3563
3564         * http.c (http_loop): Ditto.
3565
3566         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
3567         `+=', and downloaded_exceeds_quota() instead of the simple-minded
3568         check.
3569         (ftp_retrieve_list): Ditto.
3570         (ftp_retrieve_dirs): Ditto.
3571         (ftp_retrieve_glob): Ditto.
3572
3573         * retr.c (downloaded_increase): New function.  Notice overflows of
3574         opt.downloaded.
3575         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
3576         used if it overflowed.
3577
3578         * options.h (struct options): New member downloaded_overflow.
3579
3580 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3581
3582         * wget.h (enum): Remove extra space after last enumeration.
3583
3584 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3585
3586         * main.c (main): Use legible_very_long() for printing
3587         opt.downloaded.
3588
3589         * utils.c (legible_1): New function that operates on strings and
3590         does the brunt of legible()'s work.
3591         (legible): Use legible_1().
3592         (legible_very_long): New function; dump the argument with
3593         sprintf(), and call legible_1().
3594
3595         * options.h (struct options): Use VERY_LONG_TYPE for
3596         opt.downloaded.
3597
3598         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
3599         type.
3600
3601         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
3602         defined.  Define HAVE_LONG_LONG if long long is available.
3603
3604 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3605
3606         * utils.c (long_to_string): Update with a later, better version.
3607
3608 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3609
3610         * url.c (path_simplify_with_kludge): New function.
3611         (path_simplify_with_kludge): Disable it.  Instead...
3612         (parse_dir): ...make sure that at this point the right thing is
3613         done, i.e. that "query" part of the URL (?...) is always assigned
3614         to the file, never to the directory portion of the path.
3615
3616 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3617
3618         * retr.c (retrieve_url): Detect redirection cycles.
3619
3620 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3621
3622         * url.c (get_urls_html): Decode HTML entities using
3623         html_decode_entities.
3624
3625         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3626         (&#NNN;) as an HTML fragemnt.
3627         (html_decode_entities): New function.
3628
3629 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3630
3631         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3632
3633 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3634
3635         * url.c (construct): Rewritten for clarity.  Avoids the
3636         unnecessary copying and stack-allocation the old version
3637         performed.
3638
3639 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3640
3641         * ftp.c (getftp): Ditto.
3642
3643         * http.c (gethttp): Rewind the stream when retrying from scratch.
3644
3645 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3646
3647         * retr.c (retrieve_url): Use url_concat() to handle relative
3648         redirections instead of /ad hoc/ code.
3649
3650         * url.c (url_concat): New function encapsulating weird
3651         construct().
3652         (urllen_http_hack): New function.
3653         (construct): When constructing new URLs, recognize that `?' does
3654         not form part of the file name in HTTP.
3655
3656 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3657
3658         * retr.c: Add msec timing support for WINDOWS.
3659         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3660         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3661
3662 2000-10-27  Dan Harkless  <wget@harkless.org>
3663
3664         * retr.c (retrieve_url): Manually applied T. Bharath
3665         <TBharath@responsenetworks.com>'s patch to get wget to grok
3666         illegal relative URL redirects.  Reformatted and re-commented it.
3667
3668 2000-10-23  Dan Harkless  <wget@harkless.org>
3669
3670         * connect.c (make_connection and bindport): Manually applied Rob
3671         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3672         changing coding style to GNU's.
3673
3674         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3675         files downloaded via FTP.  Per a comment, .listing files were not
3676         counted towards number of bytes and files downloaded because they're
3677         deleted anyway.  Well, they aren't under -nr, so count them then.
3678
3679         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3680         --bind-address, alphabetizing, changing coding style to GNU's,
3681         commenting, and renaming cmd_ip_address() to cmd_address() to
3682         imply hostnames also okay.
3683
3684         * main.c (main): --delete-after didn't delete the root of the
3685         tree.  Ignore --convert-links if --delete-after was specified.
3686         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3687         fixing duplicate use of added-since-1.5.3 case value.
3688         (print_help): Clarified that --delete-after deletes local files.
3689         Rob forgot to add a line for his new --bind-address option.
3690
3691         * options.h (struct options): Manually applied Rob Mayoff's patch
3692         to add --bind-address (bind_address structure member).
3693
3694         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3695         Ignore --convert-links if --delete-after was specified.
3696
3697         * retr.c (retrieve_from_file): Just added a DEBUGP().
3698
3699 2000-10-19  Dan Harkless  <wget@harkless.org>
3700
3701         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3702         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3703         patch to work around FTP servers that incorrectly respond to the
3704         "REST" command with the remaining size rather than the total file size.
3705
3706         * http.c (gethttp): Improved a comment and added code to tack on
3707         ".html" to text/html files without that extension when -E specified.
3708         (http_loop): Use new downloaded_file() enumerators and deal with
3709         the case of gethttp() called xrealloc() on u->local.
3710
3711         * init.c (commands): Added new "htmlextension" command.
3712         Also renamed John Daily's cmd_quad() to the more descriptive
3713         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3714         removed duplicate cmd_boolean() declaration.
3715
3716         * main.c (print_help): Added my new -E / --html-extension option.
3717         (main): Undocumented --email-address option previously used -E synonym.
3718         Stole it away for the much more deserving --html-extension's use.
3719
3720         * options.h (struct options): Added html_extension field.
3721
3722         * url.c (convert_links): URL X that we saved as X.html locally due
3723         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3724         (downloaded_file): Now remembers if we added .html extension to a file.
3725
3726         * url.h (downloaded_file_t): Added extra enumerators to support above.
3727         (downloaded_file): Now takes and returns a downloaded_file_t.
3728
3729         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3730
3731 2000-10-09  Dan Harkless  <wget@harkless.org>
3732
3733         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3734
3735         * main.c (print_help): Clarified what --retr-symlinks does.
3736
3737 2000-09-15  John Daily  <jdaily@cyberdude.com>
3738
3739         * init.c: Add support for "always" and "never" values to allow
3740         .wgetrc to override commandline (useful e.g. with .pm files
3741         calling `wget --passive-ftp' when your firewall doesn't allow that).
3742
3743         * ftp.c (getftp): passive_ftp is first option to support always/never.
3744
3745 2000-08-30  Dan Harkless  <wget@harkless.org>
3746
3747         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3748
3749         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3750         Wrapped some > 80-column lines.  When -p is specified and we're at a
3751         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
3752         <LINK REL="stylesheet">.
3753
3754         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3755
3756         * init.c: Added new -p / --page-requisites / page_requisites option.
3757
3758         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3759         infinite recursion.  Changed the unhelpful --mirrior description
3760         to simply give the options it's equivalent to.  Added new -p option.
3761         (main): Added some comments; handle new -p / --page-requisites.
3762
3763         * options.h (struct options): Added new page_requisites field.
3764
3765         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3766         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3767         get_urls_html().  Use new INFINITE_RECURSION #define.
3768
3769         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3770         final `dash_p_leaf_HTML' parameter.
3771
3772         * url.c: get_urls_html() and htmlfindurl() now take final
3773         `dash_p_leaf_HTML' parameter.
3774
3775         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3776
3777         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3778
3779 2000-08-23  Dan Harkless  <wget@harkless.org>
3780
3781         * main.c (print_help): -B / --base was not mentioned.
3782
3783 2000-08-22  Dan Harkless  <wget@harkless.org>
3784
3785         * main.c (print_help): Modified -nc description to mention that it
3786         also prevents the creation of multiple versions of the same file
3787         with ".<number>" suffixes.
3788
3789 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3790
3791         * retr.c (retrieve_url): Consistently strdup opt.referer when
3792         setting u->referer.
3793
3794 2000-06-09  Dan Harkless  <wget@harkless.org>
3795
3796         * main.c (print_help): --help output for --waitretry was over 80 cols.
3797
3798 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3799
3800         * url.c (encode_string): Fix comment.
3801         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3802
3803 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3804
3805         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3806         files.
3807
3808 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3809
3810         * url.c (str_url): Print the port number only if it's different
3811         from the default port number for that protocol.
3812
3813 2000-05-22  Dan Harkless  <wget@harkless.org>
3814
3815         * main.c (print_help): Added --help line for Damir Dzeko
3816         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3817         Removed comments that --referer and --waitretry were undocumented.
3818         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3819         line for --execute.
3820
3821 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3822
3823         * ftp.c (getftp): Ditto.
3824
3825         * http.c (gethttp): Check for return value of fclose/fflush.
3826
3827 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3828
3829         * host.c (store_hostaddress): Instead of shifting ADDR, start
3830         copying from the correct address.
3831
3832 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3833
3834         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3835         alloca().
3836         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3837
3838 2000-04-04  Dan Harkless  <wget@harkless.org>
3839
3840         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3841         "left shift count >= width of type" warning on 32-bit
3842         architectures.  Got rid of it by tricking the compiler w/ a variable.
3843
3844         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3845         characters per RFC1738, namely everything above '~'.  It also
3846         generated a warning on OSes where char =~ unsigned char.  Fixed.
3847
3848 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3849
3850         * http.c (http_process_type): Removed needless strdup(), a memory
3851         leak.
3852
3853 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3854
3855         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3856
3857 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3858
3859         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3860
3861 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3862
3863         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3864
3865 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3866
3867         * url.c (UNSAFE_CHAR): New macro.
3868         (contains_unsafe): Use it.
3869         (encode_string): Ditto.
3870
3871 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3872
3873         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3874
3875 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3876
3877         * Use TOUPPER/TOLOWER.
3878
3879 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3880
3881         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3882
3883 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3884
3885         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3886
3887         * sysdep.h (ISALNUM): New macro.
3888         (TOLOWER): Ditto.
3889         (TOUPPER): Ditto.
3890
3891 2000-03-10  Dan Harkless  <wget@harkless.org>
3892
3893         * html.c (idmatch): Implemented checking of my new --follow-tags
3894         and --ignore-tags options.
3895
3896         * init.c (commands): Added comment reminding people adding new
3897         entries doing allocation to add corresponding freeing in cleanup().
3898         (commands): Added new followtags and ignoretags commands.
3899         (cleanup): Free storage for new followtags and ignoretags.
3900
3901         * main.c: Use of "comma-separated list" was random -- normalized
3902         it.  Did some alphabetization.  Added comments pointing out
3903         "Options without arguments" and "Options accepting an argument"
3904         sections of long_options[].  Added new options --follow-tags and
3905         -G / --ignore-tags.  Added comment that Damir's --referer is
3906         currently undocumented.  Added comment that Heiko's --waitretry is
3907         partially undocumented (mentioned in --help but not in
3908         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3909
3910         * options.h (struct options): Added new fields follow_tags and
3911         ignore_tags.
3912
3913         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3914
3915 2000-03-02  Dan Harkless  <wget@harkless.org>
3916
3917         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3918         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3919
3920         * http.c (gethttp): Dan Berger's query string patch is totally
3921         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3922         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3923         second will overwrite the first.  Also, parameters to implicit
3924         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3925         be printed with trailing garbage characters, and could seg fault.
3926         Backing out the patch, which Dan B. informed me by email was just
3927         a kludge to download StarOffice from Sun made necessary due to
3928         wget's unconditional escaping of certain characters (room for an
3929         option there?).
3930         (http_loop): Heiko introduced "suggest explicit braces to avoid
3931         ambiguous `else'" warnings.  Eliminated them.
3932
3933         * main.c: Heiko's --wait / --waitretry backwards compatibility
3934         code looks to have been totally untested -- automatic variable
3935         'wr' was used without being initialized, and a long int was passed
3936         into setval()'s char* val parameter.
3937
3938         * recur.c (parse_robots): Applied Edward J. Sabol
3939         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3940         problem with "User-agent:<space>*<space>" lines in robots.txt.
3941
3942         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3943         http.c above for explanation).
3944
3945 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3946
3947         * ftp.c: Respect new option waitretry.
3948
3949 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3950
3951         * http.c (gethttp): Send custom Referer, if required.
3952
3953 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3954
3955         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3956
3957         * netrc.c (parse_netrc): New function.
3958
3959 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3960
3961         * http.c (gethttp): Send it.
3962
3963         * url.c (parseurl): Detect query string in HTTP URL-s.
3964         (str_url): Print it.
3965
3966 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3967
3968         * html.c (html_allow): Add <link href=...> and <script src=...>.
3969
3970 1999-05-02  andrew deryabin  <djsf@softhome.net>
3971
3972         * http.c (gethttp): Specify port in `Host' header only if it's
3973         different from 80.
3974
3975 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3976
3977         * recur.c (recursive_retrieve): If a finite maximum depth is
3978         specified, and we're are already at that depth, don't download the
3979         HTML file for parsing.
3980
3981 2000-03-01  Dan Harkless  <wget@harkless.org>
3982
3983         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3984         even though we don't do conversion on HTML files retrieved via
3985         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
3986         (ftp_retrieve_list): Added a comment saying where we need to
3987         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3988         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3989         a lie -- reworded as "Server file no newer than local file '%s' --".
3990
3991         * http.c (http_loop): Fixed a typo and clarified a comment.
3992         (http_loop): When -K and -N are specified together, compare size
3993         and timestamp of server file X against local file X.orig (if
3994         extant) rather than converted local file X.
3995         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3996         -- reworded as "Server file no newer than local file '%s' --".
3997         (http_loop): Call new downloaded_file() function to prevent
3998         wrongful overwriting of .orig file when -N is specified.
3999
4000         * url.c (convert_links): When -K specified, only rename X to
4001         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
4002         file X due to -N, we clobber an X.orig from a previous invocation.
4003         (convert_links): Call the failsafe xstrdup(), not the real strdup().
4004         (convert_links): Added a note asking anyone who understands how
4005         multiple URLs can correspond to a single file to comment it.
4006         (downloaded_file): Added this new function.
4007
4008         * url.h (downloaded_file): Added prototype for this new function
4009         as well as its downloaded_file_t enum type.
4010
4011         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
4012
4013 2000-02-29  Dan Harkless  <wget@harkless.org>
4014
4015         * version.c: Upped version to developer-only "1.5.3+dev".
4016
4017 2000-02-18  Dan Harkless  <wget@harkless.org>
4018
4019         * init.c (backup_converted): Added this new option.
4020
4021         * main.c (-K / --backup-converted): Added this new option.
4022
4023         * options.h (backup_converted): Added this new option.
4024
4025         * url.c (convert_links): When backup_converted is specified, save
4026         file X as X.orig before converting.
4027
4028         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
4029
4030 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4031
4032         * version.c: Wget 1.5.3 is released.
4033
4034 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4035
4036         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
4037         address doesn't yield FQDN.
4038
4039 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4040
4041         * cmpt.c (strerror): Fix declaration of sys_errlist.
4042
4043 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4044
4045         * main.c (main): Don't use an array subscript as the first
4046         argument to STRDUP_ALLOCA.
4047         From Kaveh R. Ghazi.
4048
4049 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
4050
4051         * html.c (htmlfindurl): Download table background.
4052
4053 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
4054
4055         * init.c (parse_line): Would free *com before allocating it.
4056         (parse_line): Would free com instead of *com.
4057
4058 1998-09-10  Howard Gayle  <howard@fjst.com>
4059
4060         * url.c (get_urls_html): Would drop the last character of the
4061         link.
4062
4063 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4064
4065         * http.c (http_loop): Don't print status code if quiet.
4066
4067 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4068
4069         * log.c: Use <stdarg.h> only when __STDC__.
4070
4071 1998-09-10  Adam D. Moss  <adam@foxbox.org>
4072
4073         * html.c (htmlfindurl): Download <layer src=...>.
4074
4075 1998-09-10  Howard Gayle  <howard@fjst.com>
4076
4077         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
4078         not retrieved.
4079
4080 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4081
4082         * utils.c: Include <libc.h> on NeXT.
4083
4084 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
4085
4086         * url.c (get_urls_html): Fix calculation of URL position.
4087
4088 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4089
4090         * version.c: Wget 1.5.2 is released.
4091
4092 1998-06-23  Dave Love  <d.love@dl.ac.uk>
4093
4094         * ftp.c, init.c, netrc.c: Include errno.h.
4095
4096         * http.c: Include errno.h and time header.
4097
4098         * Makefile.in (exext): Define.
4099         (install.bin, uninstall.bin): Use it.
4100
4101 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4102
4103         * http.c (http_loop): Don't attempt to compare local and remote
4104         sizes if the remote size is unknown.
4105
4106 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
4107
4108         * url.c (get_urls_html): Use malloc() instead of alloca in the
4109         loop.
4110
4111 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4112
4113         * version.c: Wget 1.5.2-b4 is released.
4114
4115 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4116
4117         * url.c (get_urls_html): Ignore spaces before and after the URI.
4118
4119 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
4120
4121         * ftp.c (getftp): Translate `done'.
4122
4123 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4124
4125         * version.c: Wget 1.5.2-b3 is released.
4126
4127 1998-06-06  Alexander Kourakos  <awk@bnt.com>
4128
4129         * init.c (cleanup): Close dfp, don't free it.
4130
4131 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4132
4133         * utils.c (make_directory): Twiddle.
4134
4135         * config.h.in: Added template for access().
4136
4137 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
4138
4139         * html.c (htmlfindurl): Download <input src=...>
4140
4141 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
4142
4143         * utils.c (file_exists_p): Use access() with two arguments.
4144
4145 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
4146
4147         * netrc.c (parse_netrc): Correct logic.
4148
4149 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
4150
4151         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
4152         <ljm@ljm.wownet.net>.
4153
4154 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
4155
4156         * version.c: Wget 1.5.2-b2 is released.
4157
4158 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
4159
4160         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
4161
4162 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
4163
4164         * retr.c (elapsed_time): Return correct value when
4165         HAVE_GETTIMEOFDAY is undefined.
4166
4167 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
4168
4169         * version.c: Wget 1.5.2-b1 is released.
4170
4171 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
4172
4173         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
4174         (_getopt_internal): Don't translate `#if 0'-ed strings.
4175
4176 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4177
4178         * mswindows.c (ws_handler): Use fork_to_background().
4179
4180 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
4181
4182         * version.c: Wget 1.5.1 is released.
4183
4184 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
4185
4186         * http.c (parse_http_status_line): Avoid `minor' and `major'
4187         names.
4188
4189 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
4190
4191         * utils.c (mkdirhier): Renamed to make_directory.
4192
4193 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
4194
4195         * mswindows.c (fork_to_background): Define under Windows.
4196
4197         * utils.c (fork_to_background): New function.
4198
4199         * html.c (htmlfindurl): Removed rerdundant casts.
4200
4201 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4202
4203         * mswindows.c (ws_mypath): Cache the path.
4204
4205 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4206
4207         * ftp.h: Prefix enum ftype members with FT_.
4208
4209         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
4210
4211         * mswindows.h: Use stat under Borland, _stat under MSVC.
4212
4213 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
4214
4215         * http.c (known_authentication_scheme_p): New function.
4216         (gethttp): Handle authorization more correctly.
4217
4218         * ftp-basic.h: Removed.
4219
4220         * cmpt.h: Removed.
4221
4222         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
4223         with gcc 2.8.
4224         (numdigit): Use `while' loop.
4225
4226         * http.c (create_authorization_line): Detect authentication
4227         schemes case-insensitively.
4228
4229         * http.c (extract_header_attr): Use strdupdelim().
4230         (digest_authentication_encode): Move declaration of local
4231         variables to smaller scope.
4232         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
4233         (create_authorization_line): Detect authentication schemes
4234         case-insensitively.
4235
4236         * utils.c (touch): Constify.
4237
4238         * http.c (gethttp): Report a nicer error when no data is received.
4239
4240         * rbuf.h (RBUF_READCHAR): Ditto.
4241
4242         * ftp-basic.c (ftp_response): Use sizeof.
4243
4244 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
4245
4246         * retr.c (print_percentage): EXPECTED is long, not int.
4247         (print_percentage): Use floating-point arithmetic to avoid
4248         overflow with large files' sizes multiplied with 100.
4249
4250 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
4251
4252         * config.h.in: Added pid_t stub.
4253
4254         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
4255         define it).
4256
4257 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
4258
4259         * version.c: Wget 1.5.0 is released.
4260
4261 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
4262
4263         * url.c (str_url): Ditto.
4264
4265         * ftp-basic.c (ftp_rest): Use new name.
4266
4267         * utils.c (long_to_string): Renamed from prnum().
4268
4269 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
4270
4271         * version.c: Wget 1.5-b17 is released.
4272
4273 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4274
4275         * headers.c (header_get): New argument FLAGS.
4276
4277         * http.c (gethttp): If request is malformed, bail out of the
4278         header loop.
4279         (gethttp): Check for empty header *after* the status line checks.
4280         (gethttp): Disallow continuations for status line.
4281
4282 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4283
4284         * version.c: Wget 1.5-b16 is released.
4285
4286 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4287
4288         * init.c (commands): Renamed `always_rest' to `continue'.
4289
4290 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
4291
4292         * all: Use it.
4293
4294         * log.c (logputs): New argument.
4295         (logvprintf): Ditto.
4296         (logprintf): Ditto.
4297
4298 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4299
4300         * http.c (http_atotm): Update comment.
4301
4302         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
4303
4304         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
4305
4306         * main.c (i18n_initialize): New function.
4307         (main): Use it.
4308
4309         * log.c: Include <unistd.h>.
4310
4311         * retr.c (show_progress): Cast alloca to char *.
4312
4313 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4314
4315         * version.c: Wget 1.5-b15 is released.
4316
4317 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4318
4319         * utils.h: Declare file_non_directory_p().
4320
4321 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
4322
4323         * main.c (main): It's `tries', not `numtries' now.
4324
4325 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4326
4327         * init.c (getperms): Removed.
4328
4329 1998-04-01  Tim Charron  <tcharron@interlog.com>
4330
4331         * log.c (logvprintf): Don't use ARGS twice.
4332
4333 1998-04-01  John  <john@futuresguide.com>
4334
4335         * mswindows.c: Cleaned up.
4336
4337 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4338
4339         * version.c: Wget 1.5-b14 is released.
4340
4341 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4342
4343         * ftp-opie.c (STRLEN4): New macro.
4344         (btoe): Use it.
4345
4346 1998-04-01  Junio Hamano  <junio@twinsun.com>
4347
4348         * http.c: Document all the Digest functions.
4349
4350 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4351
4352         * utils.c (file_non_directory_p): Renamed from isfile().
4353
4354         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
4355
4356 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4357
4358         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
4359
4360         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
4361         style.
4362         (cmd_permissions): Removed.
4363
4364         * config.h.in: Add template for WORDS_BIGENDIAN.
4365
4366 1998-03-31  Junio Hamano  <junio@twinsun.com>
4367
4368         * http.c (HEXD2asc): New macro.
4369         (dump_hash): Use it.
4370
4371 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4372
4373         * version.c: Wget 1.5-b13 is released.
4374
4375 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4376
4377         * main.c (main): Don't try to use `com'.
4378
4379 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4380
4381         * init.c (cmd_permissions): New function.
4382
4383 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4384
4385         * version.c: Wget 1.5-b12 is released.
4386
4387 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4388
4389         * init.c (commands): Renamed `numtries' to `tries'.
4390         (cmd_spec_debug): Removed.
4391         (home_dir): Under Windows, return `C:\' if HOME is undefined.
4392
4393 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4394
4395         * config.h.in: Define _XOPEN_SOURCE.
4396
4397         * init.c (check_user_specified_header): New function.
4398         (cmd_spec_header): Use it.
4399         (cmd_spec_useragent): New function.
4400
4401 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4402
4403         * version.c: Wget 1.5-b11 is released.
4404
4405 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
4406
4407         * wget.h: Include <libintl.h> only if NLS is enabled.
4408
4409 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
4410
4411         * options.h (struct options): Made `wait' a long.
4412         (struct options): Ditto for `timeout'.
4413
4414 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
4415
4416         * utils.c (exists): Renamed to file_exists_p.
4417         (file_exists_p): Use access() if available.
4418
4419 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
4420
4421         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
4422         infloop.
4423
4424         * log.c: do_logging -> save_log_p.
4425
4426         * config.h.in: Added template for HAVE_VSNPRINTF.
4427
4428 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4429
4430         * init.c: Ditto.
4431
4432         * http.c: Protect declaration against non-ANSI compiler.
4433
4434         * log.c (logvprintf): Use vsnprintf() if available.
4435
4436         * getopt.c (main): Don't translate test stuff.
4437
4438 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4439
4440         * version.c: Wget 1.5-b10 is released.
4441
4442 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
4443
4444         * ftp.c (getftp): Don't translate "CWD %s".
4445
4446         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
4447
4448 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4449
4450         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
4451
4452         * log.c (logputs): New function.
4453         (logvprintf): Renamed from vlogmsg; use logputs().
4454
4455         * retr.c (show_progress): Print `[100%]' when the retrieval is
4456         finished.
4457
4458         * init.c (run_wgetrc): Use FILE, not PATH.
4459         (wgetrc_file_name): Ditto.
4460
4461 1998-03-07  Tim Adam  <tma@osa.com.au>
4462
4463         * recur.c (parse_robots): Correctly reset `entries' on empty
4464         disallow.
4465
4466 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4467
4468         * init.c (cmd_spec_debug): Use cmd_boolean().
4469
4470 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
4471
4472         * http.c (gethttp): Create proxy-authorization correctly.
4473
4474 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4475
4476         * md5.c: Ditto.
4477
4478         * getopt.c: Use ANSI function definitions.
4479
4480         * ftp-opie.c: New file.
4481
4482         * options.h: Don't redefine EXTERN.
4483
4484         * init.c: Sort it correctly.
4485
4486 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4487
4488         * version.c: Wget 1.5-b9 is released.
4489
4490 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4491
4492         * recur.c (recursive_retrieve): Reset `first_time'.
4493
4494         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
4495
4496         * rbuf.c (rbuf_peek): Simplified.
4497         (rbuf_flush): Use MINVAL.
4498
4499         * wget.h (MINVAL): Moved from url.h.
4500
4501         * rbuf.h (RBUF_FD): New macro.
4502
4503         * url.c (add_url): Add to the head of the list.
4504
4505         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
4506         file.
4507         (getftp): Set the default permissions to 0600.
4508
4509 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
4510
4511         * url.c (get_urls_html): Ditto.
4512         (convert_links): Ditto.
4513
4514         * recur.c (parse_robots): Ditto.
4515
4516         * html.c (ftp_index): Ditto.
4517
4518         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
4519
4520         * init.c (defaults): Initialize `opt' to zero via memset.
4521
4522         * http.c (digest_authentication_encode): goto considered harmful.
4523
4524 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
4525
4526         * ftp.c (delelement): Simplify and fix leak.
4527
4528 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
4529
4530         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
4531
4532         * url.h (HEXD2ASC): Removed warning.
4533
4534         * init.c (comind): Use binary search.
4535         (commands): Reorganized.
4536         (setval): Ditto.
4537         (cmd_boolean): New function.
4538         (cmd_number): Ditto.
4539         (cmd_number_inf): Ditto.
4540         (cmd_string): Ditto.
4541         (cmd_vector): Ditto.
4542         (cmd_directory_vector): Ditto.
4543         (cmd_bytes): Ditto.
4544         (cmd_time): Ditto.
4545         (cmd_spec_debug): Ditto.
4546         (cmd_spec_dirmode): Ditto.
4547         (cmd_spec_dirstruct): Ditto.
4548         (cmd_spec_dotstyle): Ditto.
4549         (cmd_spec_header): Ditto.
4550         (cmd_spec_htmlify): Ditto.
4551         (cmd_spec_mirror): Ditto.
4552         (cmd_spec_outputdocument): Ditto.
4553         (cmd_spec_recursive): Ditto.
4554         (settime): Merged with cmd_time().
4555         (setbytes): Merged with cmd_bytes().
4556         (setonoff): Merged with cmd_boolean().
4557         (onoff): Ditto.
4558
4559 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4560
4561         * Makefile.in (distclean): Remove `config.h'.
4562
4563 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4564
4565         * version.c: Wget 1.5-b8 is released.
4566
4567 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4568
4569         * http.c (digest_authentication_encode): New function.
4570         (create_authorization_line): Use it.
4571         (dump_hash): New function.
4572         (digest_authentication_encode): Use it.
4573
4574         * fnmatch.c: Renamed from `mtch.c'.
4575
4576 1998-02-15  Karl Eichwalder  <ke@suse.de>
4577
4578         * main.c (main): Tag "Written by..." string as translatable.
4579
4580 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4581
4582         * wget.h (FREE_MAYBE): New macro.
4583
4584         * http.c (create_authorization_line): Don't use ANSI C string
4585         concatenation feature.
4586         (basic_authentication_encode): Use alloca() for temporary
4587         variables.
4588
4589         * recur.h: Ditto.
4590
4591         * http.c: Ditto.
4592
4593         * headers.h: Ditto.
4594
4595         * ftp-basic.c: Protect declaration against non-ANSI compiler.
4596
4597         * http.c (create_authorization_line): Cast `unsigned char *' to
4598         `char *' for sprintf, to shut up the noisy Digital Unix cc.
4599
4600 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4601
4602         * version.c: Wget 1.5-b7 is released.
4603
4604 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4605
4606         * cmpt.c (strstr): Synched with glibc-2.0.6.
4607
4608         * ftp-basic.c (calculate_skey_response): Ditto.
4609         (calculate_skey_response): Use alloca().
4610
4611         * http.c (create_authorization_line): Work with FSF's version of
4612         md5.c.
4613
4614         * md5.c: New file, from GNU libc.
4615
4616 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4617
4618         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4619
4620 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4621
4622         * http.c (basic_authentication_encode): New function, instead of
4623         the macro.
4624
4625 1998-02-13  Junio Hamano  <junio@twinsun.com>
4626
4627         * http.c: Add HTTP-DA support.
4628         * ftp-basic.c: Add Opie/S-key support.
4629         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4630         * md5.c, md5.h: New files.
4631
4632 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4633
4634         * http.c (http_process_range): Renamed from hprocrange().
4635         (http_process_range): Parse the whole header.
4636
4637         * headers.c: New file.
4638         (header_process): New function.
4639         (header_get): Renamed from fetch_next_header.
4640
4641         * all: Include utils.h only where necessary.
4642
4643         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4644
4645         * wget.h: Add provisions for dmalloc.
4646
4647 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4648
4649         * version.c: Wget 1.5-b6 is released.
4650
4651 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4652
4653         * ftp.c (ftp_loop): Determine `filename' more precisely.
4654
4655         * init.c (setval): Don't set `opt.quiet' if output-document is
4656         `-'.
4657
4658         * log.c (log_init): Print to STDERR instead of STDOUT.
4659         (vlogmsg): Use STDERR by default.
4660         (logflush): Ditto.
4661
4662 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4663
4664         * host.c: Use addr_in again.
4665
4666 1998-02-08  Karl Eichwalder  <karl@suse.de>
4667
4668         * http.c (gethttp): Fixed typo.
4669
4670 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4671
4672         * version.c: Wget 1.5-b5 is released.
4673
4674 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4675
4676         * retr.c (show_progress): Use it.
4677
4678         * log.c (logflush): New function.
4679
4680         * wget.h: Utilize __attribute__ if on gcc.
4681
4682 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4683
4684         * http.c (base64_encode_line): New argument LENGTH.
4685         (BASIC_AUTHENTICATION_ENCODE): Use it.
4686         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4687
4688         * main.c (main): Fixed fprintf() format mismatch.
4689
4690 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4691
4692         * version.c: Wget 1.5-b4 is released.
4693
4694 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4695
4696         * host.c: use sockaddr_in instead of addr_in.
4697
4698 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4699
4700         * init.c (cleanup): Use it.
4701
4702         * recur.c (recursive_cleanup): New function.
4703
4704         * retr.c (retrieve_from_file): Ditto.
4705
4706         * main.c (main): Use it.
4707
4708         * recur.c (recursive_reset): New function.
4709
4710         * retr.c (retrieve_from_file): Ditto.
4711
4712         * main.c (main): Simplify call to recursive_retrieve().
4713
4714         * recur.c (recursive_retrieve): Removed FLAGS argument.
4715
4716         * http.c (gethttp): Changed call to iwrite().
4717
4718 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4719
4720         * url.c (get_urls_html): Ditto.
4721         (free_urlpos): Ditto.
4722         (mkstruct): Ditto.
4723         (construct): Ditto.
4724
4725         * retr.c (retrieve_url): Move declaration of local variables to
4726         smaller scope.
4727
4728         * url.c (urlproto): Use it.
4729         (parseurl): Ditto.
4730         (str_url): Ditto.
4731         (get_urls_html): Ditto.
4732
4733         * utils.h (ARRAY_SIZE): New macro.
4734
4735         * url.c (proto): Moved from url.h.
4736
4737         * url.h (URL_CLEANSE): Reformatted.
4738         (USE_PROXY_P): Renamed from USE_PROXY.
4739
4740         * ftp-basic.c: Adjust to the new interface of iwrite().
4741
4742         * ftp-basic.c (ftp_port): Use alloca().
4743
4744 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4745
4746         * version.c: Wget 1.5-b3 is released.
4747
4748         * host.c (ftp_getaddress): Don't print to stderr directly.
4749
4750         * init.c (setbytes): Support `g' for gigabytes.
4751         (cmdtype): New specification CTIME.
4752         (setval): Use it with settime().
4753         (commands): Use it for WAIT and TIMEOUT.
4754
4755 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4756
4757         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4758         (gethttp): Use it.
4759
4760         * utils.c (unique_name_1): Moved from url.c.
4761         (unique_name): Ditto.
4762
4763         * url.c (url_filename): Ditto.
4764
4765         * log.c (redirect_output): Changed call to unique_name().
4766
4767         * url.c (unique_name_1): Renamed from unique_name().
4768         (unique_name): Changed interface.
4769
4770         * init.c (enum cmdid): Moved from init.h.
4771         (cmdtype): Ditto.
4772         (struct cmd): Ditto.
4773
4774         * main.c (main): Use it.
4775         (main): Moved `--backups' to not have a short option.
4776
4777         * options.h (struct options): New member BACKGROUND.
4778
4779         * main.c (print_help): Rearranged.
4780         (main): New long options for -n* short options: --no-directories,
4781         --no-host-directories, --non-verbose, --no-host-lookup and
4782         --dont-remove-listing.
4783
4784 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4785
4786         * main.c (main): Use log_close().
4787
4788         * log.c: New variable LOGFP.
4789         (vlogmsg): Use it.
4790         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4791         instead.
4792         (log_close): New function.
4793
4794         * options.h (struct options): Removed LFILE.
4795
4796         * log.c (log_enable): Removed.
4797
4798         * main.c (main): Use it.
4799
4800         * log.c (log_init): New function.
4801
4802         * url.c (get_urls_html): Removed needless assignment to BASE.
4803
4804         * host.c (add_hlist): Don't set CMP needlessly.
4805
4806         * utils.c (match_backwards): Ditto.
4807         (in_acclist): Ditto.
4808
4809         * url.c (findurl): Ditto.
4810
4811         * netrc.c (parse_netrc): Ditto.
4812
4813         * log.c (log_dump): Ditto.
4814
4815         * html.c (html_quote_string): Ditto.
4816
4817         * ftp-basic.c (ftp_request): Made static.
4818
4819         * connect.c: Made global variables static.
4820
4821         * url.c (construct): Ditto.
4822
4823         * init.c (init_path): Avoid assignment inside `if'-condition.
4824
4825         * ftp.c: Don't include in.h or winsock.h.
4826
4827         * ftp.c (ftp_loop): Use SZ.
4828
4829         * connect.c (bindport): Cast &addrlen to int *.
4830         (conaddr): Ditto.
4831
4832         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4833
4834 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4835
4836         * ftp.c (getftp): Initialize opt.ftp_pass here.
4837         (ftp_retrieve_dirs): Use alloca().
4838
4839         * init.c (defaults): Don't initialize opt.ftp_pass.
4840
4841         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4842         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4843
4844 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4845
4846         * recur.c (parse_robots): Check for comments more correctly.
4847
4848         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4849         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4850         hostname.
4851
4852 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4853
4854         * version.c: Wget 1.5-b2 is released.
4855
4856         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4857
4858         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4859
4860         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4861         char.
4862
4863         * log.c: Don't attempt to hide arguments from ansi2knr.
4864
4865         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4866
4867         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4868
4869         * ftp.c (getftp): Ditto.
4870
4871         * http.c (gethttp): Use it.
4872
4873         * retr.c (get_contents): New argument EXPECTED; pass it to
4874         show_progress().
4875         (show_progress): New argument EXPECTED; use it to display
4876         percentages.
4877
4878         * init.c (setval): Ditto.
4879
4880         * http.c (gethttp): Ditto.
4881         (http_loop): Ditto.
4882
4883         * ftp.c (getftp): Ditto.
4884         (ftp_loop_internal): Ditto.
4885
4886         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4887
4888         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4889
4890         * netrc.c (search_netrc): Use alloca().
4891
4892         * init.c (defaults): Initialize no_flush.
4893
4894         * log.c (vlogmsg): Don't flush if no_flush.
4895
4896         * options.h (struct options): New variable no_flush.
4897
4898         * main.c (main): Don't play games with buffering.
4899
4900         * log.c (vlogmsg): Flush the output after every message.
4901
4902 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4903
4904         * init.c (parse_line): Ditto.
4905
4906         * url.c (get_urls_html): Ditto.
4907
4908         * main.c (main): Don't cast to unsigned char.
4909
4910         * init.c (run_wgetrc): Don't cast to unsigned char.
4911         (parse_line): Accept char instead of unsigned char.
4912
4913         * html.c (htmlfindurl): Use char instead of unsigned char.
4914
4915         * all: Use them.
4916
4917         * sysdep.h: Add wrappers to ctype macros to make them
4918         eight-bit-clean:
4919
4920 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4921
4922         * html.c (htmlfindurl): Download <img lowsrc=...>
4923
4924         * main.c (main): Ignore SIGPIPE.
4925
4926         * connect.c (select_fd): New argument WRITEP.
4927         (iwrite): Call select_fd().
4928
4929 1997-02-27  Fila Kolodny <fila@ibi.com>
4930
4931         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4932         one already exists, just skip it.
4933
4934 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4935
4936         * http.c (gethttp): Cosmetic changes.
4937
4938         * http.c (check_end): Allow `+D...' instead of `GMT'.
4939         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4940
4941         * url.c (process_ftp_type): New function.
4942         (parseurl): Use it.
4943
4944         * connect.c (iwrite): Allow writing in a few chunks.
4945         (bindport): Made SRV static, so addr can point to it.
4946         (select_fd): Removed HPUX kludge.
4947
4948         * host.c (free_hlist): Incorporated into clean_hosts().
4949
4950 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4951
4952         * host.c (hlist): Made static.
4953         (search_address): Cosmetic change.
4954
4955 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4956
4957         * version.c: Wget v1.5-b1 is released.
4958
4959         * http.c (hgetlen): Use sizeof() to get the header length.
4960         (hgetrange): Ditto.
4961         (hgettype): Ditto.
4962         (hgetlocation): Ditto.
4963         (hgetmodified): Ditto.
4964         (haccepts_none): Ditto.
4965
4966         * main.c (main): Updated `--version' and `--help' output, as per
4967         Francois Pinard's suggestions.
4968
4969         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
4970         textdomain().
4971
4972         * config.h.in: Define stubs for I18N3.
4973
4974         * wget.h: Include libintl.h.
4975
4976 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4977
4978         * url.c (mkstruct): Check for opt.cut_dirs.
4979         (mkstruct): alloca()-te more, xmalloc() less.
4980
4981         * utils.c (load_file): Check for ferror().
4982
4983         * url.c (get_urls_file): Close only the files we opened.
4984         (get_urls_html): Ditto.
4985         (count_slashes): New function.
4986
4987         * http.h: Removed.
4988
4989         * http.c (gethttp): Respect username and password provided by
4990         proxy URL.
4991         (base64_encode_line): Write into an existing buffer instead of
4992         malloc-ing a new one.
4993         (struct http_stat): Moved from http.h
4994
4995         * retr.c (retrieve_url): Free SUF.
4996
4997         * all: Removed lots of unnecessary .h dependencies.
4998
4999         * html.c (global_state): Made static.
5000
5001         * utils.h (ALLOCA_ARRAY): New macro.
5002
5003         * main.c (main): New option `--cut-dirs'.
5004
5005         * url.c (construct): Use alloca() for T.
5006
5007         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
5008
5009         * host.c (_host_t): Moved from host.h.
5010         (struct host): Renamed from _host_t.
5011         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
5012         (realhost): Ditto.
5013
5014         * host.h: Don't include url.h.
5015
5016         * ftp.c (LIST_FILENAME): Moved from ftp.h.
5017
5018         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
5019
5020         * main.c (main): Enable log if the output goes to a TTY.
5021
5022         * connect.h: Removed unused constant `BACKLOG'.
5023
5024         * config.h.in: Check for isatty().
5025
5026         * Makefile.in (LINK): Use CFLAGS when linking.
5027
5028 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5029
5030         * mswindows.c (ws_hangup): Use redirect_output().
5031
5032         * main.c (redirect_output_signal): New function; use
5033         redirect_output().
5034
5035         * log.c (redirect_output): New function, based on hangup(), which
5036         is deleted.
5037
5038         * log.c (vlogmsg): New function.
5039
5040         * wget.h (DEBUGP): Use debug_logmsg().
5041
5042         * main.c (hangup): Use it.
5043
5044         * log.c (log_dump): New function.
5045
5046         * utils.h (DO_REALLOC): Use `long' for various sizes.
5047
5048         * http.c (hskip_lws): Use `while', for clarity.
5049         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
5050         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
5051
5052         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
5053         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
5054
5055         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
5056         (LEGIBLE_SEPARATOR): Ditto.
5057         (FILE_BUFFER_SIZE): Ditto.
5058
5059         * retr.c (BUFFER_SIZE): Moved from retr.h.
5060
5061         * log.c: New file.
5062         (logmsg): Moved from utils.c.
5063         (debug_logmsg): New function.
5064
5065         * mswindows.h: Include it here.
5066
5067         * init.c: Ditto.
5068
5069         * utils.c: Don't include <windows.h>.
5070
5071 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
5072
5073         * host.c (ftp_getaddress): Ditto.
5074
5075         * main.c (main): Use it.
5076
5077         * utils.h (STRDUP_ALLOCA): New macro.
5078
5079         * init.c: Prepend `wget: ' to error messages printed on stderr.
5080
5081         * utils.c (mkdirhier): Renamed from mymkdir.
5082         (touch): Renamed from my_touch.
5083         (pwd_cuserid): Renamed from my_cuserid().
5084
5085 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
5086
5087         * utils.c (accdir): Process wildcards.
5088         (proclist): New function.
5089         (accdir): Use it to avoid code repetition.
5090
5091 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5092
5093         * recur.c (parse_robots): Respect opt.useragent; use alloca().
5094
5095         * http.c (gethttp): Construct useragent accordingly.
5096
5097         * version.c: Changed version string to numbers-only.
5098
5099         * main.c (print_help): List all the options.
5100
5101         * mswindows.c (windows_main_junk): Initialize argv0 here.
5102
5103 1998-01-24  Karl Heuer  <kwzh@gnu.org>
5104
5105         * netrc.c (search_netrc): Initialize `l' only after processing
5106         netrc.
5107
5108         * main.c (main): Don't trap SIGHUP if it's being ignored.
5109
5110 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5111
5112         * all: Use logmsg().
5113
5114         * utils.c (time_str): Moved from retr.c.
5115         (logmsg): New function.
5116         (logmsg_noflush): Ditto.
5117
5118         * rbuf.c: New file, moved buf_* functions here.
5119
5120         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
5121
5122         * ftp-basic.c (ftp_rest): Use prnum().
5123
5124         * ftp-basic.c: Ditto.
5125
5126         * ftp.c: Use the new reading functions and macros.
5127
5128         * retr.c (buf_initialize): New function.
5129         (buf_initialized_p): Ditto.
5130         (buf_uninitialize): Ditto.
5131         (buf_fd): Ditto.
5132
5133         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
5134         efficiency.
5135         (gethttp): Use alloca() where appropriate.
5136
5137         * retr.c (buf_readchar): Use it.
5138         (buf_peek): Use rstreams.
5139
5140         * retr.h (BUF_READCHAR): New macro.
5141
5142         * init.c (home_dir): Rewritten for clarity.
5143         (init_path): Ditto.
5144
5145         * mswindows.c (ws_backgnd): Made static.
5146         (read_registry): Ditto.
5147         (ws_cleanup): Ditto.
5148         (ws_handler): Ditto.
5149
5150 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5151
5152         * alloca.c: New file.
5153
5154         * Makefile.in (ALLOCA): Define.
5155
5156         * mswindows.c (ws_help): Constify.
5157         (ws_help): Use alloca.
5158
5159         * mswindows.c: Reformat.
5160
5161         * all: Added _(...) annotations for I18N snarfing and translation.
5162
5163         * host.c (ftp_getaddress): Nuke SYSINFO.
5164         (ftp_getaddress): Don't use getdomainname().
5165         (ftp_getaddress): Use uname(), where available.
5166
5167         * http.c (gethttp): Protect a stray fprintf().
5168
5169         * init.c (settime): New function.
5170         (setval): Treat WAIT specially, allowing suffixes like `m' for
5171         minutes, etc.
5172
5173 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5174
5175         * url.c (get_urls_html): Use alloca() for TEMP.
5176
5177 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
5178
5179         * url.c (rotate_backups): New function.
5180
5181         * http.c (gethttp): Ditto.
5182
5183         * ftp.c (getftp): Rotate backups.
5184
5185 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
5186
5187         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
5188         xrealloc() and xstrdup().  Use the new functions.
5189
5190         * url.c (decode_string): Made static.
5191         (has_proto): Ditto.
5192         (parse_dir): Ditto.
5193         (parse_uname): Ditto.
5194         (mkstruct): Ditto.
5195         (construct): Ditto.
5196         (construct_relative): Ditto.
5197
5198         * retr.c (show_progress): Made static.
5199
5200         * recur.c (robots_url): Made static.
5201         (retrieve_robots): Ditto.
5202         (parse_robots): Ditto.
5203         (robots_match): Ditto.
5204
5205         * main.h: Removed.
5206
5207         * main.c (printhelp): Made static.
5208         (hangup): Ditto.
5209
5210         * init.c (comind): Made static.
5211         (defaults): Ditto.
5212         (init_path): Ditto.
5213         (run_wgetrc): Ditto.
5214         (onoff): Ditto.
5215         (setonoff): Ditto.
5216         (setnum): Ditto.
5217         (myatoi): Ditto.
5218         (getperms): Ditto.
5219         (setbytes): Ditto.
5220
5221         * http.c (fetch_next_header): Made static.
5222         (hparsestatline): Ditto.
5223         (hskip_lws): Ditto.
5224         (hgetlen): Ditto.
5225         (hgetrange): Ditto.
5226         (hgettype): Ditto.
5227         (hgetlocation): Ditto.
5228         (hgetmodified): Ditto.
5229         (haccepts_none): Ditto.
5230         (gethttp): Ditto.
5231         (base64_encode_line): Ditto.
5232         (mktime_from_utc): Ditto.
5233         (http_atotm): Ditto.
5234
5235         * html.c (idmatch): Made static.
5236
5237         * host.c (search_host): Made static.
5238         (search_address): Ditto.
5239         (free_hlist): Ditto.
5240
5241         * ftp.c (getftp): Made static.
5242         (ftp_loop_internal): Ditto.
5243         (ftp_get_listing): Ditto.
5244         (ftp_retrieve_list): Ditto.
5245         (ftp_retrieve_dirs): Ditto.
5246         (ftp_retrieve_glob): Ditto.
5247         (freefileinfo): Ditto.
5248         (delelement): Ditto.
5249
5250         * ftp-ls.c (symperms): Made static.
5251         (ftp_parse_unix_ls): Ditto.
5252
5253         * connect.c (select_fd): Made static.
5254
5255         * utils.c (xmalloc): Renamed from nmalloc.
5256         (xrealloc): Renamed from nrealloc.
5257         (xstrdup): Renamed from nstrdup.
5258
5259         * getopt.c (exchange): Use alloca.
5260
5261         * mswindows.c (mycuserid): Use strncpy.
5262
5263         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
5264         systhings.h, windecl.h and winjunk.h removed.
5265
5266         * mswindows.c (sleep): New function.
5267
5268         * utils.c: Include <windows.h> under Windows.
5269
5270 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
5271
5272         * url.h (URL_UNSAFE): Change default under Windows.
5273
5274         * retr.c (retrieve_from_file): Respect opt.delete_after.
5275
5276         * main.c (main): Call ws_help on Windows.
5277
5278         * winjunk.c (windows_main_junk): New function.
5279
5280         * main.c (main): Junk-process argv[0].
5281
5282         * http.c (mktime_from_utc): Return -1 if mktime failed.
5283
5284         * http.c (http_loop): Ditto.
5285
5286         * ftp.c (ftp_loop_internal): Change title on Windows when using a
5287         new URL.
5288
5289         * winjunk.c (getdomainname): Lots of functions.
5290
5291 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
5292
5293         * cmpt.c (strptime_internal): Handle years more correctly for
5294         `%y'.
5295
5296 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
5297
5298         * http.c (gethttp): Allocate enough space for
5299         `Proxy-Authorization' header.
5300
5301 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
5302
5303         * version.c: Wget/1.4.5 is released.
5304
5305 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
5306
5307         * retr.c (get_contents): Check return value of fwrite more
5308         carefully.
5309
5310 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
5311
5312         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
5313         year, regardless of century.
5314
5315 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5316
5317         * utils.c (isfile): Use `lstat' instead of `stat'.
5318
5319 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5320
5321         * utils.c (numdigit): Use explicit test.
5322
5323 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
5324
5325         * http.c (http_loop): Always use `url_filename' to get u->local.
5326
5327 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
5328
5329         * url.c: Recognize https.
5330
5331 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
5332
5333         * recur.c (recursive_retrieve): Lowercase just the host name.
5334
5335 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
5336
5337         * url.c (get_urls_file): Use the correct test.
5338         (get_urls_html): Ditto.
5339
5340 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5341
5342         * connect.c: Reverted addrlen to int.
5343
5344         * init.c (parse_line): Check for -1 instead of NONE.
5345
5346         * version.c: Changed version to 1.4.5.
5347
5348 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5349
5350         * init.c: New option netrc.
5351         (initialize): Don't parse .netrc.
5352
5353         * cmpt.c (recursive): Return rp.
5354         (strptime_internal): Match the long strings first, the abbreviated
5355         second.
5356
5357 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
5358
5359         * http.c (check_end): New function.
5360         (http_atotm): Use it.
5361
5362 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
5363
5364         * http.c (gethttp): Use them.
5365
5366         * init.c: New options proxy_user and proxy_passwd.
5367
5368 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
5369
5370         * ftp.c (ftp_retrieve_list): Create links even if not relative.
5371
5372 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
5373
5374         * recur.c (recursive_retrieve): Lowercase the host name, if the
5375         URL is not "optimized".
5376
5377         * host.c (realhost): Return l->hostname, even if it matches with
5378         host.
5379
5380 1997-02-10  Marin Purgar  <pmc@asgard.hr>
5381
5382         * connect.c: Make addrlen size_t instead of int.
5383         (conaddr): Ditto.
5384
5385 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5386
5387         * systhings.h: Define S_ISLNK on NeXT too.
5388
5389 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
5390
5391         * version.c: Released 1.4.3.
5392
5393         * url.c: Futher update to list of protostrings.
5394         (skip_proto): Skip `//' correctly for FTP and HTTP.
5395
5396         * url.c (get_urls_html): Handle bogus `http:' things a little
5397         different.
5398
5399         * main.c (main): Removed `follow-ftp' from `f'.
5400         (main): Dumped the `prefix-files' and `file-prefix' options and
5401         features; old and bogus.
5402         (main): Exit on failed setval() in `-e'.
5403
5404         * http.c (fetch_next_header): Use it to detect header continuation
5405         correctly.
5406
5407         * retr.c (buf_peek): New function.
5408
5409 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5410
5411         * wget.h: Include time.h and stuff.
5412
5413 1997-02-08  Roger Beeman  <beeman@cisco.com>
5414
5415         * ftp.c: Include <time.h>
5416
5417 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
5418
5419         * url.c (findurl): Would read over buffer limits.
5420
5421 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5422
5423         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
5424
5425 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
5426
5427         * http.c (http_atotm): Initialize tm.is_dst.
5428
5429 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5430
5431         * http.c (gethttp): Don't print the number of retrieved headers.
5432
5433         * main.c (main): New option `--no-clobber', alias for `-nc'.
5434
5435         * url.c: Recognize `https://'.
5436
5437 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5438
5439         * host.c (herrmsg): Don't use h_errno.
5440
5441 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5442
5443         * host.c (accept_domain): Use it.
5444
5445         * main.c (main): New option `--exclude-domains'.
5446
5447         * retr.c (retrieve_url): Use it.
5448         (retrieve_url): Bail out when an URL is redirecting to itself.
5449
5450         * url.c (url_equal): New function.
5451
5452 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5453
5454         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
5455
5456         * http.c (mk_utc_time): New function.
5457         (http_atotm): Use it; handle time zones correctly.
5458
5459 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5460
5461         * http.c: Ditto.
5462
5463         * ftp-basic.c: Use it instead of WRITE.
5464
5465         * connect.c (iwrite): New function.
5466
5467 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5468
5469         * cmpt.c (mktime): New function.
5470
5471         * netrc.c: Include <sys/types.h>.
5472
5473         * main.c (main): Wouldn't recognize --spider.
5474
5475         * retr.c (rate): Use `B', `KB' and `MB'.
5476         (reset_timer,elapsed_time): Moved from utils.c.
5477
5478         * ftp.c (ftp_retrieve_list): Ditto.
5479
5480         * http.c (http_loop): Don't touch the file if opt.dfp.
5481
5482 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5483
5484         * cmpt.c: New file.
5485
5486         * ftp.c (ftp_retrieve_glob): New argument semantics.
5487         (ftp_retrieve_dirs): Use it.
5488         (ftp_loop): Ditto.
5489
5490         * html.c (htmlfindurl): Recognize `'' as the quote char.
5491
5492 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5493
5494         * ftp.c (ftp_loop_internal): Use it.
5495
5496         * utils.c (remove_link): New function.
5497
5498 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
5499
5500         * retr.c (retrieve_url): Require STRICT redirection URL.
5501
5502         * url.c (parseurl): New argument STRICT.
5503
5504         * http.c (hparsestatline): Be a little-bit less strict about
5505         status line format.
5506
5507 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5508
5509         * http.c (gethttp): Use it.
5510
5511         * main.c (main): Don't use '<digit>' as options.
5512
5513         * init.c: New option ignore_length.
5514
5515         * http.c (gethttp): Ditto.
5516         (http_loop): Check for redirection without Location:.
5517         (gethttp): Don't print Length unless RETROKF.
5518
5519         * ftp.c (getftp): Use it.
5520
5521         * url.c (mkalldirs): New function.
5522
5523         * utils.c (mymkdir): Don't check for existing non-directory.
5524
5525         * url.c (mkstruct): Don't create the directory.
5526
5527 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
5528
5529         * init.c (setval): Removed NO_RECURSION checks.
5530
5531 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
5532
5533         * version.c: "Released" 1.4.3-pre2.
5534
5535         * recur.c (recursive_retrieve): Bypass host checking only if URL
5536         is ftp AND parent URL is not ftp.
5537
5538         * ftp-basic.c (ftp_request): Print out Turtle Power.
5539
5540         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
5541         wildcard.
5542         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
5543         not glob.
5544
5545         * http.c (gethttp): Be a little bit smarter about status codes.
5546
5547         * recur.c (recursive_retrieve): Always reset opt.recursive when
5548         dealing with FTP.
5549
5550 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
5551
5552         * retr.c (retrieve_url): New variable location_changed; use it for
5553         tests instead of mynewloc.
5554         (retrieve_url): Allow heuristic adding of html.
5555
5556         * url.c (url_filename): Don't use the `%' in Windows file names.
5557
5558         * http.c (http_loop): Always time-stamp the local file.
5559
5560         * http.c (http_loop): Ditto.
5561
5562         * ftp.c (ftp_retrieve_list): Use it.
5563
5564         * utils.c (my_touch): New function.
5565
5566         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
5567         instead of #ifndef NeXT.
5568
5569         * utils.c (strptime): New version, by Ulrich Drepper.
5570
5571 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
5572
5573         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
5574         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
5575         (http_loop): Would remove ACCEPTRANGES.
5576
5577         * ftp.c (getftp): Call ftp_list with NULL.
5578
5579 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
5580
5581         * html.c (ftp_index): Don't print minutes and seconds if we don't
5582         know them; beautify the output.
5583
5584         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
5585
5586 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
5587
5588         * utils.c (strptime): New function.
5589         (strptime): Don't use get_alt_number.
5590         (strptime): Don't use locale.
5591         (match_string): Made it a function.
5592
5593 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
5594
5595         * http.c (http_atotm): New function.
5596         (http_loop): Use it.
5597
5598         * atotm.c: Removed from the distribution.
5599
5600         * http.c (base64_encode_line): Rewrite.
5601
5602 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
5603
5604         * ftp.c (getftp): Use ftp_expected_bytes; print size.
5605
5606         * ftp-basic.c (ftp_response): Use ftp_last_respline.
5607         (ftp_expected_bytes): New function.
5608
5609         * ftp.c (getftp): Print the unauthoritative file length.
5610
5611         * ftp-ls.c: Renamed from ftp-unix.c.
5612         (ftp_parse_ls): Moved from ftp.c.
5613         (ftp_parse_unix_ls): Recognize seconds in time spec.
5614         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5615         year.
5616
5617 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5618
5619         * ftp-basic.c: Don't declare errno if #defined.
5620
5621         * host.c (ftp_getaddress): Check for sysinfo legally.
5622
5623 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5624
5625         * connect.c (iread): Use READ.
5626
5627 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5628
5629         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5630         schemes.
5631
5632 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5633
5634         * host.c (ftp_getaddress): Allow `.' in hostname.
5635
5636 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5637
5638         * wget.h: READ and WRITE macros for use instead of read and write
5639         on sockets, grep READ *.c, grep WRITE *.c
5640
5641         * wsstartup.c: new file - startup for winsock
5642
5643         * wsstartup.h: new file
5644
5645         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5646
5647         * configure.bat: Configure utility for MSVC
5648
5649         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5650
5651 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5652
5653         * version.c: Released 1.4.3-pre.
5654
5655         * utils.c (prnum): Accept long.
5656         (legible): Use prnum().
5657
5658         * connect.c (make_connection): Accept port as short.
5659         (bindport): Ditto.
5660
5661         * http.c (gethttp): Use search_netrc.
5662
5663 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5664
5665         * ftp.c (getftp): Use search_netrc.
5666
5667         * netrc.c (free_netrc): New function.
5668
5669         * init.c (home_dir): New function.
5670
5671         * url.c (convert_links): Allow REL2ABS changes.
5672
5673 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5674
5675         * netrc.c: New file.
5676         (parse_netrc, maybe_add_to_list): New functions.
5677
5678 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5679
5680         * retr.c (retrieve_url): Reset opt.recursion before calling
5681         ftp_loop if it is reached through newloc.
5682
5683         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5684         error; don't use "Syntax error", since we don't know if it is
5685         really a syntax error.
5686
5687 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5688
5689         * utils.c (acceptable): Extract the filename part of the path.
5690
5691         * recur.c (recursive_retrieve): Call acceptable() with the right
5692         argument; would bug out on wildcards.
5693
5694         * init.c (parse_line): Likewise.
5695
5696         * html.c (htmlfindurl): Cast to char * when calling stuff.
5697
5698 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5699
5700         * ftp.c (getftp): Use ftp_pasv.
5701
5702         * ftp-basic.c (ftp_request): Accept NULL value.
5703         (ftp_pasv): New function.
5704
5705         * options.h (struct options): Add passive FTP option.
5706
5707 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5708
5709         * url.c (parseurl): Debug output.
5710
5711         * utils.c (path_simplify): New one, adapted from bash's
5712         canonicalize_pathname().
5713
5714 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5715
5716         * ftp.c (getftp): Don't discard the buffer.
5717
5718         * retr.c (get_contents): New parameter nobuf.
5719
5720 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5721
5722         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5723
5724         * init.c (setval): Strip the trailing slashes on CVECDIR.
5725
5726 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5727
5728         * init.c: Make excludes and includes under CVECDIR instead of
5729         CVEC.
5730
5731 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5732
5733         * url.c (get_urls_html): Skip "http:".
5734
5735 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5736
5737         * utils.c (strcasecmp): From glibc.
5738         (strncasecmp): Also.
5739         (strstr): Also.
5740
5741         * url.c: Added javascript: to the list of URLs prefixes.
5742
5743 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5744
5745         * recur.c (retrieve_robots): Print the warning message only if
5746         verbose.
5747
5748 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5749
5750         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5751
5752 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5753
5754         * systhings.h: New file.
5755
5756         * ../configure.in: Check for utime.h
5757
5758         * ftp.c: Check whether we have unistd.h.
5759
5760 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5761
5762         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5763         (recursive_retrieve): Call get_urls_html with the canonical URL.
5764
5765 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5766
5767         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5768         ansi2knr support for compilers which don't support ANSI style
5769         function prototypes and signatures.
5770
5771         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5772
5773 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5774
5775         * url.c: Use it; Recognize paths ending with "." and ".." as
5776         directories.
5777         (url_filename): Append .n whenever file exists and could be a
5778         directory.
5779
5780         * url.h (ISDDOT): New macro.
5781
5782         * init.c (parse_line): Use unsigned char.
5783
5784         * url.c (get_urls_html): Cast to unsigned char * when calling
5785         htmlfindurl.
5786
5787         * html.c (htmlfindurl): Use unsigned char.
5788
5789         * version.c: Changed version to 1.4.3.
5790
5791 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5792
5793         * version.c: Released 1.4.2.
5794
5795         * ftp.c (getftp): Simplified assertion.
5796         (ftp_loop_internal): Remove symlink before downloading.
5797         (ftp_retrieve_list): Unlink the symlink name before attempting to
5798         create a symlink!
5799
5800         * options.h (struct options): Renamed print_server_response to
5801         server_response.
5802
5803         * ftp.c (rel_constr): Removed.
5804         (ftp_retrieve_list): Don't use it.
5805         (ftp_retrieve_list): Use opt.retr_symlinks.
5806
5807 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5808
5809         * main.c (main): New option retr_symlinks.
5810
5811         * url.c (convert_links): Print verbose message.
5812
5813 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5814
5815         * http.c (http_loop): Reset newloc in the beginning of function;
5816         would cause FMR in retrieve_url.
5817
5818 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5819
5820         * recur.c (convert_all_links): Find the URL of each HTML document,
5821         and feed it to get_urls_html; would bug out.
5822         (convert_all_links): Check for l2 instead of dl; removed dl.
5823
5824         * url.c (convert_links): Don't refer to freed newname.
5825
5826         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5827
5828         * main.c (main): Print the OS_TYPE in the debug output, too.
5829
5830         * recur.c (recursive_retrieve): Check for opt.delete_after.
5831
5832         * main.c (main): New option delete-after.
5833
5834         * init.c (setval): Cleaned up.
5835
5836 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5837
5838         * Makefile.in (wget): Make `wget' the default target.
5839
5840         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5841         loop.
5842         (ftp_retrieve_list): Warn about non-matching sizes.
5843
5844         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5845
5846         * init.c (setnum): Renamed from setnuminf; New argument flags.
5847         (setval): Use it.
5848
5849         * main.c (main): Sorted the options.
5850         (main): New option --wait.
5851
5852 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5853
5854         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5855         quotes.
5856
5857 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5858
5859         * version.c: Changed version to 1.4.2.
5860
5861 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5862
5863         * version.c: Released 1.4.1.
5864
5865         * html.c (html_quote_string): New function.
5866         (ftp_index): Use it.
5867         (htmlfindurl): A more gentle ending debug message.
5868
5869         * ftp.c (ftp_loop): Check for opt.htmlify.
5870
5871         * init.c: New command htmlify.
5872
5873         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5874         strings.
5875         (ftp_loop): Print size of index.html.
5876
5877         * init.c (setval): Implement "styles".
5878
5879         * main.c (main): New option dotstyle.
5880
5881 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5882
5883         * ftp.c (getftp): Close the master socket in case of errors, after
5884         bindport().
5885
5886         * connect.c (bindport): Initialize msock to -1.
5887
5888         * ftp.c (getftp): Initialize dtsock to -1.
5889
5890         * connect.c (closeport): Don't close sock if sock == -1.
5891
5892 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5893
5894         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5895         (setval): Don't send default values.
5896         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5897
5898         * options.h (struct options): Use long for dot_bytes.
5899
5900         * init.c (setquota): Renamed to setbytes.
5901         (setval): Use setbytes on DOTBYTES.
5902
5903 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5904
5905         * ftp.c (getftp): Initialize con->dltime.
5906
5907         * recur.c (recursive_retrieve): Use same_host instead of
5908         try_robots; simply load robots_txt whenever the host is changed.
5909         (recursive_retrieve): Free forbidden before calling parse_robots.
5910
5911 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5912
5913         * retr.c (show_progress): Use them.
5914
5915         * options.h (struct options): New options dot_bytes, dots_on_line
5916         and dot_spacing.
5917
5918 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5919
5920         * recur.c (recursive_retrieve): Retrieve directories regardless of
5921         acc/rej rules; check for empty u->file.
5922
5923 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5924
5925         * init.c (setval): Use it.
5926
5927         * utils.c (merge_vecs): New function.
5928
5929         * init.c (setval): Reset the list-type functions when encountering
5930         "".
5931
5932 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5933
5934         * recur.c (recursive_retrieve): Use base_url instead of this_url
5935         for no_parent.
5936
5937 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5938
5939         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5940
5941 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5942
5943         * utils.c (sepstring): Rewrote; don't use strtok.
5944
5945         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5946         when running the first time.
5947         (retrieve_robots): Warn to ignore errors when robots are loaded.
5948
5949         * utils.c (load_file): Moved from url.c.
5950
5951         * http.c: Made static variables const too in h* functions.
5952
5953         * main.c (main): Renamed --continue-ftp to --continue.
5954
5955         * recur.c (recursive_retrieve): Use it.
5956
5957         * utils.c (frontcmp): New function.
5958
5959         * url.c (accdir): New function.
5960
5961         * html.c (htmlfindurl): Recognize <area href=...>.
5962
5963         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5964
5965         * init.c (setval): Free the existing opt.excludes and
5966         opt.includes, if available.
5967
5968         * main.c (main): New option -I.
5969
5970 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5971
5972         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5973
5974         * version.c: Changed version to 1.4.1.
5975
5976 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5977
5978         * version.c: Released 1.4.0.
5979
5980 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5981
5982         * main.c (main): Free com and val after parse_line.
5983         (printhelp): Reorder the listing.
5984
5985         * http.c: More robust header parsing.
5986
5987         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5988         (hskip_lws): New function.
5989         (haccepts_bytes): New function.
5990         (gethttp): Use it.
5991
5992         * init.c (setval): Check header sanity.
5993         (setval): Allow resetting of headers.
5994
5995 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5996
5997         * http.c (http_loop): Don't use has_wildcards.
5998
5999         * http.c (gethttp): Free all_headers -- would leak.
6000
6001         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
6002         0 -- this fixes a long-standing bug in -rl.
6003
6004 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
6005
6006         * ftp.c: Use -1 as "impossible" value for con->fd.
6007
6008         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
6009
6010         * init.c (parse_line): Use isalpha.
6011
6012         * ftp-unix.c: Use HAVE_UNISTD_H.
6013
6014         * mtch.c (has_wildcards): Don't match \.
6015
6016         * http.c (http_loop): Warn on HTTP wildcard usage.
6017
6018 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
6019
6020         * url.c (url_filename): Do not create numbered suffixes if
6021         opt.noclobber -- would bug out on -nc.
6022
6023 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
6024
6025         * recur.c (parse_robots): Don't chuck out the commands without
6026         arguments (`Disallow:<empty>' didn't work).
6027         (parse_robots): Compare versions lowercase.
6028         (parse_robots): Match on base_version, not version_string!
6029         (parse_robots): Handle comments properly.
6030         (parse_robots): Match versions in a sane way.
6031
6032         * init.c: Print nicer error messages.
6033
6034         * version.c: Changed version to 1.4.0.
6035
6036 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6037
6038         * version.c: Released 1.4.0-test2.
6039
6040         * init.c (run_wgetrc): Close fp.
6041
6042         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
6043         u->dir.
6044
6045 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6046
6047         * init.c (setquota): Allow inf as quota specification.
6048
6049 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
6050
6051         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
6052         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
6053
6054         * main.c (main): Check for quota by comparison with downloaded
6055         stuff, not from status.
6056
6057         * connect.c (select_fd): Should compile on HPUX without warnings now.
6058
6059         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
6060         returned RETROK.
6061
6062 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
6063
6064         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
6065         (getftp): Return FTPRETRINT on control connection error.
6066
6067         * html.c (htmlfindurl): Recognize <embed src=...> and
6068         <bgsound src=...>.
6069         (ftp_index): Handle username and password correctly.
6070
6071         * main.c (main): Made `-np' a synonim for --no-parent.
6072
6073 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6074
6075         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
6076         ftp_retrieve_glob.
6077
6078         * version.c: Changed version to 1.4.0-test2.
6079
6080 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6081
6082         * version.c: Released 1.4.0-test1.
6083
6084         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
6085         directory.
6086         (convert_links): Removed definition of make_backup.
6087
6088         * http.h: Removed definition of MAX_ERROR_LENGTH.
6089
6090         * host.c (ftp_getaddress): Check for "(none)" domains.
6091
6092         * ftp.c (ftp_retrieve_dirs): Docfix.
6093
6094         * http.c (gethttp): Use ou->referer instead of u->referer.
6095
6096         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
6097         this was known to cause coredumps on Linux.
6098
6099         * html.c (ftp_index): Cast the argument to local_time to time_t *.
6100
6101 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
6102
6103         * connect.c (select_fd): Use exceptfds -- once and for all.
6104
6105         * retr.c (retrieve_from_file): Free filename after
6106         recursive_retrieve.
6107         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
6108         first-time retrieval.
6109         (retrieve_from_file): Return uerr_t; new argument, count.
6110         (retrieve_from_file): Break on QUOTEXC.
6111
6112         * init.c (setquota): Fixed a bug that caused rejection of
6113         non-postfixed values..
6114
6115 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
6116
6117         * version.c: Changed name to wget.
6118
6119         * connect.c (iread): Smarter use of select.
6120         (select_fd): Set errno on timeout.  If not timeout, return 1
6121         instead of 0.
6122
6123 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
6124
6125         * ftp.c (ftp_loop_internal): Don't use con->cmd before
6126         establishing it.
6127
6128 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
6129
6130         * http.c (gethttp): Send correct referer when using proxy.
6131         (gethttp): Use struct urlinfo ou to access the relevant data; send
6132         correct authorization in all cases.
6133
6134         * host.c (same_host): Use skip_uname to skip username and
6135         password.
6136
6137         * url.c (skip_uname): New function.
6138         (parseurl): Use it.
6139
6140         * host.c (same_host): Do not assume HTTP -- same_host should now
6141         be totally foolproof.
6142
6143         * url.c (skip_proto): New function.
6144         (parse_uname): Use it.
6145
6146         * http.c (gethttp): Create local user and passwd from what is
6147         given.
6148
6149         * url.c (parseurl): Check for HTTP username and password too.
6150
6151 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
6152
6153         * config.h.in: Removed #define gethostbyname R...
6154
6155 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
6156
6157         * version.c: Changed version to 1.4.0-test1.
6158
6159 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
6160
6161         * version.c: "Released" 1.4b29.
6162
6163         * recur.c (recursive_retrieve): Check for no_parent.
6164
6165         * init.c (setval): Option update.
6166
6167         * main.c (main): New option no-parent.
6168
6169         * options.h (struct options): New variable no_parent.
6170
6171         * recur.c (recursive_retrieve): Only files are checked for
6172         opt.accepts and opt.rejects.
6173         (recursive_retrieve): Check directories for opt.excludes.
6174         (recursive_retrieve): Make the dir absolute when checking
6175         opt.excludes.
6176
6177         * html.c (htmlfindurl): Recognize <applet code=...> and <script
6178         src=...>
6179
6180 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
6181
6182         * ftp.c (getftp): Do not line-break assert entries at all.
6183         (ftp_retrieve_dirs): docfix.
6184
6185         * connect.c (select_fd): Use fd + 1 as nfds.
6186
6187         * version.c: Changed version to 1.4b29.
6188
6189 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
6190
6191         * version.c: "Released" 1.4b28.
6192
6193         * ftp.c (ftp_loop_internal): Check whether f->size == len and
6194         don't continue the loop if it is.
6195         (ftp_get_listing): Remove list_filename on unsuccesful loop.
6196
6197 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6198
6199         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
6200         (getftp): Do not use multiline assert.
6201
6202         * http.c (hparsestatline): Use mjr and mnr instead of major and
6203         minor, which don't compile on Ultrix.
6204         (http_loop): Use strcpy() to initialize tmp.
6205
6206         * all: Geturl -> Fetch
6207
6208 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6209
6210         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
6211         ':'.
6212
6213         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
6214         moving `bufsize &&' to the beginning of each check in for-loops.
6215
6216         * recur.c (parse_robots): Close fp on exit.
6217
6218         * url.c (mymkdir): Check for each directory before creating.
6219
6220 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
6221
6222         * version.c: Changed version to 1.4b28.
6223
6224 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
6225
6226         * version.c: "Released" 1.4b27.
6227
6228         * init.c (parse_line): Use isspace.
6229         (parse_line): Free *com on all errors.
6230
6231         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
6232         (delelement): Use next instead of f->next and prev instead of
6233         f->prev.
6234         (delelement): Free the members of the deleted element.
6235
6236         * http.c (http_loop): Do not return RETROK on code != 20x.
6237
6238         * init.c (cleanup): Free opt.user_header.
6239         (cleanup): Free opt.domains.
6240
6241         * url.c (freelists): Moved to cleanup().
6242
6243         * http.c (hparsestatline): Docfix.
6244
6245         * main.c (main): Return with error status on unsuccesful
6246         retrieval.
6247
6248         * init.c (setval): Do not remove listing when mirroring.
6249
6250         * url.c (url_filename): Use opt.fileprefix.
6251
6252         * ftp.c (ftp_get_listing): Use url_filename to get filename for
6253         .listing.
6254
6255         * main.c (main): New option: -rn.
6256
6257 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
6258
6259         * Makefile.in (RM): Added RM = rm -f.
6260
6261         * host.c (clean_hosts): New function.
6262         (free_hlist): Just free the list, no reset.
6263
6264         * version.c: Changed version to 1.4b27.
6265
6266 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
6267
6268         * version.c: "Released" 1.4b26.
6269
6270         * retr.c (retrieve_from_file): If call get_urls_html with
6271         opt.spider to make it silent in spider mode.
6272
6273         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
6274
6275         * url.h (CLEANDUP): New macro.
6276
6277         * http.c (gethttp): Fixed a bug that freed location only when it
6278         was NULL.
6279
6280         * retr.c (retrieve_url): Free url if it will not be stored,
6281         i.e. newloc is NULL.
6282
6283         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
6284         old version would bug out on <a href="x#a"href="y">.
6285
6286         * html.h (state_t): New member in_quote.
6287
6288         * html.c (htmlfindurl): Free s->attr at the beginning of
6289         attr-loop.
6290
6291         * recur.c (recursive_retrieve): Recognize RCLEANUP.
6292         (tried_robots): Make hosts a global variable.
6293         (recursive_retrieve): Free constr after URL host optimization.
6294         (tried_robots): Free urlinfo before exiting.
6295
6296         * utils.c (free_slist): New function.
6297
6298         * recur.c (recursive_retrieve): Use flags to add cleanup
6299         possibility.
6300
6301         * main.c (main): Free filename after recursive_retrieve.
6302
6303         * http.c (gethttp): Store successful responses too.
6304
6305 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
6306
6307         * all: Constified the whole source.  This required some minor
6308         changes in many functions in url.c, possibly introducing bugs -- I
6309         hope not.
6310
6311         * ftp-basic.c: Removed last_respline.
6312
6313         * http.c (gethttp): Free type.
6314
6315         * host.c (same_host): Free real1 and real2.
6316
6317         * main.c (main): New option --spider.
6318
6319         * retr.c (get_contents): Don't reset errno.
6320
6321         * main.c (main): Sorted the options.
6322
6323         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
6324         uninitialized by select().
6325
6326         * http.c (http_loop): Print the time when the connection is
6327         closed.
6328         (gethttp): Debug-print the HTTP request.
6329
6330 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
6331
6332         * connect.c (iread): Do not try reading after timeout.
6333
6334         * main.c (main): Would bug out on -T.
6335
6336         * connect.c (select_fd): Do not use exceptfds.
6337         (iread): Set ETIMEDOUT on select_fd <= 0.
6338
6339         * version.c: Changed version to 1.4b26.
6340
6341 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
6342
6343         * version.c: "Released" 1.4b25.
6344
6345         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
6346         or link name.
6347
6348         * http.c (gethttp): Add errcode to struct hstat.
6349         (http_loop): Use it.
6350
6351         * url.c (no_proxy_match): Simplify using char** for no_proxy.
6352
6353         * options.h (struct options): Make opt.no_proxy a vector.
6354
6355         * utils.c (sepstring): Use !*s instead of !strlen(s).
6356
6357         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
6358         (getperms): Use ISODIGIT instead of isdigit.
6359
6360         * ftp.c (getftp): Print time.
6361
6362         * main.c (main): Use legible output of downloaded quantity.
6363
6364         * ftp.c (getftp): Use elapsed_time().
6365         (ftp_loop_internal): Use rate().
6366
6367         * http.c (http_loop): Add download ratio output; Use rate().
6368
6369         * utils.c (rate): New function.
6370
6371 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
6372
6373         * http.c (http_loop): Use timer.
6374
6375         * ftp.c: Split to ftp-basic.c and ftp.c
6376
6377         * utils.c (reset_timer): New function.
6378         (elapsed_time): New function.
6379
6380         * retr.c (show_progress): Make bytes_in_line and offs long; should
6381         work on 16-bit machines.
6382
6383 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
6384
6385         * url.c (in_acclist): New argument backward.
6386
6387         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
6388         a file should be retrieved according to suffix.
6389         (ftp_get_listing): Check the return value of unlink; Do not call
6390         ftp_retrieve_dirs if depth reached maxreclevel.
6391         (ftp_retrieve_dirs): Check whether the directory is in
6392         exclude-list.
6393
6394         * main.c (main): Print the version number at the beginning of
6395         DEBUG output.
6396         (main): Use strrchr when creating exec_name.
6397
6398         * ftp.c (ftp_retrieve_glob): Do not close control connection.
6399
6400         * version.c: Changed version to 1.4b25.
6401
6402 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
6403
6404         * version.c: "Released" 1.4b24.
6405
6406         * Makefile.in: Rewrite.
6407
6408         * ftp.c (ftp_loop_internal): Likewise.
6409
6410         * retr.c (time_str): Check for failed time().
6411
6412         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
6413         HTML3.0.
6414
6415         * retr.c (time_str): Return time_t *.
6416
6417         * connect.c (bindport): Close msock on unsuccesful bind.
6418         (bindport): The same for getsockname and listen.
6419
6420         * retr.c (retrieve_url): Allow any number of retries on
6421         proxy.
6422
6423         * http.c (gethttp): Do not treat errno == 0 as timeout.
6424         (http_loop): Likewise.
6425         (http_loop): Cosmetic changes.
6426
6427         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
6428
6429         * retr.c (get_contents): Reset errno.
6430
6431         * ftp.c (getftp): Minor fixes.
6432
6433 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6434
6435         * http.c: Do not use backups.
6436
6437         * geturl.1 (WARNING): Warn that man-page could be obsolete.
6438
6439         * getopt.c (getopt_long): Moved to getopt.c
6440
6441         * geturl.texi: Enhanced.
6442
6443         * main.c (main): Use it.
6444
6445         * recur.c (convert_all_links): New function.
6446
6447         * utils.c (add_slist): New argument flags.
6448
6449         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
6450         (parse_robots): Do not chuck out empty value fields.
6451         (parse_robots): Make yourself welcome on empty Disallow.
6452
6453         * version.c: Changed version to 1.4b24.
6454
6455 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6456
6457         * version.c: "Released" 1.4b23.
6458
6459         * ftp.c (ftp_loop_internal): Get the time after getftp.
6460
6461         * Makefile.in (install.info): New target.
6462         (install): Use it.
6463
6464         * http.c (http_loop): Fix output when doing -O.
6465
6466 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6467
6468         * geturl.texi: New file.
6469
6470         * main.c (main): Do not print the warnings and download summary if
6471         opt.quiet is set.
6472
6473         * version.c: Changed version to 1.4b23.
6474
6475 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6476
6477         * "Released" 1.4b22.
6478
6479         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
6480         to avoid redefinition warnings.
6481
6482         * host.c (store_hostaddress): Use memcpy() to copy the address
6483         returned by inet_addr.
6484
6485         * version.c: Changed version to 1.4b22.
6486
6487 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
6488
6489         * version.c: "Released" 1.4b21.
6490
6491         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
6492
6493         * ftp.c (ftp_port): Use conaddr.
6494         (getftp): Print the file length.
6495         (ftp_retrieve_list): Check the stamps of plain files only.
6496
6497         * connect.c (closeport): Do not call shutdown().
6498         (conaddr): New function.
6499
6500         * html.c (ftp_index): Made it dfp-aware.
6501
6502         * init.c (cleanup): New name of freemem. Close opt.dfp.
6503
6504         * ftp.c (getftp): Use opt.dfp if it is set.
6505
6506         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
6507
6508         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
6509         CWDs to be sent with recursive FTP retrievals.
6510
6511 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
6512
6513         * recur.c (parse_robots): Made it more compliant with "official"
6514         specifications.
6515
6516         * http.c: New function.
6517
6518         * ftp-unix.c (ftp_parse_ls): Added better debug output.
6519
6520         * ftp.c (getftp): Print out the LIST in case of
6521         opt.print_server_response.
6522
6523         * version.c: Changed version to 1.4b21.
6524
6525 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
6526
6527         * version.c: "Released" 1.4b20.
6528
6529         * README: Update.
6530
6531         * http.c (gethttp): Preset lengths of various headers instead of
6532         calculating them dynamically.
6533         (gethttp): Check for 206 partial contents.
6534
6535 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
6536
6537         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
6538
6539         * http.c (gethttp): Send the port number in the Host: header.
6540
6541 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
6542
6543         * http.c (gethttp): Send host: header.
6544         (gethttp): Add the possibility of user-defined headers.
6545         (gethttp): Move decision about pragma: no-cache to http_loop,
6546         where it belongs.
6547         (gethttp): Pass a struct instead of enormous argument list.
6548         (http_loop): Use a new, fancier display format.
6549         (ftp_loop): Likewise.
6550
6551         * main.c: (hangup): Turn off buffering of the new log file.
6552
6553         * install-sh: Likewise.
6554
6555         * config.sub: Replace with the one in autoconf-2.10
6556
6557         * geturl.1: Update.
6558
6559         * init.c: New options httpuser and httppasswd.
6560
6561         * http.c: (base64_encode_line): New function.
6562         (gethttp): Send authentication.
6563
6564         * connect.c (make_connection): Use store_hostaddress.
6565
6566 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
6567
6568         * host.c (store_hostaddress): New function.
6569
6570         * NEWS: Update.
6571
6572         * http.c (hgetrange): New function.
6573         (gethttp): Use ranges.
6574
6575         * utils.c (numdigit): Accept long instead of int.
6576
6577         * http.c (http_loop): Add restart capabilities.
6578
6579         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
6580         being used uninitialized.
6581         (ftp_retrieve_list): Similar fix.
6582
6583         * host.c (add_hlist): Fixed a bug that could cause cmp being used
6584         uninitialized.
6585
6586         * url.c (construct_relative): New function.
6587
6588         * recur.c (recursive_retrieve): Use it.
6589
6590         * retr.c (convert_links): New function.
6591
6592 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
6593
6594         * url.c (free_urlpos): New function.
6595
6596         * recur.c (recursive_retrieve): Adapt.
6597
6598         * url.c (get_urls_html): Return a linked list instead of a vector.
6599
6600         * url.c (get_urls_file): Return a linked list instead of a vector.
6601
6602         * geturl.1: Update.
6603
6604         * http.c (gethttp): Implement it.
6605
6606         * init.c (setval): New option: SAVEHEADERS
6607
6608         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
6609         be retrieved. Lack of this test caused bugs when the connection
6610         was lost during listing.
6611
6612         * retr.c (retrieve_url): Fixed a bug that caused
6613         coredumps. *newloc is now reset by default.
6614         (retrieve_url): Lift the twenty-tries limit on proxies.
6615
6616         * version.c: Changed version to 1.4b20.
6617
6618 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6619
6620         * version.c: "Released" 1.4b19.
6621
6622 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6623
6624         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6625         (getftp): Changed prototype to accept ccon *.
6626
6627 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6628
6629         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6630         incorrect values to files pointed to by symbolic links.
6631         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6632
6633 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6634
6635         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6636
6637         * main.c (main): New option: --user-agent.
6638
6639         * geturl.1: Ditto.
6640
6641         * init.h: Ditto.
6642
6643         * init.c (setval): Ditto.
6644
6645         * main.c (main): Rename "server-headers" to "server-response".
6646
6647         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6648         executables in 'ls -F' listings.
6649
6650 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6651
6652         * url.c (parseurl): Remove realloc() and sprintf().
6653         (str_url): Get rid of sprintf().
6654
6655         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6656         servers.
6657
6658         * url.h (URL_CLEANSE): Made it else-resistant.
6659         (USE_PROXY): New macro.
6660
6661 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6662
6663         * NEWS: Update.
6664
6665         * version.c: Changed version to 1.4b19.
6666
6667 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6668
6669         * version.c: "Released" 1.4b18.
6670
6671         * url.c: Made it reallocate space exponentially.
6672
6673 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6674
6675         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6676         the list of stuff to fetch.
6677
6678 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6679
6680         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6681         -Fi.
6682
6683         * html.c (htmlfindurl): Rewrite.
6684
6685         * http.c (gethttp): Use opt.proxy_cache.
6686
6687         * main.c (main): Added --cache option.
6688
6689         * ftp.c (ftp_response): Print server response if opt.print_server
6690         response is set.
6691         (getftp): Print newlines after each request if the server response
6692         is to be printed.
6693         (ftp_response): Copy the last response line to last_respline.
6694
6695         * http.c (gethttp): Add Pragma: nocache for retried
6696         proxy-retrievals.
6697
6698         * ftp.c (getftp): Use it.
6699
6700         * retr.c (buf_discard): New function.
6701
6702         * ftp.c (ftp_response): Use buf_readchar().
6703         (getftp): Flush the control connection buffer before calling
6704         get_contents().
6705
6706         * retr.c (buf_readchar): New function.
6707         (buf_flush): New function.
6708         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6709         (get_contents): Use buf_flush.
6710
6711 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6712
6713         * ftp.c: Incorporate changes to ftp_response.
6714
6715         * ftp.c (ftp_response): Allocate the server response dynamically,
6716         as in read_whole_line and fetch_next_header.
6717
6718         * utils.c (read_whole_line): Fixed a bug that prevented reading
6719         the last line if it is not \n-terminated. Also fixed a possible
6720         memory overflow.
6721
6722         * http.c (fetch_next_header): Return malloc-ed string as large as
6723         needed.
6724         (gethttp): Use new fetch_next_header.
6725
6726 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6727
6728         * http.c (hgetlen): Compute the header length the first time only.
6729         (hgettype): Ditto.
6730         (hgetlocation): Ditto.
6731         (hgetmodified): Ditto.
6732
6733 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6734
6735         * sample.geturlrc: Update.
6736
6737 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6738
6739         * http.c (http_loop): Ditto.
6740
6741         * ftp.c (getftp): Open the output file as binary.
6742
6743         * version.c: Changed version to 1.4b18.
6744
6745 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6746
6747         * version.c: "Released" 1.4b17.
6748
6749         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6750         instead of failed assertion.
6751
6752 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6753
6754         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6755         if a file of that name already exists.
6756
6757 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6758
6759         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6760
6761         * config.h.in: Define gethostbyname as Rgethostbyname when using
6762         Socks.
6763
6764         * configure.in: Check for -lresolv if using Socks.
6765
6766         * version.c: Changed version to 1.4b17.
6767
6768 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6769
6770         * version.c: "Released" 1.4b16.
6771
6772         * http.c (gethttp): More intelligent check for first line of HTTP
6773         response.
6774         (gethttp): Would bug out on time-stamping.
6775
6776         * version.c: Changed version to 1.4b16.
6777
6778 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6779
6780         * version.c: Released 1.4b15.
6781
6782         * http.c (http_loop): Print \n after the loop entry, not before.
6783
6784         * url.c (url_filename): Use ISDOT.
6785
6786         * url.h (ISDOT): New macro.
6787
6788         * recur.c (recursive_retrieve): Change only opt.recursive for
6789         following FTP.
6790
6791 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6792
6793         * socks/geturl.cgi: Fixed version No.
6794
6795         * socks/download-netscape.html: Ditto.
6796
6797         * socks/download.html: Changed socks.html to download.html.
6798
6799 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6800
6801         * url.c (url_filename): Check for opt.dirstruct instead for
6802         opt.recursive && opt.dirstruct.
6803
6804         * init.c (defaults): Ditto.
6805         (defaults): Reset dirstruct by default.
6806         (setval): Set opt.dirstruct whenever setting recursive.
6807
6808         * init.h: Removed FORCEDIRHIER.
6809
6810         * INSTALL: Added -L to socks-description.
6811
6812         * version.c: Changed version to 1.4b15.
6813
6814 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6815
6816         * version.c: "Released" 1.4b14.
6817
6818         * geturl.1: Update AUTHOR to include Rosella as contributor.
6819
6820         * NEWS: Update.
6821
6822         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6823
6824         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6825         (cal_time): Fix == to eq.
6826
6827         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6828
6829         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6830
6831         * Makefile.in: Use @VERSION@.
6832
6833         * configure.in: Check version from version.c.
6834
6835         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6836
6837         * socks/download.html: Created from download-netscape.html, made
6838         HTML-2.0 compliant.
6839
6840         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6841         following FTP links from recursions.
6842
6843 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6844
6845         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6846         absolute directories correctly.
6847
6848         * version.c: Changed version to 1.4b14.
6849
6850 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6851
6852         * version.c: "Released" 1.4b13.
6853
6854         * url.c (make_backup): New function.
6855
6856         * http.c (http_loop): Make a backup copy of the local file (using
6857         rename(2)) before opening it.
6858
6859         * main.c (main): Added --backups.
6860
6861         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6862         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6863         (ftp_getaddress): Check for empty, null or (null) domain.
6864
6865         * url.c (get_urls_html): If this_url is NULL, the base must have a
6866         protocol.
6867         (parseurl): Use has_proto.
6868
6869         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6870         retries.
6871
6872         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6873         if it is not already there.
6874         (has_proto): New function.
6875         (get_urls_html): Eliminate the remaining call to findurl -- use
6876         has_proto.
6877
6878         * geturl.1: Ditto.
6879
6880         * main.c: Change -X to -x.
6881
6882         * url.c (url_filename): Simplify creation of filename if
6883         prefix_files is set.
6884         (url_filename): Simplify everything. And I do mean *everything*.
6885         (mkstruct): Add dir_prefix before hostname.
6886         (path_simplify): Fixed a bug that caused writing outside the path
6887         string in case of "." and ".." path strings.
6888
6889 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6890
6891         * init.c: Added --mirror.
6892
6893         * main.c (main): Added -X to force saving of directory hierarchy.
6894
6895         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6896         (ftp_retrieve_list): Check whether quota is exceeded.
6897
6898         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6899
6900         * http.c (gethttp): Use referer if present.
6901
6902         * recur.c (recursive_retrieve): Set u->referer before calling
6903         retrieve_url.
6904
6905         * url.c (newurl): Use memset to nullify the struct members.
6906         (freeurl): Free the referer field too.
6907
6908         * url.h: Added referer to urlinfo.
6909
6910         * geturl.1: Updated the manual to document some of the new features.
6911
6912         * utils.c (numdigit): Moved from url.c.
6913
6914         * README: Rewritten.
6915
6916         * config.h.in: Add the support for socks.
6917
6918         * configure.in: Add the support for socks.
6919
6920         * url.c (url_filename): If the dir_prefix is ".", work with just
6921         the file name.
6922         (url_filename): Do not look for .n extensions if timestamping if
6923         turned on.
6924
6925         * retr.c (show_progress): Skip the over-abundant restval data, and
6926         print the rest of it with ',' instead of '.'.
6927
6928 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6929
6930         * retr.c (show_progress): Changed second arg. to long (as it
6931         should be).
6932         (show_progress): Moved to retr.c.
6933         (get_contents): Moved to retr.c.
6934
6935         * version.c: Change version to 1.4b13.
6936
6937 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6938
6939         * url.c (in_acclist): Would return after the first suffix.
6940
6941 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6942
6943         * version.c: "Released" 1.4b12.
6944
6945         * url.c (path_simplify): More kludgifications.
6946         (get_urls_html): Use new parameters for htmlfindurl.
6947
6948         * html.c: Removed memorizing "parser states", since the new
6949         organization does not require them.
6950
6951         * init.c (run_geturlrc): Use read_whole_line.
6952
6953         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6954
6955         * recur.c (parse_robots): Use read_whole_line.
6956
6957         * utils.c (read_whole_line): New function.
6958
6959         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6960
6961         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6962         tested on OSF and Ultrix.
6963         (add_hlist): New function.
6964         (free_hlist): New function.
6965         (search_host): New function.
6966         (search_address): New function.
6967         (realhost): Use search_host, search_address and add_hlist.
6968         (same_host): Replaced realloc() with strdupdelim(), made
6969         case-insensitive, fixed a memory leak.
6970
6971         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6972         tm_min, like intended.
6973
6974         * version.c: Change user agent information to
6975         Geturl/version.
6976
6977 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6978
6979         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6980
6981         * url.c (acceptable): Always accept directories.
6982
6983         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6984         servers by stripping trailing @ from symlinks and trailing / from
6985         directories.
6986
6987         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6988
6989         * url.c (skip_url): Use toupper instead of UCASE.
6990
6991         * host.c (sufmatch): Made it case-insensitive.
6992
6993         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6994         (match_backwards): New function, instead of
6995         match_backwards_or_pattern.
6996
6997         * recur.c (recursive_retrieve): Increased performance by
6998         introducing inl, which reduces number of calls to in_slist to only
6999         one.
7000
7001         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
7002         routine to use.
7003
7004         * main.c (printhelp): Removed the warranty stuff.
7005
7006 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
7007
7008         * url.c (add_slist): Simplify.
7009         (match_backwards_or_pattern): New function.
7010         (in_acclist): Use match_backwards_or_pattern.
7011         (matches): Remove.
7012
7013 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
7014
7015         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
7016         recursive.
7017
7018         * html.c (ftp_index): Fixed to work. Beautified the output.
7019
7020         * ftp.c (ftp_retrieve_glob): Another argument to control whether
7021         globbing is to be used.
7022         (ftp_retrieve_list): Compare the time-stamps of local and remote
7023         files to determine whether to download.
7024
7025 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
7026
7027         * ftp.c (rel_constr): New function.
7028
7029         * retr.c (retrieve_from_file): Check for text/html before
7030         retrieving recursively.
7031
7032         * main.c (main): Check whether the file is HTML before going into
7033         recursive HTML retrieving.
7034
7035         * ftp.c (ftp_retrieve_list): Manage directories.
7036         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
7037         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
7038         initialized, causing bugchecks in getftp to fail.
7039
7040         * configure.in: Check for symlink.
7041
7042         * ftp.c (ftp_retrieve_list): Added support for symlinks.
7043
7044         * version.c: "Released" 1.4b10.
7045
7046         * atotm.c (atotm): Redeclared as time_t.
7047
7048         * init.c: New variable "timestamping".
7049
7050         * main.c (main): New option 'N'.
7051
7052         * http.c (hgetlocation): Case-insensitive match.
7053         (hgetmodified): New function.
7054         (http_loop): Implement time-stamping.
7055
7056 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
7057
7058         * version.c: Changed version to 1.4b10
7059
7060         * atotm.c: New file, from phttpd.
7061
7062         * options.h (struct options): New parameter timestamping.
7063
7064         * version.c: 1.4b9 "released".
7065
7066         * recur.c (recursive_retrieve): Used linked list (ulist) for
7067         faster storing of URLs.
7068
7069         * url.c (get_urls_html): Removed the old kludge with comparing the
7070         outputs of htmlfindurl and findurl.
7071         (get_urls_html): Added better protocol support here.
7072         (create_hash): Removed, as well as add_hash and in_hash.
7073         (addslist): New function.
7074         (in_slist): ditto
7075
7076         * version.c: Released 1.4b8, changed version to b9.
7077
7078 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7079
7080         * ftp.c (freefileinfo): New function.
7081         (delelement): New function.
7082
7083         * everywhere: GPL!
7084
7085         * ftp.c (ftp_loop): Use ccon.
7086         (ftp_retrieve_glob): Likewise.
7087
7088         * ftp.h: Define ccon, to define status of control connection.
7089
7090         * ftp.c (ftp_get_listing): New function.
7091         (ftp_retrieve_more): New function.
7092         (ftp_retrieve_glob): New function.
7093
7094 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
7095
7096         * configure.in: Removed the search for cuserid().
7097
7098         * init.c (getmode): Renamed to getperms.
7099
7100 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
7101
7102         * version.c: New version.
7103
7104         * main.c (hangup): New function, that handles hangup. Hangup
7105         signal now causes geturl to stop writing on stdout, and to write
7106         to a log file.
7107
7108         * ftp.c (getftp): "Released" 1.4b7.
7109
7110         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
7111         (ftp_index): Use fileinfo/urlinfo.
7112
7113         * ftp-unix.c (ftp_parse_ls): New function.
7114         (symperms): New function.
7115
7116         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
7117
7118         * retr.c (retrieve_url): Added FTP support.
7119
7120 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7121
7122         * geturl.h: Removed NOTFTP2HTML enum.
7123         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
7124
7125         * ftp.c (getftp): Resynched with urlinfo.
7126         (getftp): Removed HMTL-ization of index.html from getftp.
7127
7128         * version.c: 1.4b6 "released".
7129
7130         * options.h (options): New struct, to keep options in.
7131
7132         * http.c (http_loop,gethttp): Synched with proxy.
7133
7134         * retr.c (retrieve_url): Implemented proxy retrieval.
7135
7136         * main.c (main): Use retrieve_from_file.
7137
7138 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
7139
7140         * retr.c (retrieve_from_file): New function.
7141
7142         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
7143         can be found in u->proto.
7144
7145         * ftp.c (ftp_response): Fixed to accept multi-line responses as
7146         per RFC 959.
7147
7148         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
7149
7150         * url.c (mymkdir): Removed the file of the same name, if one
7151         exists.
7152         (isfile): New function.
7153         (mkstruct): Fixed the '/' glitches.
7154         (path_simplify): Hacked to treat something/.. correctly.
7155
7156 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
7157
7158         * http.c (gethttp): Close the socket after error in headers.
7159         (http_loop): HEOF no longer a fatal header.
7160
7161         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
7162         simplifies the syntax of calling retrieve_url.
7163
7164         * recr.c (recursive_retrieve): Modified to use get_urls_html.
7165
7166         * url.c (get_urls_file): New function.
7167         (get_urls_html): New function.
7168
7169         * recr.c (recursive_retrieve): Patched up to conform to the
7170         standards.
7171
7172         * http.c (gethttp): Synched with the rest...
7173         (gethttp): Treat only CONREFUSED specially, with connection
7174         errors.
7175
7176         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
7177
7178 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
7179
7180         * http.c (http_loop): New function.
7181
7182         * loop.c: Removed *lots* of stuff from retrieve_url.
7183
7184         * url.c (parseurl): Changed to work with urlinfo. Integrated
7185         username finding and path parsing.
7186         (newurl): New function.
7187         (freeurl): New function.
7188         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
7189         (url_filename): Likewise.
7190         (path_simplify): Accept relative paths too.
7191         (opt_url): Made urlinfo-compliant, removed bogosities.
7192         (path_simplify): Expanded to accept relative paths.
7193         (str_url): A replacement for hide_url
7194         (decode_string): Fixed a bug that caused malfunctioning when
7195         encountering an illegal %.. combination.
7196         (opt_url): Removed the argument. Dot-optimizations are now default.
7197
7198         * nmalloc.c (strdupdelim): New function.
7199
7200         * url.h: Added the urlinfo structure
7201
7202 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
7203
7204         * url.c (hide_url): Thrown out the protocol assertion. Do not
7205         change the URL if the protocol if not recognized.
7206         (findurl): Put continue instead of break.
7207
7208 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
7209
7210         * sample.geturlrc: Changed the defaults to be commented out and
7211         harmless (previous defaults caused pains if copied to
7212         ~/.geturlrc).
7213
7214         * http.c (gethttp): Print the HTTP request in debug mode.
7215
7216         * connect.c (iread): Added EINTR check loop to select-ing
7217         too. EINTR is now correctly handled with select().
7218
7219         * TODO: new file
7220
7221 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
7222
7223         * host.c (same_host): Made the function a little bit more
7224         intelligent regarding diversified URL syntaxes.
7225
7226         * url.c (skip_url): Spaces are now skipped after URL:
7227
7228         * Released 1.3.1 with the patch to prevent crashing when sending
7229         NULL to robot* functions and the patch to compile "out of the box"
7230         on AIX.
7231
7232         * recr.c (recursive_retrieve): Added checking whether this_url is
7233         NULL when calling the robot functions.
7234
7235         * ChangeLog: New file.