sjero.net Git - wget/blob - src/ChangeLog

   1 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
   2
   3         * html-url.c (tag_handle_meta): Set the Refresh link to expect
   4         HTML.
   5         (append_one_url): Renamed to append_url.
   6
   7 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
   8
   9         * sysdep.h: Only define u_int32_t.
  10
  11 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
  12
  13         * utils.c (large_int_to_string): Use snprintf() to print the
  14         number.  This will work even on systems where libc doesn't
  15         understand %lld, but the compiler does, because it will use our
  16         snprintf replacement.
  17
  18         * init.c (parse_bytes_helper): New function.
  19         (cmd_bytes): Use it to parse bytes, but cast the result to long.
  20         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
  21         for --quota so that --quota=10G works even on machines without
  22         long long.
  23
  24         * options.h (struct options): Declare quota as LARGE_INT.
  25
  26         * retr.c (downloaded_exceeds_quota): Removed.
  27         (downloaded_increase): Ditto.
  28         (total_downloaded_bytes): New variable, replaces opt.downloaded,
  29         which was the wrong place for it anyway.  Updated callers of
  30         downloaded_exceeds_quota and downloaded_increase to check this
  31         variable directly.
  32
  33         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
  34         purpose, defined as `long', `long long' or `double', depending on
  35         size of long and whether long long is available.
  36
  37 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
  38
  39         * sysdep.h: Also check size of short for int32_t.
  40
  41 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
  42
  43         * host.c (lookup_host): Use u_int32_t to store the result of
  44         inet_addr().  That removes the need for offset fiddling, caring
  45         about endian-ness, etc.
  46
  47         * sysdep.h: Define int32_t and u_int32_t if not available.
  48
  49 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
  50
  51         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
  52         getpeername.
  53
  54         * config.h.in: Define socklen_t stub.
  55
  56         * host.c (sockaddr_len): Return socklen_t.
  57
  58         * connect.c (conaddr): Use socklen_t as the third argument to
  59         accept, getsockname, and connect.
  60
  61 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
  62
  63         * recur.c (retrieve_tree): Don't descend into documents that are
  64         not expected to contain HTML, regardless of their content-type.
  65
  66         * html-url.c (tag_url_attributes): Record which attributes are
  67         supposed to yield HTML links that can be followed.
  68         (tag_find_urls): Propagate that information to the caller through
  69         struct urlpos.
  70
  71 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
  72
  73         * hash.c (find_mapping): Return the next available mapping when
  74         the key is not found, not NULL.
  75         (hash_table_put): Use find_mapping to find the storage for the new
  76         data.
  77         (hash_table_put): Grow the table before exceeding maximum
  78         fullness, not afterwards.
  79
  80 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
  81
  82         * hash.c (hash_table_new): Slightly change the meaning of the
  83         first parameter.  Instead of being the minimum initial size, it is
  84         now the minimum number of items that the hash table can take
  85         without needing to resize.
  86
  87 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
  88
  89         * html-url.c (init_interesting): Initialize interesting_tags and
  90         interesting_attributes as hash tables.  This simplifies the code
  91         immensely because hash tables handle allocation and remove
  92         duplicates automatically.
  93         (find_tag): Removed.
  94         (collect_tags_mapper): Instead of calling find_tag, simply get the
  95         entry from interesting_tags hash table, which is both simpler and
  96         faster.
  97
  98 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
  99
 100         * hash.c (hash_table_get): Declare hash-table argument as const.
 101         (find_mapping): Ditto.
 102         (hash_table_get_pair): Ditto.
 103         (hash_table_contains): Ditto.
 104         (hash_table_count): Ditto.
 105
 106 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 107
 108         * html-url.c (get_urls_html): Parse the appropriate flags to
 109         html-parse.c.
 110
 111         * html-parse.c (map_html_tags): Accept FLAGS from the caller
 112         instead of examining OPT.
 113
 114 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 115
 116         * html-url.c (find_tag): Switch to binary search.
 117
 118 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 119
 120         * main.c (print_help): Fix typo; stured -> stored.
 121
 122 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 123
 124         * getopt.c: Add definitions of getopt_long and getopt_long_only.
 125
 126 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 127
 128         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
 129         think, a better name, because it implies that debugging output is
 130         merely possible, not "on by default", as might be construed from
 131         just DEBUG.
 132
 133 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 134
 135         * ftp.c (has_insecure_name_p): Define it here.
 136
 137         * utils.c (has_wildcards_p): Define it here.
 138
 139         * sysdep.h: Declare fnmatch-related macros here, if not using
 140         system fnmatch().  Update .c files to not declare fnmatch.h
 141         directly.
 142
 143         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
 144
 145 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
 146
 147         * getopt.c: Newer version, imported from Free libit.
 148
 149 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
 150
 151         * cookies.c (struct cookie): Remove unused backpointer to cookie
 152         jar.
 153
 154 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
 155
 156         * cmpt.c (memmove): Comment out, since it's no longer used.
 157
 158         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
 159         chains in one pass.
 160         (find_chains_of_host): Assume that the caller has allocated DEST
 161         to be sufficiently large to take all the data.
 162         (eliminate_dups): Run through the array and eliminate dups on the
 163         fly instead of using memmove.
 164         (cookie_jar_process_set_cookie): Free cookie->domain before
 165         re-setting it.
 166
 167 2003-10-05  Gisle Vanem  <giva@bgnett.no>
 168
 169         * mswindows.c (set_sleep_mode): Fix type of
 170         _SetThreadExecutionState.
 171
 172 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
 173
 174         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
 175         to this patch, wget --post-file=nosuchfile dumped core.
 176
 177 2003-10-04  Gisle Vanem  <giva@bgnett.no>
 178
 179         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
 180         for thread termination.
 181
 182 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
 183
 184         * log.c: Use `...' in function definitions; ansi2knr will convert
 185         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
 186         VA_START_2 macros.
 187
 188 2003-10-03  Gisle Vanem  <giva@bgnett.no>
 189
 190         * connect.c: And don't include them here.
 191
 192         * mswindows.h: Include winsock headers here.
 193
 194 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
 195
 196         * html-parse.c (convert_and_copy): Move variable declarations
 197         before statements.
 198
 199 2003-10-02  Gisle Vanem  <giva@bgnett.no>
 200
 201         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
 202         thread via a helper function. Continually query the thread's
 203         exit-code until finished or timed out.
 204
 205 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 206
 207         * wget.h (XMALLOC_ARRAY): Removed.
 208         (ALLOCA_ARRAY): Ditto.
 209
 210         * html-parse.c: Renamed alloca_p to resized.
 211         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
 212         returned it to html-parse.c, since nothing else was using it.
 213
 214 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 215
 216         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
 217         by valgrind.
 218
 219 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 220
 221         * html-parse.c (convert_and_copy): Handle numeric entities in
 222         hexadecimal, &#xHH.
 223         (convert_and_copy): Copy the contents directly to the pool without
 224         a stack-allocated intermediary.
 225
 226 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
 227
 228         * utils.c (alarm_set): New function; use either setitimer or alarm
 229         to set up the alarm.
 230         (alarm_cancel): New function; cancel the alarm set up by
 231         alarm_set.
 232         (run_with_timeout): Use them.
 233
 234 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
 235
 236         * url.c (url_parse): Don't leak memory when a reencoded URL turns
 237         out to be invalid.
 238
 239         * url.c (parse_errors): Mark error messages for translation.
 240         (url_error): Translate error messages returned to the caller.
 241
 242 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
 243
 244         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
 245         the compiler.
 246
 247 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 248
 249         * src/mswindows.c: Added ws_percenttitle() showing progress in the
 250         window titlebar. Called from retr.c. Secured ws_mypath().
 251
 252         * windows/config.h.ms: alloca() prototype not needed.  Removed
 253         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
 254         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
 255         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
 256
 257 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
 258
 259         * ftp.c (getftp): --spider option should now work with FTP
 260         downloads.
 261         (ftp_loop_internal): quiet reports and calculations of downloads
 262         when --spider option set, nor try deleting when --delete-after
 263         also set.
 264         (ftp_loop): --spider will skip HTML-ification of .listing file.
 265
 266 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 267
 268         * mswindows.c (read_registry): Removed.
 269         (set_sleep_mode): New function.
 270         (windows_main_junk): Call it.
 271
 272 2003-09-26  Gisle Vanem  <giva@bgnett.no>
 273
 274         * mswindows.c (read_registry): Fix invocation of registry
 275         functions.
 276
 277         * mswindows.c (read_registry): Condition definitions of sleep and
 278         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
 279         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
 280
 281 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
 282
 283         * url.c (url_escape_1): Revert unintentional change to lowercase
 284         xdigit escapes.
 285         (url_escape_dir): Document that this function depends on the
 286         output of url_escape_1.
 287
 288 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
 289
 290         * progress.c (create_image): Print the current ETA if we're done
 291         with the download.
 292         (create_image): Change '-' display char to '+' in the progress bar.
 293
 294         * Makefile.in (clean): Remove .libs.
 295
 296 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
 297
 298         * cookies.c (struct cookie): New flag domain_exact.
 299         (update_cookie_field): Skip leading dot in domain.
 300         (find_matching_chains): Match numeric addresses exactly; don't
 301         needlessly copy HOST to the stack.
 302         (matching_cookie): Added argument HOST.  If cookie->domain_exact
 303         is set, check that HOST is equal to cookie->domain.
 304         (cookie_jar_load): Only use TAB as delimiter.  Document the
 305         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
 306         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
 307         domain_exact to true if DOMAIN-FLAG is false.
 308         (save_cookies_mapper): If domain_exact is false, prepend the
 309         domain with dot, like Mozilla does.
 310
 311 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 312
 313         * progress.c (create_image): Print the initial part of the
 314         download with '-' characters, analogous to how dot progress prints
 315         the initial part with ','.
 316
 317         * hash.c (ptrhash): New function.
 318         (ptrcmp): Ditto.
 319         (hash_table_new): Default to identity hash table.
 320
 321 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 322
 323         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
 324         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
 325         to unsigned short instead.
 326
 327 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 328
 329         * url.c (path_simplify): Instead of calls to memmove, handle "./"
 330         and "../" by advancing pointers.
 331
 332 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
 333
 334         * retr.c (getproxy): Moved from url.c.
 335
 336         * convert.c: Split off link conversion from url.c into separate
 337         file.  Also included the book-keeping stuff from recur.c.
 338
 339 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 340
 341         * init.c: Improved documentation of functions.
 342         (cmd_boolean): Attempt to make code that tries to avoid calling
 343         strcmp for "speed" a bit more readable.
 344
 345         * init.c (simple_atof): Report error on encountering non-digit,
 346         non-"." character.
 347         (simple_atoi): Replacement for myatoi(), calling interface
 348         compatible with simple_atof.  Updated myatoi's callers.
 349
 350 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
 351
 352         * url.c (path_simplify): Would read two bytes past the end of the
 353         string in the "./" case.
 354
 355 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
 356
 357         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
 358         as what Wget considers "text/html".
 359
 360 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 361
 362         * connect.c (connect_with_timeout): Made timeout type double.
 363
 364         * options.h (struct options): New members read_timeout,
 365         dns_timeout, and connect_timeout.
 366         Use them.
 367
 368 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 369
 370         * init.c (simple_atof): New function.
 371         (cmd_time): Use it.
 372         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
 373         to parse decimals.
 374
 375         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
 376         previous one.
 377
 378 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 379
 380         * main.c (main): Use setoptval() for setting the options.  Use
 381         run_command for `-e'.
 382
 383         * init.c (parse_line): Rewritten to return COMIND right away.
 384         Changed linkage to static.
 385         (run_wgetrc): Use the available comind when calling setval, so it
 386         doesn't have to be computed twice.
 387         (setval_internal): New function, runs the command's action without
 388         any error checking.
 389         (setoptval): New function, does what setval used to do, but exits
 390         in case of error.
 391         (run_command): New function.
 392
 393 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
 394
 395         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
 396         its decimal part.
 397
 398         * retr.c (sleep_between_retrievals): In the random-wait case, use
 399         random_float() to wait between 0 and 2*opt.wait seconds.
 400
 401         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
 402         handle timeout values in (0, 1) range.
 403         (random_float): New function.
 404
 405         * options.h (struct options): Change the types of wait, waitretry,
 406         and timeout to double.
 407
 408         * init.c (cmd_time): Accept floating point time.
 409
 410 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
 411
 412         * retr.c (get_contents): Cosmetic fixes.
 413
 414 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
 415
 416         * url.c (uri_merge): Get rid of uri_merge_1.
 417         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
 418         i.e. don't add an extra slash merely because BASE ends with two
 419         slashes.
 420         (parse_credentials): Renamed from parse_uname.  Rewrittern in
 421         standard [beg, end) calling style.
 422         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
 423         (url_skip_credentials): Include # and ; as terminators.  Old code
 424         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
 425         contain a username.
 426         (url_skip_scheme): Removed because it was unused.
 427         (url_has_scheme): Require "scheme" to be at least one char long.
 428
 429 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 430
 431         * url.c (url_file_name): Expect NULL dir_prefix.
 432
 433         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
 434         WINDOWS.
 435         (defaults): Set dir_prefix to NULL by default.
 436
 437 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 438
 439         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
 440         gcc does.
 441
 442 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 443
 444         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
 445         (ARRAY_SIZE): Renamed to countof.  All callers updated.
 446
 447 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
 448
 449         * main.c (main): New option --strict-comments.
 450
 451         * html-parse.c (find_comment_end): New function: simple BM search
 452         for "-->".
 453         (map_html_tags): Use it if looking at a comment and not in strict
 454         comments mode.
 455
 456 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
 457
 458         * ftp.h: Added OS400 system in enum
 459         * ftp-basic.c: recognize OS400 systems
 460         * ftp.c: don't prepend the CWD if talking to OS400, since it
 461         breaks the change in library
 462
 463 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
 464
 465         * retr.c (get_contents): Pass the correct argument to ssl_iread.
 466
 467 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
 468
 469         * safe-ctype.h: Don't #define ctype.h macros to errors because
 470         that loses when someone #include's ctype.h after safe-ctype.h.
 471
 472 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 473
 474         * url.c: Undef U, W, C after use.
 475
 476 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 477
 478         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
 479         be augmented by ",nocontrol" which means don't escape the control
 480         characters, but otherwise keep OS settings.
 481
 482         * url.c (file_unsafe_char): Deleted.
 483         (append_uri_pathel): Query filechr_table directly.
 484         (filechr_table): Separated Unix, Windows, and control-unsafe
 485         characters.
 486
 487 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
 488
 489         * url.c (url_escape_1): New function.
 490         (url_escape): Use it.
 491         (sync_path): Handle pathological cases where u->file and u->dir
 492         contain really strange characters.
 493         (ENCODE): Deleted.
 494         (REENCODE): Deleted.
 495
 496 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 497
 498         * url.c (url_file_name): Don't reallocate FNAME if the file
 499         doesn't exist, as is usually the case.
 500
 501         * utils.c (unique_name): New flag allow_passthrough.
 502
 503 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 504
 505         * utils.c (wtimer_sys_diff): Convert the time difference to signed
 506         __int64, then to double.  This works around MS VC++ 6 which can't
 507         convert unsigned __int64 to double directly.
 508
 509 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 510
 511         * Makefile.in (clean): Also remove the core.<number> files
 512         produced by recent Linux systems.
 513
 514 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
 515
 516         * http.c (post_file): Don't pad the file if it's not large
 517         enough.  Bail out instead.
 518
 519 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 520
 521         * retr.c (get_contents): Reduce the buffer size to the amount of
 522         data that may pass through for one second.  This prevents long
 523         sleeps when limiting bandwidth.
 524
 525         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
 526         bandwidth limitation to small values is requested.
 527
 528 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 529
 530         * progress.c (update_speed_ring): Moved the speed ring update to a
 531         separate function and documented it better.
 532
 533         * progress.c: Use `double' for most timers to support granularity
 534         smaller than 1ms.
 535
 536 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 537
 538         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
 539         string.
 540         (XDIGIT_TO_xchar): Ditto.
 541
 542 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 543
 544         * utils.c: Change the type of timer-related functions from long to
 545         double, for better precision.  On machines supporting gettimeofday
 546         the timers now work with granularity of less than one millisecond.
 547
 548 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 549
 550         * cookies.c (parse_set_cookies): Fixed the parser to handle more
 551         edge conditions.
 552         (test_cookies): New function, contains a test suite for
 553         parse_set_cookies.
 554
 555 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 556
 557         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
 558
 559 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
 560
 561         * cookies.c (parse_set_cookies): Allow trailing space in
 562         set-cookies header.  Also, allow any amount of whitespace, not
 563         only one character.  Allow empty set-cookies header without
 564         spewing an error.
 565
 566 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
 567
 568         * url.c (append_uri_pathel): Use opt.restrict_file_names when
 569         calling file_unsafe_char.
 570
 571         * init.c: New command restrict_file_names.
 572
 573         * main.c (main): New option --restrict-file-names[=windows,unix].
 574
 575         * url.c (url_file_name): Renamed from url_filename.
 576         (url_file_name): Add directory and hostdir prefix here, not in
 577         mkstruct.
 578         (append_dir_structure): New function, does part of the work that
 579         used to be in mkstruct.  Iterates over path elements in u->path,
 580         calling append_uri_pathel on each one to append it to the file
 581         name.
 582         (append_uri_pathel): URL-unescape a path element and reencode it
 583         with a different set of rules, more appropriate for handling of
 584         files.
 585         (file_unsafe_char): New function, uses a lookup table to decide
 586         whether a character should be escaped for use in file name.
 587         (append_string): New utility function.
 588         (append_char): Ditto.
 589         (file_unsafe_char): New argument restrict_for_windows, decide
 590         whether Windows file names should be escaped in run-time.
 591
 592         * connect.c: Include <stdlib.h> to get prototype for abort().
 593
 594 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
 595
 596         * utils.c (wtimer_sys_set): Extracted the code that sets the
 597         current time here.
 598         (wtimer_reset): Call it.
 599         (wtimer_sys_diff): Extracted the code that calculates the
 600         difference between two system times here.
 601         (wtimer_elapsed): Call it.
 602         (wtimer_elapsed): Don't return a value smaller than the previous
 603         one, which could previously happen when system time is set back.
 604         Instead, reset start time to current time and note the elapsed
 605         offset for future calculations.  The returned times are now
 606         guaranteed to be monotonically nondecreasing.
 607
 608 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 609
 610         * host.c (lookup_host): Print the result of the DNS lookup.
 611
 612 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 613
 614         * init.c (cmd_boolean): Accept yes/no along with on/off.
 615         (cmd_lockable_boolean): Ditto.
 616
 617 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
 618
 619         * init.c: New command dns_cache.
 620
 621         * main.c (main): New option --dns-cache[=off].
 622
 623 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 624
 625         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
 626
 627         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
 628         HAVE_GETADDRINFO for getaddrinfo-related stuff.
 629
 630 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
 631
 632         * url.c (url_parse): Return an error if the URL contains a [...]
 633         IPv6 numeric address and we don't support IPv6.
 634
 635 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
 636
 637         * url.c (is_valid_ipv6_address): Modified to not require
 638         zero-terminated strings.
 639         (is_valid_ipv4_address): Ditto.
 640
 641 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
 642
 643         src/url.c: added RFC 2732 compliance for URL parsing. The
 644         functions is_*_address valid are a modified version of
 645         glibc 2.3.2 inet_pton's code.
 646
 647 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
 648
 649         * main.c init.c options.h: Added --retry-connrefused option so
 650         that Connection Refused failures are treated as non-fatal (when
 651         trying to retrieve from busy servers).
 652
 653         * wget.h: New CONNECT_ERROR macro for encapsulating this
 654         modification.
 655
 656         * ftp.c http.c : Use CONNECT_ERROR macro in places where
 657         ECONNREFUSED was checked.
 658
 659 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
 660
 661         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
 662         by calling new function has_insecure_name_p.  This is based on a
 663         patch by Red Hat.
 664
 665         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
 666         if filename starts with `/' or contains `../' and is therefore
 667         considered insecure.
 668
 669         * fnmatch.h: Declare has_insecure_name_p().
 670
 671 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
 672
 673         * init.c (cmd_file): Allocate RESULT correctly.
 674
 675 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
 676
 677         * recur.c (retrieve_tree): Check whether downloaded_html_set is
 678         non-NULL before using it.
 679
 680 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
 681
 682         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
 683
 684 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
 685
 686         * progress.c (bar_set_params): Fall back to dot progress if the
 687         terminal type is "emacs".
 688
 689 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 690
 691         * log.c: Don't #undef WGET_USE_STDARG.
 692
 693 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 694
 695         * hash.c (prime_size): Store the offset of the prime number in the
 696         prime table.  When searching, start with the given offset.
 697         (hash_table_new): Pass the pointer to ht->prime_offset to
 698         prime_size.
 699         (grow_hash_table): Ditto.
 700         (prime_size): Make 13 the first prime to make empty hash tables
 701         slightly smaller.
 702
 703 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 704
 705         * recur.c (download_child_p): Minor optimization to avoid an
 706         unnecessary additional call to schemes_are_similar_p function.
 707
 708 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
 709
 710         * url.c (schemes_are_similar_p): New function to test enumerated
 711         scheme codes for similarity.
 712
 713         * url.h: Declare it.
 714
 715         * recur.c (download_child_p): Use it to compare schemes.  This
 716         also fixes a bug that allows hosts to be spanned (without the
 717         -H option) when the parent scheme is https and the child's is
 718         http or vice versa.
 719
 720 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
 721
 722         * ftp.c (getftp): Don't ftruncate stdout.
 723
 724         * http.c (gethttp): Don't ftruncate stdout.
 725
 726 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
 727
 728         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
 729         (get_number): Ditto.
 730         (get_alt_number): Ditto.
 731         (__isleap): New function-like macro used by strptime.
 732         (day_of_the_week): New function used by strptime.
 733         (day_of_the_year): Ditto.
 734         (__mon_yday): Now shared by mktime and strptime implementations.
 735
 736 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 737
 738         * cookies.c (check_domain_match): Use match_tail in case
 739         insensitive mode.
 740
 741         * utils.c (match_tail): Allow the caller to specify case
 742         insensitive mode.
 743
 744         * cookies.c (store_cookie): When expiry_time is 0, print it as
 745         undefined, not indefinite.
 746
 747 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
 748
 749         * cookies.c (cookie_jar_process_set_cookie): Do not store
 750         discarded cookie.
 751
 752 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 753
 754         * cookies.c (check_domain_match): Allow cookies to be set for
 755         subdomains of unknown top-level domains under some circumstances.
 756
 757 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 758
 759         * gen_ssl.c:
 760         - allow checking of server cert
 761         - allow defining client cert type
 762         - allow limit of ssl protocol
 763         - check more return values
 764         - added debug message on break
 765
 766 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 767
 768         * recur.c (download_child_p): Revert order of items in check
 769         number 6 for clarity.
 770
 771 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 772
 773         * init.c: Ditto.
 774
 775         * main.c: Ditto.
 776
 777         * http.c: Use the new interface.
 778
 779         * cookies.c: Provide an OO-style "cookie jar" interface to enable
 780         separate cookie jars.
 781
 782         * http.c (http_atotm): Declare argument as const.
 783
 784 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 785
 786         * cookies.c (cookie_new): Default to PORT_ANY.
 787         (find_cookie_chain_exact): Only search by DOMAIN.
 788         (find_matching_cookie): Also check that PORT matches.
 789         (store_cookie): Only match the domain.
 790         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
 791         is valid for that host rather than discarding it completely.
 792         (find_matching_chains): Don't search by PORT.
 793         (matching_cookie): Also match PORT.
 794         (load_cookies): Set the port if specified, otherwise leave it as
 795         ANY.
 796         (save_cookies_mapper): Save the port if specified, otherwise leave
 797         it empty.
 798
 799 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
 800
 801         * init.c: The option `egdfile' was not in sort order.
 802
 803 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 804
 805         * ftp.c (getftp): Treat directories that begin with <letter>: as
 806         absolute.
 807         (getftp): Strip trailing slashes from con->id before merging it
 808         with TARGET.
 809
 810 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 811
 812         * http.c (gethttp): If Content-Type is not given, assume
 813         text/html.
 814
 815 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 816
 817         * recur.c (download_child_p): Don't ignore rejection of HTML
 818         documents that are themselves leaves of recursion.
 819
 820 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 821
 822         Makefile.in: Updated several dependencies for object files to take
 823         account of nested include files.
 824
 825 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 826
 827         Makefile.in: The target `connect$o' (connect.o) now depends on
 828         `utils.h'
 829
 830 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
 831
 832         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
 833         (gethostbyname_with_timeout): Use it.
 834
 835         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
 836         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
 837
 838 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 839
 840         * host.c (getaddrinfo_with_timeout): New function.
 841         (gethostbyname_with_timeout): Ditto.
 842         (lookup_host): Use them.
 843
 844 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 845
 846         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
 847
 848 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 849
 850         * init.c (comind): Use a marginally faster implementation of
 851         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
 852         nanosecond earned."
 853
 854 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 855
 856         * main.c (print_help): Document `--post-data' and `--post-file'.
 857
 858 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 859
 860         * http.c (gethttp): Ditto.
 861
 862         * retr.c (retrieve_url): Initialize variables to appease the
 863         compiler.
 864
 865         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
 866         select_fd.
 867         (ssl_iwrite): Ditto.
 868
 869         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
 870         ETIMEDOUT in case of timeout.
 871         (iread): No need to handle EINTR when calling select_fd.
 872         (iwrite): Ditto.
 873
 874 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 875
 876         * retr.c (retrieve_url): Make sure that POST is not honored for
 877         redirections.
 878
 879         * http.c (gethttp): Send the POST data when requested.
 880         (post_file): New function.
 881         (gethttp): Use it.
 882
 883         * main.c (main): Ditto.
 884
 885         * init.c: Add new options.
 886
 887         * options.h (struct options): New options post_data and
 888         post_file_name.
 889
 890 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
 891
 892         * connect.c (connect_with_timeout): Firing SIGALRM can result in
 893         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
 894
 895 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 896
 897         * connect.c (connect_with_timeout): Use it.
 898
 899         * utils.c (run_with_timeout): New function.
 900
 901 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 902
 903         * url.c (getproxy): Accept a struct url argument.  This obviates
 904         the need for USE_PROXY_P.
 905
 906         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
 907
 908         * ftp.c (getftp): Recognize FWTK-style proxy.
 909
 910 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 911
 912         * config.h.in: Only define _VA_LIST when compiled with gcc.
 913
 914 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
 915
 916         * http.c (http_loop): Compensate for MS Windows two-second
 917         granularity of file modification time when comparing timestamps.
 918
 919         * ftp.c (ftp_retrieve_list): Ditto.
 920
 921 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 922
 923         * utils.c (has_html_suffix_p): New function to test filename for
 924         common html extensions.
 925
 926         * utils.h: Declare it.
 927
 928         * http.c (http_loop): Use it instead of previous test.
 929
 930         * retr.c (retrieve_url): Ditto.
 931
 932         * recur.c (download_child_p): Ditto.
 933
 934 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 935
 936         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
 937         declaring va_list.
 938         From Kevin Rodgers <kevinr@ihs.com>.
 939
 940 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
 941
 942         * Makefile.in: Specify libtool mode explicitly when linking.
 943
 944 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 945
 946         * connect.c (connect_with_timeout): New function.
 947         (connect_to_one): Use it.
 948
 949         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
 950         HAVE_SETJMP_H.
 951
 952 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 953
 954         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
 955         is present.
 956
 957 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 958
 959         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
 960         TOTAL.
 961         (bar_finish): Likewise.
 962
 963 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 964
 965         * html-url.c (tag_handle_form): New function.  Pick up form
 966         actions and mark them for conversion only.
 967
 968 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 969
 970         * progress.c (struct progress_implementation): Use PARAMS when
 971         declaring the parameters of *create, *update, *finish, and
 972         *set_params.
 973
 974         * netrc.c: Ditto.
 975
 976         * http.c: Reformat some function definitions so that ansi2knr can
 977         read them.
 978
 979         * hash.c (struct hash_table): Use the PARAMS macro around
 980         parameters in the declaration of hash_function and test_function.
 981         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
 982         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
 983         that pre-ANSI compilers can read them.
 984         (find_mapping): Use PARAMS when declaring EQUALS.
 985         (hash_table_put): Ditto.
 986
 987         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
 988
 989         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
 990         which was unsupported by pre-ANSI compilers.
 991
 992         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
 993
 994 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 995
 996         * url.c (url_filename): Use compose_file_name regardless of
 997         whether opt.dirstruct is set.
 998         (mkstruct): Don't handle the query and the reencoding of DIR; that
 999         is done in compose_file_name.
1000
1001 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1002
1003         * wget.h: Ditto for extern char *exec_name.
1004
1005         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
1006         perfectly legal to follow an `extern' with a non-`extern' ones,
1007         provided the types match.
1008
1009         * main.c: Don't define OPTIONS_DEFINED_HERE.
1010
1011 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1012
1013         * progress.c (create_image): Revert to calculating ETA based on
1014         average download speed.
1015         (create_image): Don't print ETA until the download has been active
1016         for at least 3 seconds.
1017         (create_image): When ETA is not available, don't print anything.
1018         The previous version would print --:--.
1019
1020 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1021
1022         * progress.c (bar_update): Keep updating a subinterval until it
1023         reaches or exceeds a watermark.  That way the measurement will be
1024         guaranteed to span a configurable minimum of time.  The current
1025         default is 3s in 30 100ms intervals.
1026
1027 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1028
1029         * progress.c (bar_update): Maintain an array of the time it took
1030         to perform previous 30 network reads.
1031         (create_image): Calculate the download speed and ETA based on the
1032         last 30 reads, not the entire download.
1033         (create_image): Make sure that the ETA is not changed more than
1034         once per second.
1035
1036 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
1037
1038         * mswindows.c (borland_utime): New function conditionally defined
1039         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
1040         `utime()' as Borland's `utime()' function is broken on Windows 9x
1041         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
1042
1043 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1044
1045         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
1046
1047 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
1048
1049         * Makefile.in: Updated several dependencies for object files.
1050
1051 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
1052
1053         * mswindows.c: Include "utils.h".
1054
1055 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
1056
1057         * host.h: Don't include netdb.h on windows.
1058
1059 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1060
1061         * recur.c (retrieve_tree): Handle the case when start_url doesn't
1062         parse.
1063
1064 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
1065
1066         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
1067         calling xmalloc and memcpy.
1068
1069 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1070
1071         * host.h: Include Unix-specific includes #ifndef WINDOWS.
1072         Patch originally provided by Christian Lackas.
1073
1074 2002-02-11  Christian Lackas  <delta@lackas.net>
1075
1076         * recur.c: recurive downloading for https fixed.
1077
1078 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
1079
1080         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
1081
1082         * ftp-basic.c: Also include <netinet/in.h>.
1083
1084 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
1085
1086         * http.c (gethttp): when -c used, mark already fully retrieved
1087         file as successfully retrieved.
1088
1089 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1090
1091         * url.c (url_parse): Don't treat '?' as query string separator
1092         when parsing FTP URLs.
1093
1094 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1095
1096         * html-url.c (tag_handle_meta): Don't crash on <meta
1097         http-equiv=refresh> where content is missing.
1098
1099 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
1100
1101         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
1102         netdb.h on windows.
1103
1104 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1105
1106         * retr.c (retrieve_url): Remove redirection cycle detection.  This
1107         is because some sites legitimately redirect the user back to the
1108         same location, e.g. after an authorization check performed by
1109         another page.  MAX_REDIRECTIONS is still used to prevent infinite
1110         redirection loops.
1111
1112 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1113
1114         * http.c (gethttp): Wrap host name in square brackets if it
1115         contains a colon.
1116
1117 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1118
1119         * url.c (url_parse): Allow all hex digits, not only decimal ones,
1120         to form an IP address.
1121
1122 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1123
1124         * url.c (urlchr_table): Make square braces reserved, so we can
1125         parse http://[::1]/.
1126         (url_parse): Handle host in braces.
1127         (url_string): If url->host contains colons, wrap it in braces.
1128
1129 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1130
1131         * connect.c (resolve_bind_address): New function.
1132         (connect_to_one): Use it.
1133         (bindport): Ditto.
1134
1135         * init.c: Don't resolve bind-address here.
1136
1137         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
1138
1139 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1140
1141         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
1142         offset.
1143         (address_list_new): Use map_ipv4_to_ip.
1144         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
1145         in IPv4 context.
1146
1147 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1148
1149         * source: Integrated IPv6 support.
1150         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
1151
1152 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
1153
1154         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
1155         (cmd_directory): New function. Like cmd_file(), but strips
1156         trailing directory separators.
1157         (commands): Change action for "dirprefix" from `cmd_file' to
1158         `cmd_directory'.
1159
1160         * utils.c (make_directory): Allow intermediate `mkdir' calls to
1161         fail, as not all path components that do not exist should be
1162         directory components, especially under Windows.
1163
1164 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1165
1166         * netrc.c (parse_netrc): Skip leading whitespace before testing
1167         whether the line is empty.  Empty lines still contain the line
1168         terminator.
1169
1170 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1171
1172         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
1173         only if no data is pending in SSL buffers.
1174         From tony@bluetail.com.
1175
1176 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1177
1178         * headers.c (header_get): Strip trailing whitespace from the
1179         header.
1180
1181 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1182
1183         * url.c (parse_uname): URL-decode *USER and *PASSWD.
1184
1185 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
1186
1187         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
1188         starts with "//").
1189
1190 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1191
1192         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
1193         error.
1194
1195 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1196
1197         * version.c: Wget 1.8.1 is released.
1198
1199 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1200
1201         * version.c: Wget 1.8.1-pre3 is released.
1202
1203 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1204
1205         * recur.c (retrieve_tree): Enqueue the canonical representation of
1206         start_url, so that the test against dl_url_file_map works.
1207
1208 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1209
1210         * log.c (logputs): Check for requested verbosity before printing
1211         anything.
1212
1213 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1214
1215         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
1216         inline.
1217
1218 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1219
1220         * recur.c (retrieve_tree): Make a copy of file obtained from
1221         dl_url_file_map because the code calls xfree(file) later.
1222
1223 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1224
1225         * recur.c (register_html): Maintain a hash table of HTML files
1226         along with the list.  Disallow duplicates.
1227         (retrieve_tree): Use downloaded_html_set to check whether the file
1228         found in dl_url_file_map is an HTML file, and descend into it if
1229         so.
1230         (convert_all_links): Don't guard against duplicates in
1231         downloaded_html_list, since they are no longer possible.
1232
1233 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
1234
1235         * recur.c (retrieve_tree): Pass on referring URL when retrieving
1236         recursed URL.
1237
1238 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1239
1240         * version.c: Wget 1.8.1-pre2 is released.
1241
1242 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1243
1244         * retr.c (sleep_between_retrievals): Simplify indentation.
1245
1246 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1247
1248         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
1249         of "randomness" at a time.
1250         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
1251
1252         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
1253         random amount averages in opt.wait.
1254         (sleep_between_retrievals): Don't seed the PRNG; random_number
1255         will do that.
1256
1257         * utils.c (random_number): New function.
1258
1259 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1260
1261         * url.c (path_simplify): Move here from utils.c, and make static.
1262
1263 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1264
1265         * init.c (wgetrc_file_name): Print correct message when loading
1266         getenv("WGETRC") fails.
1267
1268 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1269
1270         * recur.c (register_download): Don't abort when one URL references
1271         two different files.
1272
1273 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1274
1275         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
1276         calling ssl_iwrite.
1277
1278 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1279
1280         * version.c: Wget 1.8.1-pre1 is released.
1281
1282 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1283
1284         * res.c (matches): Fix broken URL in the docstring.
1285
1286 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1287
1288         * html-url.c (tag_url_attributes): Mark <embed href=...> as
1289         external.
1290
1291 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1292
1293         * url.c (get_urls_file): Cosmetic changes.
1294
1295 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1296
1297         * html-url.c (append_one_url): Resurrect warning when unable to
1298         resolve a relative link.
1299
1300 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1301
1302         * html-url.c (collect_tags_mapper): Break into several functions.
1303         (tag_url_attributes): Collect <embed href=...>.
1304
1305 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1306
1307         * host.c: New type ipv4_address.  Use it consistently instead of
1308         `unsigned char[4]' and `unsigned char *'.
1309         (pretty_print_address): Accept a `const void *', to require even
1310         less casting.
1311
1312 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1313
1314         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
1315
1316 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1317
1318         * main.c (main): Initialize progress after fork_to_background, so
1319         that it knows when to use dots.
1320
1321         * mswindows.c (ws_hangup): Call log_request_redirect_output.
1322
1323         * utils.c (fork_to_background): Print the PID of the child
1324         process.
1325
1326         * log.c (log_request_redirect_output): Set a flag that output
1327         redirection has been requested.  Doing anything else in a signal
1328         handler is unsafe.
1329         (check_redirect_output): New function: check whether redirection
1330         has been requested and, if so, call redirect_output().
1331         (logputs): Call check_redirect_output.
1332         (logprintf): Ditto.
1333         (debug_logprintf): Ditto.
1334         (redirect_output): Print clearer messages.
1335
1336         * main.c (redirect_output_signal): Don't call
1337         redirect_output_signal directly.  Instead, call
1338         log_request_redirect_output.
1339
1340         * utils.c (memfatal): Ditto.
1341
1342         * progress.c (display_image): Use it.
1343
1344         * log.c (log_set_save_context): New function: allow the caller to
1345         turn off saving log context lines.
1346
1347 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1348
1349         * host.c (address_list_set_faulty): Uncomment a sanity check.
1350
1351 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1352
1353         * utils.c (long_to_string): Return a pointer after where the
1354         number ends.
1355         (long_to_string): Rename to number_to_string.
1356
1357 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1358
1359         * utils.c (path_simplify): Correctly handle the unlikely case that
1360         b starts out as path + 1.
1361
1362 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1363
1364         * utils.c (path_simplify): Rewrite, with better comments, and
1365         without the use of strcpy to move overlapping blocks.
1366
1367 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1368
1369         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
1370         valid progress type before setting it.
1371
1372 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1373
1374         * main.c (main): Remove stray debugging message.
1375
1376 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1377
1378         * progress.c (create_image): Fix ETA padding when hours are prined.
1379
1380 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1381
1382         * version.c: Wget 1.8 is released.
1383
1384 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1385
1386         * url.c (reencode_string): Declare static.
1387
1388         * res.c (registered_specs): Declare static.
1389
1390         * progress.c (current_impl_locked): Declare static.
1391
1392         * log.c (flush_log_p): Declare static.
1393         (needs_flushing): Ditto.
1394
1395         * http.c (digest_authentication_encode): Declare static.
1396
1397         * html-url.c (init_interesting): Declare static.
1398
1399         * host.c (host_name_addresses_map): Declare static.
1400
1401         * cookies.c (find_matching_chains): Declare static.
1402
1403         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
1404         indicated by lint.
1405
1406         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
1407
1408         * host.c (address_list_set_faulty): Document that INDEX is
1409         currently unused.
1410
1411         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
1412
1413 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1414
1415         * version.c: Wget 1.8-pre2 is released.
1416
1417 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1418
1419         * progress.c (progress_handle_sigwinch): Set up the signal again.
1420
1421         * utils.c: Include <sys/termios.h>, where Solaris defines
1422         TIOCGWINSZ.
1423
1424         * progress.c (bar_create): Don't use the last column on the screen.
1425         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
1426         only until it exceeded them.
1427
1428 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1429
1430         * version.c: Wget 1.8-pre1 is released.
1431
1432 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1433
1434         * progress.c (progress_create): Make sure that, when the output is
1435         redirected, the progress implementation gets changed to the
1436         fallback one.
1437         (bar_set_params): Set current_impl_locked to 1 when "force" is
1438         specified.
1439         (progress_create): Don't change the progress implementation if
1440         current_impl_locked is non-zero.
1441
1442         * main.c (redirect_output_signal): Call
1443         progress_schedule_redirect.
1444
1445         * progress.c (progress_schedule_redirect): New function.
1446
1447 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1448
1449         * log.c (logvprintf): Restructure to allow being called multiple
1450         times.
1451         (logprintf): Call logvprintf in a loop.
1452         (debug_logprintf): Ditto.
1453
1454 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1455
1456         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
1457         setting egd_file it to empty string.
1458
1459         * main.c (main): Change the option name from --sslegdsock to
1460         --egd-file.
1461
1462 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1463
1464         * gen_sslfunc.c (ssl_init_prng): Make the printed message
1465         translatable.
1466
1467 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1468
1469         * url.c (scheme_disable): New function.
1470
1471         * main.c (main): Call ssl_init_prng from here rather than from
1472         init_ssl, so that it has a chance to disable support for https
1473         before a URL has been resolved.
1474
1475         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
1476         failed.
1477         (ssl_init_prng): Disable support for https if seeding the PRNG
1478         fails.
1479
1480 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1481
1482         * utils.c (read_whole_line): Handle lines beginning with \0.
1483
1484 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1485
1486         * recur.c (convert_all_links): Guard against duplicates in
1487         downloaded_html_files.
1488         (register_download): Don't invalidate similar-looking URLs.
1489         (match_except_index): New function.
1490
1491 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1492
1493         * utils.c (path_simplify): Document with test cases.
1494
1495 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1496
1497         * gen_sslfunc.c: Ditto.
1498
1499         * rbuf.c: Include <string.h>.
1500
1501 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1502
1503         * recur.c (retrieve_tree): Check whether the URL was already
1504         downloaded before downloading it again.
1505         (descend_child_p): Renamed to download_child_p.
1506         (register_download): When one URL is downloaded to a file already
1507         "owned" by another URL, delete all references that map any URL to
1508         that file.
1509         (register_delete_file): New function.
1510         (retrieve_tree): Use it after deleting a file.
1511
1512         * url.c (url_parse): Re-canonicalize the URL also if the path is
1513         empty, so that e.g. "http://www.server.com" ->
1514         "http://www.server.com/".
1515         (lowercase_str): Use ISUPPER instead of !ISLOWER.
1516
1517         * retr.c (retrieve_url): Use the canonical URL form when calling
1518         register_download().
1519
1520 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
1521
1522         * snprintf.c (dopr): Use `unsigned int' as the second argument to
1523         va_arg when casting to `unsigned short' is intended.
1524
1525 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
1526
1527         * gen_sslfunc.c: on windows provide ssl crypto random
1528           initialization through RAND_screen(); could possibly
1529           be not enough for strong ssl communication (see the
1530           relevant manual page from the openssl package).
1531
1532 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1533
1534         * url.c (local_quote_string): Reenable quoting of question marks,
1535         but only when `--html-extension' is used.
1536
1537 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1538
1539         * version.c: Wget 1.8-beta3 is released.
1540
1541 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1542
1543         * snprintf.c (dopr): Cast the result of va_arg to short int and
1544         short unsigned int where these types are expected to be used.
1545
1546 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1547
1548         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
1549         with `int' when using it as the second argument to `va_arg'.
1550
1551 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1552
1553         * host.c (address_list_new_one): New function.
1554         (lookup_host): Use it.
1555
1556 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
1557
1558         * host.c (lookup_host): Don't initialize TMPSTORE directly because
1559         it's not legal C.
1560
1561 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1562
1563         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
1564         the socket data.
1565
1566         * ftp.c: Ditto.
1567
1568         * http.c: No need to declare h_errno.
1569
1570         * host.c: Declare h_errno.
1571
1572 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1573
1574         * utils.c (file_merge): If BASE doesn't contain a slash, just
1575         return a copy of FILE.
1576
1577 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1578
1579         * version.c: Wget 1.8-beta2 is released.
1580
1581 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1582
1583         * ftp.c (getftp): When PWD fails, assume "/".
1584
1585         * ftp-basic.c (ftp_syst): Fix indentation.
1586
1587 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1588
1589         * url.c (get_urls_file): If opt.base_href is specified, merge each
1590         URL with the base.
1591
1592 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1593
1594         * main.c (print_help): Don't document the removed `-nh'.
1595
1596 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1597
1598         * url.c (url_full_path): Document better.
1599
1600         * http.c (gethttp): Use the full path when creating digest
1601         authorization.
1602
1603 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1604
1605         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
1606         '/'.
1607
1608 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1609
1610         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
1611         PREFIX does.
1612
1613 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1614
1615         * cookies.c (check_domain_match): Reimplement to match Netscape's
1616         "preliminary specification" for cookies.
1617
1618 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1619
1620         * url.c (replace_attr_refresh_hack): New function.
1621         (convert_links): Call replace_attr_refresh_hack for Refresh
1622         links.  It will add the "TMOUT; URL=" junk before the link.
1623
1624         * html-url.c (collect_tags_mapper): Set ID to the ID of the
1625         "content" attribute, not "http-equiv".
1626         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
1627         instead, store the information that this entry belongs to a
1628         "refresh" link.
1629
1630 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1631
1632         * version.c: Wget 1.8-beta1 is released.
1633
1634 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1635
1636         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
1637         depth by more than one.
1638
1639 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1640
1641         * retr.c (retrieve_url): Don't allow more than 20 redirections.
1642
1643 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1644
1645         * recur.c (retrieve_tree): Skip the non-inline entries when
1646         enqueuing the children of a leaf HTML node in -p mode.
1647         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
1648         "inline".
1649
1650         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
1651         (collect_tags_mapper): When an entry is "inline", mark it as such.
1652
1653         * recur.c (descend_url_p): Fix test when checking for
1654         acceptance/rejection rules.
1655
1656 2001-10-31 Daniel BODEA <dali@dali-designs.com>
1657
1658         * netrc.c (search_netrc): When slack_default is 0, still look for
1659         an account with matching password, just not the "default account".
1660         HTTP Authorization using .netrc should now work as expected.
1661
1662 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
1663
1664         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
1665         test_socket_open fails.
1666
1667 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1668
1669         * progress.c (display_image): Just print one CR to reset the
1670         cursor position.
1671
1672 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
1673
1674         * init.c: New command `ssl_egd_sock'.
1675
1676         * main.c (main): New option `--sslegdsock'.
1677
1678         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
1679
1680 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1681
1682         * cmpt.c (memmove): Include a simple memmove implementation.
1683
1684 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1685
1686         * headers: Guard against header files being included twice.
1687
1688 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1689
1690         * gen-md5.c: Use unsigned char * as the buffer argument to
1691         gen_md5_update.
1692
1693 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1694
1695         * connect.h: Declare select_fd.
1696
1697 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1698
1699         * recur.c (descend_url_p): When resolving no_parent, compare with
1700         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
1701         wouldn't be followed, although the download started from /a/.
1702
1703 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1704
1705         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
1706         MS VC; somebody with Borland compiler please check and provide
1707         patch if possible;
1708
1709         * cmpt.c: provided a usleep emulation.
1710
1711 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1712
1713         * host.c (address_list_new): Initialize al->faulty.
1714
1715 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1716
1717         * http.c (http_process_range): Accept the broken output of
1718         "JavaWebServer/1.1.1".
1719
1720 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1721
1722         * progress.c (dot_set_params): If PARAMS is unspecified, use
1723         dot_style, if available.
1724
1725         * init.c: Ditto.
1726
1727         * main.c (main): Resurect --dot-style.
1728
1729         * progress.c (dot_finish): Print the quantity if we're left at the
1730         beginning of a row.
1731
1732 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1733
1734         * cmpt.c (random): Removed.
1735
1736         * retr.c (sleep_between_retrievals): Use the more portable rand()
1737         instead of random().
1738
1739 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1740
1741         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1742         prevent seg fault.
1743
1744 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1745
1746         * connect.c (connect_to_many): Use address_list_set_faulty to
1747         prevent the faulty address from being reused.
1748
1749         * host.c (address_list_set_faulty): New function.
1750         (address_list_get_bounds): New function, instead of
1751         address_list_count.
1752
1753 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1754
1755         * url.c (convert_links): Don't translate %d-%d.
1756
1757         * main.c (print_help): Remove stray HAVE_RANDOM code.
1758
1759 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1760
1761         * ftp.c (getftp): Improve output after sending PASV.  Don't
1762         attempt to "look up" the IP address we already know; call
1763         connect_to_one directly.
1764
1765 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1766
1767         * progress.c: Change the default progress implementation to "bar".
1768
1769 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1770
1771         * progress.c (bar_create): Print two newlines.
1772
1773 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1774
1775         * cmpt.c (random): New function, a simple-minded replacement for
1776         random() on systems that don't have it.
1777
1778 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1779
1780         * config.h.in: Put a HAVE_USLEEP stub.
1781
1782         * cmpt.c (usleep): Replacement implementation of usleep using
1783         select.
1784
1785         * init.c: New option init_rate.
1786
1787         * main.c (main): New option --limit-rate.
1788
1789         * retr.c (limit_bandwidth): New function.
1790         (get_contents): Call it to limit the bandwidth used when
1791         downloading.
1792
1793         * progress.c (dot_update): Would print the wrong download speed on
1794         rows other than the first one when the download was continued.
1795         (dot_finish): Ditto.
1796
1797 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1798
1799         * http.c (gethttp): fix undeclared variable 'err' when compiled
1800         with HAVE_SSL.
1801
1802 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1803
1804         * progress.c: Don't allocate new timers; use the timing data
1805         propagated from the caller.
1806
1807         * retr.c (get_contents): Allocate and use a timer.
1808
1809 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1810
1811         * http.c (last_host_ip): Made into an address_list.
1812         (invalidate_persistent): Release pc_last_host_ip.
1813         (register_persistent): Use lookup_host.
1814         (persistent_available_p): Check for equality of hosts using
1815         address_list_match_all.  Call address_list_release.
1816         (http_cleanup): New function.
1817
1818         * ftp.c (getftp): Use lookup_host and connect_to_many.
1819
1820         * http.c (gethttp): Use lookup_host and connect_to_many.
1821
1822         * connect.c (make_connection): Removed.
1823         (connect_to_one): New function.
1824         (connect_to_many): Ditto.
1825         (set_connection_host_name): Ditto.
1826
1827         * host.c (lookup_host): New function; new return type.
1828         (address_list_new): New function.
1829         (address_list_count): Ditto.
1830         (address_list_copy_one): Ditto.
1831         (address_list_delete): Ditto.
1832         (address_list_release): Ditto.
1833         (pretty_print_address): Ditto.
1834
1835 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1836
1837         * recur.c (retrieve_tree): In case of followed redirection,
1838         blacklist the pre-redirection URL.
1839
1840 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1841
1842         * recur.c (descend_redirect_p): New function.
1843         (retrieve_tree): Make sure redirections are not blindly followed.
1844
1845 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1846
1847         * config.h.in: added HAVE_RANDOM.
1848
1849         * options.h: added random_wait to struct options.
1850
1851         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1852         for --random-wait.
1853
1854         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1855         implementation of random wait times.
1856
1857         * init.c (commands): added "randomwait" keyword.
1858
1859 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1860
1861         * recur.c (descend_url_p): Be more conservative with blacklisting
1862         URLs.
1863         (convert_all_links): Print how many files have been converted, and
1864         how long it took.
1865
1866         * progress.c (create_image): Place the number of downloaded bytes
1867         right after the progress bar.
1868
1869         * utils.c (suffix): Return a pointer into the string.
1870
1871 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1872
1873         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1874
1875         * recur.c (retrieve_tree): Ignore download-ignorable children.
1876         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1877
1878         * html-url.c (handle_link): Return the newly created urlpos.
1879         (collect_tags_mapper): When dealing with BASE, store the base
1880         reference and mark it as download-ignorable.
1881
1882 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1883
1884         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1885         linking to local files.  Given up on the attempt, as it breaks
1886         local browsing.
1887
1888 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1889
1890         * main.c (private_initialize): Removed.
1891         (main): Don't call private_initialize.
1892
1893         * http.c: Call lookup_host.
1894
1895         * host.c (host_init): Removed.
1896         (add_host_to_cache): Initialize host_name_address_map here, on
1897         demand.
1898         (ngethostbyname): Commented out.
1899
1900         * connect.c (make_connection): Remove dead code; use lookup_host.
1901
1902         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1903         the args.
1904         Removed host_address_name_map and host_slave_master_map.
1905
1906 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1907
1908         * progress.c (dot_create): Align the "[ skipping ... ]" string
1909         with the dots.
1910
1911         * retr.c (rate): Split into two functions: calc_rate and
1912         retr_rate.
1913
1914         * progress.c (create_image): Draw a dummy progress bar even when
1915         total size is unknown.
1916         (display_image): Place the text cursor at the end of the "image".
1917
1918 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1919
1920         * url.c (reencode_string): Use unsigned char, not char --
1921         otherwise the hex digits come out wrong for 8-bit chars such as
1922         nbsp.
1923         (lowercase_str): New function.
1924         (url_parse): Canonicalize u->url if needed.
1925         (get_urls_file): Parse each URL, and return only the valid ones.
1926         (free_urlpos): Call url_free.
1927         (mkstruct): Add :port if the port is non-standard.
1928         (mkstruct): Append the query string to the file name, if any.
1929         (urlpath_length): Use strpbrk_or_eos.
1930         (uri_merge_1): Handle the cases where LINK is an empty string,
1931         where LINK consists only of query, and where LINK consists only of
1932         fragment.
1933         (convert_links): Count and report both kinds of conversion.
1934         (downloaded_file): Use a hash table, not a list.
1935         (downloaded_files_free): Free the hash table.
1936
1937         * retr.c (retrieve_from_file): Ditto.
1938
1939         * main.c (main): Call either retrieve_url or retrieve_tree
1940         for each URL, not both.
1941
1942         * retr.c (register_all_redirections): New function.
1943         (register_redirections_mapper): Ditto.
1944         (retrieve_url): Register the redirections.
1945         (retrieve_url): Make the string "Error parsing proxy ..."
1946         translatable.
1947
1948         * res.c (add_path): Strip leading slash from robots.txt paths so
1949         that the path representations are "compatible".
1950         (free_specs): Free each individual path, too.
1951         (res_cleanup): New function.
1952         (cleanup_hash_table_mapper): Ditto.
1953
1954         * recur.c (url_queue_new): New function.
1955         (url_queue_delete): Ditto.
1956         (url_enqueue): Ditto.
1957         (url_dequeue): Ditto.
1958         (retrieve_tree): New function, replacement for recursive_retrieve.
1959         (descend_url_p): New function.
1960         (register_redirection): New function.
1961
1962         * progress.c (create_image): Cosmetic changes.
1963
1964         * init.c (cleanup): Do all those complex cleanups only if
1965         DEBUG_MALLOC is defined.
1966
1967         * main.c: Removed --simple-check and the corresponding
1968         simple_host_check in init.c.
1969
1970         * html-url.c (handle_link): Parse the URL here, and propagate the
1971         parsed URL to the caller, who would otherwise have to parse it
1972         again.
1973
1974         * host.c (xstrdup_lower): Moved to utils.c.
1975         (realhost): Removed.
1976         (same_host): Ditto.
1977
1978 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1979
1980         * utils.c (path_simplify): Preserver the (non-)existence of
1981         leading slash.  Return non-zero if changes were made.
1982
1983 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1984
1985         * progress.c (bar_update): Don't modify bp->total_length if it is
1986         zero.
1987
1988 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1989
1990         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1991         print the correct error message rather than "UNKNOWN".
1992
1993 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1994
1995         * progress.c (bar_finish): If the timer didn't record any time
1996         since the download beginning, fake 1ms.
1997
1998 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1999
2000         * recur.c (recursive_retrieve): Fix typo.
2001
2002 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2003
2004         * progress.c (create_image): Don't translate "%ld ".
2005
2006 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2007
2008         * progress.c (bar_set_params): Allow the user to force the use of
2009         the bar.
2010
2011 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
2012
2013         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
2014
2015 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2016
2017         * progress.c: Renamed dp_* functions to dot_* for greater clarity
2018         and consistency with bar_*.
2019         (print_download_speed): Get rid of the unneeded '@' character.
2020         (create_image): Fix download rate geometry.
2021
2022         * progress.c (print_elapsed): Remove spurious space.
2023         (print_elapsed): Renamed to print_download_speed, since that's
2024         what it does.
2025
2026 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2027
2028         * progress.c (bar_update): If the downloaded amount becomes larger
2029         than the expected amount, adjust the expected amount accordingly.
2030
2031 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2032
2033         * utils.c (determine_screen_width): New function.
2034
2035         * main.c (main): New option `--progress=TYPE'.
2036         (main): Implement compatibility with the old option `--dot-style'.
2037
2038         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
2039         dp_set_params.
2040         (cmd_spec_progress): New function.
2041
2042         * retr.c (get_contents): Use the progress_* functions instead of
2043         the old show_progress().
2044         (show_progress): Removed.
2045         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
2046         etc.
2047
2048         * progress.c (set_progress_implementation): New function.
2049         (valid_progress_implementation_p): Ditto.
2050         (progress_create): Ditto.
2051         (progress_update): Ditto.
2052         (progress_finish): Ditto.
2053         (dp_create): Ditto.
2054         (dp_update): Ditto.
2055         (dp_finish): Ditto.
2056         (dp_set_params): Ditto.
2057         (print_elapsed): Ditto.
2058
2059 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2060
2061         * retr.c (show_progress): Use it.
2062
2063         * log.c (log_set_flush): New function.
2064
2065 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2066
2067         * utils.c (path_simplify): Don't remove trailing slashes.
2068
2069         * ftp.c (ftp_get_listing): Use it.
2070
2071         * utils.c (file_merge): New function.
2072
2073         * url.c (opt_url): Removed.
2074
2075         * recur.c (recursive_retrieve): Inline "opt_url" logic.
2076
2077         * main.c (main): Use xfree(), not free().
2078
2079         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
2080
2081         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
2082         internally.
2083
2084         * config.h.in: Include a stub for HAVE_STRPBRK.
2085
2086         * cmpt.c (strpbrk): Include a replacement for systems without
2087         strpbrk().
2088
2089         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
2090
2091         * url.c (url_set_dir): New function.
2092         (url_set_file): Ditto.
2093
2094         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
2095         parser makes the URL "params" available, so we can do that in this
2096         function.
2097
2098         * retr.c: Ditto.
2099
2100         * ftp.c: Ditto; pass the local file information in `ccon'.
2101
2102         * http.c: Get rid of the ugly kludge that had URL being replaced
2103         with the proxy URL when proxy retrieval was requested.  Use a
2104         separate parameter to http_loop and gethttp for the proxy URL.
2105
2106         * http.c: Changed to reflect the fact that local file, proxy, and
2107         referer information are no longer stored in struct url.  The local
2108         file information is passed in `struct hstat' now.
2109
2110         * url.c: Reworked URL parsing to be more regular.  Reencode the
2111         URL using reencode_string.
2112         Removed non-URL-related information from struct url.  This
2113         includes fields `proxy', `local', and `referer'.
2114
2115 2001-11-22  Jochen Hein  <jochen@jochen.org>
2116
2117         * main.c (main): Split the copyright notice for easier
2118         translation.
2119
2120 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
2121
2122         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
2123           command to server to request file size.
2124         * ftp.h (ftp_size): Export it.
2125         * ftp.c (getftp): Use new ftp_size function if restoring
2126           transfer of a file with unknown size.
2127
2128 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2129
2130         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
2131
2132 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2133
2134         * url.c (getproxy): Handle URL shorthands.
2135
2136 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2137
2138         * main.c: Remove --wait / --waitretry backwards compatibility
2139         code.
2140
2141 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2142
2143         * main.c (main): Use it.
2144
2145         * url.c (rewrite_url_maybe): New function.
2146
2147 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2148
2149         * url.c: Clean up handling of URL schemes.
2150
2151 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2152
2153         * url.c: Get rid of `protostrings'.
2154         (skip_proto): Don't use protostrings.
2155         (has_proto): Ditto.
2156
2157 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2158
2159         * Makefile.in: Conditionally compile getopt.o.
2160
2161 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2162
2163         * md5.h: Renamed to gnu-md5.h.
2164
2165         * md5.c: Renamed to gnu-md5.c.
2166
2167         * http.c: Ditto.
2168
2169         * ftp-opie.c: Use the new macros.
2170
2171         * sysdep.h: Define md5-related macros.
2172
2173         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
2174         depending on which md5 implementation is used.
2175
2176 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2177
2178         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
2179         the compiler.
2180
2181 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2182
2183         * http.c (gethttp): Print the whole response line when printing
2184         headers is requested.
2185
2186 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2187
2188         * res.c: New file.  Implement all RES-related code here.
2189
2190 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2191
2192         * version.c: Wget 1.7.1 is released.
2193
2194 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2195
2196         * headers.c (header_extract_number): Ignore trailing whitespace.
2197
2198 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
2199
2200         * html-url.c (collect_tags_mapper): Fix bug converting links
2201         with -k option for tags with multiple link attributes by
2202         handling links in the order they appear.
2203
2204 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
2205
2206         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
2207           the call to the 'rate' function by moving it past the error
2208           checking for the 'getftp' function return value.
2209
2210 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2211
2212         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
2213         '\"'.  Different compilers' assert macros are broken in different
2214         ways.
2215
2216 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
2217
2218         * http.c (gethttp): print debug output for errors occuring during
2219         the ssl handshake.
2220
2221 2001-11-16  Chris Seawood  <cls@seawood.org>
2222
2223         * init.c: Ditto.
2224
2225         * host.c: Ditto.
2226
2227         * connect.c: Ditto.
2228
2229         * sysdep.h: Support compilation under BEOS.
2230
2231 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
2232
2233         * url.c (url_equal): Fix a memory leak when parseurl returns an
2234         error on the second URL. Also, since url_equal is not used at the
2235         moment, do not compile it.
2236
2237         * url.h: Ditto for the prototype of url_equal.
2238
2239 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2240
2241         * html-parse.c (map_html_tags): Support XML-style empty tags.
2242
2243 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2244
2245         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
2246         loop condition because we're no longer setting SIZEVAR here.
2247
2248 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2249
2250         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
2251         call because it needs the old value.
2252
2253 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2254
2255         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
2256         an attribute name.
2257
2258 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2259
2260         * url.c (url_filename): Make sure that slashes that sneak in to
2261         u->file via query string get protected.
2262         (file_name_protect_query_string): New function.
2263
2264 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2265
2266         * recur.c (recursive_retrieve): Also check undesirable_urls with
2267         canonicalized URL.
2268
2269 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2270
2271         * http.c (gethttp): Search `.netrc' with real host, not the proxy
2272         one.
2273
2274 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2275
2276         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
2277         define it.
2278
2279 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2280
2281         * ftp.h: Provide correct prototype for ftp_parse_ls().
2282
2283 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2284
2285         * version.c: Wget 1.7 is released.
2286
2287 2001-06-03  Karl Eichwalder  <ke@suse.de>
2288
2289         * ftp-ls.c (ftp_parse_ls): Fix typo.
2290
2291 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2292
2293         * all: Update copyright information.
2294
2295 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2296
2297         * http.c (gethttp): Indicate that the continued download failed
2298         for *this* file.
2299
2300 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2301
2302         * version.c: Wget 1.7-pre1 is released.
2303
2304 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2305
2306         * version.c: Updated version to 1.7-pre1.
2307
2308 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2309
2310         * gen_sslfunc.c: Don't include <sys/time.h> directly.
2311
2312 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2313
2314         * http.c (gethttp): Use real URL data for cookies, not the proxy
2315         stuff.
2316
2317 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2318
2319         * main.c (print_help): Document `--no-http-keep-alive'.
2320
2321         * utils.c (numdigit): Handle negative numbers *correctly*.
2322
2323         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
2324         than the confusing "unsigned".
2325
2326         * utils.c (string_set_contains): Renamed from string_set_exists.
2327
2328         * hash.c (hash_table_contains): Renamed from hash_table_exists.
2329
2330         * cookies.c: Move case-insensitive hash tables to hash.c.
2331
2332 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2333
2334         * http.c (gethttp): Before concluding that the file is already
2335         fully retrieved, make sure that the file existed and `Range' was
2336         actually requested.
2337
2338 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2339
2340         * cookies.c (eliminate_dups): New function.
2341         (build_cookies_request): Use it.
2342         (build_cookies_request): Set chain_store_size after reallocating
2343         all_chains.
2344         (check_domain_match): Annotated for easier future debugging.
2345         (store_cookie): In the debug message, print whether the cookie is
2346         permanent.
2347
2348 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2349
2350         * http.c (http_loop): Reset no_truncate before deciding whether to
2351         set it.
2352         (gethttp): Further clarify "-c conflicts with existing file" error
2353         message, based on input from Herold Heiko.
2354
2355 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
2356
2357         * http.c (http_loop): If restval is set, set no_truncate to 1
2358         unconditionally.
2359
2360 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2361
2362         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
2363         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
2364         (ftp_parse_vms_ls): Ditto.
2365
2366 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2367
2368         * init.c (cmd_address): Zero SIN before using it; apparently
2369         needed on *BSD.
2370
2371 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2372
2373         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
2374         empty.
2375
2376 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2377
2378         * main.c (main): Make `--cookies' respect its argument.
2379
2380 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2381
2382         * main.c (main): Removed undocumented option `--email-address'.
2383
2384         * netrc.c: Use the latest read_whole_line.
2385
2386         * init.c (defaults): Set opt.ftp_pass to "-wget@".
2387
2388         * mswindows.c (pwd_cuserid): Ditto.
2389
2390         * utils.c (pwd_cuserid): Removed.
2391
2392         * host.c (ftp_getaddress): Removed.
2393
2394 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2395
2396         (http_loop): Allocate space for filename_plus_orig_suffix with
2397         alloca; this is more efficient and removes the need to free it
2398         before each and every return.
2399
2400 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2401
2402         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
2403         unneeded because the file is already there and fully downloaded,
2404         and -c is specified.
2405         (http_loop): Handle RETRUNNEEDED.
2406
2407         * wget.h (uerr_t): New value RETRUNNEEDED.
2408
2409         * http.c (http_loop): Set no_truncate for files that both exist
2410         and are non-empty.
2411         (gethttp): Consider the download finished when restval >= contlen,
2412         not only when restval==contlen.
2413         (gethttp): Handle redirection before giving up due to -c.
2414         (gethttp): Clarify error message which explains that -c will not
2415         truncate the file.
2416         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
2417         the stuff that needs freeing and release the socket.
2418
2419 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2420
2421         * main.c (print_help): Wget booleans accept "off", not "no".
2422
2423 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2424
2425         * http.c (http_loop): If allow_cache is zero, always disable
2426         caching, not only when retrieving through proxy.
2427
2428         * init.c: Ditto.
2429
2430         * options.h (struct options): Rename proxy_cache to allow_cache.
2431
2432 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2433
2434         * http.c (mktime_from_utc): Improve documentation.
2435         (http_atotm): Put format strings into a separate array.
2436
2437 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2438
2439         * safe-ctype.h: Instead of throwing #error when isalpha is
2440         defined, redefine it to something that will throw a compile-time
2441         error if actually *used*.  Do the same for the rest of the
2442         standard C macros.
2443
2444 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2445
2446         * url.c (getproxy): Ignore empty proxy vars.
2447
2448 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2449
2450         * http.c (http_loop): Would load cookies every time.
2451
2452         * cookies.c (load_cookies): Handle cookies whose values contain
2453         embedded spaces.
2454
2455 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2456
2457         * utils.c: Define each DIGITS_* in one line.
2458
2459 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
2460
2461         * http.c (http_atotm): Initialize t.tm_isdst to 0.
2462         (mktime_from_utc): Prevent mktime() from having discontinuities at
2463         DST transition points.
2464
2465 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2466
2467         * html-url.c (get_urls_html): Fix documentation.
2468
2469 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2470
2471         * url.c (UNSAFE_CHAR): Reimplement using a static table.
2472         (url_init): Removed.
2473         (init_unsafe_char_table): Removed.
2474
2475 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2476
2477         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
2478
2479 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2480
2481         * utils.c: Document timer functions.
2482
2483         * retr.c (rate): Use it.
2484         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
2485
2486         * utils.c (wtimer_granularity): New function.
2487
2488 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2489
2490         * retr.c (show_progress): Ditto.
2491
2492         * ftp.c (getftp): Ditto.
2493
2494         * http.c (gethttp): Use new timer functions.
2495
2496         * utils.c (wtimer_allocate): New function.
2497         (wtimer_new): Ditto.
2498         (wtimer_delete): Ditto.
2499         (wtimer_reset): Ditto.
2500         (wtimer_elapsed): Ditto.
2501
2502 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2503
2504         * utils.c (long_to_string): New, faster version.  Favors smaller
2505         numbers; much of the calculation is now done at compile-time.
2506
2507 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2508
2509         * utils.c (numdigit): Handle negative numbers.
2510
2511 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2512
2513         * retr.c (show_progress): Print the download rate even when the
2514         percentages are not available.
2515
2516 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2517
2518         * ftp.c (getftp): Adjust expected_bytes if the length is
2519         authoritative.
2520
2521 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2522
2523         * url.c: Don't declare `construct'.
2524
2525         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
2526         mappings to new locations.
2527         (hash_table_new): Make resize_threshold a field in the hash table,
2528         so we don't have to recalculate it in each hash_table_put.
2529         (grow_hash_table): Update resize_threshold.
2530         (MAX): Remove unused macro.
2531         (prime_size): Made static.
2532
2533 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2534
2535         * retr.c (retrieve_url): Call uri_merge, not url_concat.
2536
2537         * html-url.c (collect_tags_mapper): Call uri_merge, not
2538         url_concat.
2539
2540         * url.c (mkstruct): Use encode_string instead of xstrdup followed
2541         by URL_CLEANSE.
2542         (path_simplify_with_kludge): Deleted.
2543         (contains_unsafe): Deleted.
2544         (construct): Renamed to uri_merge_1.
2545         (url_concat): Renamed to uri_merge.
2546
2547 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2548
2549         * url.c (str_url): Use encode_string instead of the unnecessary
2550         CLEANDUP.
2551         (encode_string_maybe): New function, returns input string if no
2552         encoding is needed.
2553         (encode_string): Call encode_string_maybe to do the dirty work,
2554         xstrdup if no work needed.
2555
2556 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2557
2558         * wget.h (XDIGIT_TO_xchar): Define here.
2559
2560         * url.c (decode_string): Use new name.
2561         (encode_string): Ditto.
2562
2563         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
2564         (dump_hash): Use new name.
2565
2566         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
2567         XDIGIT_TO_XCHAR respectively.
2568
2569 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2570
2571         * init.c: Include cookies.h.
2572
2573         * cookies.h: Declare cookies_cleanup.
2574
2575         * cookies.c (check_domain_match): Remove unused variable.
2576         (save_cookies): Remove extraneous argument from debug statement.
2577
2578         * host.c (same_host): Don't call skip_url.
2579
2580         * url.c (skip_url): Removed.  Removed its calls from various
2581         functions in url.c.
2582
2583 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2584
2585         * cookies.c (unsigned_string_hash): Use the new code in
2586         string_hash as reference.
2587
2588         * hash.c (hash_table_map): Allow deletion and change of the
2589         element processed by MAPFUN.
2590         (string_hash): Use the function from glib.
2591
2592 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2593
2594         * config.h.in: Include #undef stub.
2595
2596         * hash.c (hash_table_remove): Rewrite to actually clear deleted
2597         entries instead of just marking them as deleted.
2598
2599 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2600
2601         * hash.h: Declare hash_table_get_pair and hash_table_count.
2602
2603 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2604
2605         * cookies.c: Declare http_atotm.
2606
2607 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2608
2609         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
2610         permissions.  A compiler that doesn't accept octal constants is
2611         seriously broken and shouldn't be used -- octal constants were
2612         present in K&R C!
2613
2614 2001-01-20  Karl Eichwalder  <ke@suse.de>
2615
2616         * Makefile.in: Provide and use DESTDIR according to the Coding
2617         Standards.
2618
2619 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2620
2621         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
2622         specification.
2623
2624 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2625
2626         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
2627         because that strips the *leading* slash, thus forcing relative
2628         FTP retrieval.
2629
2630 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2631
2632         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
2633         notation for VMS servers.
2634         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
2635         odir is an empty string.
2636
2637 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2638
2639         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
2640         effective. Suggested by Edward J. Sabol.
2641
2642 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2643
2644         * cookies.c (build_cookies_request): Use and sort cookies from all
2645         matching domains.
2646         (build_cookies_request): Check for duplicates before generating
2647         the `Cookies' header.
2648
2649         * main.c (main): Don't load cookies here.
2650         (main): Make loadcookies and savecookies call the correct command.
2651
2652         * http.c (http_loop): Load cookies on-demand.
2653
2654 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2655
2656         * http.c (gethttp): Fix indentation of SSL ifdef.
2657
2658 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2659
2660         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
2661         that hack is no longer necessary.
2662         (getftp): Prepend initial directory to *non*-absolute u->dir's.
2663
2664 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2665
2666         * init.c (cmd_file): New function.
2667         (enable_tilde_expansion): New variable.
2668         (run_wgetrc): Use it.
2669         (cmd_file): Use it.
2670
2671 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2672
2673         * init.c: Include cookie-related options.
2674
2675         * main.c (main): Include cookie-specific options.
2676         (main): Load cookies before download is finished.
2677         (main): Save cookies when done.
2678
2679         * http.c (gethttp): Process the `Set-Cookie' header.
2680         (gethttp): Include cookies in the response.
2681
2682         * cookies.c: New file.
2683
2684 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2685
2686         * utils.c (datetime_str): New function.
2687
2688 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2689
2690         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
2691         12:01PM == 00:01, which was obviously wrong. Taken care of this
2692         anomaly.
2693
2694         * ChangeLog: Removed an excess conflict marker. Reformatted the
2695         entry by Philipp Thomas from 2001-03-09.
2696
2697         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
2698         between 0 and 23. Elminate unused variable `sec'.
2699
2700 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2701
2702         * hash.c (hash_table_count): New function.
2703
2704 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2705
2706         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
2707         Digital Unix cc.
2708
2709 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2710
2711         * config.h.in: Oops, do the namespace tweaks only on systems we
2712         know about.
2713
2714 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2715
2716         * hash.c: Include <string.h>.
2717
2718 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2719
2720         * config.h.in: Define "compilation environment" options that work
2721         under Linux and Solaris.  To be reviewed on other OS'es.
2722
2723 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2724
2725         * http.c (gethttp): Prepend literal newline with `\n\'.
2726
2727 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2728
2729         * sysdep.h: Don't define VERY_LONG_FORMAT.
2730
2731         * utils.c (very_long_to_string): New function.
2732         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2733
2734 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2735
2736         * url.c (parse_uname): Would run past the end of the string if the
2737         username was present, but the URL did not contain a slash, e.g.
2738         http://foo:bar@myhost.
2739
2740 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2741
2742         * http.c (http_atotm): Use %A instead of %a to match full
2743         weekday.  (On most systems there is no difference.)
2744
2745 2001-04-03  Paul Bludov  <paul@ozero.net>
2746
2747         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2748         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2749         leak.
2750         (ws_mypath): Use GetModuleFileName instead of argv[0].
2751         (ws_startup): Use data.wVersion for comparison.
2752
2753 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2754
2755         * http.c (http_loop): Ditto.
2756
2757         * ftp.c (ftp_loop_internal): Made the check whether to continue
2758         retrieval `-O'-friendly.
2759
2760 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2761
2762         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2763         they will be handled as whitespace.
2764         (parse_netrc): Correctly handle lines that end with whitespace.
2765
2766 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2767
2768         * retr.c (retrieve_url): New variable global_download_count used
2769         to identify first retrieval.
2770
2771         * ftp.c (getftp): Ditto.
2772
2773         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2774
2775 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2776
2777         * init.c (cmd_address): Heap-allocate the address that gets stored
2778         to CLOSURE.  Old code would simply assign an address on the stack.
2779
2780 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2781
2782         * ftp.c (ftp_get_listing): Propagate error status.
2783         (ftp_retrieve_glob): Use it.
2784         (ftp_loop): Ditto.
2785
2786 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2787
2788         * main.c (main): Add -C to the string that is the third arg to
2789         getopt_long().
2790
2791 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2792
2793         * ftp.c (getftp): Don't start the download from scratch if `-c'
2794         was specified, but the file is already fully downloaded.
2795
2796         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2797         specified and the server doesn't support continued download.
2798         (gethttp): Don't start the download from scratch if `-c' was
2799         specified, but the file is already fully downloaded.
2800
2801 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2802
2803         (recursive_retrieve): Don't clear the hash tables at this point at
2804         all; it interferes with the normal operation of register_download.
2805
2806 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2807
2808         * recur.c (recursive_retrieve): Clear the hash tables only when
2809         they are defined.
2810
2811 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2812
2813         * http.c (gethttp): Make sure the socket is closed with
2814         CLOSE_INVALIDATE before we have drained the body.
2815
2816 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2817
2818         * retr.c (retrieve_url): Call register_download() for downloaded
2819         files and register_html() for downloaded HTML files.
2820
2821         * recur.c (register_download): New function; register here that a
2822         file has been downloaded, rather than in recursive_retrieve().
2823         (register_html): New function; enqueue the location of HTML files
2824         here rather than in recursive_retrieve().
2825
2826 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2827
2828         * main.c (print_help): Use multiple fputs instead of a single ugly
2829         printf().
2830         (main): Consistently assign numbers >128 to options without a
2831         corresponding character.
2832
2833 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2834
2835         * safe-ctype.h: New file. Locale independent ctype.h replacement
2836         taken from libiberty.
2837
2838         * safe-ctype.c: New file. Tables for above.
2839
2840         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2841         safe-ctype$o.
2842
2843         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2844         isspace.
2845
2846         * ftp-basic.c: Don't include ctype.h.
2847
2848         * ftp-ls.c: Likewise.
2849
2850         * ftp.c: Likewise.
2851
2852         * headers.c: Likewise.
2853
2854         * host.c: Likewise.
2855
2856         * html-parse.c: Likewise.
2857
2858         * html-url.c: Likewise.
2859
2860         * http.c: Likewise.
2861
2862         * init.c: Likewise.
2863
2864         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2865
2866         * netrc.c: Likewise.
2867
2868         * recur.c: Likewise.
2869
2870         * retr.c: Likewise.
2871
2872         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2873         instead of isdigit.
2874
2875         * sysdep.h: Remove defines of ctype macros as they aren't needed
2876         for safe-ctype-h.
2877
2878         * url.c: Don't include ctype.h.
2879
2880         * utils.c: Likewise.
2881
2882         * wget.h: Include safe-ctype.h.
2883
2884 2001-03-27  Dan Harkless  <wget@harkless.org>
2885
2886         * Makefile.in: Moved top_builddir out of "User configuration
2887         section" of top Makefile and analogous spot in this one.
2888
2889 2001-03-17  Dan Harkless  <wget@harkless.org>
2890
2891         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2892         Define top_builddir.  Link wget with libtool so the user doesn't
2893         have to supply a bunch of custom environment variables to
2894         correctly link with the OpenSSL shared libraries.
2895
2896 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2897
2898         * http.c (gethttp): skip :port in host header if it is the
2899         DEFAULT_HTTPS_PORT when using SSL.
2900
2901         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2902         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2903         rest of the code.
2904         * url.h: Ditto
2905
2906 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2907
2908         * retr.c (show_progress): Correctly calculate the number of bytes
2909         in the first line of the download that have been actually
2910         downloaded in this run.
2911
2912 2001-02-23  Dan Harkless  <wget@harkless.org>
2913
2914         * main.c (print_help): --help documentation for -N said it would
2915         re-download files if they had the _same_ timestamp on server.
2916         (print_help): -nr belongs in "FTP options" section of --help
2917         output, not "Recursive retrieval" section.  Alphabetized FTP
2918         options by long option name.
2919
2920 2001-02-16  Dan Harkless  <wget@harkless.org>
2921
2922         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2923         that "httpsproxy" had been inserted into commands[] out of
2924         alphabetical order, causing "BUG: unknown command `httpuser'".
2925
2926 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2927
2928         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2929         listing without correct permissons).
2930
2931         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2932         FTP server.
2933
2934         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2935         shall be donwloaded only when it's newer than the local copy or
2936         when it has the same timeestamp but its size is different. ST_VMS
2937         and ST_MACOS as special cases that lie about file size.
2938
2939         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2940
2941         * Makefile.in: Removed dependency on ftpparse library due to unclear
2942         copyright issues and absence of any feedback to our queries.
2943
2944         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2945         copyright issues and absence of any feedback to our queries.
2946         (ftp_parse_ls): Added a warning message when remote server system
2947         does not seem to be suported by wget.
2948         (ftp_parse_vms_ls): New function for parsing VMS ftp
2949         server listing output.
2950         (clean_line): New function responsible for removing
2951         end-of-line characters from FTP listing texts.
2952
2953         * ftp.c (getftp): Global variables pwd and host_type are now
2954         member of the ccon structure under names ccon.id and ccon.rs.
2955
2956         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2957         enum stype rs (remote system identification) and char *id (initial
2958         working directory), as suggested by Hrvoje.
2959
2960         * url.c (parse_uname): Added support for passwords containing '@'
2961         characters.
2962         (skip_uname): Ditto.
2963
2964 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2965
2966         * ftp.c (ftp_loop): Reset con.
2967
2968 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2969
2970         * url.c (parse_uname): Added support for passwords containing '@'
2971         characters.
2972         (skip_uname): Ditto.
2973
2974 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2975
2976         * url.c (parseurl): Debug-print u->ftp_type.
2977
2978 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2979
2980         * ftp.c (ftp_loop_internal): Disable padding.
2981         (getftp): Ditto.
2982
2983         * http.c (http_loop): Disable padding.
2984
2985         * retr.c (show_progress): Use it to enable padding.
2986
2987         * retr.c (rate): Optional parameter PAD for padding the rate.
2988
2989 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2990
2991         * retr.c (show_progress): Make sure that the last output line
2992         includes progress.
2993
2994 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2995
2996         * retr.c (show_progress): Print the download rate along with the
2997         percentages.
2998         Along with Anders Thorsby <anders@thorsby.dk>.
2999
3000 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
3001
3002         * ftp.h: Rename enums `command' to `wget_ftp_command' and
3003         `fstatus' to `wget_ftp_status' because old names clash with Tru64
3004         net/if.h.
3005
3006 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
3007
3008         * gen_sslfunc.c: verify_callback is now static
3009
3010         * gen_sslfunc.c (init_ssl): load certificate if specified
3011
3012         * gen_sslfunc.c (ssl_printerr): new function
3013
3014         * init.c: added new --sslcertfile and --sslcertkey switches
3015
3016         * main.c: ditto
3017
3018         * options.h: ditto
3019
3020         * http.c (gethttp): abort when init_ssl fails
3021
3022 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
3023
3024         * mswindows.h: Include <malloc.h>; it's needed for alloca().
3025
3026 2001-01-10  Dan Harkless  <wget@harkless.org>
3027
3028         * url.c (str_url): Clarified this function's comment header after
3029         Hrvoje answered my question on the list as to when hide != 1.
3030         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
3031
3032 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3033
3034         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
3035         Drazen Kacar <dave@arsdigita.com>.
3036         (conaddr): Ditto.
3037
3038 2001-01-09  Dan Harkless  <wget@harkless.org>
3039
3040         * html-url.c: A bunch of fixup of `--page-requisites'-related
3041         comments to reflect Hrvoje's changes to my code when transplanting
3042         it into this new file, to fix spelling mistakes, to clarify, etc.
3043
3044         * url.c (write_backup_file): Clarified a comment.
3045         (str_url): Henrik van Ginhoven pointed out on the list that we
3046         shouldn't give away the number of characters in the password by
3047         replacing each character with a 'x'.  Use "<password>" instead.
3048
3049         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
3050         directories didn't work if logging in put you in a directory other
3051         than "/" is fixed now.  Removed the comment here warning of the bug.
3052
3053         * main.c (print_help): --continue's description was misleading.
3054         We don't "restart", we "resume".  Also, better to say
3055         "partially-downloaded file" rather than just "existing file".
3056
3057 2001-01-06  Dan Harkless  <wget@harkless.org>
3058
3059         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
3060         the best way to go about my aim.  Removed them in favor of:
3061
3062         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
3063
3064 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3065
3066         * url.c (replace_attr): New function, to be used by both
3067         TO_COMPLETE and TO_RELATIVE case in convert_links.
3068         (find_fragment): New function for finding URL fragments.
3069         (replace_attr): Better handle the case where the original string
3070         is not quoted.  Use find_fragment.
3071         (convert_links): Use replace_attr().
3072
3073 2000-12-31  Dan Harkless  <wget@harkless.org>
3074
3075         * ChangeLog: Since this flat file doesn't have multiple branches,
3076         looking at the dates would make you think that things went into
3077         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
3078         in 1.6 branch.]" where appropriate to clarify.
3079
3080 2000-12-30  Dan Harkless  <wget@harkless.org>
3081
3082         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
3083         patch to deal with h_errno not being defined in netdb.h under Cygwin.
3084
3085 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
3086
3087         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
3088
3089 2000-12-17  Igor Khristophorov  <igor@atdot.org>
3090
3091         * http.c (check_end): Fix test for '+' or '-'.
3092
3093 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3094
3095         * url.c (parseurl): Rename inner loop var from i to ind to avoid
3096         clash with the function top-level-declared variable i.
3097         (str_url): Likewise, rename inner-loop i to j.
3098
3099         * recur.c (parse_robots): Don't declare LEN at top of function.
3100         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
3101         global variable.
3102
3103         * main.c (main): Change erroneous use of bitwise and to logical.
3104
3105         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
3106         the stack because it will be copied to closure.
3107
3108         Thanks to Csaba Raduly's run of PC-LINT over the sources.
3109
3110 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3111
3112         * http.c (basic_authentication_encode): Use xmalloc(), not
3113         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
3114         sources.
3115
3116 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
3117
3118         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
3119         compilation.
3120
3121 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3122
3123         * mswindows.c: Include <errno.h>.
3124
3125         * gen_sslfunc.c: Include <errno.h>.
3126
3127         * ftp-basic.c: Don't attempt to declare errno or h_errno because
3128         they're not used.
3129
3130         * main.c: Include <errno.h> because errno is used.
3131
3132         * ftp.c: Ditto.
3133
3134         * http.c: Include <netdb.h> for h_errno.
3135
3136 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3137
3138         * html-parse.c (advance_declaration): MSVC assert() chokes on
3139         '\"'.  Use '"' instead.
3140
3141 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3142
3143         * utils.c (xfree_real): Removed.
3144         (xfree_debug): Just call free().
3145
3146         * wget.h (xfree): Make it an alias for free.
3147
3148 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3149
3150         * http.c (http_loop): Furthermore, touch output_document only if
3151         it is known to be an existing regular file.
3152
3153 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3154
3155         * ftp.c (ftp_retrieve_list): Ditto.
3156
3157         * http.c (http_loop): Touch output_document if that is used for
3158         output.
3159
3160 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3161
3162         * http.c: Include gen_sslfunc.h after including Wget's headers.
3163         (persistent_available_p): Needed coma before `int ssl'.
3164
3165 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3166
3167         * ftp.c (ftp_loop_internal): Ditto.
3168
3169         * http.c (http_loop): Use it.
3170
3171         * retr.c (sleep_between_retrievals): New function that handles the
3172         logic of opt.wait and opt.waitretry.
3173
3174 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3175
3176         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
3177         rbuf_read_bufferful when the buffer is depleted.
3178
3179         * rbuf.c (rbuf_read_bufferful): New function.
3180
3181 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3182
3183         * gen_sslfunc.h: Use ansi2knr style function declarations.
3184
3185         * gen_sslfunc.c: Reformat according to the GNU coding standards.
3186         More should be done.
3187
3188         * http.c (persistent_available_p): Place the cheap SSL test nearer
3189         the top of the function.
3190         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
3191
3192 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3193
3194         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
3195         char.
3196
3197 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
3198
3199         * Makefile.in: added gen_sslfunc object
3200         * config.h.in: added HAVE_SSL define
3201         * connect.c: changed select_fd from static int to int
3202         * connect.h: ditto
3203         * gen_sslfunc.h: New file
3204         * gen_sslfunc.c: ditto
3205         * http.c: added HTTPS fuctionality
3206         * retrc.c: ditto
3207         * url.c: ditto
3208         * init.c: added opt.httpsproxy
3209         * options.h: ditto
3210         * rbuf.h: added alternate rbuf struct
3211         * wget.h: added CONSSLERR
3212         * rbuf.c: ditto
3213
3214         * http.c: Added HTTPS fuctionality.
3215
3216         * retrc.c: Ditto.
3217
3218         * url.c: Ditto.
3219
3220         * init.c: Added opt.httpsproxy.
3221
3222         * options.h: Ditto.
3223
3224         * rbuf.h: Added alternate rbuf struct.
3225
3226         * wget.h: Added CONSSLERR.
3227
3228         * rbuf.c: Ditto.
3229
3230 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3231
3232         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
3233         "ignore_perms" to ignore file and directory permissions for
3234         Windows NT FTP server listings.
3235         (ftp_parse_winnt_ls): New function.
3236         (ftp_parse_ls): Parses UNIX and Windows NT listings
3237         separately. Simple heuristics for distinguishing between UNIX and
3238         MS-DOS-like FTP listing provided by Windows NT FTP service.
3239
3240 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3241
3242         * ftpparse.c, ftpparse.h: New files.
3243
3244         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
3245         only. Use ftp_parse_nonunix_ls otherwise.
3246         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
3247         exotic FTP servers.
3248
3249         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
3250         FTP servers.
3251
3252         * ftp.c: New static wariables host_type, pwd, and pwd_len.
3253         (getftp): Support for VMS. Support for FTP servers that do not
3254         place you in the root directory after login.
3255         (ftp_retrieve_list): VMS is silent about the real file size, issue
3256         a more appropriate message.
3257         (ftp_get_listing): Pass host_type to ftp_parse_ls.
3258
3259         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
3260
3261 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3262
3263         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
3264         "ignore_perms" to ignore file and directory permissions for
3265         Windows NT FTP server listings.
3266         (ftp_parse_winnt_ls): New function.
3267         (ftp_parse_ls): Parses UNIX and Windows NT listings
3268         separately. Simple heuristics for distinguishing between UNIX
3269         and MS-DOS-like FTP listing provided by Windows NT FTP service.
3270
3271 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
3272
3273         * netrc.c (parse_netrc): Get rid of line ending.
3274
3275 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3276
3277         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
3278         Dan.
3279
3280 2000-11-24  Karl Eichwalder  <ke@suse.de>
3281
3282         * main.c (print_help): Untabify.
3283
3284 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3285
3286         * utils.c (xrealloc_debug): Do the unregister/register thing only
3287         if the pointer has actually changed.
3288         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
3289         (xfree_real): Ditto.
3290         (xrealloc_real): Ditto.
3291         (xstrdup_real): Ditto.
3292
3293 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
3294
3295         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
3296         string; no need to strdup() it.
3297         (getftp): Make pwd_len a local variable.
3298         (ftp_loop): Free PWD before returning.
3299
3300         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
3301
3302 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
3303
3304         * all: Use xfree() instead of free.
3305
3306         * utils.c (xfree): New function.
3307
3308 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3309
3310         * url.c (convert_links): HTML-quote the converted string.
3311
3312         * utils.c (html_quote_string): Move here from ftp-ls.c
3313         (html_quote_string): Make non-static; declare in utils.h.
3314         (html_quote_string): Convert SP to &#32;.
3315
3316 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3317
3318         * ftp.c (getftp): Reformat Jan's code according to GNU coding
3319         standards; remove (debugging?) printf's; use '\0' for the ASCII
3320         zero character.  Use alloca() instead of malloc() for
3321         inter-function temporary allocations.
3322
3323 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3324
3325         * ftpparse.c, ftpparse.h: New files.
3326
3327         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
3328         only. Use ftp_parse_nonunix_ls otherwise.
3329         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
3330         exotic FTP servers.
3331
3332         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
3333         FTP servers.
3334
3335         * ftp.c: New static wariables host_type, pwd, and pwd_len.
3336         (getftp): Support for VMS. Support for FTP servers that do not
3337         place you in the root directory after login.
3338         (ftp_retrieve_list): VMS is silent about the real file size, issue
3339         a more appropriate message.
3340         (ftp_get_listing): Pass host_type to ftp_parse_ls.
3341
3342         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
3343
3344 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3345
3346         * hash.c (hash_table_put): Don't overwrite deleted mappings.
3347
3348 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3349
3350         * hash.c (find_mapping): New function.
3351         (hash_table_get): Use it.
3352         (hash_table_get_pair): Ditto.
3353         (hash_table_exists): Ditto.
3354         (hash_table_remove): Ditto.
3355         (hash_table_remove): Really delete the entry if the mapping
3356         following LOCATION is empty.
3357
3358         * utils.c (string_set_add): Check whether the element has existed
3359         before.
3360
3361         * hash.c (hash_table_get_pair): New function.
3362
3363 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3364
3365         * http.c (http_process_type): Ignore trailing whitespace; use
3366         strdupdelim().
3367
3368         * recur.c (recursive_retrieve): Use the new `convert' field.
3369         (convert_all_links): Ditto.
3370         (convert_all_links): Don't respect meta_disallow_follow.
3371
3372         * html-url.c (handle_link): Fill out link_relative_p and
3373         link_complete_p.
3374
3375         * url.h (struct _urlpos): Make elements more readable.
3376
3377         * recur.c (recursive_retrieve): Call slist_prepend instead of
3378         slist_append.
3379         (convert_all_links): Call slist_nreverse before iterating through
3380         urls_html.
3381
3382         * utils.c (slist_prepend): New function.
3383         (slist_nreverse): Ditto.
3384
3385 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3386
3387         * http.c (check_end): Constify.
3388
3389 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3390
3391         * http.c (http_loop): If username and password are known, try the
3392         `Basic' authentication scheme by default.
3393
3394         * connect.h: Declare test_socket_open.
3395
3396 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3397
3398         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
3399
3400 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3401
3402         * http.c (gethttp): Don't use the return value of sprintf().
3403         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
3404
3405 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3406
3407         * recur.c (recursive_retrieve): Print the "so we don't load"
3408         debugging message only if we really don't load.
3409
3410         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
3411         (gethttp): Don't request keep-alive if keep-alive is inhibited.
3412
3413 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3414
3415         * http.c (gethttp): Make the HTTP persistent connections more
3416         robust.
3417
3418 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3419
3420         * retr.c (get_contents): If use_expected, make sure that the
3421         appropriate amount of data is being read.
3422
3423         * http.c (gethttp): Check for both `Keep-Alive: ...' and
3424         `Connection: Keep-Alive'.
3425
3426         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
3427         turned on.
3428
3429 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3430
3431         * http.c (connection_available_p): Use it.
3432
3433         * connect.c (test_socket_open): New function.
3434
3435         * http.c (gethttp): Support persistent connections.  Based on the
3436         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
3437         (register_persistent): New function.
3438         (connection_available_p): Ditto.
3439         (invalidate_connection): Ditto.
3440
3441 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3442
3443         * url.c (convert_links): Handle UREL2ABS case.
3444
3445         * recur.c (recursive_retrieve): Instead of the list
3446         urls_downloaded, use hash tables dl_file_url_map and
3447         dl_url_file_map.
3448         (convert_all_links): Use them to retrieve data.
3449
3450         * host.c (clean_hosts): Free the hash tables.
3451
3452         * main.c (private_initialize): Call host_init().
3453
3454         * host.c (store_hostaddress): Use a saner, hash table-based data
3455         model.
3456         (realhost): Ditto.
3457         (host_init): Initialize the hash tables.
3458
3459 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3460
3461         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
3462         used for what the sorted slists used to be used for.
3463         (slist_contains): Don't rely on the list being sorted.
3464         (slist_append): Simplify the code.
3465
3466         * recur.c (recursive_cleanup): Use free_string_set.
3467
3468         * utils.c (string_set_add, string_set_exists, string_set_free):
3469         New functions for easier freeing of hash tables whose keys are
3470         strdup'ed strings.
3471
3472         * recur.c (recursive_retrieve): Use the hash table functions for
3473         storing undesirable URLs.
3474
3475         * hash.c: New file.
3476
3477 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3478
3479         * main.c (private_initialize): Call url_init.
3480         (main): Call private_initialize.
3481
3482         * url.c (unsafe_char_table): New table.
3483         (UNSAFE_CHAR): Use it.
3484         (init_unsafe_char_table): New function.
3485         (url_init): New function; call init_unsafe_char_table.
3486
3487 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3488
3489         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
3490         _vsnprintf respectively.
3491
3492 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3493
3494         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
3495         on Linux.
3496
3497 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3498
3499         * html-url.c (handle_link): Handle HTML fragment identifiers.
3500
3501         * recur.c (recursive_retrieve): If norobot info is respected and
3502         the file is specified not to be followed by robots, respect that.
3503
3504         * html-url.c (collect_tags_mapper): Handle <meta name=robots
3505         content=X>.  For us the important cases are where X is NONE or
3506         where X contains NOFOLLOW.
3507         (get_urls_html): Propagate that information to the caller.
3508
3509 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3510
3511         * url.c (convert_links): Unlink the file we might be reading from
3512         before writing to it.
3513         (convert_links): Use alloca instead of malloc for
3514         filename_plus_orig_suffix.
3515
3516 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3517
3518         * host.c (realhost): Add HOST to the list with quality==0 only if
3519         it wasn't already there.
3520         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
3521
3522 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3523
3524         * url.c (get_urls_file): Ditto.
3525         (convert_links): Ditto.
3526
3527         * html-url.c (get_urls_html): Use read_file() instead of
3528         load_file().
3529
3530         * utils.c (read_file): New function, instead of the old
3531         load_file().
3532         (read_file_free): Ditto.
3533
3534         * url.c (findurl): Search only for the supported protocols.
3535         (convert_links): Use fwrite() when writing out a region of
3536         characters.
3537
3538 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3539
3540         * ftp-ls.c: Move html_quote_string and ftp_index here.
3541
3542         * url.c: Remove get_urls_html, since that's now in html-url.c.
3543
3544         * html-url.c: New file.
3545
3546         * html-parse.c: New file.
3547
3548 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3549
3550         * init.c (run_wgetrc): Don't bother killing off '\r' since
3551         pars_line() skips whitespace at end of line anyway.
3552         (parse_line): Oops, it didn't.  Now it does.
3553
3554         * recur.c (parse_robots): Ditto here.
3555
3556         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
3557         manually because read_whole_line no longer does.
3558
3559         * utils.c (read_whole_line): Rewrite to: a) use less memory
3560         (reallocates to needed size after work), b) work faster -->
3561         fgets() instead of getc, c) be more correct --> doesn't kill the
3562         newline character at the end of line.
3563
3564 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3565
3566         * init.c (comind): Initialize MAX to array size - 1.
3567
3568 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3569
3570         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
3571         Suggested by Edward J. Sabol.
3572
3573 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3574
3575         * url.c (construct): Handle the case where host name is not
3576         followed by a slash.
3577
3578 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3579
3580         * init.c: commands[] need to be sorted!  ("base" wasn't.)
3581
3582 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3583
3584         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
3585         `if'.
3586
3587 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3588
3589         * url.c (construct): Insert unneeded initialization for the
3590         compiler to shut up.
3591
3592         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
3593         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
3594         otherwise gets lost when you define _XOPEN_SOURCE.
3595
3596         * utils.c (touch): Include the file name in the error message.
3597         From Debian.
3598
3599 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3600
3601         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
3602         resize the buffer to fit the formated message.  That way, messages
3603         of arbitrary size may be printed.
3604         (logvprintf): Use saved_append() to optionally log the last
3605         several lines of output.
3606         (logputs): Ditto.
3607         (log_close): Adapt to new data structures.
3608         (log_dump): Ditto.
3609         (redirect_output): Print messages to stderr, not to stdout.
3610
3611         * log.c (saved_append_1): New function.  Replaces the old logging
3612         system ("log all output until 10M characters") with a new, much
3613         more reasonable one ("log last screenful of text").
3614         (saved_append): New function; call saved_append_1.
3615         (free_log_line): New function.
3616
3617 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3618
3619         * url.c (construct): Fix comment.
3620         (find_last_char): Document.
3621
3622 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3623
3624         * snprintf.c: New file.
3625
3626 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3627
3628         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
3629         types to logprintf() and debug_logprintf().
3630
3631 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3632
3633         * ftp.c (ftp_loop_internal): Hide the password from the URL when
3634         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
3635         <darekm@bydg.lomac.com.pl>.
3636
3637 2000-11-02  Junio Hamano  <junio@twinsun.com>
3638
3639         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
3640
3641 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
3642
3643         * http.c (known_authentication_scheme_p): Recognize NTML
3644         authentication.
3645         (create_authorization_line): Treat NTML the same as `Basic'.
3646
3647 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3648
3649         * retr.c (retrieve_url): Free url before returning.
3650         (retrieve_url): Free mynewloc before returning.
3651         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3652
3653 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3654
3655         * url.c (parseurl): Remove possible reading past the end of
3656         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3657
3658 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3659
3660         * main.c (main): In case of opt.downloaded overflowing, print
3661         <overflow> instead of a totally bogus random value.
3662
3663         * retr.c (retrieve_from_file): Ditto.
3664
3665         * recur.c (recursive_retrieve): Ditto.
3666
3667         * main.c (main): Ditto.
3668
3669         * http.c (http_loop): Ditto.
3670
3671         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
3672         `+=', and downloaded_exceeds_quota() instead of the simple-minded
3673         check.
3674         (ftp_retrieve_list): Ditto.
3675         (ftp_retrieve_dirs): Ditto.
3676         (ftp_retrieve_glob): Ditto.
3677
3678         * retr.c (downloaded_increase): New function.  Notice overflows of
3679         opt.downloaded.
3680         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
3681         used if it overflowed.
3682
3683         * options.h (struct options): New member downloaded_overflow.
3684
3685 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3686
3687         * wget.h (enum): Remove extra space after last enumeration.
3688
3689 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3690
3691         * main.c (main): Use legible_very_long() for printing
3692         opt.downloaded.
3693
3694         * utils.c (legible_1): New function that operates on strings and
3695         does the brunt of legible()'s work.
3696         (legible): Use legible_1().
3697         (legible_very_long): New function; dump the argument with
3698         sprintf(), and call legible_1().
3699
3700         * options.h (struct options): Use VERY_LONG_TYPE for
3701         opt.downloaded.
3702
3703         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
3704         type.
3705
3706         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
3707         defined.  Define HAVE_LONG_LONG if long long is available.
3708
3709 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3710
3711         * utils.c (long_to_string): Update with a later, better version.
3712
3713 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3714
3715         * url.c (path_simplify_with_kludge): New function.
3716         (path_simplify_with_kludge): Disable it.  Instead...
3717         (parse_dir): ...make sure that at this point the right thing is
3718         done, i.e. that "query" part of the URL (?...) is always assigned
3719         to the file, never to the directory portion of the path.
3720
3721 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3722
3723         * retr.c (retrieve_url): Detect redirection cycles.
3724
3725 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3726
3727         * url.c (get_urls_html): Decode HTML entities using
3728         html_decode_entities.
3729
3730         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3731         (&#NNN;) as an HTML fragemnt.
3732         (html_decode_entities): New function.
3733
3734 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3735
3736         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3737
3738 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3739
3740         * url.c (construct): Rewritten for clarity.  Avoids the
3741         unnecessary copying and stack-allocation the old version
3742         performed.
3743
3744 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3745
3746         * ftp.c (getftp): Ditto.
3747
3748         * http.c (gethttp): Rewind the stream when retrying from scratch.
3749
3750 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3751
3752         * retr.c (retrieve_url): Use url_concat() to handle relative
3753         redirections instead of /ad hoc/ code.
3754
3755         * url.c (url_concat): New function encapsulating weird
3756         construct().
3757         (urllen_http_hack): New function.
3758         (construct): When constructing new URLs, recognize that `?' does
3759         not form part of the file name in HTTP.
3760
3761 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3762
3763         * retr.c: Add msec timing support for WINDOWS.
3764         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3765         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3766
3767 2000-10-27  Dan Harkless  <wget@harkless.org>
3768
3769         * retr.c (retrieve_url): Manually applied T. Bharath
3770         <TBharath@responsenetworks.com>'s patch to get wget to grok
3771         illegal relative URL redirects.  Reformatted and re-commented it.
3772
3773 2000-10-23  Dan Harkless  <wget@harkless.org>
3774
3775         * connect.c (make_connection and bindport): Manually applied Rob
3776         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3777         changing coding style to GNU's.
3778
3779         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3780         files downloaded via FTP.  Per a comment, .listing files were not
3781         counted towards number of bytes and files downloaded because they're
3782         deleted anyway.  Well, they aren't under -nr, so count them then.
3783
3784         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3785         --bind-address, alphabetizing, changing coding style to GNU's,
3786         commenting, and renaming cmd_ip_address() to cmd_address() to
3787         imply hostnames also okay.
3788
3789         * main.c (main): --delete-after didn't delete the root of the
3790         tree.  Ignore --convert-links if --delete-after was specified.
3791         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3792         fixing duplicate use of added-since-1.5.3 case value.
3793         (print_help): Clarified that --delete-after deletes local files.
3794         Rob forgot to add a line for his new --bind-address option.
3795
3796         * options.h (struct options): Manually applied Rob Mayoff's patch
3797         to add --bind-address (bind_address structure member).
3798
3799         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3800         Ignore --convert-links if --delete-after was specified.
3801
3802         * retr.c (retrieve_from_file): Just added a DEBUGP().
3803
3804 2000-10-19  Dan Harkless  <wget@harkless.org>
3805
3806         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3807         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3808         patch to work around FTP servers that incorrectly respond to the
3809         "REST" command with the remaining size rather than the total file size.
3810
3811         * http.c (gethttp): Improved a comment and added code to tack on
3812         ".html" to text/html files without that extension when -E specified.
3813         (http_loop): Use new downloaded_file() enumerators and deal with
3814         the case of gethttp() called xrealloc() on u->local.
3815
3816         * init.c (commands): Added new "htmlextension" command.
3817         Also renamed John Daily's cmd_quad() to the more descriptive
3818         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3819         removed duplicate cmd_boolean() declaration.
3820
3821         * main.c (print_help): Added my new -E / --html-extension option.
3822         (main): Undocumented --email-address option previously used -E synonym.
3823         Stole it away for the much more deserving --html-extension's use.
3824
3825         * options.h (struct options): Added html_extension field.
3826
3827         * url.c (convert_links): URL X that we saved as X.html locally due
3828         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3829         (downloaded_file): Now remembers if we added .html extension to a file.
3830
3831         * url.h (downloaded_file_t): Added extra enumerators to support above.
3832         (downloaded_file): Now takes and returns a downloaded_file_t.
3833
3834         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3835
3836 2000-10-09  Dan Harkless  <wget@harkless.org>
3837
3838         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3839
3840         * main.c (print_help): Clarified what --retr-symlinks does.
3841
3842 2000-09-15  John Daily  <jdaily@cyberdude.com>
3843
3844         * init.c: Add support for "always" and "never" values to allow
3845         .wgetrc to override commandline (useful e.g. with .pm files
3846         calling `wget --passive-ftp' when your firewall doesn't allow that).
3847
3848         * ftp.c (getftp): passive_ftp is first option to support always/never.
3849
3850 2000-08-30  Dan Harkless  <wget@harkless.org>
3851
3852         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3853
3854         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3855         Wrapped some > 80-column lines.  When -p is specified and we're at a
3856         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
3857         <LINK REL="stylesheet">.
3858
3859         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3860
3861         * init.c: Added new -p / --page-requisites / page_requisites option.
3862
3863         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3864         infinite recursion.  Changed the unhelpful --mirrior description
3865         to simply give the options it's equivalent to.  Added new -p option.
3866         (main): Added some comments; handle new -p / --page-requisites.
3867
3868         * options.h (struct options): Added new page_requisites field.
3869
3870         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3871         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3872         get_urls_html().  Use new INFINITE_RECURSION #define.
3873
3874         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3875         final `dash_p_leaf_HTML' parameter.
3876
3877         * url.c: get_urls_html() and htmlfindurl() now take final
3878         `dash_p_leaf_HTML' parameter.
3879
3880         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3881
3882         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3883
3884 2000-08-23  Dan Harkless  <wget@harkless.org>
3885
3886         * main.c (print_help): -B / --base was not mentioned.
3887
3888 2000-08-22  Dan Harkless  <wget@harkless.org>
3889
3890         * main.c (print_help): Modified -nc description to mention that it
3891         also prevents the creation of multiple versions of the same file
3892         with ".<number>" suffixes.
3893
3894 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3895
3896         * retr.c (retrieve_url): Consistently strdup opt.referer when
3897         setting u->referer.
3898
3899 2000-06-09  Dan Harkless  <wget@harkless.org>
3900
3901         * main.c (print_help): --help output for --waitretry was over 80 cols.
3902
3903 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3904
3905         * url.c (encode_string): Fix comment.
3906         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3907
3908 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3909
3910         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3911         files.
3912
3913 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3914
3915         * url.c (str_url): Print the port number only if it's different
3916         from the default port number for that protocol.
3917
3918 2000-05-22  Dan Harkless  <wget@harkless.org>
3919
3920         * main.c (print_help): Added --help line for Damir Dzeko
3921         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3922         Removed comments that --referer and --waitretry were undocumented.
3923         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3924         line for --execute.
3925
3926 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3927
3928         * ftp.c (getftp): Ditto.
3929
3930         * http.c (gethttp): Check for return value of fclose/fflush.
3931
3932 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3933
3934         * host.c (store_hostaddress): Instead of shifting ADDR, start
3935         copying from the correct address.
3936
3937 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3938
3939         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3940         alloca().
3941         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3942
3943 2000-04-04  Dan Harkless  <wget@harkless.org>
3944
3945         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3946         "left shift count >= width of type" warning on 32-bit
3947         architectures.  Got rid of it by tricking the compiler w/ a variable.
3948
3949         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3950         characters per RFC1738, namely everything above '~'.  It also
3951         generated a warning on OSes where char =~ unsigned char.  Fixed.
3952
3953 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3954
3955         * http.c (http_process_type): Removed needless strdup(), a memory
3956         leak.
3957
3958 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3959
3960         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3961
3962 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3963
3964         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3965
3966 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3967
3968         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3969
3970 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3971
3972         * url.c (UNSAFE_CHAR): New macro.
3973         (contains_unsafe): Use it.
3974         (encode_string): Ditto.
3975
3976 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3977
3978         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3979
3980 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3981
3982         * Use TOUPPER/TOLOWER.
3983
3984 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3985
3986         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3987
3988 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3989
3990         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3991
3992         * sysdep.h (ISALNUM): New macro.
3993         (TOLOWER): Ditto.
3994         (TOUPPER): Ditto.
3995
3996 2000-03-10  Dan Harkless  <wget@harkless.org>
3997
3998         * html.c (idmatch): Implemented checking of my new --follow-tags
3999         and --ignore-tags options.
4000
4001         * init.c (commands): Added comment reminding people adding new
4002         entries doing allocation to add corresponding freeing in cleanup().
4003         (commands): Added new followtags and ignoretags commands.
4004         (cleanup): Free storage for new followtags and ignoretags.
4005
4006         * main.c: Use of "comma-separated list" was random -- normalized
4007         it.  Did some alphabetization.  Added comments pointing out
4008         "Options without arguments" and "Options accepting an argument"
4009         sections of long_options[].  Added new options --follow-tags and
4010         -G / --ignore-tags.  Added comment that Damir's --referer is
4011         currently undocumented.  Added comment that Heiko's --waitretry is
4012         partially undocumented (mentioned in --help but not in
4013         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
4014
4015         * options.h (struct options): Added new fields follow_tags and
4016         ignore_tags.
4017
4018         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
4019
4020 2000-03-02  Dan Harkless  <wget@harkless.org>
4021
4022         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
4023         braces to avoid ambiguous `else'" warnings.  Eliminated them.
4024
4025         * http.c (gethttp): Dan Berger's query string patch is totally
4026         bogus.  If you have two different URLs, gen_page.cgi?page1 and
4027         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
4028         second will overwrite the first.  Also, parameters to implicit
4029         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
4030         be printed with trailing garbage characters, and could seg fault.
4031         Backing out the patch, which Dan B. informed me by email was just
4032         a kludge to download StarOffice from Sun made necessary due to
4033         wget's unconditional escaping of certain characters (room for an
4034         option there?).
4035         (http_loop): Heiko introduced "suggest explicit braces to avoid
4036         ambiguous `else'" warnings.  Eliminated them.
4037
4038         * main.c: Heiko's --wait / --waitretry backwards compatibility
4039         code looks to have been totally untested -- automatic variable
4040         'wr' was used without being initialized, and a long int was passed
4041         into setval()'s char* val parameter.
4042
4043         * recur.c (parse_robots): Applied Edward J. Sabol
4044         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
4045         problem with "User-agent:<space>*<space>" lines in robots.txt.
4046
4047         * url.c (parseurl, str_url): Removing Dan Berger's code (see
4048         http.c above for explanation).
4049
4050 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
4051
4052         * ftp.c: Respect new option waitretry.
4053
4054 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
4055
4056         * http.c (gethttp): Send custom Referer, if required.
4057
4058 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
4059
4060         * netrc.c (parse_netrc): Allow passwords to contain spaces.
4061
4062         * netrc.c (parse_netrc): New function.
4063
4064 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
4065
4066         * http.c (gethttp): Send it.
4067
4068         * url.c (parseurl): Detect query string in HTTP URL-s.
4069         (str_url): Print it.
4070
4071 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
4072
4073         * html.c (html_allow): Add <link href=...> and <script src=...>.
4074
4075 1999-05-02  andrew deryabin  <djsf@softhome.net>
4076
4077         * http.c (gethttp): Specify port in `Host' header only if it's
4078         different from 80.
4079
4080 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
4081
4082         * recur.c (recursive_retrieve): If a finite maximum depth is
4083         specified, and we're are already at that depth, don't download the
4084         HTML file for parsing.
4085
4086 2000-03-01  Dan Harkless  <wget@harkless.org>
4087
4088         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
4089         even though we don't do conversion on HTML files retrieved via
4090         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
4091         (ftp_retrieve_list): Added a comment saying where we need to
4092         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
4093         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
4094         a lie -- reworded as "Server file no newer than local file '%s' --".
4095
4096         * http.c (http_loop): Fixed a typo and clarified a comment.
4097         (http_loop): When -K and -N are specified together, compare size
4098         and timestamp of server file X against local file X.orig (if
4099         extant) rather than converted local file X.
4100         (http_loop): "Local file '%s' is more recent," is sometimes a lie
4101         -- reworded as "Server file no newer than local file '%s' --".
4102         (http_loop): Call new downloaded_file() function to prevent
4103         wrongful overwriting of .orig file when -N is specified.
4104
4105         * url.c (convert_links): When -K specified, only rename X to
4106         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
4107         file X due to -N, we clobber an X.orig from a previous invocation.
4108         (convert_links): Call the failsafe xstrdup(), not the real strdup().
4109         (convert_links): Added a note asking anyone who understands how
4110         multiple URLs can correspond to a single file to comment it.
4111         (downloaded_file): Added this new function.
4112
4113         * url.h (downloaded_file): Added prototype for this new function
4114         as well as its downloaded_file_t enum type.
4115
4116         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
4117
4118 2000-02-29  Dan Harkless  <wget@harkless.org>
4119
4120         * version.c: Upped version to developer-only "1.5.3+dev".
4121
4122 2000-02-18  Dan Harkless  <wget@harkless.org>
4123
4124         * init.c (backup_converted): Added this new option.
4125
4126         * main.c (-K / --backup-converted): Added this new option.
4127
4128         * options.h (backup_converted): Added this new option.
4129
4130         * url.c (convert_links): When backup_converted is specified, save
4131         file X as X.orig before converting.
4132
4133         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
4134
4135 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4136
4137         * version.c: Wget 1.5.3 is released.
4138
4139 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4140
4141         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
4142         address doesn't yield FQDN.
4143
4144 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4145
4146         * cmpt.c (strerror): Fix declaration of sys_errlist.
4147
4148 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4149
4150         * main.c (main): Don't use an array subscript as the first
4151         argument to STRDUP_ALLOCA.
4152         From Kaveh R. Ghazi.
4153
4154 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
4155
4156         * html.c (htmlfindurl): Download table background.
4157
4158 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
4159
4160         * init.c (parse_line): Would free *com before allocating it.
4161         (parse_line): Would free com instead of *com.
4162
4163 1998-09-10  Howard Gayle  <howard@fjst.com>
4164
4165         * url.c (get_urls_html): Would drop the last character of the
4166         link.
4167
4168 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4169
4170         * http.c (http_loop): Don't print status code if quiet.
4171
4172 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4173
4174         * log.c: Use <stdarg.h> only when __STDC__.
4175
4176 1998-09-10  Adam D. Moss  <adam@foxbox.org>
4177
4178         * html.c (htmlfindurl): Download <layer src=...>.
4179
4180 1998-09-10  Howard Gayle  <howard@fjst.com>
4181
4182         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
4183         not retrieved.
4184
4185 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4186
4187         * utils.c: Include <libc.h> on NeXT.
4188
4189 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
4190
4191         * url.c (get_urls_html): Fix calculation of URL position.
4192
4193 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4194
4195         * version.c: Wget 1.5.2 is released.
4196
4197 1998-06-23  Dave Love  <d.love@dl.ac.uk>
4198
4199         * ftp.c, init.c, netrc.c: Include errno.h.
4200
4201         * http.c: Include errno.h and time header.
4202
4203         * Makefile.in (exext): Define.
4204         (install.bin, uninstall.bin): Use it.
4205
4206 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4207
4208         * http.c (http_loop): Don't attempt to compare local and remote
4209         sizes if the remote size is unknown.
4210
4211 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
4212
4213         * url.c (get_urls_html): Use malloc() instead of alloca in the
4214         loop.
4215
4216 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4217
4218         * version.c: Wget 1.5.2-b4 is released.
4219
4220 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4221
4222         * url.c (get_urls_html): Ignore spaces before and after the URI.
4223
4224 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
4225
4226         * ftp.c (getftp): Translate `done'.
4227
4228 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4229
4230         * version.c: Wget 1.5.2-b3 is released.
4231
4232 1998-06-06  Alexander Kourakos  <awk@bnt.com>
4233
4234         * init.c (cleanup): Close dfp, don't free it.
4235
4236 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4237
4238         * utils.c (make_directory): Twiddle.
4239
4240         * config.h.in: Added template for access().
4241
4242 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
4243
4244         * html.c (htmlfindurl): Download <input src=...>
4245
4246 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
4247
4248         * utils.c (file_exists_p): Use access() with two arguments.
4249
4250 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
4251
4252         * netrc.c (parse_netrc): Correct logic.
4253
4254 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
4255
4256         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
4257         <ljm@ljm.wownet.net>.
4258
4259 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
4260
4261         * version.c: Wget 1.5.2-b2 is released.
4262
4263 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
4264
4265         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
4266
4267 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
4268
4269         * retr.c (elapsed_time): Return correct value when
4270         HAVE_GETTIMEOFDAY is undefined.
4271
4272 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
4273
4274         * version.c: Wget 1.5.2-b1 is released.
4275
4276 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
4277
4278         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
4279         (_getopt_internal): Don't translate `#if 0'-ed strings.
4280
4281 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4282
4283         * mswindows.c (ws_handler): Use fork_to_background().
4284
4285 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
4286
4287         * version.c: Wget 1.5.1 is released.
4288
4289 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
4290
4291         * http.c (parse_http_status_line): Avoid `minor' and `major'
4292         names.
4293
4294 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
4295
4296         * utils.c (mkdirhier): Renamed to make_directory.
4297
4298 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
4299
4300         * mswindows.c (fork_to_background): Define under Windows.
4301
4302         * utils.c (fork_to_background): New function.
4303
4304         * html.c (htmlfindurl): Removed rerdundant casts.
4305
4306 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4307
4308         * mswindows.c (ws_mypath): Cache the path.
4309
4310 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
4311
4312         * ftp.h: Prefix enum ftype members with FT_.
4313
4314         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
4315
4316         * mswindows.h: Use stat under Borland, _stat under MSVC.
4317
4318 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
4319
4320         * http.c (known_authentication_scheme_p): New function.
4321         (gethttp): Handle authorization more correctly.
4322
4323         * ftp-basic.h: Removed.
4324
4325         * cmpt.h: Removed.
4326
4327         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
4328         with gcc 2.8.
4329         (numdigit): Use `while' loop.
4330
4331         * http.c (create_authorization_line): Detect authentication
4332         schemes case-insensitively.
4333
4334         * http.c (extract_header_attr): Use strdupdelim().
4335         (digest_authentication_encode): Move declaration of local
4336         variables to smaller scope.
4337         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
4338         (create_authorization_line): Detect authentication schemes
4339         case-insensitively.
4340
4341         * utils.c (touch): Constify.
4342
4343         * http.c (gethttp): Report a nicer error when no data is received.
4344
4345         * rbuf.h (RBUF_READCHAR): Ditto.
4346
4347         * ftp-basic.c (ftp_response): Use sizeof.
4348
4349 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
4350
4351         * retr.c (print_percentage): EXPECTED is long, not int.
4352         (print_percentage): Use floating-point arithmetic to avoid
4353         overflow with large files' sizes multiplied with 100.
4354
4355 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
4356
4357         * config.h.in: Added pid_t stub.
4358
4359         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
4360         define it).
4361
4362 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
4363
4364         * version.c: Wget 1.5.0 is released.
4365
4366 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
4367
4368         * url.c (str_url): Ditto.
4369
4370         * ftp-basic.c (ftp_rest): Use new name.
4371
4372         * utils.c (long_to_string): Renamed from prnum().
4373
4374 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
4375
4376         * version.c: Wget 1.5-b17 is released.
4377
4378 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4379
4380         * headers.c (header_get): New argument FLAGS.
4381
4382         * http.c (gethttp): If request is malformed, bail out of the
4383         header loop.
4384         (gethttp): Check for empty header *after* the status line checks.
4385         (gethttp): Disallow continuations for status line.
4386
4387 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4388
4389         * version.c: Wget 1.5-b16 is released.
4390
4391 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4392
4393         * init.c (commands): Renamed `always_rest' to `continue'.
4394
4395 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
4396
4397         * all: Use it.
4398
4399         * log.c (logputs): New argument.
4400         (logvprintf): Ditto.
4401         (logprintf): Ditto.
4402
4403 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4404
4405         * http.c (http_atotm): Update comment.
4406
4407         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
4408
4409         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
4410
4411         * main.c (i18n_initialize): New function.
4412         (main): Use it.
4413
4414         * log.c: Include <unistd.h>.
4415
4416         * retr.c (show_progress): Cast alloca to char *.
4417
4418 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4419
4420         * version.c: Wget 1.5-b15 is released.
4421
4422 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4423
4424         * utils.h: Declare file_non_directory_p().
4425
4426 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
4427
4428         * main.c (main): It's `tries', not `numtries' now.
4429
4430 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4431
4432         * init.c (getperms): Removed.
4433
4434 1998-04-01  Tim Charron  <tcharron@interlog.com>
4435
4436         * log.c (logvprintf): Don't use ARGS twice.
4437
4438 1998-04-01  John  <john@futuresguide.com>
4439
4440         * mswindows.c: Cleaned up.
4441
4442 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4443
4444         * version.c: Wget 1.5-b14 is released.
4445
4446 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4447
4448         * ftp-opie.c (STRLEN4): New macro.
4449         (btoe): Use it.
4450
4451 1998-04-01  Junio Hamano  <junio@twinsun.com>
4452
4453         * http.c: Document all the Digest functions.
4454
4455 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4456
4457         * utils.c (file_non_directory_p): Renamed from isfile().
4458
4459         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
4460
4461 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4462
4463         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
4464
4465         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
4466         style.
4467         (cmd_permissions): Removed.
4468
4469         * config.h.in: Add template for WORDS_BIGENDIAN.
4470
4471 1998-03-31  Junio Hamano  <junio@twinsun.com>
4472
4473         * http.c (HEXD2asc): New macro.
4474         (dump_hash): Use it.
4475
4476 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4477
4478         * version.c: Wget 1.5-b13 is released.
4479
4480 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4481
4482         * main.c (main): Don't try to use `com'.
4483
4484 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4485
4486         * init.c (cmd_permissions): New function.
4487
4488 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4489
4490         * version.c: Wget 1.5-b12 is released.
4491
4492 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4493
4494         * init.c (commands): Renamed `numtries' to `tries'.
4495         (cmd_spec_debug): Removed.
4496         (home_dir): Under Windows, return `C:\' if HOME is undefined.
4497
4498 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4499
4500         * config.h.in: Define _XOPEN_SOURCE.
4501
4502         * init.c (check_user_specified_header): New function.
4503         (cmd_spec_header): Use it.
4504         (cmd_spec_useragent): New function.
4505
4506 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4507
4508         * version.c: Wget 1.5-b11 is released.
4509
4510 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
4511
4512         * wget.h: Include <libintl.h> only if NLS is enabled.
4513
4514 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
4515
4516         * options.h (struct options): Made `wait' a long.
4517         (struct options): Ditto for `timeout'.
4518
4519 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
4520
4521         * utils.c (exists): Renamed to file_exists_p.
4522         (file_exists_p): Use access() if available.
4523
4524 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
4525
4526         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
4527         infloop.
4528
4529         * log.c: do_logging -> save_log_p.
4530
4531         * config.h.in: Added template for HAVE_VSNPRINTF.
4532
4533 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4534
4535         * init.c: Ditto.
4536
4537         * http.c: Protect declaration against non-ANSI compiler.
4538
4539         * log.c (logvprintf): Use vsnprintf() if available.
4540
4541         * getopt.c (main): Don't translate test stuff.
4542
4543 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4544
4545         * version.c: Wget 1.5-b10 is released.
4546
4547 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
4548
4549         * ftp.c (getftp): Don't translate "CWD %s".
4550
4551         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
4552
4553 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4554
4555         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
4556
4557         * log.c (logputs): New function.
4558         (logvprintf): Renamed from vlogmsg; use logputs().
4559
4560         * retr.c (show_progress): Print `[100%]' when the retrieval is
4561         finished.
4562
4563         * init.c (run_wgetrc): Use FILE, not PATH.
4564         (wgetrc_file_name): Ditto.
4565
4566 1998-03-07  Tim Adam  <tma@osa.com.au>
4567
4568         * recur.c (parse_robots): Correctly reset `entries' on empty
4569         disallow.
4570
4571 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4572
4573         * init.c (cmd_spec_debug): Use cmd_boolean().
4574
4575 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
4576
4577         * http.c (gethttp): Create proxy-authorization correctly.
4578
4579 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4580
4581         * md5.c: Ditto.
4582
4583         * getopt.c: Use ANSI function definitions.
4584
4585         * ftp-opie.c: New file.
4586
4587         * options.h: Don't redefine EXTERN.
4588
4589         * init.c: Sort it correctly.
4590
4591 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4592
4593         * version.c: Wget 1.5-b9 is released.
4594
4595 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4596
4597         * recur.c (recursive_retrieve): Reset `first_time'.
4598
4599         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
4600
4601         * rbuf.c (rbuf_peek): Simplified.
4602         (rbuf_flush): Use MINVAL.
4603
4604         * wget.h (MINVAL): Moved from url.h.
4605
4606         * rbuf.h (RBUF_FD): New macro.
4607
4608         * url.c (add_url): Add to the head of the list.
4609
4610         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
4611         file.
4612         (getftp): Set the default permissions to 0600.
4613
4614 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
4615
4616         * url.c (get_urls_html): Ditto.
4617         (convert_links): Ditto.
4618
4619         * recur.c (parse_robots): Ditto.
4620
4621         * html.c (ftp_index): Ditto.
4622
4623         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
4624
4625         * init.c (defaults): Initialize `opt' to zero via memset.
4626
4627         * http.c (digest_authentication_encode): goto considered harmful.
4628
4629 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
4630
4631         * ftp.c (delelement): Simplify and fix leak.
4632
4633 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
4634
4635         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
4636
4637         * url.h (HEXD2ASC): Removed warning.
4638
4639         * init.c (comind): Use binary search.
4640         (commands): Reorganized.
4641         (setval): Ditto.
4642         (cmd_boolean): New function.
4643         (cmd_number): Ditto.
4644         (cmd_number_inf): Ditto.
4645         (cmd_string): Ditto.
4646         (cmd_vector): Ditto.
4647         (cmd_directory_vector): Ditto.
4648         (cmd_bytes): Ditto.
4649         (cmd_time): Ditto.
4650         (cmd_spec_debug): Ditto.
4651         (cmd_spec_dirmode): Ditto.
4652         (cmd_spec_dirstruct): Ditto.
4653         (cmd_spec_dotstyle): Ditto.
4654         (cmd_spec_header): Ditto.
4655         (cmd_spec_htmlify): Ditto.
4656         (cmd_spec_mirror): Ditto.
4657         (cmd_spec_outputdocument): Ditto.
4658         (cmd_spec_recursive): Ditto.
4659         (settime): Merged with cmd_time().
4660         (setbytes): Merged with cmd_bytes().
4661         (setonoff): Merged with cmd_boolean().
4662         (onoff): Ditto.
4663
4664 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4665
4666         * Makefile.in (distclean): Remove `config.h'.
4667
4668 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4669
4670         * version.c: Wget 1.5-b8 is released.
4671
4672 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4673
4674         * http.c (digest_authentication_encode): New function.
4675         (create_authorization_line): Use it.
4676         (dump_hash): New function.
4677         (digest_authentication_encode): Use it.
4678
4679         * fnmatch.c: Renamed from `mtch.c'.
4680
4681 1998-02-15  Karl Eichwalder  <ke@suse.de>
4682
4683         * main.c (main): Tag "Written by..." string as translatable.
4684
4685 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4686
4687         * wget.h (FREE_MAYBE): New macro.
4688
4689         * http.c (create_authorization_line): Don't use ANSI C string
4690         concatenation feature.
4691         (basic_authentication_encode): Use alloca() for temporary
4692         variables.
4693
4694         * recur.h: Ditto.
4695
4696         * http.c: Ditto.
4697
4698         * headers.h: Ditto.
4699
4700         * ftp-basic.c: Protect declaration against non-ANSI compiler.
4701
4702         * http.c (create_authorization_line): Cast `unsigned char *' to
4703         `char *' for sprintf, to shut up the noisy Digital Unix cc.
4704
4705 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4706
4707         * version.c: Wget 1.5-b7 is released.
4708
4709 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4710
4711         * cmpt.c (strstr): Synched with glibc-2.0.6.
4712
4713         * ftp-basic.c (calculate_skey_response): Ditto.
4714         (calculate_skey_response): Use alloca().
4715
4716         * http.c (create_authorization_line): Work with FSF's version of
4717         md5.c.
4718
4719         * md5.c: New file, from GNU libc.
4720
4721 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4722
4723         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4724
4725 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4726
4727         * http.c (basic_authentication_encode): New function, instead of
4728         the macro.
4729
4730 1998-02-13  Junio Hamano  <junio@twinsun.com>
4731
4732         * http.c: Add HTTP-DA support.
4733         * ftp-basic.c: Add Opie/S-key support.
4734         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4735         * md5.c, md5.h: New files.
4736
4737 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4738
4739         * http.c (http_process_range): Renamed from hprocrange().
4740         (http_process_range): Parse the whole header.
4741
4742         * headers.c: New file.
4743         (header_process): New function.
4744         (header_get): Renamed from fetch_next_header.
4745
4746         * all: Include utils.h only where necessary.
4747
4748         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4749
4750         * wget.h: Add provisions for dmalloc.
4751
4752 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4753
4754         * version.c: Wget 1.5-b6 is released.
4755
4756 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4757
4758         * ftp.c (ftp_loop): Determine `filename' more precisely.
4759
4760         * init.c (setval): Don't set `opt.quiet' if output-document is
4761         `-'.
4762
4763         * log.c (log_init): Print to STDERR instead of STDOUT.
4764         (vlogmsg): Use STDERR by default.
4765         (logflush): Ditto.
4766
4767 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4768
4769         * host.c: Use addr_in again.
4770
4771 1998-02-08  Karl Eichwalder  <karl@suse.de>
4772
4773         * http.c (gethttp): Fixed typo.
4774
4775 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4776
4777         * version.c: Wget 1.5-b5 is released.
4778
4779 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4780
4781         * retr.c (show_progress): Use it.
4782
4783         * log.c (logflush): New function.
4784
4785         * wget.h: Utilize __attribute__ if on gcc.
4786
4787 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4788
4789         * http.c (base64_encode_line): New argument LENGTH.
4790         (BASIC_AUTHENTICATION_ENCODE): Use it.
4791         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4792
4793         * main.c (main): Fixed fprintf() format mismatch.
4794
4795 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4796
4797         * version.c: Wget 1.5-b4 is released.
4798
4799 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4800
4801         * host.c: use sockaddr_in instead of addr_in.
4802
4803 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4804
4805         * init.c (cleanup): Use it.
4806
4807         * recur.c (recursive_cleanup): New function.
4808
4809         * retr.c (retrieve_from_file): Ditto.
4810
4811         * main.c (main): Use it.
4812
4813         * recur.c (recursive_reset): New function.
4814
4815         * retr.c (retrieve_from_file): Ditto.
4816
4817         * main.c (main): Simplify call to recursive_retrieve().
4818
4819         * recur.c (recursive_retrieve): Removed FLAGS argument.
4820
4821         * http.c (gethttp): Changed call to iwrite().
4822
4823 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4824
4825         * url.c (get_urls_html): Ditto.
4826         (free_urlpos): Ditto.
4827         (mkstruct): Ditto.
4828         (construct): Ditto.
4829
4830         * retr.c (retrieve_url): Move declaration of local variables to
4831         smaller scope.
4832
4833         * url.c (urlproto): Use it.
4834         (parseurl): Ditto.
4835         (str_url): Ditto.
4836         (get_urls_html): Ditto.
4837
4838         * utils.h (ARRAY_SIZE): New macro.
4839
4840         * url.c (proto): Moved from url.h.
4841
4842         * url.h (URL_CLEANSE): Reformatted.
4843         (USE_PROXY_P): Renamed from USE_PROXY.
4844
4845         * ftp-basic.c: Adjust to the new interface of iwrite().
4846
4847         * ftp-basic.c (ftp_port): Use alloca().
4848
4849 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4850
4851         * version.c: Wget 1.5-b3 is released.
4852
4853         * host.c (ftp_getaddress): Don't print to stderr directly.
4854
4855         * init.c (setbytes): Support `g' for gigabytes.
4856         (cmdtype): New specification CTIME.
4857         (setval): Use it with settime().
4858         (commands): Use it for WAIT and TIMEOUT.
4859
4860 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4861
4862         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4863         (gethttp): Use it.
4864
4865         * utils.c (unique_name_1): Moved from url.c.
4866         (unique_name): Ditto.
4867
4868         * url.c (url_filename): Ditto.
4869
4870         * log.c (redirect_output): Changed call to unique_name().
4871
4872         * url.c (unique_name_1): Renamed from unique_name().
4873         (unique_name): Changed interface.
4874
4875         * init.c (enum cmdid): Moved from init.h.
4876         (cmdtype): Ditto.
4877         (struct cmd): Ditto.
4878
4879         * main.c (main): Use it.
4880         (main): Moved `--backups' to not have a short option.
4881
4882         * options.h (struct options): New member BACKGROUND.
4883
4884         * main.c (print_help): Rearranged.
4885         (main): New long options for -n* short options: --no-directories,
4886         --no-host-directories, --non-verbose, --no-host-lookup and
4887         --dont-remove-listing.
4888
4889 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4890
4891         * main.c (main): Use log_close().
4892
4893         * log.c: New variable LOGFP.
4894         (vlogmsg): Use it.
4895         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4896         instead.
4897         (log_close): New function.
4898
4899         * options.h (struct options): Removed LFILE.
4900
4901         * log.c (log_enable): Removed.
4902
4903         * main.c (main): Use it.
4904
4905         * log.c (log_init): New function.
4906
4907         * url.c (get_urls_html): Removed needless assignment to BASE.
4908
4909         * host.c (add_hlist): Don't set CMP needlessly.
4910
4911         * utils.c (match_backwards): Ditto.
4912         (in_acclist): Ditto.
4913
4914         * url.c (findurl): Ditto.
4915
4916         * netrc.c (parse_netrc): Ditto.
4917
4918         * log.c (log_dump): Ditto.
4919
4920         * html.c (html_quote_string): Ditto.
4921
4922         * ftp-basic.c (ftp_request): Made static.
4923
4924         * connect.c: Made global variables static.
4925
4926         * url.c (construct): Ditto.
4927
4928         * init.c (init_path): Avoid assignment inside `if'-condition.
4929
4930         * ftp.c: Don't include in.h or winsock.h.
4931
4932         * ftp.c (ftp_loop): Use SZ.
4933
4934         * connect.c (bindport): Cast &addrlen to int *.
4935         (conaddr): Ditto.
4936
4937         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4938
4939 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4940
4941         * ftp.c (getftp): Initialize opt.ftp_pass here.
4942         (ftp_retrieve_dirs): Use alloca().
4943
4944         * init.c (defaults): Don't initialize opt.ftp_pass.
4945
4946         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4947         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4948
4949 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4950
4951         * recur.c (parse_robots): Check for comments more correctly.
4952
4953         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4954         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4955         hostname.
4956
4957 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4958
4959         * version.c: Wget 1.5-b2 is released.
4960
4961         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4962
4963         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4964
4965         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4966         char.
4967
4968         * log.c: Don't attempt to hide arguments from ansi2knr.
4969
4970         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4971
4972         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4973
4974         * ftp.c (getftp): Ditto.
4975
4976         * http.c (gethttp): Use it.
4977
4978         * retr.c (get_contents): New argument EXPECTED; pass it to
4979         show_progress().
4980         (show_progress): New argument EXPECTED; use it to display
4981         percentages.
4982
4983         * init.c (setval): Ditto.
4984
4985         * http.c (gethttp): Ditto.
4986         (http_loop): Ditto.
4987
4988         * ftp.c (getftp): Ditto.
4989         (ftp_loop_internal): Ditto.
4990
4991         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4992
4993         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4994
4995         * netrc.c (search_netrc): Use alloca().
4996
4997         * init.c (defaults): Initialize no_flush.
4998
4999         * log.c (vlogmsg): Don't flush if no_flush.
5000
5001         * options.h (struct options): New variable no_flush.
5002
5003         * main.c (main): Don't play games with buffering.
5004
5005         * log.c (vlogmsg): Flush the output after every message.
5006
5007 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5008
5009         * init.c (parse_line): Ditto.
5010
5011         * url.c (get_urls_html): Ditto.
5012
5013         * main.c (main): Don't cast to unsigned char.
5014
5015         * init.c (run_wgetrc): Don't cast to unsigned char.
5016         (parse_line): Accept char instead of unsigned char.
5017
5018         * html.c (htmlfindurl): Use char instead of unsigned char.
5019
5020         * all: Use them.
5021
5022         * sysdep.h: Add wrappers to ctype macros to make them
5023         eight-bit-clean:
5024
5025 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5026
5027         * html.c (htmlfindurl): Download <img lowsrc=...>
5028
5029         * main.c (main): Ignore SIGPIPE.
5030
5031         * connect.c (select_fd): New argument WRITEP.
5032         (iwrite): Call select_fd().
5033
5034 1997-02-27  Fila Kolodny <fila@ibi.com>
5035
5036         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
5037         one already exists, just skip it.
5038
5039 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5040
5041         * http.c (gethttp): Cosmetic changes.
5042
5043         * http.c (check_end): Allow `+D...' instead of `GMT'.
5044         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
5045
5046         * url.c (process_ftp_type): New function.
5047         (parseurl): Use it.
5048
5049         * connect.c (iwrite): Allow writing in a few chunks.
5050         (bindport): Made SRV static, so addr can point to it.
5051         (select_fd): Removed HPUX kludge.
5052
5053         * host.c (free_hlist): Incorporated into clean_hosts().
5054
5055 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5056
5057         * host.c (hlist): Made static.
5058         (search_address): Cosmetic change.
5059
5060 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5061
5062         * version.c: Wget v1.5-b1 is released.
5063
5064         * http.c (hgetlen): Use sizeof() to get the header length.
5065         (hgetrange): Ditto.
5066         (hgettype): Ditto.
5067         (hgetlocation): Ditto.
5068         (hgetmodified): Ditto.
5069         (haccepts_none): Ditto.
5070
5071         * main.c (main): Updated `--version' and `--help' output, as per
5072         Francois Pinard's suggestions.
5073
5074         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
5075         textdomain().
5076
5077         * config.h.in: Define stubs for I18N3.
5078
5079         * wget.h: Include libintl.h.
5080
5081 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5082
5083         * url.c (mkstruct): Check for opt.cut_dirs.
5084         (mkstruct): alloca()-te more, xmalloc() less.
5085
5086         * utils.c (load_file): Check for ferror().
5087
5088         * url.c (get_urls_file): Close only the files we opened.
5089         (get_urls_html): Ditto.
5090         (count_slashes): New function.
5091
5092         * http.h: Removed.
5093
5094         * http.c (gethttp): Respect username and password provided by
5095         proxy URL.
5096         (base64_encode_line): Write into an existing buffer instead of
5097         malloc-ing a new one.
5098         (struct http_stat): Moved from http.h
5099
5100         * retr.c (retrieve_url): Free SUF.
5101
5102         * all: Removed lots of unnecessary .h dependencies.
5103
5104         * html.c (global_state): Made static.
5105
5106         * utils.h (ALLOCA_ARRAY): New macro.
5107
5108         * main.c (main): New option `--cut-dirs'.
5109
5110         * url.c (construct): Use alloca() for T.
5111
5112         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
5113
5114         * host.c (_host_t): Moved from host.h.
5115         (struct host): Renamed from _host_t.
5116         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
5117         (realhost): Ditto.
5118
5119         * host.h: Don't include url.h.
5120
5121         * ftp.c (LIST_FILENAME): Moved from ftp.h.
5122
5123         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
5124
5125         * main.c (main): Enable log if the output goes to a TTY.
5126
5127         * connect.h: Removed unused constant `BACKLOG'.
5128
5129         * config.h.in: Check for isatty().
5130
5131         * Makefile.in (LINK): Use CFLAGS when linking.
5132
5133 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5134
5135         * mswindows.c (ws_hangup): Use redirect_output().
5136
5137         * main.c (redirect_output_signal): New function; use
5138         redirect_output().
5139
5140         * log.c (redirect_output): New function, based on hangup(), which
5141         is deleted.
5142
5143         * log.c (vlogmsg): New function.
5144
5145         * wget.h (DEBUGP): Use debug_logmsg().
5146
5147         * main.c (hangup): Use it.
5148
5149         * log.c (log_dump): New function.
5150
5151         * utils.h (DO_REALLOC): Use `long' for various sizes.
5152
5153         * http.c (hskip_lws): Use `while', for clarity.
5154         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
5155         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
5156
5157         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
5158         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
5159
5160         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
5161         (LEGIBLE_SEPARATOR): Ditto.
5162         (FILE_BUFFER_SIZE): Ditto.
5163
5164         * retr.c (BUFFER_SIZE): Moved from retr.h.
5165
5166         * log.c: New file.
5167         (logmsg): Moved from utils.c.
5168         (debug_logmsg): New function.
5169
5170         * mswindows.h: Include it here.
5171
5172         * init.c: Ditto.
5173
5174         * utils.c: Don't include <windows.h>.
5175
5176 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
5177
5178         * host.c (ftp_getaddress): Ditto.
5179
5180         * main.c (main): Use it.
5181
5182         * utils.h (STRDUP_ALLOCA): New macro.
5183
5184         * init.c: Prepend `wget: ' to error messages printed on stderr.
5185
5186         * utils.c (mkdirhier): Renamed from mymkdir.
5187         (touch): Renamed from my_touch.
5188         (pwd_cuserid): Renamed from my_cuserid().
5189
5190 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
5191
5192         * utils.c (accdir): Process wildcards.
5193         (proclist): New function.
5194         (accdir): Use it to avoid code repetition.
5195
5196 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5197
5198         * recur.c (parse_robots): Respect opt.useragent; use alloca().
5199
5200         * http.c (gethttp): Construct useragent accordingly.
5201
5202         * version.c: Changed version string to numbers-only.
5203
5204         * main.c (print_help): List all the options.
5205
5206         * mswindows.c (windows_main_junk): Initialize argv0 here.
5207
5208 1998-01-24  Karl Heuer  <kwzh@gnu.org>
5209
5210         * netrc.c (search_netrc): Initialize `l' only after processing
5211         netrc.
5212
5213         * main.c (main): Don't trap SIGHUP if it's being ignored.
5214
5215 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5216
5217         * all: Use logmsg().
5218
5219         * utils.c (time_str): Moved from retr.c.
5220         (logmsg): New function.
5221         (logmsg_noflush): Ditto.
5222
5223         * rbuf.c: New file, moved buf_* functions here.
5224
5225         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
5226
5227         * ftp-basic.c (ftp_rest): Use prnum().
5228
5229         * ftp-basic.c: Ditto.
5230
5231         * ftp.c: Use the new reading functions and macros.
5232
5233         * retr.c (buf_initialize): New function.
5234         (buf_initialized_p): Ditto.
5235         (buf_uninitialize): Ditto.
5236         (buf_fd): Ditto.
5237
5238         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
5239         efficiency.
5240         (gethttp): Use alloca() where appropriate.
5241
5242         * retr.c (buf_readchar): Use it.
5243         (buf_peek): Use rstreams.
5244
5245         * retr.h (BUF_READCHAR): New macro.
5246
5247         * init.c (home_dir): Rewritten for clarity.
5248         (init_path): Ditto.
5249
5250         * mswindows.c (ws_backgnd): Made static.
5251         (read_registry): Ditto.
5252         (ws_cleanup): Ditto.
5253         (ws_handler): Ditto.
5254
5255 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5256
5257         * alloca.c: New file.
5258
5259         * Makefile.in (ALLOCA): Define.
5260
5261         * mswindows.c (ws_help): Constify.
5262         (ws_help): Use alloca.
5263
5264         * mswindows.c: Reformat.
5265
5266         * all: Added _(...) annotations for I18N snarfing and translation.
5267
5268         * host.c (ftp_getaddress): Nuke SYSINFO.
5269         (ftp_getaddress): Don't use getdomainname().
5270         (ftp_getaddress): Use uname(), where available.
5271
5272         * http.c (gethttp): Protect a stray fprintf().
5273
5274         * init.c (settime): New function.
5275         (setval): Treat WAIT specially, allowing suffixes like `m' for
5276         minutes, etc.
5277
5278 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5279
5280         * url.c (get_urls_html): Use alloca() for TEMP.
5281
5282 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
5283
5284         * url.c (rotate_backups): New function.
5285
5286         * http.c (gethttp): Ditto.
5287
5288         * ftp.c (getftp): Rotate backups.
5289
5290 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
5291
5292         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
5293         xrealloc() and xstrdup().  Use the new functions.
5294
5295         * url.c (decode_string): Made static.
5296         (has_proto): Ditto.
5297         (parse_dir): Ditto.
5298         (parse_uname): Ditto.
5299         (mkstruct): Ditto.
5300         (construct): Ditto.
5301         (construct_relative): Ditto.
5302
5303         * retr.c (show_progress): Made static.
5304
5305         * recur.c (robots_url): Made static.
5306         (retrieve_robots): Ditto.
5307         (parse_robots): Ditto.
5308         (robots_match): Ditto.
5309
5310         * main.h: Removed.
5311
5312         * main.c (printhelp): Made static.
5313         (hangup): Ditto.
5314
5315         * init.c (comind): Made static.
5316         (defaults): Ditto.
5317         (init_path): Ditto.
5318         (run_wgetrc): Ditto.
5319         (onoff): Ditto.
5320         (setonoff): Ditto.
5321         (setnum): Ditto.
5322         (myatoi): Ditto.
5323         (getperms): Ditto.
5324         (setbytes): Ditto.
5325
5326         * http.c (fetch_next_header): Made static.
5327         (hparsestatline): Ditto.
5328         (hskip_lws): Ditto.
5329         (hgetlen): Ditto.
5330         (hgetrange): Ditto.
5331         (hgettype): Ditto.
5332         (hgetlocation): Ditto.
5333         (hgetmodified): Ditto.
5334         (haccepts_none): Ditto.
5335         (gethttp): Ditto.
5336         (base64_encode_line): Ditto.
5337         (mktime_from_utc): Ditto.
5338         (http_atotm): Ditto.
5339
5340         * html.c (idmatch): Made static.
5341
5342         * host.c (search_host): Made static.
5343         (search_address): Ditto.
5344         (free_hlist): Ditto.
5345
5346         * ftp.c (getftp): Made static.
5347         (ftp_loop_internal): Ditto.
5348         (ftp_get_listing): Ditto.
5349         (ftp_retrieve_list): Ditto.
5350         (ftp_retrieve_dirs): Ditto.
5351         (ftp_retrieve_glob): Ditto.
5352         (freefileinfo): Ditto.
5353         (delelement): Ditto.
5354
5355         * ftp-ls.c (symperms): Made static.
5356         (ftp_parse_unix_ls): Ditto.
5357
5358         * connect.c (select_fd): Made static.
5359
5360         * utils.c (xmalloc): Renamed from nmalloc.
5361         (xrealloc): Renamed from nrealloc.
5362         (xstrdup): Renamed from nstrdup.
5363
5364         * getopt.c (exchange): Use alloca.
5365
5366         * mswindows.c (mycuserid): Use strncpy.
5367
5368         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
5369         systhings.h, windecl.h and winjunk.h removed.
5370
5371         * mswindows.c (sleep): New function.
5372
5373         * utils.c: Include <windows.h> under Windows.
5374
5375 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
5376
5377         * url.h (URL_UNSAFE): Change default under Windows.
5378
5379         * retr.c (retrieve_from_file): Respect opt.delete_after.
5380
5381         * main.c (main): Call ws_help on Windows.
5382
5383         * winjunk.c (windows_main_junk): New function.
5384
5385         * main.c (main): Junk-process argv[0].
5386
5387         * http.c (mktime_from_utc): Return -1 if mktime failed.
5388
5389         * http.c (http_loop): Ditto.
5390
5391         * ftp.c (ftp_loop_internal): Change title on Windows when using a
5392         new URL.
5393
5394         * winjunk.c (getdomainname): Lots of functions.
5395
5396 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
5397
5398         * cmpt.c (strptime_internal): Handle years more correctly for
5399         `%y'.
5400
5401 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
5402
5403         * http.c (gethttp): Allocate enough space for
5404         `Proxy-Authorization' header.
5405
5406 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
5407
5408         * version.c: Wget/1.4.5 is released.
5409
5410 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
5411
5412         * retr.c (get_contents): Check return value of fwrite more
5413         carefully.
5414
5415 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
5416
5417         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
5418         year, regardless of century.
5419
5420 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5421
5422         * utils.c (isfile): Use `lstat' instead of `stat'.
5423
5424 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5425
5426         * utils.c (numdigit): Use explicit test.
5427
5428 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
5429
5430         * http.c (http_loop): Always use `url_filename' to get u->local.
5431
5432 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
5433
5434         * url.c: Recognize https.
5435
5436 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
5437
5438         * recur.c (recursive_retrieve): Lowercase just the host name.
5439
5440 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
5441
5442         * url.c (get_urls_file): Use the correct test.
5443         (get_urls_html): Ditto.
5444
5445 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5446
5447         * connect.c: Reverted addrlen to int.
5448
5449         * init.c (parse_line): Check for -1 instead of NONE.
5450
5451         * version.c: Changed version to 1.4.5.
5452
5453 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5454
5455         * init.c: New option netrc.
5456         (initialize): Don't parse .netrc.
5457
5458         * cmpt.c (recursive): Return rp.
5459         (strptime_internal): Match the long strings first, the abbreviated
5460         second.
5461
5462 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
5463
5464         * http.c (check_end): New function.
5465         (http_atotm): Use it.
5466
5467 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
5468
5469         * http.c (gethttp): Use them.
5470
5471         * init.c: New options proxy_user and proxy_passwd.
5472
5473 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
5474
5475         * ftp.c (ftp_retrieve_list): Create links even if not relative.
5476
5477 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
5478
5479         * recur.c (recursive_retrieve): Lowercase the host name, if the
5480         URL is not "optimized".
5481
5482         * host.c (realhost): Return l->hostname, even if it matches with
5483         host.
5484
5485 1997-02-10  Marin Purgar  <pmc@asgard.hr>
5486
5487         * connect.c: Make addrlen size_t instead of int.
5488         (conaddr): Ditto.
5489
5490 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5491
5492         * systhings.h: Define S_ISLNK on NeXT too.
5493
5494 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
5495
5496         * version.c: Released 1.4.3.
5497
5498         * url.c: Futher update to list of protostrings.
5499         (skip_proto): Skip `//' correctly for FTP and HTTP.
5500
5501         * url.c (get_urls_html): Handle bogus `http:' things a little
5502         different.
5503
5504         * main.c (main): Removed `follow-ftp' from `f'.
5505         (main): Dumped the `prefix-files' and `file-prefix' options and
5506         features; old and bogus.
5507         (main): Exit on failed setval() in `-e'.
5508
5509         * http.c (fetch_next_header): Use it to detect header continuation
5510         correctly.
5511
5512         * retr.c (buf_peek): New function.
5513
5514 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5515
5516         * wget.h: Include time.h and stuff.
5517
5518 1997-02-08  Roger Beeman  <beeman@cisco.com>
5519
5520         * ftp.c: Include <time.h>
5521
5522 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
5523
5524         * url.c (findurl): Would read over buffer limits.
5525
5526 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5527
5528         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
5529
5530 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
5531
5532         * http.c (http_atotm): Initialize tm.is_dst.
5533
5534 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5535
5536         * http.c (gethttp): Don't print the number of retrieved headers.
5537
5538         * main.c (main): New option `--no-clobber', alias for `-nc'.
5539
5540         * url.c: Recognize `https://'.
5541
5542 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5543
5544         * host.c (herrmsg): Don't use h_errno.
5545
5546 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5547
5548         * host.c (accept_domain): Use it.
5549
5550         * main.c (main): New option `--exclude-domains'.
5551
5552         * retr.c (retrieve_url): Use it.
5553         (retrieve_url): Bail out when an URL is redirecting to itself.
5554
5555         * url.c (url_equal): New function.
5556
5557 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5558
5559         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
5560
5561         * http.c (mk_utc_time): New function.
5562         (http_atotm): Use it; handle time zones correctly.
5563
5564 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5565
5566         * http.c: Ditto.
5567
5568         * ftp-basic.c: Use it instead of WRITE.
5569
5570         * connect.c (iwrite): New function.
5571
5572 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5573
5574         * cmpt.c (mktime): New function.
5575
5576         * netrc.c: Include <sys/types.h>.
5577
5578         * main.c (main): Wouldn't recognize --spider.
5579
5580         * retr.c (rate): Use `B', `KB' and `MB'.
5581         (reset_timer,elapsed_time): Moved from utils.c.
5582
5583         * ftp.c (ftp_retrieve_list): Ditto.
5584
5585         * http.c (http_loop): Don't touch the file if opt.dfp.
5586
5587 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5588
5589         * cmpt.c: New file.
5590
5591         * ftp.c (ftp_retrieve_glob): New argument semantics.
5592         (ftp_retrieve_dirs): Use it.
5593         (ftp_loop): Ditto.
5594
5595         * html.c (htmlfindurl): Recognize `'' as the quote char.
5596
5597 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5598
5599         * ftp.c (ftp_loop_internal): Use it.
5600
5601         * utils.c (remove_link): New function.
5602
5603 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
5604
5605         * retr.c (retrieve_url): Require STRICT redirection URL.
5606
5607         * url.c (parseurl): New argument STRICT.
5608
5609         * http.c (hparsestatline): Be a little-bit less strict about
5610         status line format.
5611
5612 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5613
5614         * http.c (gethttp): Use it.
5615
5616         * main.c (main): Don't use '<digit>' as options.
5617
5618         * init.c: New option ignore_length.
5619
5620         * http.c (gethttp): Ditto.
5621         (http_loop): Check for redirection without Location:.
5622         (gethttp): Don't print Length unless RETROKF.
5623
5624         * ftp.c (getftp): Use it.
5625
5626         * url.c (mkalldirs): New function.
5627
5628         * utils.c (mymkdir): Don't check for existing non-directory.
5629
5630         * url.c (mkstruct): Don't create the directory.
5631
5632 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
5633
5634         * init.c (setval): Removed NO_RECURSION checks.
5635
5636 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
5637
5638         * version.c: "Released" 1.4.3-pre2.
5639
5640         * recur.c (recursive_retrieve): Bypass host checking only if URL
5641         is ftp AND parent URL is not ftp.
5642
5643         * ftp-basic.c (ftp_request): Print out Turtle Power.
5644
5645         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
5646         wildcard.
5647         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
5648         not glob.
5649
5650         * http.c (gethttp): Be a little bit smarter about status codes.
5651
5652         * recur.c (recursive_retrieve): Always reset opt.recursive when
5653         dealing with FTP.
5654
5655 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
5656
5657         * retr.c (retrieve_url): New variable location_changed; use it for
5658         tests instead of mynewloc.
5659         (retrieve_url): Allow heuristic adding of html.
5660
5661         * url.c (url_filename): Don't use the `%' in Windows file names.
5662
5663         * http.c (http_loop): Always time-stamp the local file.
5664
5665         * http.c (http_loop): Ditto.
5666
5667         * ftp.c (ftp_retrieve_list): Use it.
5668
5669         * utils.c (my_touch): New function.
5670
5671         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
5672         instead of #ifndef NeXT.
5673
5674         * utils.c (strptime): New version, by Ulrich Drepper.
5675
5676 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
5677
5678         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
5679         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
5680         (http_loop): Would remove ACCEPTRANGES.
5681
5682         * ftp.c (getftp): Call ftp_list with NULL.
5683
5684 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
5685
5686         * html.c (ftp_index): Don't print minutes and seconds if we don't
5687         know them; beautify the output.
5688
5689         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
5690
5691 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
5692
5693         * utils.c (strptime): New function.
5694         (strptime): Don't use get_alt_number.
5695         (strptime): Don't use locale.
5696         (match_string): Made it a function.
5697
5698 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
5699
5700         * http.c (http_atotm): New function.
5701         (http_loop): Use it.
5702
5703         * atotm.c: Removed from the distribution.
5704
5705         * http.c (base64_encode_line): Rewrite.
5706
5707 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
5708
5709         * ftp.c (getftp): Use ftp_expected_bytes; print size.
5710
5711         * ftp-basic.c (ftp_response): Use ftp_last_respline.
5712         (ftp_expected_bytes): New function.
5713
5714         * ftp.c (getftp): Print the unauthoritative file length.
5715
5716         * ftp-ls.c: Renamed from ftp-unix.c.
5717         (ftp_parse_ls): Moved from ftp.c.
5718         (ftp_parse_unix_ls): Recognize seconds in time spec.
5719         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5720         year.
5721
5722 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5723
5724         * ftp-basic.c: Don't declare errno if #defined.
5725
5726         * host.c (ftp_getaddress): Check for sysinfo legally.
5727
5728 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5729
5730         * connect.c (iread): Use READ.
5731
5732 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5733
5734         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5735         schemes.
5736
5737 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5738
5739         * host.c (ftp_getaddress): Allow `.' in hostname.
5740
5741 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5742
5743         * wget.h: READ and WRITE macros for use instead of read and write
5744         on sockets, grep READ *.c, grep WRITE *.c
5745
5746         * wsstartup.c: new file - startup for winsock
5747
5748         * wsstartup.h: new file
5749
5750         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5751
5752         * configure.bat: Configure utility for MSVC
5753
5754         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5755
5756 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5757
5758         * version.c: Released 1.4.3-pre.
5759
5760         * utils.c (prnum): Accept long.
5761         (legible): Use prnum().
5762
5763         * connect.c (make_connection): Accept port as short.
5764         (bindport): Ditto.
5765
5766         * http.c (gethttp): Use search_netrc.
5767
5768 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5769
5770         * ftp.c (getftp): Use search_netrc.
5771
5772         * netrc.c (free_netrc): New function.
5773
5774         * init.c (home_dir): New function.
5775
5776         * url.c (convert_links): Allow REL2ABS changes.
5777
5778 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5779
5780         * netrc.c: New file.
5781         (parse_netrc, maybe_add_to_list): New functions.
5782
5783 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5784
5785         * retr.c (retrieve_url): Reset opt.recursion before calling
5786         ftp_loop if it is reached through newloc.
5787
5788         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5789         error; don't use "Syntax error", since we don't know if it is
5790         really a syntax error.
5791
5792 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5793
5794         * utils.c (acceptable): Extract the filename part of the path.
5795
5796         * recur.c (recursive_retrieve): Call acceptable() with the right
5797         argument; would bug out on wildcards.
5798
5799         * init.c (parse_line): Likewise.
5800
5801         * html.c (htmlfindurl): Cast to char * when calling stuff.
5802
5803 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5804
5805         * ftp.c (getftp): Use ftp_pasv.
5806
5807         * ftp-basic.c (ftp_request): Accept NULL value.
5808         (ftp_pasv): New function.
5809
5810         * options.h (struct options): Add passive FTP option.
5811
5812 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5813
5814         * url.c (parseurl): Debug output.
5815
5816         * utils.c (path_simplify): New one, adapted from bash's
5817         canonicalize_pathname().
5818
5819 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5820
5821         * ftp.c (getftp): Don't discard the buffer.
5822
5823         * retr.c (get_contents): New parameter nobuf.
5824
5825 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5826
5827         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5828
5829         * init.c (setval): Strip the trailing slashes on CVECDIR.
5830
5831 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5832
5833         * init.c: Make excludes and includes under CVECDIR instead of
5834         CVEC.
5835
5836 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5837
5838         * url.c (get_urls_html): Skip "http:".
5839
5840 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5841
5842         * utils.c (strcasecmp): From glibc.
5843         (strncasecmp): Also.
5844         (strstr): Also.
5845
5846         * url.c: Added javascript: to the list of URLs prefixes.
5847
5848 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5849
5850         * recur.c (retrieve_robots): Print the warning message only if
5851         verbose.
5852
5853 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5854
5855         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5856
5857 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5858
5859         * systhings.h: New file.
5860
5861         * ../configure.in: Check for utime.h
5862
5863         * ftp.c: Check whether we have unistd.h.
5864
5865 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5866
5867         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5868         (recursive_retrieve): Call get_urls_html with the canonical URL.
5869
5870 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5871
5872         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5873         ansi2knr support for compilers which don't support ANSI style
5874         function prototypes and signatures.
5875
5876         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5877
5878 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5879
5880         * url.c: Use it; Recognize paths ending with "." and ".." as
5881         directories.
5882         (url_filename): Append .n whenever file exists and could be a
5883         directory.
5884
5885         * url.h (ISDDOT): New macro.
5886
5887         * init.c (parse_line): Use unsigned char.
5888
5889         * url.c (get_urls_html): Cast to unsigned char * when calling
5890         htmlfindurl.
5891
5892         * html.c (htmlfindurl): Use unsigned char.
5893
5894         * version.c: Changed version to 1.4.3.
5895
5896 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5897
5898         * version.c: Released 1.4.2.
5899
5900         * ftp.c (getftp): Simplified assertion.
5901         (ftp_loop_internal): Remove symlink before downloading.
5902         (ftp_retrieve_list): Unlink the symlink name before attempting to
5903         create a symlink!
5904
5905         * options.h (struct options): Renamed print_server_response to
5906         server_response.
5907
5908         * ftp.c (rel_constr): Removed.
5909         (ftp_retrieve_list): Don't use it.
5910         (ftp_retrieve_list): Use opt.retr_symlinks.
5911
5912 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5913
5914         * main.c (main): New option retr_symlinks.
5915
5916         * url.c (convert_links): Print verbose message.
5917
5918 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5919
5920         * http.c (http_loop): Reset newloc in the beginning of function;
5921         would cause FMR in retrieve_url.
5922
5923 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5924
5925         * recur.c (convert_all_links): Find the URL of each HTML document,
5926         and feed it to get_urls_html; would bug out.
5927         (convert_all_links): Check for l2 instead of dl; removed dl.
5928
5929         * url.c (convert_links): Don't refer to freed newname.
5930
5931         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5932
5933         * main.c (main): Print the OS_TYPE in the debug output, too.
5934
5935         * recur.c (recursive_retrieve): Check for opt.delete_after.
5936
5937         * main.c (main): New option delete-after.
5938
5939         * init.c (setval): Cleaned up.
5940
5941 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5942
5943         * Makefile.in (wget): Make `wget' the default target.
5944
5945         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5946         loop.
5947         (ftp_retrieve_list): Warn about non-matching sizes.
5948
5949         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5950
5951         * init.c (setnum): Renamed from setnuminf; New argument flags.
5952         (setval): Use it.
5953
5954         * main.c (main): Sorted the options.
5955         (main): New option --wait.
5956
5957 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5958
5959         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5960         quotes.
5961
5962 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5963
5964         * version.c: Changed version to 1.4.2.
5965
5966 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5967
5968         * version.c: Released 1.4.1.
5969
5970         * html.c (html_quote_string): New function.
5971         (ftp_index): Use it.
5972         (htmlfindurl): A more gentle ending debug message.
5973
5974         * ftp.c (ftp_loop): Check for opt.htmlify.
5975
5976         * init.c: New command htmlify.
5977
5978         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5979         strings.
5980         (ftp_loop): Print size of index.html.
5981
5982         * init.c (setval): Implement "styles".
5983
5984         * main.c (main): New option dotstyle.
5985
5986 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5987
5988         * ftp.c (getftp): Close the master socket in case of errors, after
5989         bindport().
5990
5991         * connect.c (bindport): Initialize msock to -1.
5992
5993         * ftp.c (getftp): Initialize dtsock to -1.
5994
5995         * connect.c (closeport): Don't close sock if sock == -1.
5996
5997 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5998
5999         * init.c (setnuminf): Nuked default value -- just leave unchanged.
6000         (setval): Don't send default values.
6001         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
6002
6003         * options.h (struct options): Use long for dot_bytes.
6004
6005         * init.c (setquota): Renamed to setbytes.
6006         (setval): Use setbytes on DOTBYTES.
6007
6008 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
6009
6010         * ftp.c (getftp): Initialize con->dltime.
6011
6012         * recur.c (recursive_retrieve): Use same_host instead of
6013         try_robots; simply load robots_txt whenever the host is changed.
6014         (recursive_retrieve): Free forbidden before calling parse_robots.
6015
6016 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
6017
6018         * retr.c (show_progress): Use them.
6019
6020         * options.h (struct options): New options dot_bytes, dots_on_line
6021         and dot_spacing.
6022
6023 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
6024
6025         * recur.c (recursive_retrieve): Retrieve directories regardless of
6026         acc/rej rules; check for empty u->file.
6027
6028 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
6029
6030         * init.c (setval): Use it.
6031
6032         * utils.c (merge_vecs): New function.
6033
6034         * init.c (setval): Reset the list-type functions when encountering
6035         "".
6036
6037 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
6038
6039         * recur.c (recursive_retrieve): Use base_url instead of this_url
6040         for no_parent.
6041
6042 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
6043
6044         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
6045
6046 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
6047
6048         * utils.c (sepstring): Rewrote; don't use strtok.
6049
6050         * recur.c (recursive_retrieve): Enter assorted this_url to slist
6051         when running the first time.
6052         (retrieve_robots): Warn to ignore errors when robots are loaded.
6053
6054         * utils.c (load_file): Moved from url.c.
6055
6056         * http.c: Made static variables const too in h* functions.
6057
6058         * main.c (main): Renamed --continue-ftp to --continue.
6059
6060         * recur.c (recursive_retrieve): Use it.
6061
6062         * utils.c (frontcmp): New function.
6063
6064         * url.c (accdir): New function.
6065
6066         * html.c (htmlfindurl): Recognize <area href=...>.
6067
6068         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
6069
6070         * init.c (setval): Free the existing opt.excludes and
6071         opt.includes, if available.
6072
6073         * main.c (main): New option -I.
6074
6075 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
6076
6077         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
6078
6079         * version.c: Changed version to 1.4.1.
6080
6081 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
6082
6083         * version.c: Released 1.4.0.
6084
6085 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
6086
6087         * main.c (main): Free com and val after parse_line.
6088         (printhelp): Reorder the listing.
6089
6090         * http.c: More robust header parsing.
6091
6092         * http.c: Allow any number of spaces, or no spaces, precede ':'.
6093         (hskip_lws): New function.
6094         (haccepts_bytes): New function.
6095         (gethttp): Use it.
6096
6097         * init.c (setval): Check header sanity.
6098         (setval): Allow resetting of headers.
6099
6100 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
6101
6102         * http.c (http_loop): Don't use has_wildcards.
6103
6104         * http.c (gethttp): Free all_headers -- would leak.
6105
6106         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
6107         0 -- this fixes a long-standing bug in -rl.
6108
6109 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
6110
6111         * ftp.c: Use -1 as "impossible" value for con->fd.
6112
6113         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
6114
6115         * init.c (parse_line): Use isalpha.
6116
6117         * ftp-unix.c: Use HAVE_UNISTD_H.
6118
6119         * mtch.c (has_wildcards): Don't match \.
6120
6121         * http.c (http_loop): Warn on HTTP wildcard usage.
6122
6123 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
6124
6125         * url.c (url_filename): Do not create numbered suffixes if
6126         opt.noclobber -- would bug out on -nc.
6127
6128 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
6129
6130         * recur.c (parse_robots): Don't chuck out the commands without
6131         arguments (`Disallow:<empty>' didn't work).
6132         (parse_robots): Compare versions lowercase.
6133         (parse_robots): Match on base_version, not version_string!
6134         (parse_robots): Handle comments properly.
6135         (parse_robots): Match versions in a sane way.
6136
6137         * init.c: Print nicer error messages.
6138
6139         * version.c: Changed version to 1.4.0.
6140
6141 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6142
6143         * version.c: Released 1.4.0-test2.
6144
6145         * init.c (run_wgetrc): Close fp.
6146
6147         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
6148         u->dir.
6149
6150 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6151
6152         * init.c (setquota): Allow inf as quota specification.
6153
6154 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
6155
6156         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
6157         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
6158
6159         * main.c (main): Check for quota by comparison with downloaded
6160         stuff, not from status.
6161
6162         * connect.c (select_fd): Should compile on HPUX without warnings now.
6163
6164         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
6165         returned RETROK.
6166
6167 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
6168
6169         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
6170         (getftp): Return FTPRETRINT on control connection error.
6171
6172         * html.c (htmlfindurl): Recognize <embed src=...> and
6173         <bgsound src=...>.
6174         (ftp_index): Handle username and password correctly.
6175
6176         * main.c (main): Made `-np' a synonim for --no-parent.
6177
6178 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6179
6180         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
6181         ftp_retrieve_glob.
6182
6183         * version.c: Changed version to 1.4.0-test2.
6184
6185 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6186
6187         * version.c: Released 1.4.0-test1.
6188
6189         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
6190         directory.
6191         (convert_links): Removed definition of make_backup.
6192
6193         * http.h: Removed definition of MAX_ERROR_LENGTH.
6194
6195         * host.c (ftp_getaddress): Check for "(none)" domains.
6196
6197         * ftp.c (ftp_retrieve_dirs): Docfix.
6198
6199         * http.c (gethttp): Use ou->referer instead of u->referer.
6200
6201         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
6202         this was known to cause coredumps on Linux.
6203
6204         * html.c (ftp_index): Cast the argument to local_time to time_t *.
6205
6206 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
6207
6208         * connect.c (select_fd): Use exceptfds -- once and for all.
6209
6210         * retr.c (retrieve_from_file): Free filename after
6211         recursive_retrieve.
6212         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
6213         first-time retrieval.
6214         (retrieve_from_file): Return uerr_t; new argument, count.
6215         (retrieve_from_file): Break on QUOTEXC.
6216
6217         * init.c (setquota): Fixed a bug that caused rejection of
6218         non-postfixed values..
6219
6220 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
6221
6222         * version.c: Changed name to wget.
6223
6224         * connect.c (iread): Smarter use of select.
6225         (select_fd): Set errno on timeout.  If not timeout, return 1
6226         instead of 0.
6227
6228 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
6229
6230         * ftp.c (ftp_loop_internal): Don't use con->cmd before
6231         establishing it.
6232
6233 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
6234
6235         * http.c (gethttp): Send correct referer when using proxy.
6236         (gethttp): Use struct urlinfo ou to access the relevant data; send
6237         correct authorization in all cases.
6238
6239         * host.c (same_host): Use skip_uname to skip username and
6240         password.
6241
6242         * url.c (skip_uname): New function.
6243         (parseurl): Use it.
6244
6245         * host.c (same_host): Do not assume HTTP -- same_host should now
6246         be totally foolproof.
6247
6248         * url.c (skip_proto): New function.
6249         (parse_uname): Use it.
6250
6251         * http.c (gethttp): Create local user and passwd from what is
6252         given.
6253
6254         * url.c (parseurl): Check for HTTP username and password too.
6255
6256 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
6257
6258         * config.h.in: Removed #define gethostbyname R...
6259
6260 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
6261
6262         * version.c: Changed version to 1.4.0-test1.
6263
6264 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
6265
6266         * version.c: "Released" 1.4b29.
6267
6268         * recur.c (recursive_retrieve): Check for no_parent.
6269
6270         * init.c (setval): Option update.
6271
6272         * main.c (main): New option no-parent.
6273
6274         * options.h (struct options): New variable no_parent.
6275
6276         * recur.c (recursive_retrieve): Only files are checked for
6277         opt.accepts and opt.rejects.
6278         (recursive_retrieve): Check directories for opt.excludes.
6279         (recursive_retrieve): Make the dir absolute when checking
6280         opt.excludes.
6281
6282         * html.c (htmlfindurl): Recognize <applet code=...> and <script
6283         src=...>
6284
6285 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
6286
6287         * ftp.c (getftp): Do not line-break assert entries at all.
6288         (ftp_retrieve_dirs): docfix.
6289
6290         * connect.c (select_fd): Use fd + 1 as nfds.
6291
6292         * version.c: Changed version to 1.4b29.
6293
6294 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
6295
6296         * version.c: "Released" 1.4b28.
6297
6298         * ftp.c (ftp_loop_internal): Check whether f->size == len and
6299         don't continue the loop if it is.
6300         (ftp_get_listing): Remove list_filename on unsuccesful loop.
6301
6302 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6303
6304         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
6305         (getftp): Do not use multiline assert.
6306
6307         * http.c (hparsestatline): Use mjr and mnr instead of major and
6308         minor, which don't compile on Ultrix.
6309         (http_loop): Use strcpy() to initialize tmp.
6310
6311         * all: Geturl -> Fetch
6312
6313 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
6314
6315         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
6316         ':'.
6317
6318         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
6319         moving `bufsize &&' to the beginning of each check in for-loops.
6320
6321         * recur.c (parse_robots): Close fp on exit.
6322
6323         * url.c (mymkdir): Check for each directory before creating.
6324
6325 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
6326
6327         * version.c: Changed version to 1.4b28.
6328
6329 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
6330
6331         * version.c: "Released" 1.4b27.
6332
6333         * init.c (parse_line): Use isspace.
6334         (parse_line): Free *com on all errors.
6335
6336         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
6337         (delelement): Use next instead of f->next and prev instead of
6338         f->prev.
6339         (delelement): Free the members of the deleted element.
6340
6341         * http.c (http_loop): Do not return RETROK on code != 20x.
6342
6343         * init.c (cleanup): Free opt.user_header.
6344         (cleanup): Free opt.domains.
6345
6346         * url.c (freelists): Moved to cleanup().
6347
6348         * http.c (hparsestatline): Docfix.
6349
6350         * main.c (main): Return with error status on unsuccesful
6351         retrieval.
6352
6353         * init.c (setval): Do not remove listing when mirroring.
6354
6355         * url.c (url_filename): Use opt.fileprefix.
6356
6357         * ftp.c (ftp_get_listing): Use url_filename to get filename for
6358         .listing.
6359
6360         * main.c (main): New option: -rn.
6361
6362 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
6363
6364         * Makefile.in (RM): Added RM = rm -f.
6365
6366         * host.c (clean_hosts): New function.
6367         (free_hlist): Just free the list, no reset.
6368
6369         * version.c: Changed version to 1.4b27.
6370
6371 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
6372
6373         * version.c: "Released" 1.4b26.
6374
6375         * retr.c (retrieve_from_file): If call get_urls_html with
6376         opt.spider to make it silent in spider mode.
6377
6378         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
6379
6380         * url.h (CLEANDUP): New macro.
6381
6382         * http.c (gethttp): Fixed a bug that freed location only when it
6383         was NULL.
6384
6385         * retr.c (retrieve_url): Free url if it will not be stored,
6386         i.e. newloc is NULL.
6387
6388         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
6389         old version would bug out on <a href="x#a"href="y">.
6390
6391         * html.h (state_t): New member in_quote.
6392
6393         * html.c (htmlfindurl): Free s->attr at the beginning of
6394         attr-loop.
6395
6396         * recur.c (recursive_retrieve): Recognize RCLEANUP.
6397         (tried_robots): Make hosts a global variable.
6398         (recursive_retrieve): Free constr after URL host optimization.
6399         (tried_robots): Free urlinfo before exiting.
6400
6401         * utils.c (free_slist): New function.
6402
6403         * recur.c (recursive_retrieve): Use flags to add cleanup
6404         possibility.
6405
6406         * main.c (main): Free filename after recursive_retrieve.
6407
6408         * http.c (gethttp): Store successful responses too.
6409
6410 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
6411
6412         * all: Constified the whole source.  This required some minor
6413         changes in many functions in url.c, possibly introducing bugs -- I
6414         hope not.
6415
6416         * ftp-basic.c: Removed last_respline.
6417
6418         * http.c (gethttp): Free type.
6419
6420         * host.c (same_host): Free real1 and real2.
6421
6422         * main.c (main): New option --spider.
6423
6424         * retr.c (get_contents): Don't reset errno.
6425
6426         * main.c (main): Sorted the options.
6427
6428         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
6429         uninitialized by select().
6430
6431         * http.c (http_loop): Print the time when the connection is
6432         closed.
6433         (gethttp): Debug-print the HTTP request.
6434
6435 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
6436
6437         * connect.c (iread): Do not try reading after timeout.
6438
6439         * main.c (main): Would bug out on -T.
6440
6441         * connect.c (select_fd): Do not use exceptfds.
6442         (iread): Set ETIMEDOUT on select_fd <= 0.
6443
6444         * version.c: Changed version to 1.4b26.
6445
6446 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
6447
6448         * version.c: "Released" 1.4b25.
6449
6450         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
6451         or link name.
6452
6453         * http.c (gethttp): Add errcode to struct hstat.
6454         (http_loop): Use it.
6455
6456         * url.c (no_proxy_match): Simplify using char** for no_proxy.
6457
6458         * options.h (struct options): Make opt.no_proxy a vector.
6459
6460         * utils.c (sepstring): Use !*s instead of !strlen(s).
6461
6462         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
6463         (getperms): Use ISODIGIT instead of isdigit.
6464
6465         * ftp.c (getftp): Print time.
6466
6467         * main.c (main): Use legible output of downloaded quantity.
6468
6469         * ftp.c (getftp): Use elapsed_time().
6470         (ftp_loop_internal): Use rate().
6471
6472         * http.c (http_loop): Add download ratio output; Use rate().
6473
6474         * utils.c (rate): New function.
6475
6476 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
6477
6478         * http.c (http_loop): Use timer.
6479
6480         * ftp.c: Split to ftp-basic.c and ftp.c
6481
6482         * utils.c (reset_timer): New function.
6483         (elapsed_time): New function.
6484
6485         * retr.c (show_progress): Make bytes_in_line and offs long; should
6486         work on 16-bit machines.
6487
6488 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
6489
6490         * url.c (in_acclist): New argument backward.
6491
6492         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
6493         a file should be retrieved according to suffix.
6494         (ftp_get_listing): Check the return value of unlink; Do not call
6495         ftp_retrieve_dirs if depth reached maxreclevel.
6496         (ftp_retrieve_dirs): Check whether the directory is in
6497         exclude-list.
6498
6499         * main.c (main): Print the version number at the beginning of
6500         DEBUG output.
6501         (main): Use strrchr when creating exec_name.
6502
6503         * ftp.c (ftp_retrieve_glob): Do not close control connection.
6504
6505         * version.c: Changed version to 1.4b25.
6506
6507 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
6508
6509         * version.c: "Released" 1.4b24.
6510
6511         * Makefile.in: Rewrite.
6512
6513         * ftp.c (ftp_loop_internal): Likewise.
6514
6515         * retr.c (time_str): Check for failed time().
6516
6517         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
6518         HTML3.0.
6519
6520         * retr.c (time_str): Return time_t *.
6521
6522         * connect.c (bindport): Close msock on unsuccesful bind.
6523         (bindport): The same for getsockname and listen.
6524
6525         * retr.c (retrieve_url): Allow any number of retries on
6526         proxy.
6527
6528         * http.c (gethttp): Do not treat errno == 0 as timeout.
6529         (http_loop): Likewise.
6530         (http_loop): Cosmetic changes.
6531
6532         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
6533
6534         * retr.c (get_contents): Reset errno.
6535
6536         * ftp.c (getftp): Minor fixes.
6537
6538 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6539
6540         * http.c: Do not use backups.
6541
6542         * geturl.1 (WARNING): Warn that man-page could be obsolete.
6543
6544         * getopt.c (getopt_long): Moved to getopt.c
6545
6546         * geturl.texi: Enhanced.
6547
6548         * main.c (main): Use it.
6549
6550         * recur.c (convert_all_links): New function.
6551
6552         * utils.c (add_slist): New argument flags.
6553
6554         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
6555         (parse_robots): Do not chuck out empty value fields.
6556         (parse_robots): Make yourself welcome on empty Disallow.
6557
6558         * version.c: Changed version to 1.4b24.
6559
6560 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6561
6562         * version.c: "Released" 1.4b23.
6563
6564         * ftp.c (ftp_loop_internal): Get the time after getftp.
6565
6566         * Makefile.in (install.info): New target.
6567         (install): Use it.
6568
6569         * http.c (http_loop): Fix output when doing -O.
6570
6571 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6572
6573         * geturl.texi: New file.
6574
6575         * main.c (main): Do not print the warnings and download summary if
6576         opt.quiet is set.
6577
6578         * version.c: Changed version to 1.4b23.
6579
6580 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6581
6582         * "Released" 1.4b22.
6583
6584         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
6585         to avoid redefinition warnings.
6586
6587         * host.c (store_hostaddress): Use memcpy() to copy the address
6588         returned by inet_addr.
6589
6590         * version.c: Changed version to 1.4b22.
6591
6592 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
6593
6594         * version.c: "Released" 1.4b21.
6595
6596         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
6597
6598         * ftp.c (ftp_port): Use conaddr.
6599         (getftp): Print the file length.
6600         (ftp_retrieve_list): Check the stamps of plain files only.
6601
6602         * connect.c (closeport): Do not call shutdown().
6603         (conaddr): New function.
6604
6605         * html.c (ftp_index): Made it dfp-aware.
6606
6607         * init.c (cleanup): New name of freemem. Close opt.dfp.
6608
6609         * ftp.c (getftp): Use opt.dfp if it is set.
6610
6611         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
6612
6613         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
6614         CWDs to be sent with recursive FTP retrievals.
6615
6616 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
6617
6618         * recur.c (parse_robots): Made it more compliant with "official"
6619         specifications.
6620
6621         * http.c: New function.
6622
6623         * ftp-unix.c (ftp_parse_ls): Added better debug output.
6624
6625         * ftp.c (getftp): Print out the LIST in case of
6626         opt.print_server_response.
6627
6628         * version.c: Changed version to 1.4b21.
6629
6630 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
6631
6632         * version.c: "Released" 1.4b20.
6633
6634         * README: Update.
6635
6636         * http.c (gethttp): Preset lengths of various headers instead of
6637         calculating them dynamically.
6638         (gethttp): Check for 206 partial contents.
6639
6640 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
6641
6642         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
6643
6644         * http.c (gethttp): Send the port number in the Host: header.
6645
6646 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
6647
6648         * http.c (gethttp): Send host: header.
6649         (gethttp): Add the possibility of user-defined headers.
6650         (gethttp): Move decision about pragma: no-cache to http_loop,
6651         where it belongs.
6652         (gethttp): Pass a struct instead of enormous argument list.
6653         (http_loop): Use a new, fancier display format.
6654         (ftp_loop): Likewise.
6655
6656         * main.c: (hangup): Turn off buffering of the new log file.
6657
6658         * install-sh: Likewise.
6659
6660         * config.sub: Replace with the one in autoconf-2.10
6661
6662         * geturl.1: Update.
6663
6664         * init.c: New options httpuser and httppasswd.
6665
6666         * http.c: (base64_encode_line): New function.
6667         (gethttp): Send authentication.
6668
6669         * connect.c (make_connection): Use store_hostaddress.
6670
6671 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
6672
6673         * host.c (store_hostaddress): New function.
6674
6675         * NEWS: Update.
6676
6677         * http.c (hgetrange): New function.
6678         (gethttp): Use ranges.
6679
6680         * utils.c (numdigit): Accept long instead of int.
6681
6682         * http.c (http_loop): Add restart capabilities.
6683
6684         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
6685         being used uninitialized.
6686         (ftp_retrieve_list): Similar fix.
6687
6688         * host.c (add_hlist): Fixed a bug that could cause cmp being used
6689         uninitialized.
6690
6691         * url.c (construct_relative): New function.
6692
6693         * recur.c (recursive_retrieve): Use it.
6694
6695         * retr.c (convert_links): New function.
6696
6697 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
6698
6699         * url.c (free_urlpos): New function.
6700
6701         * recur.c (recursive_retrieve): Adapt.
6702
6703         * url.c (get_urls_html): Return a linked list instead of a vector.
6704
6705         * url.c (get_urls_file): Return a linked list instead of a vector.
6706
6707         * geturl.1: Update.
6708
6709         * http.c (gethttp): Implement it.
6710
6711         * init.c (setval): New option: SAVEHEADERS
6712
6713         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
6714         be retrieved. Lack of this test caused bugs when the connection
6715         was lost during listing.
6716
6717         * retr.c (retrieve_url): Fixed a bug that caused
6718         coredumps. *newloc is now reset by default.
6719         (retrieve_url): Lift the twenty-tries limit on proxies.
6720
6721         * version.c: Changed version to 1.4b20.
6722
6723 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6724
6725         * version.c: "Released" 1.4b19.
6726
6727 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6728
6729         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6730         (getftp): Changed prototype to accept ccon *.
6731
6732 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6733
6734         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6735         incorrect values to files pointed to by symbolic links.
6736         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6737
6738 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6739
6740         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6741
6742         * main.c (main): New option: --user-agent.
6743
6744         * geturl.1: Ditto.
6745
6746         * init.h: Ditto.
6747
6748         * init.c (setval): Ditto.
6749
6750         * main.c (main): Rename "server-headers" to "server-response".
6751
6752         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6753         executables in 'ls -F' listings.
6754
6755 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6756
6757         * url.c (parseurl): Remove realloc() and sprintf().
6758         (str_url): Get rid of sprintf().
6759
6760         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6761         servers.
6762
6763         * url.h (URL_CLEANSE): Made it else-resistant.
6764         (USE_PROXY): New macro.
6765
6766 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6767
6768         * NEWS: Update.
6769
6770         * version.c: Changed version to 1.4b19.
6771
6772 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6773
6774         * version.c: "Released" 1.4b18.
6775
6776         * url.c: Made it reallocate space exponentially.
6777
6778 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6779
6780         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6781         the list of stuff to fetch.
6782
6783 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6784
6785         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6786         -Fi.
6787
6788         * html.c (htmlfindurl): Rewrite.
6789
6790         * http.c (gethttp): Use opt.proxy_cache.
6791
6792         * main.c (main): Added --cache option.
6793
6794         * ftp.c (ftp_response): Print server response if opt.print_server
6795         response is set.
6796         (getftp): Print newlines after each request if the server response
6797         is to be printed.
6798         (ftp_response): Copy the last response line to last_respline.
6799
6800         * http.c (gethttp): Add Pragma: nocache for retried
6801         proxy-retrievals.
6802
6803         * ftp.c (getftp): Use it.
6804
6805         * retr.c (buf_discard): New function.
6806
6807         * ftp.c (ftp_response): Use buf_readchar().
6808         (getftp): Flush the control connection buffer before calling
6809         get_contents().
6810
6811         * retr.c (buf_readchar): New function.
6812         (buf_flush): New function.
6813         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6814         (get_contents): Use buf_flush.
6815
6816 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6817
6818         * ftp.c: Incorporate changes to ftp_response.
6819
6820         * ftp.c (ftp_response): Allocate the server response dynamically,
6821         as in read_whole_line and fetch_next_header.
6822
6823         * utils.c (read_whole_line): Fixed a bug that prevented reading
6824         the last line if it is not \n-terminated. Also fixed a possible
6825         memory overflow.
6826
6827         * http.c (fetch_next_header): Return malloc-ed string as large as
6828         needed.
6829         (gethttp): Use new fetch_next_header.
6830
6831 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6832
6833         * http.c (hgetlen): Compute the header length the first time only.
6834         (hgettype): Ditto.
6835         (hgetlocation): Ditto.
6836         (hgetmodified): Ditto.
6837
6838 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6839
6840         * sample.geturlrc: Update.
6841
6842 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6843
6844         * http.c (http_loop): Ditto.
6845
6846         * ftp.c (getftp): Open the output file as binary.
6847
6848         * version.c: Changed version to 1.4b18.
6849
6850 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6851
6852         * version.c: "Released" 1.4b17.
6853
6854         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6855         instead of failed assertion.
6856
6857 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6858
6859         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6860         if a file of that name already exists.
6861
6862 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6863
6864         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6865
6866         * config.h.in: Define gethostbyname as Rgethostbyname when using
6867         Socks.
6868
6869         * configure.in: Check for -lresolv if using Socks.
6870
6871         * version.c: Changed version to 1.4b17.
6872
6873 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6874
6875         * version.c: "Released" 1.4b16.
6876
6877         * http.c (gethttp): More intelligent check for first line of HTTP
6878         response.
6879         (gethttp): Would bug out on time-stamping.
6880
6881         * version.c: Changed version to 1.4b16.
6882
6883 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6884
6885         * version.c: Released 1.4b15.
6886
6887         * http.c (http_loop): Print \n after the loop entry, not before.
6888
6889         * url.c (url_filename): Use ISDOT.
6890
6891         * url.h (ISDOT): New macro.
6892
6893         * recur.c (recursive_retrieve): Change only opt.recursive for
6894         following FTP.
6895
6896 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6897
6898         * socks/geturl.cgi: Fixed version No.
6899
6900         * socks/download-netscape.html: Ditto.
6901
6902         * socks/download.html: Changed socks.html to download.html.
6903
6904 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6905
6906         * url.c (url_filename): Check for opt.dirstruct instead for
6907         opt.recursive && opt.dirstruct.
6908
6909         * init.c (defaults): Ditto.
6910         (defaults): Reset dirstruct by default.
6911         (setval): Set opt.dirstruct whenever setting recursive.
6912
6913         * init.h: Removed FORCEDIRHIER.
6914
6915         * INSTALL: Added -L to socks-description.
6916
6917         * version.c: Changed version to 1.4b15.
6918
6919 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6920
6921         * version.c: "Released" 1.4b14.
6922
6923         * geturl.1: Update AUTHOR to include Rosella as contributor.
6924
6925         * NEWS: Update.
6926
6927         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6928
6929         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6930         (cal_time): Fix == to eq.
6931
6932         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6933
6934         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6935
6936         * Makefile.in: Use @VERSION@.
6937
6938         * configure.in: Check version from version.c.
6939
6940         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6941
6942         * socks/download.html: Created from download-netscape.html, made
6943         HTML-2.0 compliant.
6944
6945         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6946         following FTP links from recursions.
6947
6948 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6949
6950         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6951         absolute directories correctly.
6952
6953         * version.c: Changed version to 1.4b14.
6954
6955 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6956
6957         * version.c: "Released" 1.4b13.
6958
6959         * url.c (make_backup): New function.
6960
6961         * http.c (http_loop): Make a backup copy of the local file (using
6962         rename(2)) before opening it.
6963
6964         * main.c (main): Added --backups.
6965
6966         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6967         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6968         (ftp_getaddress): Check for empty, null or (null) domain.
6969
6970         * url.c (get_urls_html): If this_url is NULL, the base must have a
6971         protocol.
6972         (parseurl): Use has_proto.
6973
6974         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6975         retries.
6976
6977         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6978         if it is not already there.
6979         (has_proto): New function.
6980         (get_urls_html): Eliminate the remaining call to findurl -- use
6981         has_proto.
6982
6983         * geturl.1: Ditto.
6984
6985         * main.c: Change -X to -x.
6986
6987         * url.c (url_filename): Simplify creation of filename if
6988         prefix_files is set.
6989         (url_filename): Simplify everything. And I do mean *everything*.
6990         (mkstruct): Add dir_prefix before hostname.
6991         (path_simplify): Fixed a bug that caused writing outside the path
6992         string in case of "." and ".." path strings.
6993
6994 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6995
6996         * init.c: Added --mirror.
6997
6998         * main.c (main): Added -X to force saving of directory hierarchy.
6999
7000         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
7001         (ftp_retrieve_list): Check whether quota is exceeded.
7002
7003         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
7004
7005         * http.c (gethttp): Use referer if present.
7006
7007         * recur.c (recursive_retrieve): Set u->referer before calling
7008         retrieve_url.
7009
7010         * url.c (newurl): Use memset to nullify the struct members.
7011         (freeurl): Free the referer field too.
7012
7013         * url.h: Added referer to urlinfo.
7014
7015         * geturl.1: Updated the manual to document some of the new features.
7016
7017         * utils.c (numdigit): Moved from url.c.
7018
7019         * README: Rewritten.
7020
7021         * config.h.in: Add the support for socks.
7022
7023         * configure.in: Add the support for socks.
7024
7025         * url.c (url_filename): If the dir_prefix is ".", work with just
7026         the file name.
7027         (url_filename): Do not look for .n extensions if timestamping if
7028         turned on.
7029
7030         * retr.c (show_progress): Skip the over-abundant restval data, and
7031         print the rest of it with ',' instead of '.'.
7032
7033 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
7034
7035         * retr.c (show_progress): Changed second arg. to long (as it
7036         should be).
7037         (show_progress): Moved to retr.c.
7038         (get_contents): Moved to retr.c.
7039
7040         * version.c: Change version to 1.4b13.
7041
7042 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
7043
7044         * url.c (in_acclist): Would return after the first suffix.
7045
7046 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
7047
7048         * version.c: "Released" 1.4b12.
7049
7050         * url.c (path_simplify): More kludgifications.
7051         (get_urls_html): Use new parameters for htmlfindurl.
7052
7053         * html.c: Removed memorizing "parser states", since the new
7054         organization does not require them.
7055
7056         * init.c (run_geturlrc): Use read_whole_line.
7057
7058         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
7059
7060         * recur.c (parse_robots): Use read_whole_line.
7061
7062         * utils.c (read_whole_line): New function.
7063
7064         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
7065
7066         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
7067         tested on OSF and Ultrix.
7068         (add_hlist): New function.
7069         (free_hlist): New function.
7070         (search_host): New function.
7071         (search_address): New function.
7072         (realhost): Use search_host, search_address and add_hlist.
7073         (same_host): Replaced realloc() with strdupdelim(), made
7074         case-insensitive, fixed a memory leak.
7075
7076         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
7077         tm_min, like intended.
7078
7079         * version.c: Change user agent information to
7080         Geturl/version.
7081
7082 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
7083
7084         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
7085
7086         * url.c (acceptable): Always accept directories.
7087
7088         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
7089         servers by stripping trailing @ from symlinks and trailing / from
7090         directories.
7091
7092         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
7093
7094         * url.c (skip_url): Use toupper instead of UCASE.
7095
7096         * host.c (sufmatch): Made it case-insensitive.
7097
7098         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
7099         (match_backwards): New function, instead of
7100         match_backwards_or_pattern.
7101
7102         * recur.c (recursive_retrieve): Increased performance by
7103         introducing inl, which reduces number of calls to in_slist to only
7104         one.
7105
7106         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
7107         routine to use.
7108
7109         * main.c (printhelp): Removed the warranty stuff.
7110
7111 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
7112
7113         * url.c (add_slist): Simplify.
7114         (match_backwards_or_pattern): New function.
7115         (in_acclist): Use match_backwards_or_pattern.
7116         (matches): Remove.
7117
7118 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
7119
7120         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
7121         recursive.
7122
7123         * html.c (ftp_index): Fixed to work. Beautified the output.
7124
7125         * ftp.c (ftp_retrieve_glob): Another argument to control whether
7126         globbing is to be used.
7127         (ftp_retrieve_list): Compare the time-stamps of local and remote
7128         files to determine whether to download.
7129
7130 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
7131
7132         * ftp.c (rel_constr): New function.
7133
7134         * retr.c (retrieve_from_file): Check for text/html before
7135         retrieving recursively.
7136
7137         * main.c (main): Check whether the file is HTML before going into
7138         recursive HTML retrieving.
7139
7140         * ftp.c (ftp_retrieve_list): Manage directories.
7141         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
7142         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
7143         initialized, causing bugchecks in getftp to fail.
7144
7145         * configure.in: Check for symlink.
7146
7147         * ftp.c (ftp_retrieve_list): Added support for symlinks.
7148
7149         * version.c: "Released" 1.4b10.
7150
7151         * atotm.c (atotm): Redeclared as time_t.
7152
7153         * init.c: New variable "timestamping".
7154
7155         * main.c (main): New option 'N'.
7156
7157         * http.c (hgetlocation): Case-insensitive match.
7158         (hgetmodified): New function.
7159         (http_loop): Implement time-stamping.
7160
7161 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
7162
7163         * version.c: Changed version to 1.4b10
7164
7165         * atotm.c: New file, from phttpd.
7166
7167         * options.h (struct options): New parameter timestamping.
7168
7169         * version.c: 1.4b9 "released".
7170
7171         * recur.c (recursive_retrieve): Used linked list (ulist) for
7172         faster storing of URLs.
7173
7174         * url.c (get_urls_html): Removed the old kludge with comparing the
7175         outputs of htmlfindurl and findurl.
7176         (get_urls_html): Added better protocol support here.
7177         (create_hash): Removed, as well as add_hash and in_hash.
7178         (addslist): New function.
7179         (in_slist): ditto
7180
7181         * version.c: Released 1.4b8, changed version to b9.
7182
7183 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7184
7185         * ftp.c (freefileinfo): New function.
7186         (delelement): New function.
7187
7188         * everywhere: GPL!
7189
7190         * ftp.c (ftp_loop): Use ccon.
7191         (ftp_retrieve_glob): Likewise.
7192
7193         * ftp.h: Define ccon, to define status of control connection.
7194
7195         * ftp.c (ftp_get_listing): New function.
7196         (ftp_retrieve_more): New function.
7197         (ftp_retrieve_glob): New function.
7198
7199 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
7200
7201         * configure.in: Removed the search for cuserid().
7202
7203         * init.c (getmode): Renamed to getperms.
7204
7205 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
7206
7207         * version.c: New version.
7208
7209         * main.c (hangup): New function, that handles hangup. Hangup
7210         signal now causes geturl to stop writing on stdout, and to write
7211         to a log file.
7212
7213         * ftp.c (getftp): "Released" 1.4b7.
7214
7215         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
7216         (ftp_index): Use fileinfo/urlinfo.
7217
7218         * ftp-unix.c (ftp_parse_ls): New function.
7219         (symperms): New function.
7220
7221         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
7222
7223         * retr.c (retrieve_url): Added FTP support.
7224
7225 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7226
7227         * geturl.h: Removed NOTFTP2HTML enum.
7228         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
7229
7230         * ftp.c (getftp): Resynched with urlinfo.
7231         (getftp): Removed HMTL-ization of index.html from getftp.
7232
7233         * version.c: 1.4b6 "released".
7234
7235         * options.h (options): New struct, to keep options in.
7236
7237         * http.c (http_loop,gethttp): Synched with proxy.
7238
7239         * retr.c (retrieve_url): Implemented proxy retrieval.
7240
7241         * main.c (main): Use retrieve_from_file.
7242
7243 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
7244
7245         * retr.c (retrieve_from_file): New function.
7246
7247         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
7248         can be found in u->proto.
7249
7250         * ftp.c (ftp_response): Fixed to accept multi-line responses as
7251         per RFC 959.
7252
7253         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
7254
7255         * url.c (mymkdir): Removed the file of the same name, if one
7256         exists.
7257         (isfile): New function.
7258         (mkstruct): Fixed the '/' glitches.
7259         (path_simplify): Hacked to treat something/.. correctly.
7260
7261 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
7262
7263         * http.c (gethttp): Close the socket after error in headers.
7264         (http_loop): HEOF no longer a fatal header.
7265
7266         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
7267         simplifies the syntax of calling retrieve_url.
7268
7269         * recr.c (recursive_retrieve): Modified to use get_urls_html.
7270
7271         * url.c (get_urls_file): New function.
7272         (get_urls_html): New function.
7273
7274         * recr.c (recursive_retrieve): Patched up to conform to the
7275         standards.
7276
7277         * http.c (gethttp): Synched with the rest...
7278         (gethttp): Treat only CONREFUSED specially, with connection
7279         errors.
7280
7281         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
7282
7283 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
7284
7285         * http.c (http_loop): New function.
7286
7287         * loop.c: Removed *lots* of stuff from retrieve_url.
7288
7289         * url.c (parseurl): Changed to work with urlinfo. Integrated
7290         username finding and path parsing.
7291         (newurl): New function.
7292         (freeurl): New function.
7293         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
7294         (url_filename): Likewise.
7295         (path_simplify): Accept relative paths too.
7296         (opt_url): Made urlinfo-compliant, removed bogosities.
7297         (path_simplify): Expanded to accept relative paths.
7298         (str_url): A replacement for hide_url
7299         (decode_string): Fixed a bug that caused malfunctioning when
7300         encountering an illegal %.. combination.
7301         (opt_url): Removed the argument. Dot-optimizations are now default.
7302
7303         * nmalloc.c (strdupdelim): New function.
7304
7305         * url.h: Added the urlinfo structure
7306
7307 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
7308
7309         * url.c (hide_url): Thrown out the protocol assertion. Do not
7310         change the URL if the protocol if not recognized.
7311         (findurl): Put continue instead of break.
7312
7313 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
7314
7315         * sample.geturlrc: Changed the defaults to be commented out and
7316         harmless (previous defaults caused pains if copied to
7317         ~/.geturlrc).
7318
7319         * http.c (gethttp): Print the HTTP request in debug mode.
7320
7321         * connect.c (iread): Added EINTR check loop to select-ing
7322         too. EINTR is now correctly handled with select().
7323
7324         * TODO: new file
7325
7326 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
7327
7328         * host.c (same_host): Made the function a little bit more
7329         intelligent regarding diversified URL syntaxes.
7330
7331         * url.c (skip_url): Spaces are now skipped after URL:
7332
7333         * Released 1.3.1 with the patch to prevent crashing when sending
7334         NULL to robot* functions and the patch to compile "out of the box"
7335         on AIX.
7336
7337         * recr.c (recursive_retrieve): Added checking whether this_url is
7338         NULL when calling the robot functions.
7339
7340         * ChangeLog: New file.