sjero.net Git - wget/blob - src/ChangeLog

   1 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
   4         rbuf_read_bufferful when the buffer is depleted.
   5
   6         * rbuf.c (rbuf_read_bufferful): New function.
   7
   8 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
   9
  10         * gen_sslfunc.h: Use ansi2knr style function declarations.
  11
  12         * gen_sslfunc.c: Reformat according to the GNU coding standards.
  13         More should be done.
  14
  15         * http.c (persistent_available_p): Place the cheap SSL test nearer
  16         the top of the function.
  17         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
  18
  19 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
  20
  21         * Makefile.in: added gen_sslfunc object
  22         * config.h.in: added HAVE_SSL define
  23         * connect.c: changed select_fd from static int to int
  24         * connect.h: ditto
  25         * gen_sslfunc.h: New file
  26         * gen_sslfunc.c: ditto
  27         * http.c: added HTTPS fuctionality
  28         * retrc.c: ditto
  29         * url.c: ditto
  30         * init.c: added opt.httpsproxy
  31         * options.h: ditto
  32         * rbuf.h: added alternate rbuf struct
  33         * wget.h: added CONSSLERR
  34         * rbuf.c: ditto
  35
  36 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
  37
  38         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
  39         "ignore_perms" to ignore file and directory permissions for
  40         Windows NT FTP server listings.
  41         (ftp_parse_winnt_ls): New function.
  42         (ftp_parse_ls): Parses UNIX and Windows NT listings
  43         separately. Simple heuristics for distinguishing between UNIX
  44         and MS-DOS-like FTP listing provided by Windows NT FTP service.
  45
  46 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
  47
  48         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
  49         char.
  50
  51 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
  52
  53         * netrc.c (parse_netrc): Get rid of line ending.
  54
  55 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
  56
  57         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
  58         Dan.
  59
  60 2000-11-24  Karl Eichwalder  <ke@suse.de>
  61
  62         * main.c (print_help): Untabify.
  63
  64 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
  65
  66         * utils.c (xrealloc_debug): Do the unregister/register thing only
  67         if the pointer has actually changed.
  68         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
  69         (xfree_real): Ditto.
  70         (xrealloc_real): Ditto.
  71         (xstrdup_real): Ditto.
  72
  73 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
  74
  75         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
  76         string; no need to strdup() it.
  77         (getftp): Make pwd_len a local variable.
  78         (ftp_loop): Free PWD before returning.
  79
  80         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
  81
  82 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
  83
  84         * all: Use xfree() instead of free.
  85
  86         * utils.c (xfree): New function.
  87
  88 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
  89
  90         * url.c (convert_links): HTML-quote the converted string.
  91
  92         * utils.c (html_quote_string): Move here from ftp-ls.c
  93         (html_quote_string): Make non-static; declare in utils.h.
  94         (html_quote_string): Convert SP to &#32;.
  95
  96 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
  97
  98         * ftp.c (getftp): Reformat Jan's code according to GNU coding
  99         standards; remove (debugging?) printf's; use '\0' for the ASCII
 100         zero character.  Use alloca() instead of malloc() for
 101         inter-function temporary allocations.
 102
 103 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 104
 105         * ftpparse.c, ftpparse.h: New files.
 106
 107         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
 108         only. Use ftp_parse_nonunix_ls otherwise.
 109         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
 110         exotic FTP servers.
 111
 112         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
 113         FTP servers.
 114
 115         * ftp.c: New static wariables host_type, pwd, and pwd_len.
 116         (getftp): Support for VMS. Support for FTP servers that do not
 117         place you in the root directory after login.
 118         (ftp_retrieve_list): VMS is silent about the real file size, issue
 119         a more appropriate message.
 120         (ftp_get_listing): Pass host_type to ftp_parse_ls.
 121
 122         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
 123
 124 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 125
 126         * hash.c (hash_table_put): Don't overwrite deleted mappings.
 127
 128 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 129
 130         * hash.c (find_mapping): New function.
 131         (hash_table_get): Use it.
 132         (hash_table_get_pair): Ditto.
 133         (hash_table_exists): Ditto.
 134         (hash_table_remove): Ditto.
 135         (hash_table_remove): Really delete the entry if the mapping
 136         following LOCATION is empty.
 137
 138         * utils.c (string_set_add): Check whether the element has existed
 139         before.
 140
 141         * hash.c (hash_table_get_pair): New function.
 142
 143 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 144
 145         * http.c (http_process_type): Ignore trailing whitespace; use
 146         strdupdelim().
 147
 148         * recur.c (recursive_retrieve): Use the new `convert' field.
 149         (convert_all_links): Ditto.
 150         (convert_all_links): Don't respect meta_disallow_follow.
 151
 152         * html-url.c (handle_link): Fill out link_relative_p and
 153         link_complete_p.
 154
 155         * url.h (struct _urlpos): Make elements more readable.
 156
 157         * recur.c (recursive_retrieve): Call slist_prepend instead of
 158         slist_append.
 159         (convert_all_links): Call slist_nreverse before iterating through
 160         urls_html.
 161
 162         * utils.c (slist_prepend): New function.
 163         (slist_nreverse): Ditto.
 164
 165 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 166
 167         * http.c (check_end): Constify.
 168
 169 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 170
 171         * http.c (http_loop): If username and password are known, try the
 172         `Basic' authentication scheme by default.
 173
 174         * connect.h: Declare test_socket_open.
 175
 176 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 177
 178         * version.c: Bump version to 1.7-dev.
 179
 180 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 181
 182         * http.c (gethttp): Don't use the return value of sprintf().
 183         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
 184
 185 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 186
 187         * recur.c (recursive_retrieve): Print the "so we don't load"
 188         debugging message only if we really don't load.
 189
 190         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
 191         (gethttp): Don't request keep-alive if keep-alive is inhibited.
 192
 193 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 194
 195         * http.c (gethttp): Make the HTTP persistent connections more
 196         robust.
 197
 198 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 199
 200         * retr.c (get_contents): If use_expected, make sure that the
 201         appropriate amount of data is being read.
 202
 203         * http.c (gethttp): Check for both `Keep-Alive: ...' and
 204         `Connection: Keep-Alive'.
 205
 206         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
 207         turned on.
 208
 209 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 210
 211         * http.c (connection_available_p): Use it.
 212
 213         * connect.c (test_socket_open): New function.
 214
 215         * http.c (gethttp): Support persistent connections.  Based on the
 216         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
 217         (register_persistent): New function.
 218         (connection_available_p): Ditto.
 219         (invalidate_connection): Ditto.
 220
 221 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 222
 223         * url.c (convert_links): Handle UREL2ABS case.
 224
 225         * recur.c (recursive_retrieve): Instead of the list
 226         urls_downloaded, use hash tables dl_file_url_map and
 227         dl_url_file_map.
 228         (convert_all_links): Use them to retrieve data.
 229
 230         * host.c (clean_hosts): Free the hash tables.
 231
 232         * main.c (private_initialize): Call host_init().
 233
 234         * host.c (store_hostaddress): Use a saner, hash table-based data
 235         model.
 236         (realhost): Ditto.
 237         (host_init): Initialize the hash tables.
 238
 239 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 240
 241         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
 242         used for what the sorted slists used to be used for.
 243         (slist_contains): Don't rely on the list being sorted.
 244         (slist_append): Simplify the code.
 245
 246         * recur.c (recursive_cleanup): Use free_string_set.
 247
 248         * utils.c (string_set_add, string_set_exists, string_set_free):
 249         New functions for easier freeing of hash tables whose keys are
 250         strdup'ed strings.
 251
 252         * recur.c (recursive_retrieve): Use the hash table functions for
 253         storing undesirable URLs.
 254
 255         * hash.c: New file.
 256
 257 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 258
 259         * main.c (private_initialize): Call url_init.
 260         (main): Call private_initialize.
 261
 262         * url.c (unsafe_char_table): New table.
 263         (UNSAFE_CHAR): Use it.
 264         (init_unsafe_char_table): New function.
 265         (url_init): New function; call init_unsafe_char_table.
 266
 267 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 268
 269         * html-url.c (handle_link): Handle HTML fragment identifiers.
 270
 271         * recur.c (recursive_retrieve): If norobot info is respected and
 272         the file is specified not to be followed by robots, respect that.
 273
 274         * html-url.c (collect_tags_mapper): Handle <meta name=robots
 275         content=X>.  For us the important cases are where X is NONE or
 276         where X contains NOFOLLOW.
 277         (get_urls_html): Propagate that information to the caller.
 278
 279 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 280
 281         * url.c (convert_links): Unlink the file we might be reading from
 282         before writing to it.
 283         (convert_links): Use alloca instead of malloc for
 284         filename_plus_orig_suffix.
 285
 286 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 287
 288         * url.c (get_urls_file): Ditto.
 289         (convert_links): Ditto.
 290
 291         * html-url.c (get_urls_html): Use read_file() instead of
 292         load_file().
 293
 294         * utils.c (read_file): New function, instead of the old
 295         load_file().
 296         (read_file_free): Ditto.
 297
 298         * url.c (findurl): Search only for the supported protocols.
 299         (convert_links): Use fwrite() when writing out a region of
 300         characters.
 301
 302 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 303
 304         * ftp-ls.c: Move html_quote_string and ftp_index here.
 305
 306         * url.c: Remove get_urls_html, since that's now in html-url.c.
 307
 308         * html-url.c: New file.
 309
 310         * html-parse.c: New file.
 311
 312 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 313
 314         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
 315         _vsnprintf respectively.
 316
 317 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 318
 319         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
 320         on Linux.
 321
 322 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 323
 324         * host.c (realhost): Add HOST to the list with quality==0 only if
 325         it wasn't already there.
 326         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
 327
 328 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 329
 330         * init.c (run_wgetrc): Don't bother killing off '\r' since
 331         pars_line() skips whitespace at end of line anyway.
 332         (parse_line): Oops, it didn't.  Now it does.
 333
 334         * recur.c (parse_robots): Ditto here.
 335
 336         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
 337         manually because read_whole_line no longer does.
 338
 339         * utils.c (read_whole_line): Rewrite to: a) use less memory
 340         (reallocates to needed size after work), b) work faster -->
 341         fgets() instead of getc, c) be more correct --> doesn't kill the
 342         newline character at the end of line.
 343
 344 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 345
 346         * init.c (comind): Initialize MAX to array size - 1.
 347
 348 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 349
 350         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
 351         Suggested by Edward J. Sabol.
 352
 353 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 354
 355         * url.c (construct): Handle the case where host name is not
 356         followed by a slash.
 357
 358 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 359
 360         * init.c: commands[] need to be sorted!  ("base" wasn't.)
 361
 362 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 363
 364         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
 365         `if'.
 366
 367 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 368
 369         * url.c (construct): Insert unneeded initialization for the
 370         compiler to shut up.
 371
 372         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
 373         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
 374         otherwise gets lost when you define _XOPEN_SOURCE.
 375
 376         * utils.c (touch): Include the file name in the error message.
 377         From Debian.
 378
 379 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 380
 381         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
 382         resize the buffer to fit the formated message.  That way, messages
 383         of arbitrary size may be printed.
 384         (logvprintf): Use saved_append() to optionally log the last
 385         several lines of output.
 386         (logputs): Ditto.
 387         (log_close): Adapt to new data structures.
 388         (log_dump): Ditto.
 389         (redirect_output): Print messages to stderr, not to stdout.
 390
 391         * log.c (saved_append_1): New function.  Replaces the old logging
 392         system ("log all output until 10M characters") with a new, much
 393         more reasonable one ("log last screenful of text").
 394         (saved_append): New function; call saved_append_1.
 395         (free_log_line): New function.
 396
 397 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 398
 399         * url.c (construct): Fix comment.
 400         (find_last_char): Document.
 401
 402 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 403
 404         * snprintf.c: New file.
 405
 406 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 407
 408         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
 409         types to logprintf() and debug_logprintf().
 410
 411 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 412
 413         * ftp.c (ftp_loop_internal): Hide the password from the URL when
 414         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
 415         <darekm@bydg.lomac.com.pl>.
 416
 417 2000-11-02  Junio Hamano  <junio@twinsun.com>
 418
 419         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
 420
 421 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
 422
 423         * http.c (known_authentication_scheme_p): Recognize NTML
 424         authentication.
 425         (create_authorization_line): Treat NTML the same as `Basic'.
 426
 427 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 428
 429         * retr.c (retrieve_url): Free url before returning.
 430         (retrieve_url): Free mynewloc before returning.
 431         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
 432
 433 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 434
 435         * url.c (parseurl): Remove possible reading past the end of
 436         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
 437
 438 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 439
 440         * main.c (main): In case of opt.downloaded overflowing, print
 441         <overflow> instead of a totally bogus random value.
 442
 443         * retr.c (retrieve_from_file): Ditto.
 444
 445         * recur.c (recursive_retrieve): Ditto.
 446
 447         * main.c (main): Ditto.
 448
 449         * http.c (http_loop): Ditto.
 450
 451         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
 452         `+=', and downloaded_exceeds_quota() instead of the simple-minded
 453         check.
 454         (ftp_retrieve_list): Ditto.
 455         (ftp_retrieve_dirs): Ditto.
 456         (ftp_retrieve_glob): Ditto.
 457
 458         * retr.c (downloaded_increase): New function.  Notice overflows of
 459         opt.downloaded.
 460         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
 461         used if it overflowed.
 462
 463         * options.h (struct options): New member downloaded_overflow.
 464
 465 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 466
 467         * wget.h (enum): Remove extra space after last enumeration.
 468
 469 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 470
 471         * main.c (main): Use legible_very_long() for printing
 472         opt.downloaded.
 473
 474         * utils.c (legible_1): New function that operates on strings and
 475         does the brunt of legible()'s work.
 476         (legible): Use legible_1().
 477         (legible_very_long): New function; dump the argument with
 478         sprintf(), and call legible_1().
 479
 480         * options.h (struct options): Use VERY_LONG_TYPE for
 481         opt.downloaded.
 482
 483         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
 484         type.
 485
 486         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
 487         defined.  Define HAVE_LONG_LONG if long long is available.
 488
 489 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 490
 491         * utils.c (long_to_string): Update with a later, better version.
 492
 493 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 494
 495         * url.c (path_simplify_with_kludge): New function.
 496         (path_simplify_with_kludge): Disable it.  Instead...
 497         (parse_dir): ...make sure that at this point the right thing is
 498         done, i.e. that "query" part of the URL (?...) is always assigned
 499         to the file, never to the directory portion of the path.
 500
 501 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 502
 503         * retr.c (retrieve_url): Detect redirection cycles.
 504
 505 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 506
 507         * url.c (get_urls_html): Decode HTML entities using
 508         html_decode_entities.
 509
 510         * html.c (htmlfindurl): Don't count the `#' in numeric entities
 511         (&#NNN;) as an HTML fragemnt.
 512         (html_decode_entities): New function.
 513
 514 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 515
 516         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
 517
 518 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 519
 520         * url.c (construct): Rewritten for clarity.  Avoids the
 521         unnecessary copying and stack-allocation the old version
 522         performed.
 523
 524 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 525
 526         * ftp.c (getftp): Ditto.
 527
 528         * http.c (gethttp): Rewind the stream when retrying from scratch.
 529
 530 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 531
 532         * retr.c (retrieve_url): Use url_concat() to handle relative
 533         redirections instead of /ad hoc/ code.
 534
 535         * url.c (url_concat): New function encapsulating weird
 536         construct().
 537         (urllen_http_hack): New function.
 538         (construct): When constructing new URLs, recognize that `?' does
 539         not form part of the file name in HTTP.
 540
 541 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
 542
 543         * retr.c: Add msec timing support for WINDOWS.
 544         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
 545         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
 546
 547 2000-10-27  Dan Harkless  <dan-wget@dilvish.speed.net>
 548
 549         * retr.c (retrieve_url): Manually applied T. Bharath
 550         <TBharath@responsenetworks.com>'s patch to get wget to grok
 551         illegal relative URL redirects.  Reformatted and re-commented it.
 552
 553 2000-10-23  Dan Harkless  <dan-wget@dilvish.speed.net>
 554
 555         * connect.c (make_connection and bindport): Manually applied Rob
 556         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
 557         changing coding style to GNU's.
 558
 559         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
 560         files downloaded via FTP.  Per a comment, .listing files were not
 561         counted towards number of bytes and files downloaded because they're
 562         deleted anyway.  Well, they aren't under -nr, so count them then.
 563
 564         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
 565         --bind-address, alphabetizing, changing coding style to GNU's,
 566         commenting, and renaming cmd_ip_address() to cmd_address() to
 567         imply hostnames also okay.
 568
 569         * main.c (main): --delete-after didn't delete the root of the
 570         tree.  Ignore --convert-links if --delete-after was specified.
 571         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
 572         fixing duplicate use of added-since-1.5.3 case value.
 573         (print_help): Clarified that --delete-after deletes local files.
 574         Rob forgot to add a line for his new --bind-address option.
 575
 576         * options.h (struct options): Manually applied Rob Mayoff's patch
 577         to add --bind-address (bind_address structure member).
 578
 579         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
 580         Ignore --convert-links if --delete-after was specified.
 581
 582         * retr.c (retrieve_from_file): Just added a DEBUGP().
 583
 584 2000-10-19  Dan Harkless  <dan-wget@dilvish.speed.net>
 585
 586         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
 587         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
 588         patch to work around FTP servers that incorrectly respond to the
 589         "REST" command with the remaining size rather than the total file size.
 590
 591         * http.c (gethttp): Improved a comment and added code to tack on
 592         ".html" to text/html files without that extension when -E specified.
 593         (http_loop): Use new downloaded_file() enumerators and deal with
 594         the case of gethttp() called xrealloc() on u->local.
 595
 596         * init.c (commands): Added new "htmlextension" command.
 597         Also renamed John Daily's cmd_quad() to the more descriptive
 598         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
 599         removed duplicate cmd_boolean() declaration.
 600
 601         * main.c (print_help): Added my new -E / --html-extension option.
 602         (main): Undocumented --email-address option previously used -E synonym.
 603         Stole it away for the much more deserving --html-extension's use.
 604
 605         * options.h (struct options): Added html_extension field.
 606
 607         * url.c (convert_links): URL X that we saved as X.html locally due
 608         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
 609         (downloaded_file): Now remembers if we added .html extension to a file.
 610
 611         * url.h (downloaded_file_t): Added extra enumerators to support above.
 612         (downloaded_file): Now takes and returns a downloaded_file_t.
 613
 614         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
 615
 616 2000-10-09  Dan Harkless  <dan-wget@dilvish.speed.net>
 617
 618         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
 619
 620         * main.c (print_help): Clarified what --retr-symlinks does.
 621
 622 2000-09-15  John Daily  <jdaily@cyberdude.com>
 623
 624         * init.c: Add support for "always" and "never" values to allow
 625         .wgetrc to override commandline (useful e.g. with .pm files
 626         calling `wget --passive-ftp' when your firewall doesn't allow that).
 627
 628         * ftp.c (getftp): passive_ftp is first option to support always/never.
 629
 630 2000-08-30  Dan Harkless  <dan-wget@dilvish.speed.net>
 631
 632         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
 633
 634         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
 635         Wrapped some > 80-column lines.  When -p is specified and we're at a
 636         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
 637         <LINK REL="stylesheet">.
 638
 639         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
 640
 641         * init.c: Added new -p / --page-requisites / page_requisites option.
 642
 643         * main.c (print_help): Clarified that -l inf and -l 0 both allow
 644         infinite recursion.  Changed the unhelpful --mirrior description
 645         to simply give the options it's equivalent to.  Added new -p option.
 646         (main): Added some comments; handle new -p / --page-requisites.
 647
 648         * options.h (struct options): Added new page_requisites field.
 649
 650         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
 651         Calculate and pass down new `dash_p_leaf_HTML' parameter to
 652         get_urls_html().  Use new INFINITE_RECURSION #define.
 653
 654         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
 655         final `dash_p_leaf_HTML' parameter.
 656
 657         * url.c: get_urls_html() and htmlfindurl() now take final
 658         `dash_p_leaf_HTML' parameter.
 659
 660         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
 661
 662         * wget.h: Added some comments and new INFINITE_RECURSION #define.
 663
 664 2000-08-23  Dan Harkless  <dan-wget@dilvish.speed.net>
 665
 666         * main.c (print_help): -B / --base was not mentioned.
 667
 668 2000-08-22  Dan Harkless  <dan-wget@dilvish.speed.net>
 669
 670         * main.c (print_help): Modified -nc description to mention that it
 671         also prevents the creation of multiple versions of the same file
 672         with ".<number>" suffixes.
 673
 674 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 675
 676         * retr.c (retrieve_url): Consistently strdup opt.referer when
 677         setting u->referer.
 678
 679 2000-06-09  Dan Harkless  <dan-wget@dilvish.speed.net>
 680
 681         * main.c (print_help): --help output for --waitretry was over 80 cols.
 682
 683 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
 684
 685         * url.c (encode_string): Fix comment.
 686         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
 687
 688 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
 689
 690         * ftp.c (ftp_retrieve_list): Change permissions only on plain
 691         files.
 692
 693 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
 694
 695         * url.c (str_url): Print the port number only if it's different
 696         from the default port number for that protocol.
 697
 698 2000-05-22  Dan Harkless  <dan-wget@dilvish.speed.net>
 699
 700         * main.c (print_help): Added --help line for Damir Dzeko
 701         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
 702         Removed comments that --referer and --waitretry were undocumented.
 703         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
 704         line for --execute.
 705
 706 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
 707
 708         * ftp.c (getftp): Ditto.
 709
 710         * http.c (gethttp): Check for return value of fclose/fflush.
 711
 712 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
 713
 714         * host.c (store_hostaddress): Instead of shifting ADDR, start
 715         copying from the correct address.
 716
 717 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
 718
 719         * http.c (gethttp): Don't free REQUEST -- it was allocated with
 720         alloca().
 721         Pointed out by Gisle Vanem <gvanem@eunet.no>.
 722
 723 2000-04-04  Dan Harkless  <dan-wget@dilvish.speed.net>
 724
 725         * host.c (store_hostaddress): R. K. Owen's patch introduces a
 726         "left shift count >= width of type" warning on 32-bit
 727         architectures.  Got rid of it by tricking the compiler w/ a variable.
 728
 729         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
 730         characters per RFC1738, namely everything above '~'.  It also
 731         generated a warning on OSes where char =~ unsigned char.  Fixed.
 732
 733 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
 734
 735         * http.c (http_process_type): Removed needless strdup(), a memory
 736         leak.
 737
 738 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
 739
 740         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
 741
 742 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
 743
 744         * init.c (wgetrc_file_name): Don't free HOME under Windows.
 745
 746 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
 747
 748         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
 749
 750 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
 751
 752         * url.c (UNSAFE_CHAR): New macro.
 753         (contains_unsafe): Use it.
 754         (encode_string): Ditto.
 755
 756 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
 757
 758         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
 759
 760 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
 761
 762         * Use TOUPPER/TOLOWER.
 763
 764 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
 765
 766         * ftp-opie.c (btoe): Zero-terminate OSTORE.
 767
 768 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
 769
 770         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
 771
 772         * sysdep.h (ISALNUM): New macro.
 773         (TOLOWER): Ditto.
 774         (TOUPPER): Ditto.
 775
 776 2000-03-10  Dan Harkless  <dan-wget@dilvish.speed.net>
 777
 778         * html.c (idmatch): Implemented checking of my new --follow-tags
 779         and --ignore-tags options.
 780
 781         * init.c (commands): Added comment reminding people adding new
 782         entries doing allocation to add corresponding freeing in cleanup().
 783         (commands): Added new followtags and ignoretags commands.
 784         (cleanup): Free storage for new followtags and ignoretags.
 785
 786         * main.c: Use of "comma-separated list" was random -- normalized
 787         it.  Did some alphabetization.  Added comments pointing out
 788         "Options without arguments" and "Options accepting an argument"
 789         sections of long_options[].  Added new options --follow-tags and
 790         -G / --ignore-tags.  Added comment that Damir's --referer is
 791         currently undocumented.  Added comment that Heiko's --waitretry is
 792         partially undocumented (mentioned in --help but not in
 793         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
 794
 795         * options.h (struct options): Added new fields follow_tags and
 796         ignore_tags.
 797
 798         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
 799
 800 2000-03-02  Dan Harkless  <dan-wget@dilvish.speed.net>
 801
 802         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
 803         braces to avoid ambiguous `else'" warnings.  Eliminated them.
 804
 805         * http.c (gethttp): Dan Berger's query string patch is totally
 806         bogus.  If you have two different URLs, gen_page.cgi?page1 and
 807         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
 808         second will overwrite the first.  Also, parameters to implicit
 809         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
 810         be printed with trailing garbage characters, and could seg fault.
 811         Backing out the patch, which Dan B. informed me by email was just
 812         a kludge to download StarOffice from Sun made necessary due to
 813         wget's unconditional escaping of certain characters (room for an
 814         option there?).
 815         (http_loop): Heiko introduced "suggest explicit braces to avoid
 816         ambiguous `else'" warnings.  Eliminated them.
 817
 818         * main.c: Heiko's --wait / --waitretry backwards compatibility
 819         code looks to have been totally untested -- automatic variable
 820         'wr' was used without being initialized, and a long int was passed
 821         into setval()'s char* val parameter.
 822
 823         * recur.c (parse_robots): Applied Edward J. Sabol
 824         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
 825         problem with "User-agent:<space>*<space>" lines in robots.txt.
 826
 827         * url.c (parseurl, str_url): Removing Dan Berger's code (see
 828         http.c above for explanation).
 829
 830 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
 831
 832         * ftp.c: Respect new option waitretry.
 833
 834 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
 835
 836         * http.c (gethttp): Send custom Referer, if required.
 837
 838 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
 839
 840         * netrc.c (parse_netrc): Allow passwords to contain spaces.
 841
 842         * netrc.c (parse_netrc): New function.
 843
 844 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
 845
 846         * http.c (gethttp): Send it.
 847
 848         * url.c (parseurl): Detect query string in HTTP URL-s.
 849         (str_url): Print it.
 850
 851 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
 852
 853         * html.c (html_allow): Add <link href=...> and <script src=...>.
 854
 855 1999-05-02  andrew deryabin  <djsf@softhome.net>
 856
 857         * http.c (gethttp): Specify port in `Host' header only if it's
 858         different from 80.
 859
 860 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
 861
 862         * recur.c (recursive_retrieve): If a finite maximum depth is
 863         specified, and we're are already at that depth, don't download the
 864         HTML file for parsing.
 865
 866 2000-03-01  Dan Harkless  <dan-wget@dilvish.speed.net>
 867
 868         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
 869         even though we don't do conversion on HTML files retrieved via
 870         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
 871         (ftp_retrieve_list): Added a comment saying where we need to
 872         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
 873         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
 874         a lie -- reworded as "Server file no newer than local file '%s' --".
 875
 876         * http.c (http_loop): Fixed a typo and clarified a comment.
 877         (http_loop): When -K and -N are specified together, compare size
 878         and timestamp of server file X against local file X.orig (if
 879         extant) rather than converted local file X.
 880         (http_loop): "Local file '%s' is more recent," is sometimes a lie
 881         -- reworded as "Server file no newer than local file '%s' --".
 882         (http_loop): Call new downloaded_file() function to prevent
 883         wrongful overwriting of .orig file when -N is specified.
 884
 885         * url.c (convert_links): When -K specified, only rename X to
 886         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
 887         file X due to -N, we clobber an X.orig from a previous invocation.
 888         (convert_links): Call the failsafe xstrdup(), not the real strdup().
 889         (convert_links): Added a note asking anyone who understands how
 890         multiple URLs can correspond to a single file to comment it.
 891         (downloaded_file): Added this new function.
 892
 893         * url.h (downloaded_file): Added prototype for this new function
 894         as well as its downloaded_file_t enum type.
 895
 896         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
 897
 898 2000-02-29  Dan Harkless  <dan-wget@dilvish.speed.net>
 899
 900         * version.c: Upped version to developer-only "1.5.3+dev".
 901
 902 2000-02-18  Dan Harkless  <dan-wget@dilvish.speed.net>
 903
 904         * init.c (backup_converted): Added this new option.
 905
 906         * main.c (-K / --backup-converted): Added this new option.
 907
 908         * options.h (backup_converted): Added this new option.
 909
 910         * url.c (convert_links): When backup_converted is specified, save
 911         file X as X.orig before converting.
 912
 913         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
 914
 915 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
 916
 917         * version.c: Wget 1.5.3 is released.
 918
 919 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
 920
 921         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
 922         address doesn't yield FQDN.
 923
 924 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
 925
 926         * cmpt.c (strerror): Fix declaration of sys_errlist.
 927
 928 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
 929
 930         * main.c (main): Don't use an array subscript as the first
 931         argument to STRDUP_ALLOCA.
 932         From Kaveh R. Ghazi.
 933
 934 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
 935
 936         * html.c (htmlfindurl): Download table background.
 937
 938 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
 939
 940         * init.c (parse_line): Would free *com before allocating it.
 941         (parse_line): Would free com instead of *com.
 942
 943 1998-09-10  Howard Gayle  <howard@fjst.com>
 944
 945         * url.c (get_urls_html): Would drop the last character of the
 946         link.
 947
 948 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
 949
 950         * http.c (http_loop): Don't print status code if quiet.
 951
 952 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
 953
 954         * log.c: Use <stdarg.h> only when __STDC__.
 955
 956 1998-09-10  Adam D. Moss  <adam@foxbox.org>
 957
 958         * html.c (htmlfindurl): Download <layer src=...>.
 959
 960 1998-09-10  Howard Gayle  <howard@fjst.com>
 961
 962         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
 963         not retrieved.
 964
 965 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
 966
 967         * utils.c: Include <libc.h> on NeXT.
 968
 969 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
 970
 971         * url.c (get_urls_html): Fix calculation of URL position.
 972
 973 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
 974
 975         * version.c: Wget 1.5.2 is released.
 976
 977 1998-06-23  Dave Love  <d.love@dl.ac.uk>
 978
 979         * ftp.c, init.c, netrc.c: Include errno.h.
 980
 981         * http.c: Include errno.h and time header.
 982
 983         * Makefile.in (exext): Define.
 984         (install.bin, uninstall.bin): Use it.
 985
 986 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
 987
 988         * http.c (http_loop): Don't attempt to compare local and remote
 989         sizes if the remote size is unknown.
 990
 991 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
 992
 993         * url.c (get_urls_html): Use malloc() instead of alloca in the
 994         loop.
 995
 996 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
 997
 998         * version.c: Wget 1.5.2-b4 is released.
 999
1000 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1001
1002         * url.c (get_urls_html): Ignore spaces before and after the URI.
1003
1004 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
1005
1006         * ftp.c (getftp): Translate `done'.
1007
1008 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1009
1010         * version.c: Wget 1.5.2-b3 is released.
1011
1012 1998-06-06  Alexander Kourakos  <awk@bnt.com>
1013
1014         * init.c (cleanup): Close dfp, don't free it.
1015
1016 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1017
1018         * utils.c (make_directory): Twiddle.
1019
1020         * config.h.in: Added template for access().
1021
1022 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
1023
1024         * html.c (htmlfindurl): Download <input src=...>
1025
1026 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
1027
1028         * utils.c (file_exists_p): Use access() with two arguments.
1029
1030 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
1031
1032         * netrc.c (parse_netrc): Correct logic.
1033
1034 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
1035
1036         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
1037         <ljm@ljm.wownet.net>.
1038
1039 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
1040
1041         * version.c: Wget 1.5.2-b2 is released.
1042
1043 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
1044
1045         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
1046
1047 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
1048
1049         * retr.c (elapsed_time): Return correct value when
1050         HAVE_GETTIMEOFDAY is undefined.
1051
1052 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
1053
1054         * version.c: Wget 1.5.2-b1 is released.
1055
1056 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
1057
1058         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
1059         (_getopt_internal): Don't translate `#if 0'-ed strings.
1060
1061 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1062
1063         * mswindows.c (ws_handler): Use fork_to_background().
1064
1065 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1066
1067         * version.c: Wget 1.5.1 is released.
1068
1069 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1070
1071         * http.c (parse_http_status_line): Avoid `minor' and `major'
1072         names.
1073
1074 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
1075
1076         * utils.c (mkdirhier): Renamed to make_directory.
1077
1078 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
1079
1080         * mswindows.c (fork_to_background): Define under Windows.
1081
1082         * utils.c (fork_to_background): New function.
1083
1084         * html.c (htmlfindurl): Removed rerdundant casts.
1085
1086 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1087
1088         * mswindows.c (ws_mypath): Cache the path.
1089
1090 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1091
1092         * ftp.h: Prefix enum ftype members with FT_.
1093
1094         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
1095
1096         * mswindows.h: Use stat under Borland, _stat under MSVC.
1097
1098 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
1099
1100         * http.c (known_authentication_scheme_p): New function.
1101         (gethttp): Handle authorization more correctly.
1102
1103         * ftp-basic.h: Removed.
1104
1105         * cmpt.h: Removed.
1106
1107         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
1108         with gcc 2.8.
1109         (numdigit): Use `while' loop.
1110
1111         * http.c (create_authorization_line): Detect authentication
1112         schemes case-insensitively.
1113
1114         * http.c (extract_header_attr): Use strdupdelim().
1115         (digest_authentication_encode): Move declaration of local
1116         variables to smaller scope.
1117         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
1118         (create_authorization_line): Detect authentication schemes
1119         case-insensitively.
1120
1121         * utils.c (touch): Constify.
1122
1123         * http.c (gethttp): Report a nicer error when no data is received.
1124
1125         * rbuf.h (RBUF_READCHAR): Ditto.
1126
1127         * ftp-basic.c (ftp_response): Use sizeof.
1128
1129 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
1130
1131         * retr.c (print_percentage): EXPECTED is long, not int.
1132         (print_percentage): Use floating-point arithmetic to avoid
1133         overflow with large files' sizes multiplied with 100.
1134
1135 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
1136
1137         * config.h.in: Added pid_t stub.
1138
1139         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
1140         define it).
1141
1142 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
1143
1144         * version.c: Wget 1.5.0 is released.
1145
1146 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
1147
1148         * url.c (str_url): Ditto.
1149
1150         * ftp-basic.c (ftp_rest): Use new name.
1151
1152         * utils.c (long_to_string): Renamed from prnum().
1153
1154 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
1155
1156         * version.c: Wget 1.5-b17 is released.
1157
1158 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1159
1160         * headers.c (header_get): New argument FLAGS.
1161
1162         * http.c (gethttp): If request is malformed, bail out of the
1163         header loop.
1164         (gethttp): Check for empty header *after* the status line checks.
1165         (gethttp): Disallow continuations for status line.
1166
1167 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1168
1169         * version.c: Wget 1.5-b16 is released.
1170
1171 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1172
1173         * init.c (commands): Renamed `always_rest' to `continue'.
1174
1175 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
1176
1177         * all: Use it.
1178
1179         * log.c (logputs): New argument.
1180         (logvprintf): Ditto.
1181         (logprintf): Ditto.
1182
1183 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1184
1185         * http.c (http_atotm): Update comment.
1186
1187         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
1188
1189         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
1190
1191         * main.c (i18n_initialize): New function.
1192         (main): Use it.
1193
1194         * log.c: Include <unistd.h>.
1195
1196         * retr.c (show_progress): Cast alloca to char *.
1197
1198 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1199
1200         * version.c: Wget 1.5-b15 is released.
1201
1202 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1203
1204         * utils.h: Declare file_non_directory_p().
1205
1206 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
1207
1208         * main.c (main): It's `tries', not `numtries' now.
1209
1210 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1211
1212         * init.c (getperms): Removed.
1213
1214 1998-04-01  Tim Charron  <tcharron@interlog.com>
1215
1216         * log.c (logvprintf): Don't use ARGS twice.
1217
1218 1998-04-01  John  <john@futuresguide.com>
1219
1220         * mswindows.c: Cleaned up.
1221
1222 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1223
1224         * version.c: Wget 1.5-b14 is released.
1225
1226 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1227
1228         * ftp-opie.c (STRLEN4): New macro.
1229         (btoe): Use it.
1230
1231 1998-04-01  Junio Hamano  <junio@twinsun.com>
1232
1233         * http.c: Document all the Digest functions.
1234
1235 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1236
1237         * utils.c (file_non_directory_p): Renamed from isfile().
1238
1239         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
1240
1241 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1242
1243         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
1244
1245         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
1246         style.
1247         (cmd_permissions): Removed.
1248
1249         * config.h.in: Add template for WORDS_BIGENDIAN.
1250
1251 1998-03-31  Junio Hamano  <junio@twinsun.com>
1252
1253         * http.c (HEXD2asc): New macro.
1254         (dump_hash): Use it.
1255
1256 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1257
1258         * version.c: Wget 1.5-b13 is released.
1259
1260 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1261
1262         * main.c (main): Don't try to use `com'.
1263
1264 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1265
1266         * init.c (cmd_permissions): New function.
1267
1268 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1269
1270         * version.c: Wget 1.5-b12 is released.
1271
1272 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1273
1274         * init.c (commands): Renamed `numtries' to `tries'.
1275         (cmd_spec_debug): Removed.
1276         (home_dir): Under Windows, return `C:\' if HOME is undefined.
1277
1278 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1279
1280         * config.h.in: Define _XOPEN_SOURCE.
1281
1282         * init.c (check_user_specified_header): New function.
1283         (cmd_spec_header): Use it.
1284         (cmd_spec_useragent): New function.
1285
1286 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1287
1288         * version.c: Wget 1.5-b11 is released.
1289
1290 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
1291
1292         * wget.h: Include <libintl.h> only if NLS is enabled.
1293
1294 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
1295
1296         * options.h (struct options): Made `wait' a long.
1297         (struct options): Ditto for `timeout'.
1298
1299 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
1300
1301         * utils.c (exists): Renamed to file_exists_p.
1302         (file_exists_p): Use access() if available.
1303
1304 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
1305
1306         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
1307         infloop.
1308
1309         * log.c: do_logging -> save_log_p.
1310
1311         * config.h.in: Added template for HAVE_VSNPRINTF.
1312
1313 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1314
1315         * init.c: Ditto.
1316
1317         * http.c: Protect declaration against non-ANSI compiler.
1318
1319         * log.c (logvprintf): Use vsnprintf() if available.
1320
1321         * getopt.c (main): Don't translate test stuff.
1322
1323 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1324
1325         * version.c: Wget 1.5-b10 is released.
1326
1327 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
1328
1329         * ftp.c (getftp): Don't translate "CWD %s".
1330
1331         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
1332
1333 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1334
1335         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
1336
1337         * log.c (logputs): New function.
1338         (logvprintf): Renamed from vlogmsg; use logputs().
1339
1340         * retr.c (show_progress): Print `[100%]' when the retrieval is
1341         finished.
1342
1343         * init.c (run_wgetrc): Use FILE, not PATH.
1344         (wgetrc_file_name): Ditto.
1345
1346 1998-03-07  Tim Adam  <tma@osa.com.au>
1347
1348         * recur.c (parse_robots): Correctly reset `entries' on empty
1349         disallow.
1350
1351 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1352
1353         * init.c (cmd_spec_debug): Use cmd_boolean().
1354
1355 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
1356
1357         * http.c (gethttp): Create proxy-authorization correctly.
1358
1359 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1360
1361         * md5.c: Ditto.
1362
1363         * getopt.c: Use ANSI function definitions.
1364
1365         * ftp-opie.c: New file.
1366
1367         * options.h: Don't redefine EXTERN.
1368
1369         * init.c: Sort it correctly.
1370
1371 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1372
1373         * version.c: Wget 1.5-b9 is released.
1374
1375 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1376
1377         * recur.c (recursive_retrieve): Reset `first_time'.
1378
1379         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
1380
1381         * rbuf.c (rbuf_peek): Simplified.
1382         (rbuf_flush): Use MINVAL.
1383
1384         * wget.h (MINVAL): Moved from url.h.
1385
1386         * rbuf.h (RBUF_FD): New macro.
1387
1388         * url.c (add_url): Add to the head of the list.
1389
1390         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
1391         file.
1392         (getftp): Set the default permissions to 0600.
1393
1394 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
1395
1396         * url.c (get_urls_html): Ditto.
1397         (convert_links): Ditto.
1398
1399         * recur.c (parse_robots): Ditto.
1400
1401         * html.c (ftp_index): Ditto.
1402
1403         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
1404
1405         * init.c (defaults): Initialize `opt' to zero via memset.
1406
1407         * http.c (digest_authentication_encode): goto considered harmful.
1408
1409 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
1410
1411         * ftp.c (delelement): Simplify and fix leak.
1412
1413 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
1414
1415         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
1416
1417         * url.h (HEXD2ASC): Removed warning.
1418
1419         * init.c (comind): Use binary search.
1420         (commands): Reorganized.
1421         (setval): Ditto.
1422         (cmd_boolean): New function.
1423         (cmd_number): Ditto.
1424         (cmd_number_inf): Ditto.
1425         (cmd_string): Ditto.
1426         (cmd_vector): Ditto.
1427         (cmd_directory_vector): Ditto.
1428         (cmd_bytes): Ditto.
1429         (cmd_time): Ditto.
1430         (cmd_spec_debug): Ditto.
1431         (cmd_spec_dirmode): Ditto.
1432         (cmd_spec_dirstruct): Ditto.
1433         (cmd_spec_dotstyle): Ditto.
1434         (cmd_spec_header): Ditto.
1435         (cmd_spec_htmlify): Ditto.
1436         (cmd_spec_mirror): Ditto.
1437         (cmd_spec_outputdocument): Ditto.
1438         (cmd_spec_recursive): Ditto.
1439         (settime): Merged with cmd_time().
1440         (setbytes): Merged with cmd_bytes().
1441         (setonoff): Merged with cmd_boolean().
1442         (onoff): Ditto.
1443
1444 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1445
1446         * Makefile.in (distclean): Remove `config.h'.
1447
1448 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1449
1450         * version.c: Wget 1.5-b8 is released.
1451
1452 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1453
1454         * http.c (digest_authentication_encode): New function.
1455         (create_authorization_line): Use it.
1456         (dump_hash): New function.
1457         (digest_authentication_encode): Use it.
1458
1459         * fnmatch.c: Renamed from `mtch.c'.
1460
1461 1998-02-15  Karl Eichwalder  <ke@suse.de>
1462
1463         * main.c (main): Tag "Written by..." string as translatable.
1464
1465 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1466
1467         * wget.h (FREE_MAYBE): New macro.
1468
1469         * http.c (create_authorization_line): Don't use ANSI C string
1470         concatenation feature.
1471         (basic_authentication_encode): Use alloca() for temporary
1472         variables.
1473
1474         * recur.h: Ditto.
1475
1476         * http.c: Ditto.
1477
1478         * headers.h: Ditto.
1479
1480         * ftp-basic.c: Protect declaration against non-ANSI compiler.
1481
1482         * http.c (create_authorization_line): Cast `unsigned char *' to
1483         `char *' for sprintf, to shut up the noisy Digital Unix cc.
1484
1485 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1486
1487         * version.c: Wget 1.5-b7 is released.
1488
1489 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1490
1491         * cmpt.c (strstr): Synched with glibc-2.0.6.
1492
1493         * ftp-basic.c (calculate_skey_response): Ditto.
1494         (calculate_skey_response): Use alloca().
1495
1496         * http.c (create_authorization_line): Work with FSF's version of
1497         md5.c.
1498
1499         * md5.c: New file, from GNU libc.
1500
1501 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
1502
1503         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
1504
1505 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1506
1507         * http.c (basic_authentication_encode): New function, instead of
1508         the macro.
1509
1510 1998-02-13  Junio Hamano  <junio@twinsun.com>
1511
1512         * http.c: Add HTTP-DA support.
1513         * ftp-basic.c: Add Opie/S-key support.
1514         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
1515         * md5.c, md5.h: New files.
1516
1517 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1518
1519         * http.c (http_process_range): Renamed from hprocrange().
1520         (http_process_range): Parse the whole header.
1521
1522         * headers.c: New file.
1523         (header_process): New function.
1524         (header_get): Renamed from fetch_next_header.
1525
1526         * all: Include utils.h only where necessary.
1527
1528         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
1529
1530         * wget.h: Add provisions for dmalloc.
1531
1532 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1533
1534         * version.c: Wget 1.5-b6 is released.
1535
1536 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1537
1538         * ftp.c (ftp_loop): Determine `filename' more precisely.
1539
1540         * init.c (setval): Don't set `opt.quiet' if output-document is
1541         `-'.
1542
1543         * log.c (log_init): Print to STDERR instead of STDOUT.
1544         (vlogmsg): Use STDERR by default.
1545         (logflush): Ditto.
1546
1547 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
1548
1549         * host.c: Use addr_in again.
1550
1551 1998-02-08  Karl Eichwalder  <karl@suse.de>
1552
1553         * http.c (gethttp): Fixed typo.
1554
1555 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1556
1557         * version.c: Wget 1.5-b5 is released.
1558
1559 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1560
1561         * retr.c (show_progress): Use it.
1562
1563         * log.c (logflush): New function.
1564
1565         * wget.h: Utilize __attribute__ if on gcc.
1566
1567 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
1568
1569         * http.c (base64_encode_line): New argument LENGTH.
1570         (BASIC_AUTHENTICATION_ENCODE): Use it.
1571         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
1572
1573         * main.c (main): Fixed fprintf() format mismatch.
1574
1575 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
1576
1577         * version.c: Wget 1.5-b4 is released.
1578
1579 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
1580
1581         * host.c: use sockaddr_in instead of addr_in.
1582
1583 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
1584
1585         * init.c (cleanup): Use it.
1586
1587         * recur.c (recursive_cleanup): New function.
1588
1589         * retr.c (retrieve_from_file): Ditto.
1590
1591         * main.c (main): Use it.
1592
1593         * recur.c (recursive_reset): New function.
1594
1595         * retr.c (retrieve_from_file): Ditto.
1596
1597         * main.c (main): Simplify call to recursive_retrieve().
1598
1599         * recur.c (recursive_retrieve): Removed FLAGS argument.
1600
1601         * http.c (gethttp): Changed call to iwrite().
1602
1603 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1604
1605         * url.c (get_urls_html): Ditto.
1606         (free_urlpos): Ditto.
1607         (mkstruct): Ditto.
1608         (construct): Ditto.
1609
1610         * retr.c (retrieve_url): Move declaration of local variables to
1611         smaller scope.
1612
1613         * url.c (urlproto): Use it.
1614         (parseurl): Ditto.
1615         (str_url): Ditto.
1616         (get_urls_html): Ditto.
1617
1618         * utils.h (ARRAY_SIZE): New macro.
1619
1620         * url.c (proto): Moved from url.h.
1621
1622         * url.h (URL_CLEANSE): Reformatted.
1623         (USE_PROXY_P): Renamed from USE_PROXY.
1624
1625         * ftp-basic.c: Adjust to the new interface of iwrite().
1626
1627         * ftp-basic.c (ftp_port): Use alloca().
1628
1629 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1630
1631         * version.c: Wget 1.5-b3 is released.
1632
1633         * host.c (ftp_getaddress): Don't print to stderr directly.
1634
1635         * init.c (setbytes): Support `g' for gigabytes.
1636         (cmdtype): New specification CTIME.
1637         (setval): Use it with settime().
1638         (commands): Use it for WAIT and TIMEOUT.
1639
1640 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
1641
1642         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
1643         (gethttp): Use it.
1644
1645         * utils.c (unique_name_1): Moved from url.c.
1646         (unique_name): Ditto.
1647
1648         * url.c (url_filename): Ditto.
1649
1650         * log.c (redirect_output): Changed call to unique_name().
1651
1652         * url.c (unique_name_1): Renamed from unique_name().
1653         (unique_name): Changed interface.
1654
1655         * init.c (enum cmdid): Moved from init.h.
1656         (cmdtype): Ditto.
1657         (struct cmd): Ditto.
1658
1659         * main.c (main): Use it.
1660         (main): Moved `--backups' to not have a short option.
1661
1662         * options.h (struct options): New member BACKGROUND.
1663
1664         * main.c (print_help): Rearranged.
1665         (main): New long options for -n* short options: --no-directories,
1666         --no-host-directories, --non-verbose, --no-host-lookup and
1667         --dont-remove-listing.
1668
1669 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
1670
1671         * main.c (main): Use log_close().
1672
1673         * log.c: New variable LOGFP.
1674         (vlogmsg): Use it.
1675         (redirect_output): Don't open /dev/null; set LOGFP to stdin
1676         instead.
1677         (log_close): New function.
1678
1679         * options.h (struct options): Removed LFILE.
1680
1681         * log.c (log_enable): Removed.
1682
1683         * main.c (main): Use it.
1684
1685         * log.c (log_init): New function.
1686
1687         * url.c (get_urls_html): Removed needless assignment to BASE.
1688
1689         * host.c (add_hlist): Don't set CMP needlessly.
1690
1691         * utils.c (match_backwards): Ditto.
1692         (in_acclist): Ditto.
1693
1694         * url.c (findurl): Ditto.
1695
1696         * netrc.c (parse_netrc): Ditto.
1697
1698         * log.c (log_dump): Ditto.
1699
1700         * html.c (html_quote_string): Ditto.
1701
1702         * ftp-basic.c (ftp_request): Made static.
1703
1704         * connect.c: Made global variables static.
1705
1706         * url.c (construct): Ditto.
1707
1708         * init.c (init_path): Avoid assignment inside `if'-condition.
1709
1710         * ftp.c: Don't include in.h or winsock.h.
1711
1712         * ftp.c (ftp_loop): Use SZ.
1713
1714         * connect.c (bindport): Cast &addrlen to int *.
1715         (conaddr): Ditto.
1716
1717         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
1718
1719 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1720
1721         * ftp.c (getftp): Initialize opt.ftp_pass here.
1722         (ftp_retrieve_dirs): Use alloca().
1723
1724         * init.c (defaults): Don't initialize opt.ftp_pass.
1725
1726         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
1727         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
1728
1729 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1730
1731         * recur.c (parse_robots): Check for comments more correctly.
1732
1733         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
1734         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
1735         hostname.
1736
1737 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1738
1739         * version.c: Wget 1.5-b2 is released.
1740
1741         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
1742
1743         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
1744
1745         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
1746         char.
1747
1748         * log.c: Don't attempt to hide arguments from ansi2knr.
1749
1750         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
1751
1752         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
1753
1754         * ftp.c (getftp): Ditto.
1755
1756         * http.c (gethttp): Use it.
1757
1758         * retr.c (get_contents): New argument EXPECTED; pass it to
1759         show_progress().
1760         (show_progress): New argument EXPECTED; use it to display
1761         percentages.
1762
1763         * init.c (setval): Ditto.
1764
1765         * http.c (gethttp): Ditto.
1766         (http_loop): Ditto.
1767
1768         * ftp.c (getftp): Ditto.
1769         (ftp_loop_internal): Ditto.
1770
1771         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
1772
1773         * sysdep.h (CLOSE): Simplify; use DEBUGP.
1774
1775         * netrc.c (search_netrc): Use alloca().
1776
1777         * init.c (defaults): Initialize no_flush.
1778
1779         * log.c (vlogmsg): Don't flush if no_flush.
1780
1781         * options.h (struct options): New variable no_flush.
1782
1783         * main.c (main): Don't play games with buffering.
1784
1785         * log.c (vlogmsg): Flush the output after every message.
1786
1787 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1788
1789         * init.c (parse_line): Ditto.
1790
1791         * url.c (get_urls_html): Ditto.
1792
1793         * main.c (main): Don't cast to unsigned char.
1794
1795         * init.c (run_wgetrc): Don't cast to unsigned char.
1796         (parse_line): Accept char instead of unsigned char.
1797
1798         * html.c (htmlfindurl): Use char instead of unsigned char.
1799
1800         * all: Use them.
1801
1802         * sysdep.h: Add wrappers to ctype macros to make them
1803         eight-bit-clean:
1804
1805 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
1806
1807         * html.c (htmlfindurl): Download <img lowsrc=...>
1808
1809         * main.c (main): Ignore SIGPIPE.
1810
1811         * connect.c (select_fd): New argument WRITEP.
1812         (iwrite): Call select_fd().
1813
1814 1997-02-27  Fila Kolodny <fila@ibi.com>
1815
1816         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
1817         one already exists, just skip it.
1818
1819 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
1820
1821         * http.c (gethttp): Cosmetic changes.
1822
1823         * http.c (check_end): Allow `+D...' instead of `GMT'.
1824         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
1825
1826         * url.c (process_ftp_type): New function.
1827         (parseurl): Use it.
1828
1829         * connect.c (iwrite): Allow writing in a few chunks.
1830         (bindport): Made SRV static, so addr can point to it.
1831         (select_fd): Removed HPUX kludge.
1832
1833         * host.c (free_hlist): Incorporated into clean_hosts().
1834
1835 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
1836
1837         * host.c (hlist): Made static.
1838         (search_address): Cosmetic change.
1839
1840 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
1841
1842         * version.c: Wget v1.5-b1 is released.
1843
1844         * http.c (hgetlen): Use sizeof() to get the header length.
1845         (hgetrange): Ditto.
1846         (hgettype): Ditto.
1847         (hgetlocation): Ditto.
1848         (hgetmodified): Ditto.
1849         (haccepts_none): Ditto.
1850
1851         * main.c (main): Updated `--version' and `--help' output, as per
1852         Francois Pinard's suggestions.
1853
1854         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
1855         textdomain().
1856
1857         * config.h.in: Define stubs for I18N3.
1858
1859         * wget.h: Include libintl.h.
1860
1861 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
1862
1863         * url.c (mkstruct): Check for opt.cut_dirs.
1864         (mkstruct): alloca()-te more, xmalloc() less.
1865
1866         * utils.c (load_file): Check for ferror().
1867
1868         * url.c (get_urls_file): Close only the files we opened.
1869         (get_urls_html): Ditto.
1870         (count_slashes): New function.
1871
1872         * http.h: Removed.
1873
1874         * http.c (gethttp): Respect username and password provided by
1875         proxy URL.
1876         (base64_encode_line): Write into an existing buffer instead of
1877         malloc-ing a new one.
1878         (struct http_stat): Moved from http.h
1879
1880         * retr.c (retrieve_url): Free SUF.
1881
1882         * all: Removed lots of unnecessary .h dependencies.
1883
1884         * html.c (global_state): Made static.
1885
1886         * utils.h (ALLOCA_ARRAY): New macro.
1887
1888         * main.c (main): New option `--cut-dirs'.
1889
1890         * url.c (construct): Use alloca() for T.
1891
1892         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
1893
1894         * host.c (_host_t): Moved from host.h.
1895         (struct host): Renamed from _host_t.
1896         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
1897         (realhost): Ditto.
1898
1899         * host.h: Don't include url.h.
1900
1901         * ftp.c (LIST_FILENAME): Moved from ftp.h.
1902
1903         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
1904
1905         * main.c (main): Enable log if the output goes to a TTY.
1906
1907         * connect.h: Removed unused constant `BACKLOG'.
1908
1909         * config.h.in: Check for isatty().
1910
1911         * Makefile.in (LINK): Use CFLAGS when linking.
1912
1913 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
1914
1915         * mswindows.c (ws_hangup): Use redirect_output().
1916
1917         * main.c (redirect_output_signal): New function; use
1918         redirect_output().
1919
1920         * log.c (redirect_output): New function, based on hangup(), which
1921         is deleted.
1922
1923         * log.c (vlogmsg): New function.
1924
1925         * wget.h (DEBUGP): Use debug_logmsg().
1926
1927         * main.c (hangup): Use it.
1928
1929         * log.c (log_dump): New function.
1930
1931         * utils.h (DO_REALLOC): Use `long' for various sizes.
1932
1933         * http.c (hskip_lws): Use `while', for clarity.
1934         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
1935         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
1936
1937         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
1938         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
1939
1940         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
1941         (LEGIBLE_SEPARATOR): Ditto.
1942         (FILE_BUFFER_SIZE): Ditto.
1943
1944         * retr.c (BUFFER_SIZE): Moved from retr.h.
1945
1946         * log.c: New file.
1947         (logmsg): Moved from utils.c.
1948         (debug_logmsg): New function.
1949
1950         * mswindows.h: Include it here.
1951
1952         * init.c: Ditto.
1953
1954         * utils.c: Don't include <windows.h>.
1955
1956 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
1957
1958         * host.c (ftp_getaddress): Ditto.
1959
1960         * main.c (main): Use it.
1961
1962         * utils.h (STRDUP_ALLOCA): New macro.
1963
1964         * init.c: Prepend `wget: ' to error messages printed on stderr.
1965
1966         * utils.c (mkdirhier): Renamed from mymkdir.
1967         (touch): Renamed from my_touch.
1968         (pwd_cuserid): Renamed from my_cuserid().
1969
1970 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
1971
1972         * utils.c (accdir): Process wildcards.
1973         (proclist): New function.
1974         (accdir): Use it to avoid code repetition.
1975
1976 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
1977
1978         * recur.c (parse_robots): Respect opt.useragent; use alloca().
1979
1980         * http.c (gethttp): Construct useragent accordingly.
1981
1982         * version.c: Changed version string to numbers-only.
1983
1984         * main.c (print_help): List all the options.
1985
1986         * mswindows.c (windows_main_junk): Initialize argv0 here.
1987
1988 1998-01-24  Karl Heuer  <kwzh@gnu.org>
1989
1990         * netrc.c (search_netrc): Initialize `l' only after processing
1991         netrc.
1992
1993         * main.c (main): Don't trap SIGHUP if it's being ignored.
1994
1995 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
1996
1997         * all: Use logmsg().
1998
1999         * utils.c (time_str): Moved from retr.c.
2000         (logmsg): New function.
2001         (logmsg_noflush): Ditto.
2002
2003         * rbuf.c: New file, moved buf_* functions here.
2004
2005         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
2006
2007         * ftp-basic.c (ftp_rest): Use prnum().
2008
2009         * ftp-basic.c: Ditto.
2010
2011         * ftp.c: Use the new reading functions and macros.
2012
2013         * retr.c (buf_initialize): New function.
2014         (buf_initialized_p): Ditto.
2015         (buf_uninitialize): Ditto.
2016         (buf_fd): Ditto.
2017
2018         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
2019         efficiency.
2020         (gethttp): Use alloca() where appropriate.
2021
2022         * retr.c (buf_readchar): Use it.
2023         (buf_peek): Use rstreams.
2024
2025         * retr.h (BUF_READCHAR): New macro.
2026
2027         * init.c (home_dir): Rewritten for clarity.
2028         (init_path): Ditto.
2029
2030         * mswindows.c (ws_backgnd): Made static.
2031         (read_registry): Ditto.
2032         (ws_cleanup): Ditto.
2033         (ws_handler): Ditto.
2034
2035 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2036
2037         * alloca.c: New file.
2038
2039         * Makefile.in (ALLOCA): Define.
2040
2041         * mswindows.c (ws_help): Constify.
2042         (ws_help): Use alloca.
2043
2044         * mswindows.c: Reformat.
2045
2046         * all: Added _(...) annotations for I18N snarfing and translation.
2047
2048         * host.c (ftp_getaddress): Nuke SYSINFO.
2049         (ftp_getaddress): Don't use getdomainname().
2050         (ftp_getaddress): Use uname(), where available.
2051
2052         * http.c (gethttp): Protect a stray fprintf().
2053
2054         * init.c (settime): New function.
2055         (setval): Treat WAIT specially, allowing suffixes like `m' for
2056         minutes, etc.
2057
2058 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2059
2060         * url.c (get_urls_html): Use alloca() for TEMP.
2061
2062 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
2063
2064         * url.c (rotate_backups): New function.
2065
2066         * http.c (gethttp): Ditto.
2067
2068         * ftp.c (getftp): Rotate backups.
2069
2070 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
2071
2072         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
2073         xrealloc() and xstrdup().  Use the new functions.
2074
2075         * url.c (decode_string): Made static.
2076         (has_proto): Ditto.
2077         (parse_dir): Ditto.
2078         (parse_uname): Ditto.
2079         (mkstruct): Ditto.
2080         (construct): Ditto.
2081         (construct_relative): Ditto.
2082
2083         * retr.c (show_progress): Made static.
2084
2085         * recur.c (robots_url): Made static.
2086         (retrieve_robots): Ditto.
2087         (parse_robots): Ditto.
2088         (robots_match): Ditto.
2089
2090         * main.h: Removed.
2091
2092         * main.c (printhelp): Made static.
2093         (hangup): Ditto.
2094
2095         * init.c (comind): Made static.
2096         (defaults): Ditto.
2097         (init_path): Ditto.
2098         (run_wgetrc): Ditto.
2099         (onoff): Ditto.
2100         (setonoff): Ditto.
2101         (setnum): Ditto.
2102         (myatoi): Ditto.
2103         (getperms): Ditto.
2104         (setbytes): Ditto.
2105
2106         * http.c (fetch_next_header): Made static.
2107         (hparsestatline): Ditto.
2108         (hskip_lws): Ditto.
2109         (hgetlen): Ditto.
2110         (hgetrange): Ditto.
2111         (hgettype): Ditto.
2112         (hgetlocation): Ditto.
2113         (hgetmodified): Ditto.
2114         (haccepts_none): Ditto.
2115         (gethttp): Ditto.
2116         (base64_encode_line): Ditto.
2117         (mktime_from_utc): Ditto.
2118         (http_atotm): Ditto.
2119
2120         * html.c (idmatch): Made static.
2121
2122         * host.c (search_host): Made static.
2123         (search_address): Ditto.
2124         (free_hlist): Ditto.
2125
2126         * ftp.c (getftp): Made static.
2127         (ftp_loop_internal): Ditto.
2128         (ftp_get_listing): Ditto.
2129         (ftp_retrieve_list): Ditto.
2130         (ftp_retrieve_dirs): Ditto.
2131         (ftp_retrieve_glob): Ditto.
2132         (freefileinfo): Ditto.
2133         (delelement): Ditto.
2134
2135         * ftp-ls.c (symperms): Made static.
2136         (ftp_parse_unix_ls): Ditto.
2137
2138         * connect.c (select_fd): Made static.
2139
2140         * utils.c (xmalloc): Renamed from nmalloc.
2141         (xrealloc): Renamed from nrealloc.
2142         (xstrdup): Renamed from nstrdup.
2143
2144         * getopt.c (exchange): Use alloca.
2145
2146         * mswindows.c (mycuserid): Use strncpy.
2147
2148         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
2149         systhings.h, windecl.h and winjunk.h removed.
2150
2151         * mswindows.c (sleep): New function.
2152
2153         * utils.c: Include <windows.h> under Windows.
2154
2155 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
2156
2157         * url.h (URL_UNSAFE): Change default under Windows.
2158
2159         * retr.c (retrieve_from_file): Respect opt.delete_after.
2160
2161         * main.c (main): Call ws_help on Windows.
2162
2163         * winjunk.c (windows_main_junk): New function.
2164
2165         * main.c (main): Junk-process argv[0].
2166
2167         * http.c (mktime_from_utc): Return -1 if mktime failed.
2168
2169         * http.c (http_loop): Ditto.
2170
2171         * ftp.c (ftp_loop_internal): Change title on Windows when using a
2172         new URL.
2173
2174         * winjunk.c (getdomainname): Lots of functions.
2175
2176 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
2177
2178         * cmpt.c (strptime_internal): Handle years more correctly for
2179         `%y'.
2180
2181 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
2182
2183         * http.c (gethttp): Allocate enough space for
2184         `Proxy-Authorization' header.
2185
2186 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2187
2188         * version.c: Wget/1.4.5 is released.
2189
2190 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2191
2192         * retr.c (get_contents): Check return value of fwrite more
2193         carefully.
2194
2195 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2196
2197         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
2198         year, regardless of century.
2199
2200 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2201
2202         * utils.c (isfile): Use `lstat' instead of `stat'.
2203
2204 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2205
2206         * utils.c (numdigit): Use explicit test.
2207
2208 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
2209
2210         * http.c (http_loop): Always use `url_filename' to get u->local.
2211
2212 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
2213
2214         * url.c: Recognize https.
2215
2216 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
2217
2218         * recur.c (recursive_retrieve): Lowercase just the host name.
2219
2220 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
2221
2222         * url.c (get_urls_file): Use the correct test.
2223         (get_urls_html): Ditto.
2224
2225 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2226
2227         * connect.c: Reverted addrlen to int.
2228
2229         * init.c (parse_line): Check for -1 instead of NONE.
2230
2231         * version.c: Changed version to 1.4.5.
2232
2233 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2234
2235         * init.c: New option netrc.
2236         (initialize): Don't parse .netrc.
2237
2238         * cmpt.c (recursive): Return rp.
2239         (strptime_internal): Match the long strings first, the abbreviated
2240         second.
2241
2242 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
2243
2244         * http.c (check_end): New function.
2245         (http_atotm): Use it.
2246
2247 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
2248
2249         * http.c (gethttp): Use them.
2250
2251         * init.c: New options proxy_user and proxy_passwd.
2252
2253 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2254
2255         * ftp.c (ftp_retrieve_list): Create links even if not relative.
2256
2257 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
2258
2259         * recur.c (recursive_retrieve): Lowercase the host name, if the
2260         URL is not "optimized".
2261
2262         * host.c (realhost): Return l->hostname, even if it matches with
2263         host.
2264
2265 1997-02-10  Marin Purgar  <pmc@asgard.hr>
2266
2267         * connect.c: Make addrlen size_t instead of int.
2268         (conaddr): Ditto.
2269
2270 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2271
2272         * systhings.h: Define S_ISLNK on NeXT too.
2273
2274 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
2275
2276         * version.c: Released 1.4.3.
2277
2278         * url.c: Futher update to list of protostrings.
2279         (skip_proto): Skip `//' correctly for FTP and HTTP.
2280
2281         * url.c (get_urls_html): Handle bogus `http:' things a little
2282         different.
2283
2284         * main.c (main): Removed `follow-ftp' from `f'.
2285         (main): Dumped the `prefix-files' and `file-prefix' options and
2286         features; old and bogus.
2287         (main): Exit on failed setval() in `-e'.
2288
2289         * http.c (fetch_next_header): Use it to detect header continuation
2290         correctly.
2291
2292         * retr.c (buf_peek): New function.
2293
2294 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2295
2296         * wget.h: Include time.h and stuff.
2297
2298 1997-02-08  Roger Beeman  <beeman@cisco.com>
2299
2300         * ftp.c: Include <time.h>
2301
2302 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2303
2304         * url.c (findurl): Would read over buffer limits.
2305
2306 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2307
2308         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
2309
2310 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
2311
2312         * http.c (http_atotm): Initialize tm.is_dst.
2313
2314 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2315
2316         * http.c (gethttp): Don't print the number of retrieved headers.
2317
2318         * main.c (main): New option `--no-clobber', alias for `-nc'.
2319
2320         * url.c: Recognize `https://'.
2321
2322 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2323
2324         * host.c (herrmsg): Don't use h_errno.
2325
2326 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2327
2328         * host.c (accept_domain): Use it.
2329
2330         * main.c (main): New option `--exclude-domains'.
2331
2332         * retr.c (retrieve_url): Use it.
2333         (retrieve_url): Bail out when an URL is redirecting to itself.
2334
2335         * url.c (url_equal): New function.
2336
2337 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2338
2339         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
2340
2341         * http.c (mk_utc_time): New function.
2342         (http_atotm): Use it; handle time zones correctly.
2343
2344 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2345
2346         * http.c: Ditto.
2347
2348         * ftp-basic.c: Use it instead of WRITE.
2349
2350         * connect.c (iwrite): New function.
2351
2352 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2353
2354         * cmpt.c (mktime): New function.
2355
2356         * netrc.c: Include <sys/types.h>.
2357
2358         * main.c (main): Wouldn't recognize --spider.
2359
2360         * retr.c (rate): Use `B', `KB' and `MB'.
2361         (reset_timer,elapsed_time): Moved from utils.c.
2362
2363         * ftp.c (ftp_retrieve_list): Ditto.
2364
2365         * http.c (http_loop): Don't touch the file if opt.dfp.
2366
2367 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2368
2369         * cmpt.c: New file.
2370
2371         * ftp.c (ftp_retrieve_glob): New argument semantics.
2372         (ftp_retrieve_dirs): Use it.
2373         (ftp_loop): Ditto.
2374
2375         * html.c (htmlfindurl): Recognize `'' as the quote char.
2376
2377 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2378
2379         * ftp.c (ftp_loop_internal): Use it.
2380
2381         * utils.c (remove_link): New function.
2382
2383 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
2384
2385         * retr.c (retrieve_url): Require STRICT redirection URL.
2386
2387         * url.c (parseurl): New argument STRICT.
2388
2389         * http.c (hparsestatline): Be a little-bit less strict about
2390         status line format.
2391
2392 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2393
2394         * http.c (gethttp): Use it.
2395
2396         * main.c (main): Don't use '<digit>' as options.
2397
2398         * init.c: New option ignore_length.
2399
2400         * http.c (gethttp): Ditto.
2401         (http_loop): Check for redirection without Location:.
2402         (gethttp): Don't print Length unless RETROKF.
2403
2404         * ftp.c (getftp): Use it.
2405
2406         * url.c (mkalldirs): New function.
2407
2408         * utils.c (mymkdir): Don't check for existing non-directory.
2409
2410         * url.c (mkstruct): Don't create the directory.
2411
2412 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
2413
2414         * init.c (setval): Removed NO_RECURSION checks.
2415
2416 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
2417
2418         * version.c: "Released" 1.4.3-pre2.
2419
2420         * recur.c (recursive_retrieve): Bypass host checking only if URL
2421         is ftp AND parent URL is not ftp.
2422
2423         * ftp-basic.c (ftp_request): Print out Turtle Power.
2424
2425         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
2426         wildcard.
2427         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
2428         not glob.
2429
2430         * http.c (gethttp): Be a little bit smarter about status codes.
2431
2432         * recur.c (recursive_retrieve): Always reset opt.recursive when
2433         dealing with FTP.
2434
2435 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
2436
2437         * retr.c (retrieve_url): New variable location_changed; use it for
2438         tests instead of mynewloc.
2439         (retrieve_url): Allow heuristic adding of html.
2440
2441         * url.c (url_filename): Don't use the `%' in Windows file names.
2442
2443         * http.c (http_loop): Always time-stamp the local file.
2444
2445         * http.c (http_loop): Ditto.
2446
2447         * ftp.c (ftp_retrieve_list): Use it.
2448
2449         * utils.c (my_touch): New function.
2450
2451         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
2452         instead of #ifndef NeXT.
2453
2454         * utils.c (strptime): New version, by Ulrich Drepper.
2455
2456 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
2457
2458         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
2459         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
2460         (http_loop): Would remove ACCEPTRANGES.
2461
2462         * ftp.c (getftp): Call ftp_list with NULL.
2463
2464 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
2465
2466         * html.c (ftp_index): Don't print minutes and seconds if we don't
2467         know them; beautify the output.
2468
2469         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
2470
2471 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
2472
2473         * utils.c (strptime): New function.
2474         (strptime): Don't use get_alt_number.
2475         (strptime): Don't use locale.
2476         (match_string): Made it a function.
2477
2478 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
2479
2480         * http.c (http_atotm): New function.
2481         (http_loop): Use it.
2482
2483         * atotm.c: Removed from the distribution.
2484
2485         * http.c (base64_encode_line): Rewrite.
2486
2487 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
2488
2489         * ftp.c (getftp): Use ftp_expected_bytes; print size.
2490
2491         * ftp-basic.c (ftp_response): Use ftp_last_respline.
2492         (ftp_expected_bytes): New function.
2493
2494         * ftp.c (getftp): Print the unauthoritative file length.
2495
2496         * ftp-ls.c: Renamed from ftp-unix.c.
2497         (ftp_parse_ls): Moved from ftp.c.
2498         (ftp_parse_unix_ls): Recognize seconds in time spec.
2499         (ftp_parse_unix_ls): Recognize year-less dates of the previous
2500         year.
2501
2502 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
2503
2504         * ftp-basic.c: Don't declare errno if #defined.
2505
2506         * host.c (ftp_getaddress): Check for sysinfo legally.
2507
2508 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
2509
2510         * connect.c (iread): Use READ.
2511
2512 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
2513
2514         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
2515         schemes.
2516
2517 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2518
2519         * host.c (ftp_getaddress): Allow `.' in hostname.
2520
2521 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
2522
2523         * wget.h: READ and WRITE macros for use instead of read and write
2524         on sockets, grep READ *.c, grep WRITE *.c
2525
2526         * wsstartup.c: new file - startup for winsock
2527
2528         * wsstartup.h: new file
2529
2530         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
2531
2532         * configure.bat: Configure utility for MSVC
2533
2534         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
2535
2536 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2537
2538         * version.c: Released 1.4.3-pre.
2539
2540         * utils.c (prnum): Accept long.
2541         (legible): Use prnum().
2542
2543         * connect.c (make_connection): Accept port as short.
2544         (bindport): Ditto.
2545
2546         * http.c (gethttp): Use search_netrc.
2547
2548 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
2549
2550         * ftp.c (getftp): Use search_netrc.
2551
2552         * netrc.c (free_netrc): New function.
2553
2554         * init.c (home_dir): New function.
2555
2556         * url.c (convert_links): Allow REL2ABS changes.
2557
2558 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
2559
2560         * netrc.c: New file.
2561         (parse_netrc, maybe_add_to_list): New functions.
2562
2563 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
2564
2565         * retr.c (retrieve_url): Reset opt.recursion before calling
2566         ftp_loop if it is reached through newloc.
2567
2568         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
2569         error; don't use "Syntax error", since we don't know if it is
2570         really a syntax error.
2571
2572 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
2573
2574         * utils.c (acceptable): Extract the filename part of the path.
2575
2576         * recur.c (recursive_retrieve): Call acceptable() with the right
2577         argument; would bug out on wildcards.
2578
2579         * init.c (parse_line): Likewise.
2580
2581         * html.c (htmlfindurl): Cast to char * when calling stuff.
2582
2583 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2584
2585         * ftp.c (getftp): Use ftp_pasv.
2586
2587         * ftp-basic.c (ftp_request): Accept NULL value.
2588         (ftp_pasv): New function.
2589
2590         * options.h (struct options): Add passive FTP option.
2591
2592 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2593
2594         * url.c (parseurl): Debug output.
2595
2596         * utils.c (path_simplify): New one, adapted from bash's
2597         canonicalize_pathname().
2598
2599 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
2600
2601         * ftp.c (getftp): Don't discard the buffer.
2602
2603         * retr.c (get_contents): New parameter nobuf.
2604
2605 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2606
2607         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
2608
2609         * init.c (setval): Strip the trailing slashes on CVECDIR.
2610
2611 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2612
2613         * init.c: Make excludes and includes under CVECDIR instead of
2614         CVEC.
2615
2616 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2617
2618         * url.c (get_urls_html): Skip "http:".
2619
2620 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2621
2622         * utils.c (strcasecmp): From glibc.
2623         (strncasecmp): Also.
2624         (strstr): Also.
2625
2626         * url.c: Added javascript: to the list of URLs prefixes.
2627
2628 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
2629
2630         * recur.c (retrieve_robots): Print the warning message only if
2631         verbose.
2632
2633 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2634
2635         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
2636
2637 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
2638
2639         * systhings.h: New file.
2640
2641         * ../configure.in: Check for utime.h
2642
2643         * ftp.c: Check whether we have unistd.h.
2644
2645 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
2646
2647         * recur.c (recursive_retrieve): Send the canonical URL as referer.
2648         (recursive_retrieve): Call get_urls_html with the canonical URL.
2649
2650 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2651
2652         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
2653         ansi2knr support for compilers which don't support ANSI style
2654         function prototypes and signatures.
2655
2656         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
2657
2658 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
2659
2660         * url.c: Use it; Recognize paths ending with "." and ".." as
2661         directories.
2662         (url_filename): Append .n whenever file exists and could be a
2663         directory.
2664
2665         * url.h (ISDDOT): New macro.
2666
2667         * init.c (parse_line): Use unsigned char.
2668
2669         * url.c (get_urls_html): Cast to unsigned char * when calling
2670         htmlfindurl.
2671
2672         * html.c (htmlfindurl): Use unsigned char.
2673
2674         * version.c: Changed version to 1.4.3.
2675
2676 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
2677
2678         * version.c: Released 1.4.2.
2679
2680         * ftp.c (getftp): Simplified assertion.
2681         (ftp_loop_internal): Remove symlink before downloading.
2682         (ftp_retrieve_list): Unlink the symlink name before attempting to
2683         create a symlink!
2684
2685         * options.h (struct options): Renamed print_server_response to
2686         server_response.
2687
2688         * ftp.c (rel_constr): Removed.
2689         (ftp_retrieve_list): Don't use it.
2690         (ftp_retrieve_list): Use opt.retr_symlinks.
2691
2692 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2693
2694         * main.c (main): New option retr_symlinks.
2695
2696         * url.c (convert_links): Print verbose message.
2697
2698 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2699
2700         * http.c (http_loop): Reset newloc in the beginning of function;
2701         would cause FMR in retrieve_url.
2702
2703 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
2704
2705         * recur.c (convert_all_links): Find the URL of each HTML document,
2706         and feed it to get_urls_html; would bug out.
2707         (convert_all_links): Check for l2 instead of dl; removed dl.
2708
2709         * url.c (convert_links): Don't refer to freed newname.
2710
2711         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
2712
2713         * main.c (main): Print the OS_TYPE in the debug output, too.
2714
2715         * recur.c (recursive_retrieve): Check for opt.delete_after.
2716
2717         * main.c (main): New option delete-after.
2718
2719         * init.c (setval): Cleaned up.
2720
2721 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
2722
2723         * Makefile.in (wget): Make `wget' the default target.
2724
2725         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
2726         loop.
2727         (ftp_retrieve_list): Warn about non-matching sizes.
2728
2729         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
2730
2731         * init.c (setnum): Renamed from setnuminf; New argument flags.
2732         (setval): Use it.
2733
2734         * main.c (main): Sorted the options.
2735         (main): New option --wait.
2736
2737 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
2738
2739         * html.c (htmlfindurl): Reset s->in_quote after getting out of
2740         quotes.
2741
2742 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2743
2744         * version.c: Changed version to 1.4.2.
2745
2746 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2747
2748         * version.c: Released 1.4.1.
2749
2750         * html.c (html_quote_string): New function.
2751         (ftp_index): Use it.
2752         (htmlfindurl): A more gentle ending debug message.
2753
2754         * ftp.c (ftp_loop): Check for opt.htmlify.
2755
2756         * init.c: New command htmlify.
2757
2758         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
2759         strings.
2760         (ftp_loop): Print size of index.html.
2761
2762         * init.c (setval): Implement "styles".
2763
2764         * main.c (main): New option dotstyle.
2765
2766 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
2767
2768         * ftp.c (getftp): Close the master socket in case of errors, after
2769         bindport().
2770
2771         * connect.c (bindport): Initialize msock to -1.
2772
2773         * ftp.c (getftp): Initialize dtsock to -1.
2774
2775         * connect.c (closeport): Don't close sock if sock == -1.
2776
2777 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
2778
2779         * init.c (setnuminf): Nuked default value -- just leave unchanged.
2780         (setval): Don't send default values.
2781         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
2782
2783         * options.h (struct options): Use long for dot_bytes.
2784
2785         * init.c (setquota): Renamed to setbytes.
2786         (setval): Use setbytes on DOTBYTES.
2787
2788 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
2789
2790         * ftp.c (getftp): Initialize con->dltime.
2791
2792         * recur.c (recursive_retrieve): Use same_host instead of
2793         try_robots; simply load robots_txt whenever the host is changed.
2794         (recursive_retrieve): Free forbidden before calling parse_robots.
2795
2796 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
2797
2798         * retr.c (show_progress): Use them.
2799
2800         * options.h (struct options): New options dot_bytes, dots_on_line
2801         and dot_spacing.
2802
2803 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
2804
2805         * recur.c (recursive_retrieve): Retrieve directories regardless of
2806         acc/rej rules; check for empty u->file.
2807
2808 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
2809
2810         * init.c (setval): Use it.
2811
2812         * utils.c (merge_vecs): New function.
2813
2814         * init.c (setval): Reset the list-type functions when encountering
2815         "".
2816
2817 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
2818
2819         * recur.c (recursive_retrieve): Use base_url instead of this_url
2820         for no_parent.
2821
2822 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
2823
2824         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
2825
2826 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
2827
2828         * utils.c (sepstring): Rewrote; don't use strtok.
2829
2830         * recur.c (recursive_retrieve): Enter assorted this_url to slist
2831         when running the first time.
2832         (retrieve_robots): Warn to ignore errors when robots are loaded.
2833
2834         * utils.c (load_file): Moved from url.c.
2835
2836         * http.c: Made static variables const too in h* functions.
2837
2838         * main.c (main): Renamed --continue-ftp to --continue.
2839
2840         * recur.c (recursive_retrieve): Use it.
2841
2842         * utils.c (frontcmp): New function.
2843
2844         * url.c (accdir): New function.
2845
2846         * html.c (htmlfindurl): Recognize <area href=...>.
2847
2848         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
2849
2850         * init.c (setval): Free the existing opt.excludes and
2851         opt.includes, if available.
2852
2853         * main.c (main): New option -I.
2854
2855 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
2856
2857         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
2858
2859         * version.c: Changed version to 1.4.1.
2860
2861 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
2862
2863         * version.c: Released 1.4.0.
2864
2865 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
2866
2867         * main.c (main): Free com and val after parse_line.
2868         (printhelp): Reorder the listing.
2869
2870         * http.c: More robust header parsing.
2871
2872         * http.c: Allow any number of spaces, or no spaces, precede ':'.
2873         (hskip_lws): New function.
2874         (haccepts_bytes): New function.
2875         (gethttp): Use it.
2876
2877         * init.c (setval): Check header sanity.
2878         (setval): Allow resetting of headers.
2879
2880 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
2881
2882         * http.c (http_loop): Don't use has_wildcards.
2883
2884         * http.c (gethttp): Free all_headers -- would leak.
2885
2886         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
2887         0 -- this fixes a long-standing bug in -rl.
2888
2889 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
2890
2891         * ftp.c: Use -1 as "impossible" value for con->fd.
2892
2893         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
2894
2895         * init.c (parse_line): Use isalpha.
2896
2897         * ftp-unix.c: Use HAVE_UNISTD_H.
2898
2899         * mtch.c (has_wildcards): Don't match \.
2900
2901         * http.c (http_loop): Warn on HTTP wildcard usage.
2902
2903 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
2904
2905         * url.c (url_filename): Do not create numbered suffixes if
2906         opt.noclobber -- would bug out on -nc.
2907
2908 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
2909
2910         * recur.c (parse_robots): Don't chuck out the commands without
2911         arguments (`Disallow:<empty>' didn't work).
2912         (parse_robots): Compare versions lowercase.
2913         (parse_robots): Match on base_version, not version_string!
2914         (parse_robots): Handle comments properly.
2915         (parse_robots): Match versions in a sane way.
2916
2917         * init.c: Print nicer error messages.
2918
2919         * version.c: Changed version to 1.4.0.
2920
2921 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
2922
2923         * version.c: Released 1.4.0-test2.
2924
2925         * init.c (run_wgetrc): Close fp.
2926
2927         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
2928         u->dir.
2929
2930 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
2931
2932         * init.c (setquota): Allow inf as quota specification.
2933
2934 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
2935
2936         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
2937         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
2938
2939         * main.c (main): Check for quota by comparison with downloaded
2940         stuff, not from status.
2941
2942         * connect.c (select_fd): Should compile on HPUX without warnings now.
2943
2944         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
2945         returned RETROK.
2946
2947 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
2948
2949         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
2950         (getftp): Return FTPRETRINT on control connection error.
2951
2952         * html.c (htmlfindurl): Recognize <embed src=...> and
2953         <bgsound src=...>.
2954         (ftp_index): Handle username and password correctly.
2955
2956         * main.c (main): Made `-np' a synonim for --no-parent.
2957
2958 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
2959
2960         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
2961         ftp_retrieve_glob.
2962
2963         * version.c: Changed version to 1.4.0-test2.
2964
2965 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
2966
2967         * version.c: Released 1.4.0-test1.
2968
2969         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
2970         directory.
2971         (convert_links): Removed definition of make_backup.
2972
2973         * http.h: Removed definition of MAX_ERROR_LENGTH.
2974
2975         * host.c (ftp_getaddress): Check for "(none)" domains.
2976
2977         * ftp.c (ftp_retrieve_dirs): Docfix.
2978
2979         * http.c (gethttp): Use ou->referer instead of u->referer.
2980
2981         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
2982         this was known to cause coredumps on Linux.
2983
2984         * html.c (ftp_index): Cast the argument to local_time to time_t *.
2985
2986 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
2987
2988         * connect.c (select_fd): Use exceptfds -- once and for all.
2989
2990         * retr.c (retrieve_from_file): Free filename after
2991         recursive_retrieve.
2992         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
2993         first-time retrieval.
2994         (retrieve_from_file): Return uerr_t; new argument, count.
2995         (retrieve_from_file): Break on QUOTEXC.
2996
2997         * init.c (setquota): Fixed a bug that caused rejection of
2998         non-postfixed values..
2999
3000 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
3001
3002         * version.c: Changed name to wget.
3003
3004         * connect.c (iread): Smarter use of select.
3005         (select_fd): Set errno on timeout.  If not timeout, return 1
3006         instead of 0.
3007
3008 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
3009
3010         * ftp.c (ftp_loop_internal): Don't use con->cmd before
3011         establishing it.
3012
3013 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
3014
3015         * http.c (gethttp): Send correct referer when using proxy.
3016         (gethttp): Use struct urlinfo ou to access the relevant data; send
3017         correct authorization in all cases.
3018
3019         * host.c (same_host): Use skip_uname to skip username and
3020         password.
3021
3022         * url.c (skip_uname): New function.
3023         (parseurl): Use it.
3024
3025         * host.c (same_host): Do not assume HTTP -- same_host should now
3026         be totally foolproof.
3027
3028         * url.c (skip_proto): New function.
3029         (parse_uname): Use it.
3030
3031         * http.c (gethttp): Create local user and passwd from what is
3032         given.
3033
3034         * url.c (parseurl): Check for HTTP username and password too.
3035
3036 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
3037
3038         * config.h.in: Removed #define gethostbyname R...
3039
3040 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
3041
3042         * version.c: Changed version to 1.4.0-test1.
3043
3044 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
3045
3046         * version.c: "Released" 1.4b29.
3047
3048         * recur.c (recursive_retrieve): Check for no_parent.
3049
3050         * init.c (setval): Option update.
3051
3052         * main.c (main): New option no-parent.
3053
3054         * options.h (struct options): New variable no_parent.
3055
3056         * recur.c (recursive_retrieve): Only files are checked for
3057         opt.accepts and opt.rejects.
3058         (recursive_retrieve): Check directories for opt.excludes.
3059         (recursive_retrieve): Make the dir absolute when checking
3060         opt.excludes.
3061
3062         * html.c (htmlfindurl): Recognize <applet code=...> and <script
3063         src=...>
3064
3065 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3066
3067         * ftp.c (getftp): Do not line-break assert entries at all.
3068         (ftp_retrieve_dirs): docfix.
3069
3070         * connect.c (select_fd): Use fd + 1 as nfds.
3071
3072         * version.c: Changed version to 1.4b29.
3073
3074 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3075
3076         * version.c: "Released" 1.4b28.
3077
3078         * ftp.c (ftp_loop_internal): Check whether f->size == len and
3079         don't continue the loop if it is.
3080         (ftp_get_listing): Remove list_filename on unsuccesful loop.
3081
3082 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3083
3084         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
3085         (getftp): Do not use multiline assert.
3086
3087         * http.c (hparsestatline): Use mjr and mnr instead of major and
3088         minor, which don't compile on Ultrix.
3089         (http_loop): Use strcpy() to initialize tmp.
3090
3091         * all: Geturl -> Fetch
3092
3093 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3094
3095         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
3096         ':'.
3097
3098         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
3099         moving `bufsize &&' to the beginning of each check in for-loops.
3100
3101         * recur.c (parse_robots): Close fp on exit.
3102
3103         * url.c (mymkdir): Check for each directory before creating.
3104
3105 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3106
3107         * version.c: Changed version to 1.4b28.
3108
3109 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3110
3111         * version.c: "Released" 1.4b27.
3112
3113         * init.c (parse_line): Use isspace.
3114         (parse_line): Free *com on all errors.
3115
3116         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
3117         (delelement): Use next instead of f->next and prev instead of
3118         f->prev.
3119         (delelement): Free the members of the deleted element.
3120
3121         * http.c (http_loop): Do not return RETROK on code != 20x.
3122
3123         * init.c (cleanup): Free opt.user_header.
3124         (cleanup): Free opt.domains.
3125
3126         * url.c (freelists): Moved to cleanup().
3127
3128         * http.c (hparsestatline): Docfix.
3129
3130         * main.c (main): Return with error status on unsuccesful
3131         retrieval.
3132
3133         * init.c (setval): Do not remove listing when mirroring.
3134
3135         * url.c (url_filename): Use opt.fileprefix.
3136
3137         * ftp.c (ftp_get_listing): Use url_filename to get filename for
3138         .listing.
3139
3140         * main.c (main): New option: -rn.
3141
3142 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
3143
3144         * Makefile.in (RM): Added RM = rm -f.
3145
3146         * host.c (clean_hosts): New function.
3147         (free_hlist): Just free the list, no reset.
3148
3149         * version.c: Changed version to 1.4b27.
3150
3151 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
3152
3153         * version.c: "Released" 1.4b26.
3154
3155         * retr.c (retrieve_from_file): If call get_urls_html with
3156         opt.spider to make it silent in spider mode.
3157
3158         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
3159
3160         * url.h (CLEANDUP): New macro.
3161
3162         * http.c (gethttp): Fixed a bug that freed location only when it
3163         was NULL.
3164
3165         * retr.c (retrieve_url): Free url if it will not be stored,
3166         i.e. newloc is NULL.
3167
3168         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
3169         old version would bug out on <a href="x#a"href="y">.
3170
3171         * html.h (state_t): New member in_quote.
3172
3173         * html.c (htmlfindurl): Free s->attr at the beginning of
3174         attr-loop.
3175
3176         * recur.c (recursive_retrieve): Recognize RCLEANUP.
3177         (tried_robots): Make hosts a global variable.
3178         (recursive_retrieve): Free constr after URL host optimization.
3179         (tried_robots): Free urlinfo before exiting.
3180
3181         * utils.c (free_slist): New function.
3182
3183         * recur.c (recursive_retrieve): Use flags to add cleanup
3184         possibility.
3185
3186         * main.c (main): Free filename after recursive_retrieve.
3187
3188         * http.c (gethttp): Store successful responses too.
3189
3190 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
3191
3192         * all: Constified the whole source.  This required some minor
3193         changes in many functions in url.c, possibly introducing bugs -- I
3194         hope not.
3195
3196         * ftp-basic.c: Removed last_respline.
3197
3198         * http.c (gethttp): Free type.
3199
3200         * host.c (same_host): Free real1 and real2.
3201
3202         * main.c (main): New option --spider.
3203
3204         * retr.c (get_contents): Don't reset errno.
3205
3206         * main.c (main): Sorted the options.
3207
3208         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
3209         uninitialized by select().
3210
3211         * http.c (http_loop): Print the time when the connection is
3212         closed.
3213         (gethttp): Debug-print the HTTP request.
3214
3215 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
3216
3217         * connect.c (iread): Do not try reading after timeout.
3218
3219         * main.c (main): Would bug out on -T.
3220
3221         * connect.c (select_fd): Do not use exceptfds.
3222         (iread): Set ETIMEDOUT on select_fd <= 0.
3223
3224         * version.c: Changed version to 1.4b26.
3225
3226 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
3227
3228         * version.c: "Released" 1.4b25.
3229
3230         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
3231         or link name.
3232
3233         * http.c (gethttp): Add errcode to struct hstat.
3234         (http_loop): Use it.
3235
3236         * url.c (no_proxy_match): Simplify using char** for no_proxy.
3237
3238         * options.h (struct options): Make opt.no_proxy a vector.
3239
3240         * utils.c (sepstring): Use !*s instead of !strlen(s).
3241
3242         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
3243         (getperms): Use ISODIGIT instead of isdigit.
3244
3245         * ftp.c (getftp): Print time.
3246
3247         * main.c (main): Use legible output of downloaded quantity.
3248
3249         * ftp.c (getftp): Use elapsed_time().
3250         (ftp_loop_internal): Use rate().
3251
3252         * http.c (http_loop): Add download ratio output; Use rate().
3253
3254         * utils.c (rate): New function.
3255
3256 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
3257
3258         * http.c (http_loop): Use timer.
3259
3260         * ftp.c: Split to ftp-basic.c and ftp.c
3261
3262         * utils.c (reset_timer): New function.
3263         (elapsed_time): New function.
3264
3265         * retr.c (show_progress): Make bytes_in_line and offs long; should
3266         work on 16-bit machines.
3267
3268 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
3269
3270         * url.c (in_acclist): New argument backward.
3271
3272         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
3273         a file should be retrieved according to suffix.
3274         (ftp_get_listing): Check the return value of unlink; Do not call
3275         ftp_retrieve_dirs if depth reached maxreclevel.
3276         (ftp_retrieve_dirs): Check whether the directory is in
3277         exclude-list.
3278
3279         * main.c (main): Print the version number at the beginning of
3280         DEBUG output.
3281         (main): Use strrchr when creating exec_name.
3282
3283         * ftp.c (ftp_retrieve_glob): Do not close control connection.
3284
3285         * version.c: Changed version to 1.4b25.
3286
3287 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
3288
3289         * version.c: "Released" 1.4b24.
3290
3291         * Makefile.in: Rewrite.
3292
3293         * ftp.c (ftp_loop_internal): Likewise.
3294
3295         * retr.c (time_str): Check for failed time().
3296
3297         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
3298         HTML3.0.
3299
3300         * retr.c (time_str): Return time_t *.
3301
3302         * connect.c (bindport): Close msock on unsuccesful bind.
3303         (bindport): The same for getsockname and listen.
3304
3305         * retr.c (retrieve_url): Allow any number of retries on
3306         proxy.
3307
3308         * http.c (gethttp): Do not treat errno == 0 as timeout.
3309         (http_loop): Likewise.
3310         (http_loop): Cosmetic changes.
3311
3312         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
3313
3314         * retr.c (get_contents): Reset errno.
3315
3316         * ftp.c (getftp): Minor fixes.
3317
3318 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3319
3320         * http.c: Do not use backups.
3321
3322         * geturl.1 (WARNING): Warn that man-page could be obsolete.
3323
3324         * getopt.c (getopt_long): Moved to getopt.c
3325
3326         * geturl.texi: Enhanced.
3327
3328         * main.c (main): Use it.
3329
3330         * recur.c (convert_all_links): New function.
3331
3332         * utils.c (add_slist): New argument flags.
3333
3334         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
3335         (parse_robots): Do not chuck out empty value fields.
3336         (parse_robots): Make yourself welcome on empty Disallow.
3337
3338         * version.c: Changed version to 1.4b24.
3339
3340 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3341
3342         * version.c: "Released" 1.4b23.
3343
3344         * ftp.c (ftp_loop_internal): Get the time after getftp.
3345
3346         * Makefile.in (install.info): New target.
3347         (install): Use it.
3348
3349         * http.c (http_loop): Fix output when doing -O.
3350
3351 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3352
3353         * geturl.texi: New file.
3354
3355         * main.c (main): Do not print the warnings and download summary if
3356         opt.quiet is set.
3357
3358         * version.c: Changed version to 1.4b23.
3359
3360 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3361
3362         * "Released" 1.4b22.
3363
3364         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
3365         to avoid redefinition warnings.
3366
3367         * host.c (store_hostaddress): Use memcpy() to copy the address
3368         returned by inet_addr.
3369
3370         * version.c: Changed version to 1.4b22.
3371
3372 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
3373
3374         * version.c: "Released" 1.4b21.
3375
3376         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
3377
3378         * ftp.c (ftp_port): Use conaddr.
3379         (getftp): Print the file length.
3380         (ftp_retrieve_list): Check the stamps of plain files only.
3381
3382         * connect.c (closeport): Do not call shutdown().
3383         (conaddr): New function.
3384
3385         * html.c (ftp_index): Made it dfp-aware.
3386
3387         * init.c (cleanup): New name of freemem. Close opt.dfp.
3388
3389         * ftp.c (getftp): Use opt.dfp if it is set.
3390
3391         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
3392
3393         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
3394         CWDs to be sent with recursive FTP retrievals.
3395
3396 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
3397
3398         * recur.c (parse_robots): Made it more compliant with "official"
3399         specifications.
3400
3401         * http.c: New function.
3402
3403         * ftp-unix.c (ftp_parse_ls): Added better debug output.
3404
3405         * ftp.c (getftp): Print out the LIST in case of
3406         opt.print_server_response.
3407
3408         * version.c: Changed version to 1.4b21.
3409
3410 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
3411
3412         * version.c: "Released" 1.4b20.
3413
3414         * README: Update.
3415
3416         * http.c (gethttp): Preset lengths of various headers instead of
3417         calculating them dynamically.
3418         (gethttp): Check for 206 partial contents.
3419
3420 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
3421
3422         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
3423
3424         * http.c (gethttp): Send the port number in the Host: header.
3425
3426 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
3427
3428         * http.c (gethttp): Send host: header.
3429         (gethttp): Add the possibility of user-defined headers.
3430         (gethttp): Move decision about pragma: no-cache to http_loop,
3431         where it belongs.
3432         (gethttp): Pass a struct instead of enormous argument list.
3433         (http_loop): Use a new, fancier display format.
3434         (ftp_loop): Likewise.
3435
3436         * main.c: (hangup): Turn off buffering of the new log file.
3437
3438         * install-sh: Likewise.
3439
3440         * config.sub: Replace with the one in autoconf-2.10
3441
3442         * geturl.1: Update.
3443
3444         * init.c: New options httpuser and httppasswd.
3445
3446         * http.c: (base64_encode_line): New function.
3447         (gethttp): Send authentication.
3448
3449         * connect.c (make_connection): Use store_hostaddress.
3450
3451 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
3452
3453         * host.c (store_hostaddress): New function.
3454
3455         * NEWS: Update.
3456
3457         * http.c (hgetrange): New function.
3458         (gethttp): Use ranges.
3459
3460         * utils.c (numdigit): Accept long instead of int.
3461
3462         * http.c (http_loop): Add restart capabilities.
3463
3464         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
3465         being used uninitialized.
3466         (ftp_retrieve_list): Similar fix.
3467
3468         * host.c (add_hlist): Fixed a bug that could cause cmp being used
3469         uninitialized.
3470
3471         * url.c (construct_relative): New function.
3472
3473         * recur.c (recursive_retrieve): Use it.
3474
3475         * retr.c (convert_links): New function.
3476
3477 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
3478
3479         * url.c (free_urlpos): New function.
3480
3481         * recur.c (recursive_retrieve): Adapt.
3482
3483         * url.c (get_urls_html): Return a linked list instead of a vector.
3484
3485         * url.c (get_urls_file): Return a linked list instead of a vector.
3486
3487         * geturl.1: Update.
3488
3489         * http.c (gethttp): Implement it.
3490
3491         * init.c (setval): New option: SAVEHEADERS
3492
3493         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
3494         be retrieved. Lack of this test caused bugs when the connection
3495         was lost during listing.
3496
3497         * retr.c (retrieve_url): Fixed a bug that caused
3498         coredumps. *newloc is now reset by default.
3499         (retrieve_url): Lift the twenty-tries limit on proxies.
3500
3501         * version.c: Changed version to 1.4b20.
3502
3503 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
3504
3505         * version.c: "Released" 1.4b19.
3506
3507 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
3508
3509         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
3510         (getftp): Changed prototype to accept ccon *.
3511
3512 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
3513
3514         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
3515         incorrect values to files pointed to by symbolic links.
3516         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
3517
3518 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
3519
3520         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
3521
3522         * main.c (main): New option: --user-agent.
3523
3524         * geturl.1: Ditto.
3525
3526         * init.h: Ditto.
3527
3528         * init.c (setval): Ditto.
3529
3530         * main.c (main): Rename "server-headers" to "server-response".
3531
3532         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
3533         executables in 'ls -F' listings.
3534
3535 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
3536
3537         * url.c (parseurl): Remove realloc() and sprintf().
3538         (str_url): Get rid of sprintf().
3539
3540         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
3541         servers.
3542
3543         * url.h (URL_CLEANSE): Made it else-resistant.
3544         (USE_PROXY): New macro.
3545
3546 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3547
3548         * NEWS: Update.
3549
3550         * version.c: Changed version to 1.4b19.
3551
3552 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3553
3554         * version.c: "Released" 1.4b18.
3555
3556         * url.c: Made it reallocate space exponentially.
3557
3558 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
3559
3560         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
3561         the list of stuff to fetch.
3562
3563 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
3564
3565         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
3566         -Fi.
3567
3568         * html.c (htmlfindurl): Rewrite.
3569
3570         * http.c (gethttp): Use opt.proxy_cache.
3571
3572         * main.c (main): Added --cache option.
3573
3574         * ftp.c (ftp_response): Print server response if opt.print_server
3575         response is set.
3576         (getftp): Print newlines after each request if the server response
3577         is to be printed.
3578         (ftp_response): Copy the last response line to last_respline.
3579
3580         * http.c (gethttp): Add Pragma: nocache for retried
3581         proxy-retrievals.
3582
3583         * ftp.c (getftp): Use it.
3584
3585         * retr.c (buf_discard): New function.
3586
3587         * ftp.c (ftp_response): Use buf_readchar().
3588         (getftp): Flush the control connection buffer before calling
3589         get_contents().
3590
3591         * retr.c (buf_readchar): New function.
3592         (buf_flush): New function.
3593         (get_contents): Use buf_readchar() instead of read(x, x, 1).
3594         (get_contents): Use buf_flush.
3595
3596 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3597
3598         * ftp.c: Incorporate changes to ftp_response.
3599
3600         * ftp.c (ftp_response): Allocate the server response dynamically,
3601         as in read_whole_line and fetch_next_header.
3602
3603         * utils.c (read_whole_line): Fixed a bug that prevented reading
3604         the last line if it is not \n-terminated. Also fixed a possible
3605         memory overflow.
3606
3607         * http.c (fetch_next_header): Return malloc-ed string as large as
3608         needed.
3609         (gethttp): Use new fetch_next_header.
3610
3611 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3612
3613         * http.c (hgetlen): Compute the header length the first time only.
3614         (hgettype): Ditto.
3615         (hgetlocation): Ditto.
3616         (hgetmodified): Ditto.
3617
3618 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3619
3620         * sample.geturlrc: Update.
3621
3622 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3623
3624         * http.c (http_loop): Ditto.
3625
3626         * ftp.c (getftp): Open the output file as binary.
3627
3628         * version.c: Changed version to 1.4b18.
3629
3630 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3631
3632         * version.c: "Released" 1.4b17.
3633
3634         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
3635         instead of failed assertion.
3636
3637 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
3638
3639         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
3640         if a file of that name already exists.
3641
3642 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
3643
3644         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
3645
3646         * config.h.in: Define gethostbyname as Rgethostbyname when using
3647         Socks.
3648
3649         * configure.in: Check for -lresolv if using Socks.
3650
3651         * version.c: Changed version to 1.4b17.
3652
3653 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
3654
3655         * version.c: "Released" 1.4b16.
3656
3657         * http.c (gethttp): More intelligent check for first line of HTTP
3658         response.
3659         (gethttp): Would bug out on time-stamping.
3660
3661         * version.c: Changed version to 1.4b16.
3662
3663 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3664
3665         * version.c: Released 1.4b15.
3666
3667         * http.c (http_loop): Print \n after the loop entry, not before.
3668
3669         * url.c (url_filename): Use ISDOT.
3670
3671         * url.h (ISDOT): New macro.
3672
3673         * recur.c (recursive_retrieve): Change only opt.recursive for
3674         following FTP.
3675
3676 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
3677
3678         * socks/geturl.cgi: Fixed version No.
3679
3680         * socks/download-netscape.html: Ditto.
3681
3682         * socks/download.html: Changed socks.html to download.html.
3683
3684 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3685
3686         * url.c (url_filename): Check for opt.dirstruct instead for
3687         opt.recursive && opt.dirstruct.
3688
3689         * init.c (defaults): Ditto.
3690         (defaults): Reset dirstruct by default.
3691         (setval): Set opt.dirstruct whenever setting recursive.
3692
3693         * init.h: Removed FORCEDIRHIER.
3694
3695         * INSTALL: Added -L to socks-description.
3696
3697         * version.c: Changed version to 1.4b15.
3698
3699 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
3700
3701         * version.c: "Released" 1.4b14.
3702
3703         * geturl.1: Update AUTHOR to include Rosella as contributor.
3704
3705         * NEWS: Update.
3706
3707         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
3708
3709         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
3710         (cal_time): Fix == to eq.
3711
3712         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
3713
3714         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
3715
3716         * Makefile.in: Use @VERSION@.
3717
3718         * configure.in: Check version from version.c.
3719
3720         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
3721
3722         * socks/download.html: Created from download-netscape.html, made
3723         HTML-2.0 compliant.
3724
3725         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
3726         following FTP links from recursions.
3727
3728 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3729
3730         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
3731         absolute directories correctly.
3732
3733         * version.c: Changed version to 1.4b14.
3734
3735 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3736
3737         * version.c: "Released" 1.4b13.
3738
3739         * url.c (make_backup): New function.
3740
3741         * http.c (http_loop): Make a backup copy of the local file (using
3742         rename(2)) before opening it.
3743
3744         * main.c (main): Added --backups.
3745
3746         * host.c (ftp_getaddress): Bail out on failed mycuserid().
3747         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
3748         (ftp_getaddress): Check for empty, null or (null) domain.
3749
3750         * url.c (get_urls_html): If this_url is NULL, the base must have a
3751         protocol.
3752         (parseurl): Use has_proto.
3753
3754         * retr.c (retrieve_url): Warn when proxy is used with more than 20
3755         retries.
3756
3757         * url.c (mkstruct): Create the directory (calling mymkdir()) only
3758         if it is not already there.
3759         (has_proto): New function.
3760         (get_urls_html): Eliminate the remaining call to findurl -- use
3761         has_proto.
3762
3763         * geturl.1: Ditto.
3764
3765         * main.c: Change -X to -x.
3766
3767         * url.c (url_filename): Simplify creation of filename if
3768         prefix_files is set.
3769         (url_filename): Simplify everything. And I do mean *everything*.
3770         (mkstruct): Add dir_prefix before hostname.
3771         (path_simplify): Fixed a bug that caused writing outside the path
3772         string in case of "." and ".." path strings.
3773
3774 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
3775
3776         * init.c: Added --mirror.
3777
3778         * main.c (main): Added -X to force saving of directory hierarchy.
3779
3780         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
3781         (ftp_retrieve_list): Check whether quota is exceeded.
3782
3783         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
3784
3785         * http.c (gethttp): Use referer if present.
3786
3787         * recur.c (recursive_retrieve): Set u->referer before calling
3788         retrieve_url.
3789
3790         * url.c (newurl): Use memset to nullify the struct members.
3791         (freeurl): Free the referer field too.
3792
3793         * url.h: Added referer to urlinfo.
3794
3795         * geturl.1: Updated the manual to document some of the new features.
3796
3797         * utils.c (numdigit): Moved from url.c.
3798
3799         * README: Rewritten.
3800
3801         * config.h.in: Add the support for socks.
3802
3803         * configure.in: Add the support for socks.
3804
3805         * url.c (url_filename): If the dir_prefix is ".", work with just
3806         the file name.
3807         (url_filename): Do not look for .n extensions if timestamping if
3808         turned on.
3809
3810         * retr.c (show_progress): Skip the over-abundant restval data, and
3811         print the rest of it with ',' instead of '.'.
3812
3813 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
3814
3815         * retr.c (show_progress): Changed second arg. to long (as it
3816         should be).
3817         (show_progress): Moved to retr.c.
3818         (get_contents): Moved to retr.c.
3819
3820         * version.c: Change version to 1.4b13.
3821
3822 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
3823
3824         * url.c (in_acclist): Would return after the first suffix.
3825
3826 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
3827
3828         * version.c: "Released" 1.4b12.
3829
3830         * url.c (path_simplify): More kludgifications.
3831         (get_urls_html): Use new parameters for htmlfindurl.
3832
3833         * html.c: Removed memorizing "parser states", since the new
3834         organization does not require them.
3835
3836         * init.c (run_geturlrc): Use read_whole_line.
3837
3838         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
3839
3840         * recur.c (parse_robots): Use read_whole_line.
3841
3842         * utils.c (read_whole_line): New function.
3843
3844         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
3845
3846         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
3847         tested on OSF and Ultrix.
3848         (add_hlist): New function.
3849         (free_hlist): New function.
3850         (search_host): New function.
3851         (search_address): New function.
3852         (realhost): Use search_host, search_address and add_hlist.
3853         (same_host): Replaced realloc() with strdupdelim(), made
3854         case-insensitive, fixed a memory leak.
3855
3856         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
3857         tm_min, like intended.
3858
3859         * version.c: Change user agent information to
3860         Geturl/version.
3861
3862 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
3863
3864         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
3865
3866         * url.c (acceptable): Always accept directories.
3867
3868         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
3869         servers by stripping trailing @ from symlinks and trailing / from
3870         directories.
3871
3872         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
3873
3874         * url.c (skip_url): Use toupper instead of UCASE.
3875
3876         * host.c (sufmatch): Made it case-insensitive.
3877
3878         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
3879         (match_backwards): New function, instead of
3880         match_backwards_or_pattern.
3881
3882         * recur.c (recursive_retrieve): Increased performance by
3883         introducing inl, which reduces number of calls to in_slist to only
3884         one.
3885
3886         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
3887         routine to use.
3888
3889         * main.c (printhelp): Removed the warranty stuff.
3890
3891 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
3892
3893         * url.c (add_slist): Simplify.
3894         (match_backwards_or_pattern): New function.
3895         (in_acclist): Use match_backwards_or_pattern.
3896         (matches): Remove.
3897
3898 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
3899
3900         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
3901         recursive.
3902
3903         * html.c (ftp_index): Fixed to work. Beautified the output.
3904
3905         * ftp.c (ftp_retrieve_glob): Another argument to control whether
3906         globbing is to be used.
3907         (ftp_retrieve_list): Compare the time-stamps of local and remote
3908         files to determine whether to download.
3909
3910 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
3911
3912         * ftp.c (rel_constr): New function.
3913
3914         * retr.c (retrieve_from_file): Check for text/html before
3915         retrieving recursively.
3916
3917         * main.c (main): Check whether the file is HTML before going into
3918         recursive HTML retrieving.
3919
3920         * ftp.c (ftp_retrieve_list): Manage directories.
3921         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
3922         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
3923         initialized, causing bugchecks in getftp to fail.
3924
3925         * configure.in: Check for symlink.
3926
3927         * ftp.c (ftp_retrieve_list): Added support for symlinks.
3928
3929         * version.c: "Released" 1.4b10.
3930
3931         * atotm.c (atotm): Redeclared as time_t.
3932
3933         * init.c: New variable "timestamping".
3934
3935         * main.c (main): New option 'N'.
3936
3937         * http.c (hgetlocation): Case-insensitive match.
3938         (hgetmodified): New function.
3939         (http_loop): Implement time-stamping.
3940
3941 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
3942
3943         * version.c: Changed version to 1.4b10
3944
3945         * atotm.c: New file, from phttpd.
3946
3947         * options.h (struct options): New parameter timestamping.
3948
3949         * version.c: 1.4b9 "released".
3950
3951         * recur.c (recursive_retrieve): Used linked list (ulist) for
3952         faster storing of URLs.
3953
3954         * url.c (get_urls_html): Removed the old kludge with comparing the
3955         outputs of htmlfindurl and findurl.
3956         (get_urls_html): Added better protocol support here.
3957         (create_hash): Removed, as well as add_hash and in_hash.
3958         (addslist): New function.
3959         (in_slist): ditto
3960
3961         * version.c: Released 1.4b8, changed version to b9.
3962
3963 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3964
3965         * ftp.c (freefileinfo): New function.
3966         (delelement): New function.
3967
3968         * everywhere: GPL!
3969
3970         * ftp.c (ftp_loop): Use ccon.
3971         (ftp_retrieve_glob): Likewise.
3972
3973         * ftp.h: Define ccon, to define status of control connection.
3974
3975         * ftp.c (ftp_get_listing): New function.
3976         (ftp_retrieve_more): New function.
3977         (ftp_retrieve_glob): New function.
3978
3979 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
3980
3981         * configure.in: Removed the search for cuserid().
3982
3983         * init.c (getmode): Renamed to getperms.
3984
3985 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
3986
3987         * version.c: New version.
3988
3989         * main.c (hangup): New function, that handles hangup. Hangup
3990         signal now causes geturl to stop writing on stdout, and to write
3991         to a log file.
3992
3993         * ftp.c (getftp): "Released" 1.4b7.
3994
3995         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
3996         (ftp_index): Use fileinfo/urlinfo.
3997
3998         * ftp-unix.c (ftp_parse_ls): New function.
3999         (symperms): New function.
4000
4001         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
4002
4003         * retr.c (retrieve_url): Added FTP support.
4004
4005 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4006
4007         * geturl.h: Removed NOTFTP2HTML enum.
4008         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
4009
4010         * ftp.c (getftp): Resynched with urlinfo.
4011         (getftp): Removed HMTL-ization of index.html from getftp.
4012
4013         * version.c: 1.4b6 "released".
4014
4015         * options.h (options): New struct, to keep options in.
4016
4017         * http.c (http_loop,gethttp): Synched with proxy.
4018
4019         * retr.c (retrieve_url): Implemented proxy retrieval.
4020
4021         * main.c (main): Use retrieve_from_file.
4022
4023 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
4024
4025         * retr.c (retrieve_from_file): New function.
4026
4027         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
4028         can be found in u->proto.
4029
4030         * ftp.c (ftp_response): Fixed to accept multi-line responses as
4031         per RFC 959.
4032
4033         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
4034
4035         * url.c (mymkdir): Removed the file of the same name, if one
4036         exists.
4037         (isfile): New function.
4038         (mkstruct): Fixed the '/' glitches.
4039         (path_simplify): Hacked to treat something/.. correctly.
4040
4041 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4042
4043         * http.c (gethttp): Close the socket after error in headers.
4044         (http_loop): HEOF no longer a fatal header.
4045
4046         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
4047         simplifies the syntax of calling retrieve_url.
4048
4049         * recr.c (recursive_retrieve): Modified to use get_urls_html.
4050
4051         * url.c (get_urls_file): New function.
4052         (get_urls_html): New function.
4053
4054         * recr.c (recursive_retrieve): Patched up to conform to the
4055         standards.
4056
4057         * http.c (gethttp): Synched with the rest...
4058         (gethttp): Treat only CONREFUSED specially, with connection
4059         errors.
4060
4061         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
4062
4063 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
4064
4065         * http.c (http_loop): New function.
4066
4067         * loop.c: Removed *lots* of stuff from retrieve_url.
4068
4069         * url.c (parseurl): Changed to work with urlinfo. Integrated
4070         username finding and path parsing.
4071         (newurl): New function.
4072         (freeurl): New function.
4073         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
4074         (url_filename): Likewise.
4075         (path_simplify): Accept relative paths too.
4076         (opt_url): Made urlinfo-compliant, removed bogosities.
4077         (path_simplify): Expanded to accept relative paths.
4078         (str_url): A replacement for hide_url
4079         (decode_string): Fixed a bug that caused malfunctioning when
4080         encountering an illegal %.. combination.
4081         (opt_url): Removed the argument. Dot-optimizations are now default.
4082
4083         * nmalloc.c (strdupdelim): New function.
4084
4085         * url.h: Added the urlinfo structure
4086
4087 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
4088
4089         * url.c (hide_url): Thrown out the protocol assertion. Do not
4090         change the URL if the protocol if not recognized.
4091         (findurl): Put continue instead of break.
4092
4093 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
4094
4095         * sample.geturlrc: Changed the defaults to be commented out and
4096         harmless (previous defaults caused pains if copied to
4097         ~/.geturlrc).
4098
4099         * http.c (gethttp): Print the HTTP request in debug mode.
4100
4101         * connect.c (iread): Added EINTR check loop to select-ing
4102         too. EINTR is now correctly handled with select().
4103
4104         * TODO: new file
4105
4106 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
4107
4108         * host.c (same_host): Made the function a little bit more
4109         intelligent regarding diversified URL syntaxes.
4110
4111         * url.c (skip_url): Spaces are now skipped after URL:
4112
4113         * Released 1.3.1 with the patch to prevent crashing when sending
4114         NULL to robot* functions and the patch to compile "out of the box"
4115         on AIX.
4116
4117         * recr.c (recursive_retrieve): Added checking whether this_url is
4118         NULL when calling the robot functions.
4119
4120         * ChangeLog: New file.