sjero.net Git - wget/blob - src/ChangeLog

   1 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * http.c (check_end): Constify.
   4
   5 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
   6
   7         * http.c (http_loop): If username and password are known, try the
   8         `Basic' authentication scheme by default.
   9
  10         * connect.h: Declare test_socket_open.
  11
  12 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
  13
  14         * version.c: Bump version to 1.7-dev.
  15
  16 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
  17
  18         * http.c (gethttp): Don't use the return value of sprintf().
  19         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
  20
  21 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
  22
  23         * recur.c (recursive_retrieve): Print the "so we don't load"
  24         debugging message only if we really don't load.
  25
  26         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
  27         (gethttp): Don't request keep-alive if keep-alive is inhibited.
  28
  29 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  30
  31         * http.c (gethttp): Make the HTTP persistent connections more
  32         robust.
  33
  34 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  35
  36         * retr.c (get_contents): If use_expected, make sure that the
  37         appropriate amount of data is being read.
  38
  39         * http.c (gethttp): Check for both `Keep-Alive: ...' and
  40         `Connection: Keep-Alive'.
  41
  42         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
  43         turned on.
  44
  45 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  46
  47         * http.c (connection_available_p): Use it.
  48
  49         * connect.c (test_socket_open): New function.
  50
  51         * http.c (gethttp): Support persistent connections.  Based on the
  52         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
  53         (register_persistent): New function.
  54         (connection_available_p): Ditto.
  55         (invalidate_connection): Ditto.
  56
  57 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
  58
  59         * url.c (convert_links): Handle UREL2ABS case.
  60
  61         * recur.c (recursive_retrieve): Instead of the list
  62         urls_downloaded, use hash tables dl_file_url_map and
  63         dl_url_file_map.
  64         (convert_all_links): Use them to retrieve data.
  65
  66         * host.c (clean_hosts): Free the hash tables.
  67
  68         * main.c (private_initialize): Call host_init().
  69
  70         * host.c (store_hostaddress): Use a saner, hash table-based data
  71         model.
  72         (realhost): Ditto.
  73         (host_init): Initialize the hash tables.
  74
  75 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
  76
  77         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
  78         used for what the sorted slists used to be used for.
  79         (slist_contains): Don't rely on the list being sorted.
  80         (slist_append): Simplify the code.
  81
  82         * recur.c (recursive_cleanup): Use free_string_set.
  83
  84         * utils.c (string_set_add, string_set_exists, string_set_free):
  85         New functions for easier freeing of hash tables whose keys are
  86         strdup'ed strings.
  87
  88         * recur.c (recursive_retrieve): Use the hash table functions for
  89         storing undesirable URLs.
  90
  91         * hash.c: New file.
  92
  93 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
  94
  95         * main.c (private_initialize): Call url_init.
  96         (main): Call private_initialize.
  97
  98         * url.c (unsafe_char_table): New table.
  99         (UNSAFE_CHAR): Use it.
 100         (init_unsafe_char_table): New function.
 101         (url_init): New function; call init_unsafe_char_table.
 102
 103 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 104
 105         * html-url.c (handle_link): Handle HTML fragment identifiers.
 106
 107         * recur.c (recursive_retrieve): If norobot info is respected and
 108         the file is specified not to be followed by robots, respect that.
 109
 110         * html-url.c (collect_tags_mapper): Handle <meta name=robots
 111         content=X>.  For us the important cases are where X is NONE or
 112         where X contains NOFOLLOW.
 113         (get_urls_html): Propagate that information to the caller.
 114
 115 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 116
 117         * url.c (convert_links): Unlink the file we might be reading from
 118         before writing to it.
 119         (convert_links): Use alloca instead of malloc for
 120         filename_plus_orig_suffix.
 121
 122 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 123
 124         * url.c (get_urls_file): Ditto.
 125         (convert_links): Ditto.
 126
 127         * html-url.c (get_urls_html): Use read_file() instead of
 128         load_file().
 129
 130         * utils.c (read_file): New function, instead of the old
 131         load_file().
 132         (read_file_free): Ditto.
 133
 134         * url.c (findurl): Search only for the supported protocols.
 135         (convert_links): Use fwrite() when writing out a region of
 136         characters.
 137
 138 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 139
 140         * ftp-ls.c: Move html_quote_string and ftp_index here.
 141
 142         * url.c: Remove get_urls_html, since that's now in html-url.c.
 143
 144         * html-url.c: New file.
 145
 146         * html-parse.c: New file.
 147
 148 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 149
 150         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
 151         _vsnprintf respectively.
 152
 153 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 154
 155         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
 156         on Linux.
 157
 158 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 159
 160         * host.c (realhost): Add HOST to the list with quality==0 only if
 161         it wasn't already there.
 162         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
 163
 164 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 165
 166         * init.c (run_wgetrc): Don't bother killing off '\r' since
 167         pars_line() skips whitespace at end of line anyway.
 168         (parse_line): Oops, it didn't.  Now it does.
 169
 170         * recur.c (parse_robots): Ditto here.
 171
 172         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
 173         manually because read_whole_line no longer does.
 174
 175         * utils.c (read_whole_line): Rewrite to: a) use less memory
 176         (reallocates to needed size after work), b) work faster -->
 177         fgets() instead of getc, c) be more correct --> doesn't kill the
 178         newline character at the end of line.
 179
 180 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 181
 182         * init.c (comind): Initialize MAX to array size - 1.
 183
 184 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 185
 186         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
 187         Suggested by Edward J. Sabol.
 188
 189 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 190
 191         * url.c (construct): Handle the case where host name is not
 192         followed by a slash.
 193
 194 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 195
 196         * init.c: commands[] need to be sorted!  ("base" wasn't.)
 197
 198 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 199
 200         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
 201         `if'.
 202
 203 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 204
 205         * url.c (construct): Insert unneeded initialization for the
 206         compiler to shut up.
 207
 208         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
 209         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
 210         otherwise gets lost when you define _XOPEN_SOURCE.
 211
 212         * utils.c (touch): Include the file name in the error message.
 213         From Debian.
 214
 215 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 216
 217         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
 218         resize the buffer to fit the formated message.  That way, messages
 219         of arbitrary size may be printed.
 220         (logvprintf): Use saved_append() to optionally log the last
 221         several lines of output.
 222         (logputs): Ditto.
 223         (log_close): Adapt to new data structures.
 224         (log_dump): Ditto.
 225         (redirect_output): Print messages to stderr, not to stdout.
 226
 227         * log.c (saved_append_1): New function.  Replaces the old logging
 228         system ("log all output until 10M characters") with a new, much
 229         more reasonable one ("log last screenful of text").
 230         (saved_append): New function; call saved_append_1.
 231         (free_log_line): New function.
 232
 233 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 234
 235         * url.c (construct): Fix comment.
 236         (find_last_char): Document.
 237
 238 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 239
 240         * snprintf.c: New file.
 241
 242 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 243
 244         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
 245         types to logprintf() and debug_logprintf().
 246
 247 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 248
 249         * ftp.c (ftp_loop_internal): Hide the password from the URL when
 250         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
 251         <darekm@bydg.lomac.com.pl>.
 252
 253 2000-11-02  Junio Hamano  <junio@twinsun.com>
 254
 255         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
 256
 257 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
 258
 259         * http.c (known_authentication_scheme_p): Recognize NTML
 260         authentication.
 261         (create_authorization_line): Treat NTML the same as `Basic'.
 262
 263 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 264
 265         * retr.c (retrieve_url): Free url before returning.
 266         (retrieve_url): Free mynewloc before returning.
 267         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
 268
 269 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 270
 271         * url.c (parseurl): Remove possible reading past the end of
 272         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
 273
 274 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 275
 276         * main.c (main): In case of opt.downloaded overflowing, print
 277         <overflow> instead of a totally bogus random value.
 278
 279         * retr.c (retrieve_from_file): Ditto.
 280
 281         * recur.c (recursive_retrieve): Ditto.
 282
 283         * main.c (main): Ditto.
 284
 285         * http.c (http_loop): Ditto.
 286
 287         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
 288         `+=', and downloaded_exceeds_quota() instead of the simple-minded
 289         check.
 290         (ftp_retrieve_list): Ditto.
 291         (ftp_retrieve_dirs): Ditto.
 292         (ftp_retrieve_glob): Ditto.
 293
 294         * retr.c (downloaded_increase): New function.  Notice overflows of
 295         opt.downloaded.
 296         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
 297         used if it overflowed.
 298
 299         * options.h (struct options): New member downloaded_overflow.
 300
 301 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 302
 303         * wget.h (enum): Remove extra space after last enumeration.
 304
 305 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 306
 307         * main.c (main): Use legible_very_long() for printing
 308         opt.downloaded.
 309
 310         * utils.c (legible_1): New function that operates on strings and
 311         does the brunt of legible()'s work.
 312         (legible): Use legible_1().
 313         (legible_very_long): New function; dump the argument with
 314         sprintf(), and call legible_1().
 315
 316         * options.h (struct options): Use VERY_LONG_TYPE for
 317         opt.downloaded.
 318
 319         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
 320         type.
 321
 322         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
 323         defined.  Define HAVE_LONG_LONG if long long is available.
 324
 325 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 326
 327         * utils.c (long_to_string): Update with a later, better version.
 328
 329 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 330
 331         * url.c (path_simplify_with_kludge): New function.
 332         (path_simplify_with_kludge): Disable it.  Instead...
 333         (parse_dir): ...make sure that at this point the right thing is
 334         done, i.e. that "query" part of the URL (?...) is always assigned
 335         to the file, never to the directory portion of the path.
 336
 337 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 338
 339         * retr.c (retrieve_url): Detect redirection cycles.
 340
 341 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 342
 343         * url.c (get_urls_html): Decode HTML entities using
 344         html_decode_entities.
 345
 346         * html.c (htmlfindurl): Don't count the `#' in numeric entities
 347         (&#NNN;) as an HTML fragemnt.
 348         (html_decode_entities): New function.
 349
 350 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 351
 352         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
 353
 354 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 355
 356         * url.c (construct): Rewritten for clarity.  Avoids the
 357         unnecessary copying and stack-allocation the old version
 358         performed.
 359
 360 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 361
 362         * ftp.c (getftp): Ditto.
 363
 364         * http.c (gethttp): Rewind the stream when retrying from scratch.
 365
 366 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 367
 368         * retr.c (retrieve_url): Use url_concat() to handle relative
 369         redirections instead of /ad hoc/ code.
 370
 371         * url.c (url_concat): New function encapsulating weird
 372         construct().
 373         (urllen_http_hack): New function.
 374         (construct): When constructing new URLs, recognize that `?' does
 375         not form part of the file name in HTTP.
 376
 377 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
 378
 379         * retr.c: Add msec timing support for WINDOWS.
 380         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
 381         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
 382
 383 2000-10-27  Dan Harkless  <dan-wget@dilvish.speed.net>
 384
 385         * retr.c (retrieve_url): Manually applied T. Bharath
 386         <TBharath@responsenetworks.com>'s patch to get wget to grok
 387         illegal relative URL redirects.  Reformatted and re-commented it.
 388
 389 2000-10-23  Dan Harkless  <dan-wget@dilvish.speed.net>
 390
 391         * connect.c (make_connection and bindport): Manually applied Rob
 392         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
 393         changing coding style to GNU's.
 394
 395         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
 396         files downloaded via FTP.  Per a comment, .listing files were not
 397         counted towards number of bytes and files downloaded because they're
 398         deleted anyway.  Well, they aren't under -nr, so count them then.
 399
 400         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
 401         --bind-address, alphabetizing, changing coding style to GNU's,
 402         commenting, and renaming cmd_ip_address() to cmd_address() to
 403         imply hostnames also okay.
 404
 405         * main.c (main): --delete-after didn't delete the root of the
 406         tree.  Ignore --convert-links if --delete-after was specified.
 407         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
 408         fixing duplicate use of added-since-1.5.3 case value.
 409         (print_help): Clarified that --delete-after deletes local files.
 410         Rob forgot to add a line for his new --bind-address option.
 411
 412         * options.h (struct options): Manually applied Rob Mayoff's patch
 413         to add --bind-address (bind_address structure member).
 414
 415         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
 416         Ignore --convert-links if --delete-after was specified.
 417
 418         * retr.c (retrieve_from_file): Just added a DEBUGP().
 419
 420 2000-10-19  Dan Harkless  <dan-wget@dilvish.speed.net>
 421
 422         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
 423         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
 424         patch to work around FTP servers that incorrectly respond to the
 425         "REST" command with the remaining size rather than the total file size.
 426
 427         * http.c (gethttp): Improved a comment and added code to tack on
 428         ".html" to text/html files without that extension when -E specified.
 429         (http_loop): Use new downloaded_file() enumerators and deal with
 430         the case of gethttp() called xrealloc() on u->local.
 431
 432         * init.c (commands): Added new "htmlextension" command.
 433         Also renamed John Daily's cmd_quad() to the more descriptive
 434         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
 435         removed duplicate cmd_boolean() declaration.
 436
 437         * main.c (print_help): Added my new -E / --html-extension option.
 438         (main): Undocumented --email-address option previously used -E synonym.
 439         Stole it away for the much more deserving --html-extension's use.
 440
 441         * options.h (struct options): Added html_extension field.
 442
 443         * url.c (convert_links): URL X that we saved as X.html locally due
 444         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
 445         (downloaded_file): Now remembers if we added .html extension to a file.
 446
 447         * url.h (downloaded_file_t): Added extra enumerators to support above.
 448         (downloaded_file): Now takes and returns a downloaded_file_t.
 449
 450         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
 451
 452 2000-10-09  Dan Harkless  <dan-wget@dilvish.speed.net>
 453
 454         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
 455
 456         * main.c (print_help): Clarified what --retr-symlinks does.
 457
 458 2000-09-15  John Daily  <jdaily@cyberdude.com>
 459
 460         * init.c: Add support for "always" and "never" values to allow
 461         .wgetrc to override commandline (useful e.g. with .pm files
 462         calling `wget --passive-ftp' when your firewall doesn't allow that).
 463
 464         * ftp.c (getftp): passive_ftp is first option to support always/never.
 465
 466 2000-08-30  Dan Harkless  <dan-wget@dilvish.speed.net>
 467
 468         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
 469
 470         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
 471         Wrapped some > 80-column lines.  When -p is specified and we're at a
 472         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
 473         <LINK REL="stylesheet">.
 474
 475         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
 476
 477         * init.c: Added new -p / --page-requisites / page_requisites option.
 478
 479         * main.c (print_help): Clarified that -l inf and -l 0 both allow
 480         infinite recursion.  Changed the unhelpful --mirrior description
 481         to simply give the options it's equivalent to.  Added new -p option.
 482         (main): Added some comments; handle new -p / --page-requisites.
 483
 484         * options.h (struct options): Added new page_requisites field.
 485
 486         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
 487         Calculate and pass down new `dash_p_leaf_HTML' parameter to
 488         get_urls_html().  Use new INFINITE_RECURSION #define.
 489
 490         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
 491         final `dash_p_leaf_HTML' parameter.
 492
 493         * url.c: get_urls_html() and htmlfindurl() now take final
 494         `dash_p_leaf_HTML' parameter.
 495
 496         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
 497
 498         * wget.h: Added some comments and new INFINITE_RECURSION #define.
 499
 500 2000-08-23  Dan Harkless  <dan-wget@dilvish.speed.net>
 501
 502         * main.c (print_help): -B / --base was not mentioned.
 503
 504 2000-08-22  Dan Harkless  <dan-wget@dilvish.speed.net>
 505
 506         * main.c (print_help): Modified -nc description to mention that it
 507         also prevents the creation of multiple versions of the same file
 508         with ".<number>" suffixes.
 509
 510 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 511
 512         * retr.c (retrieve_url): Consistently strdup opt.referer when
 513         setting u->referer.
 514
 515 2000-06-09  Dan Harkless  <dan-wget@dilvish.speed.net>
 516
 517         * main.c (print_help): --help output for --waitretry was over 80 cols.
 518
 519 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
 520
 521         * url.c (encode_string): Fix comment.
 522         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
 523
 524 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
 525
 526         * ftp.c (ftp_retrieve_list): Change permissions only on plain
 527         files.
 528
 529 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
 530
 531         * url.c (str_url): Print the port number only if it's different
 532         from the default port number for that protocol.
 533
 534 2000-05-22  Dan Harkless  <dan-wget@dilvish.speed.net>
 535
 536         * main.c (print_help): Added --help line for Damir Dzeko
 537         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
 538         Removed comments that --referer and --waitretry were undocumented.
 539         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
 540         line for --execute.
 541
 542 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
 543
 544         * ftp.c (getftp): Ditto.
 545
 546         * http.c (gethttp): Check for return value of fclose/fflush.
 547
 548 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
 549
 550         * host.c (store_hostaddress): Instead of shifting ADDR, start
 551         copying from the correct address.
 552
 553 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
 554
 555         * http.c (gethttp): Don't free REQUEST -- it was allocated with
 556         alloca().
 557         Pointed out by Gisle Vanem <gvanem@eunet.no>.
 558
 559 2000-04-04  Dan Harkless  <dan-wget@dilvish.speed.net>
 560
 561         * host.c (store_hostaddress): R. K. Owen's patch introduces a
 562         "left shift count >= width of type" warning on 32-bit
 563         architectures.  Got rid of it by tricking the compiler w/ a variable.
 564
 565         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
 566         characters per RFC1738, namely everything above '~'.  It also
 567         generated a warning on OSes where char =~ unsigned char.  Fixed.
 568
 569 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
 570
 571         * http.c (http_process_type): Removed needless strdup(), a memory
 572         leak.
 573
 574 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
 575
 576         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
 577
 578 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
 579
 580         * init.c (wgetrc_file_name): Don't free HOME under Windows.
 581
 582 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
 583
 584         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
 585
 586 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
 587
 588         * url.c (UNSAFE_CHAR): New macro.
 589         (contains_unsafe): Use it.
 590         (encode_string): Ditto.
 591
 592 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
 593
 594         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
 595
 596 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
 597
 598         * Use TOUPPER/TOLOWER.
 599
 600 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
 601
 602         * ftp-opie.c (btoe): Zero-terminate OSTORE.
 603
 604 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
 605
 606         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
 607
 608         * sysdep.h (ISALNUM): New macro.
 609         (TOLOWER): Ditto.
 610         (TOUPPER): Ditto.
 611
 612 2000-03-10  Dan Harkless  <dan-wget@dilvish.speed.net>
 613
 614         * html.c (idmatch): Implemented checking of my new --follow-tags
 615         and --ignore-tags options.
 616
 617         * init.c (commands): Added comment reminding people adding new
 618         entries doing allocation to add corresponding freeing in cleanup().
 619         (commands): Added new followtags and ignoretags commands.
 620         (cleanup): Free storage for new followtags and ignoretags.
 621
 622         * main.c: Use of "comma-separated list" was random -- normalized
 623         it.  Did some alphabetization.  Added comments pointing out
 624         "Options without arguments" and "Options accepting an argument"
 625         sections of long_options[].  Added new options --follow-tags and
 626         -G / --ignore-tags.  Added comment that Damir's --referer is
 627         currently undocumented.  Added comment that Heiko's --waitretry is
 628         partially undocumented (mentioned in --help but not in
 629         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
 630
 631         * options.h (struct options): Added new fields follow_tags and
 632         ignore_tags.
 633
 634         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
 635
 636 2000-03-02  Dan Harkless  <dan-wget@dilvish.speed.net>
 637
 638         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
 639         braces to avoid ambiguous `else'" warnings.  Eliminated them.
 640
 641         * http.c (gethttp): Dan Berger's query string patch is totally
 642         bogus.  If you have two different URLs, gen_page.cgi?page1 and
 643         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
 644         second will overwrite the first.  Also, parameters to implicit
 645         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
 646         be printed with trailing garbage characters, and could seg fault.
 647         Backing out the patch, which Dan B. informed me by email was just
 648         a kludge to download StarOffice from Sun made necessary due to
 649         wget's unconditional escaping of certain characters (room for an
 650         option there?).
 651         (http_loop): Heiko introduced "suggest explicit braces to avoid
 652         ambiguous `else'" warnings.  Eliminated them.
 653
 654         * main.c: Heiko's --wait / --waitretry backwards compatibility
 655         code looks to have been totally untested -- automatic variable
 656         'wr' was used without being initialized, and a long int was passed
 657         into setval()'s char* val parameter.
 658
 659         * recur.c (parse_robots): Applied Edward J. Sabol
 660         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
 661         problem with "User-agent:<space>*<space>" lines in robots.txt.
 662
 663         * url.c (parseurl, str_url): Removing Dan Berger's code (see
 664         http.c above for explanation).
 665
 666 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
 667
 668         * ftp.c: Respect new option waitretry.
 669
 670 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
 671
 672         * http.c (gethttp): Send custom Referer, if required.
 673
 674 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
 675
 676         * netrc.c (parse_netrc): Allow passwords to contain spaces.
 677
 678         * netrc.c (parse_netrc): New function.
 679
 680 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
 681
 682         * http.c (gethttp): Send it.
 683
 684         * url.c (parseurl): Detect query string in HTTP URL-s.
 685         (str_url): Print it.
 686
 687 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
 688
 689         * html.c (html_allow): Add <link href=...> and <script src=...>.
 690
 691 1999-05-02  andrew deryabin  <djsf@softhome.net>
 692
 693         * http.c (gethttp): Specify port in `Host' header only if it's
 694         different from 80.
 695
 696 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
 697
 698         * recur.c (recursive_retrieve): If a finite maximum depth is
 699         specified, and we're are already at that depth, don't download the
 700         HTML file for parsing.
 701
 702 2000-03-01  Dan Harkless  <dan-wget@dilvish.speed.net>
 703
 704         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
 705         even though we don't do conversion on HTML files retrieved via
 706         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
 707         (ftp_retrieve_list): Added a comment saying where we need to
 708         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
 709         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
 710         a lie -- reworded as "Server file no newer than local file '%s' --".
 711
 712         * http.c (http_loop): Fixed a typo and clarified a comment.
 713         (http_loop): When -K and -N are specified together, compare size
 714         and timestamp of server file X against local file X.orig (if
 715         extant) rather than converted local file X.
 716         (http_loop): "Local file '%s' is more recent," is sometimes a lie
 717         -- reworded as "Server file no newer than local file '%s' --".
 718         (http_loop): Call new downloaded_file() function to prevent
 719         wrongful overwriting of .orig file when -N is specified.
 720
 721         * url.c (convert_links): When -K specified, only rename X to
 722         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
 723         file X due to -N, we clobber an X.orig from a previous invocation.
 724         (convert_links): Call the failsafe xstrdup(), not the real strdup().
 725         (convert_links): Added a note asking anyone who understands how
 726         multiple URLs can correspond to a single file to comment it.
 727         (downloaded_file): Added this new function.
 728
 729         * url.h (downloaded_file): Added prototype for this new function
 730         as well as its downloaded_file_t enum type.
 731
 732         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
 733
 734 2000-02-29  Dan Harkless  <dan-wget@dilvish.speed.net>
 735
 736         * version.c: Upped version to developer-only "1.5.3+dev".
 737
 738 2000-02-18  Dan Harkless  <dan-wget@dilvish.speed.net>
 739
 740         * init.c (backup_converted): Added this new option.
 741
 742         * main.c (-K / --backup-converted): Added this new option.
 743
 744         * options.h (backup_converted): Added this new option.
 745
 746         * url.c (convert_links): When backup_converted is specified, save
 747         file X as X.orig before converting.
 748
 749         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
 750
 751 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
 752
 753         * version.c: Wget 1.5.3 is released.
 754
 755 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
 756
 757         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
 758         address doesn't yield FQDN.
 759
 760 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
 761
 762         * cmpt.c (strerror): Fix declaration of sys_errlist.
 763
 764 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
 765
 766         * main.c (main): Don't use an array subscript as the first
 767         argument to STRDUP_ALLOCA.
 768         From Kaveh R. Ghazi.
 769
 770 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
 771
 772         * html.c (htmlfindurl): Download table background.
 773
 774 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
 775
 776         * init.c (parse_line): Would free *com before allocating it.
 777         (parse_line): Would free com instead of *com.
 778
 779 1998-09-10  Howard Gayle  <howard@fjst.com>
 780
 781         * url.c (get_urls_html): Would drop the last character of the
 782         link.
 783
 784 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
 785
 786         * http.c (http_loop): Don't print status code if quiet.
 787
 788 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
 789
 790         * log.c: Use <stdarg.h> only when __STDC__.
 791
 792 1998-09-10  Adam D. Moss  <adam@foxbox.org>
 793
 794         * html.c (htmlfindurl): Download <layer src=...>.
 795
 796 1998-09-10  Howard Gayle  <howard@fjst.com>
 797
 798         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
 799         not retrieved.
 800
 801 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
 802
 803         * utils.c: Include <libc.h> on NeXT.
 804
 805 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
 806
 807         * url.c (get_urls_html): Fix calculation of URL position.
 808
 809 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
 810
 811         * version.c: Wget 1.5.2 is released.
 812
 813 1998-06-23  Dave Love  <d.love@dl.ac.uk>
 814
 815         * ftp.c, init.c, netrc.c: Include errno.h.
 816
 817         * http.c: Include errno.h and time header.
 818
 819         * Makefile.in (exext): Define.
 820         (install.bin, uninstall.bin): Use it.
 821
 822 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
 823
 824         * http.c (http_loop): Don't attempt to compare local and remote
 825         sizes if the remote size is unknown.
 826
 827 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
 828
 829         * url.c (get_urls_html): Use malloc() instead of alloca in the
 830         loop.
 831
 832 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
 833
 834         * version.c: Wget 1.5.2-b4 is released.
 835
 836 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
 837
 838         * url.c (get_urls_html): Ignore spaces before and after the URI.
 839
 840 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
 841
 842         * ftp.c (getftp): Translate `done'.
 843
 844 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
 845
 846         * version.c: Wget 1.5.2-b3 is released.
 847
 848 1998-06-06  Alexander Kourakos  <awk@bnt.com>
 849
 850         * init.c (cleanup): Close dfp, don't free it.
 851
 852 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
 853
 854         * utils.c (make_directory): Twiddle.
 855
 856         * config.h.in: Added template for access().
 857
 858 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
 859
 860         * html.c (htmlfindurl): Download <input src=...>
 861
 862 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
 863
 864         * utils.c (file_exists_p): Use access() with two arguments.
 865
 866 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
 867
 868         * netrc.c (parse_netrc): Correct logic.
 869
 870 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
 871
 872         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
 873         <ljm@ljm.wownet.net>.
 874
 875 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
 876
 877         * version.c: Wget 1.5.2-b2 is released.
 878
 879 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
 880
 881         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
 882
 883 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
 884
 885         * retr.c (elapsed_time): Return correct value when
 886         HAVE_GETTIMEOFDAY is undefined.
 887
 888 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
 889
 890         * version.c: Wget 1.5.2-b1 is released.
 891
 892 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
 893
 894         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
 895         (_getopt_internal): Don't translate `#if 0'-ed strings.
 896
 897 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
 898
 899         * mswindows.c (ws_handler): Use fork_to_background().
 900
 901 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
 902
 903         * version.c: Wget 1.5.1 is released.
 904
 905 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
 906
 907         * http.c (parse_http_status_line): Avoid `minor' and `major'
 908         names.
 909
 910 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
 911
 912         * utils.c (mkdirhier): Renamed to make_directory.
 913
 914 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
 915
 916         * mswindows.c (fork_to_background): Define under Windows.
 917
 918         * utils.c (fork_to_background): New function.
 919
 920         * html.c (htmlfindurl): Removed rerdundant casts.
 921
 922 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
 923
 924         * mswindows.c (ws_mypath): Cache the path.
 925
 926 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
 927
 928         * ftp.h: Prefix enum ftype members with FT_.
 929
 930         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
 931
 932         * mswindows.h: Use stat under Borland, _stat under MSVC.
 933
 934 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
 935
 936         * http.c (known_authentication_scheme_p): New function.
 937         (gethttp): Handle authorization more correctly.
 938
 939         * ftp-basic.h: Removed.
 940
 941         * cmpt.h: Removed.
 942
 943         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
 944         with gcc 2.8.
 945         (numdigit): Use `while' loop.
 946
 947         * http.c (create_authorization_line): Detect authentication
 948         schemes case-insensitively.
 949
 950         * http.c (extract_header_attr): Use strdupdelim().
 951         (digest_authentication_encode): Move declaration of local
 952         variables to smaller scope.
 953         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
 954         (create_authorization_line): Detect authentication schemes
 955         case-insensitively.
 956
 957         * utils.c (touch): Constify.
 958
 959         * http.c (gethttp): Report a nicer error when no data is received.
 960
 961         * rbuf.h (RBUF_READCHAR): Ditto.
 962
 963         * ftp-basic.c (ftp_response): Use sizeof.
 964
 965 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
 966
 967         * retr.c (print_percentage): EXPECTED is long, not int.
 968         (print_percentage): Use floating-point arithmetic to avoid
 969         overflow with large files' sizes multiplied with 100.
 970
 971 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
 972
 973         * config.h.in: Added pid_t stub.
 974
 975         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
 976         define it).
 977
 978 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
 979
 980         * version.c: Wget 1.5.0 is released.
 981
 982 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
 983
 984         * url.c (str_url): Ditto.
 985
 986         * ftp-basic.c (ftp_rest): Use new name.
 987
 988         * utils.c (long_to_string): Renamed from prnum().
 989
 990 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
 991
 992         * version.c: Wget 1.5-b17 is released.
 993
 994 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
 995
 996         * headers.c (header_get): New argument FLAGS.
 997
 998         * http.c (gethttp): If request is malformed, bail out of the
 999         header loop.
1000         (gethttp): Check for empty header *after* the status line checks.
1001         (gethttp): Disallow continuations for status line.
1002
1003 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1004
1005         * version.c: Wget 1.5-b16 is released.
1006
1007 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1008
1009         * init.c (commands): Renamed `always_rest' to `continue'.
1010
1011 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
1012
1013         * all: Use it.
1014
1015         * log.c (logputs): New argument.
1016         (logvprintf): Ditto.
1017         (logprintf): Ditto.
1018
1019 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1020
1021         * http.c (http_atotm): Update comment.
1022
1023         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
1024
1025         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
1026
1027         * main.c (i18n_initialize): New function.
1028         (main): Use it.
1029
1030         * log.c: Include <unistd.h>.
1031
1032         * retr.c (show_progress): Cast alloca to char *.
1033
1034 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1035
1036         * version.c: Wget 1.5-b15 is released.
1037
1038 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1039
1040         * utils.h: Declare file_non_directory_p().
1041
1042 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
1043
1044         * main.c (main): It's `tries', not `numtries' now.
1045
1046 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1047
1048         * init.c (getperms): Removed.
1049
1050 1998-04-01  Tim Charron  <tcharron@interlog.com>
1051
1052         * log.c (logvprintf): Don't use ARGS twice.
1053
1054 1998-04-01  John  <john@futuresguide.com>
1055
1056         * mswindows.c: Cleaned up.
1057
1058 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1059
1060         * version.c: Wget 1.5-b14 is released.
1061
1062 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1063
1064         * ftp-opie.c (STRLEN4): New macro.
1065         (btoe): Use it.
1066
1067 1998-04-01  Junio Hamano  <junio@twinsun.com>
1068
1069         * http.c: Document all the Digest functions.
1070
1071 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1072
1073         * utils.c (file_non_directory_p): Renamed from isfile().
1074
1075         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
1076
1077 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1078
1079         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
1080
1081         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
1082         style.
1083         (cmd_permissions): Removed.
1084
1085         * config.h.in: Add template for WORDS_BIGENDIAN.
1086
1087 1998-03-31  Junio Hamano  <junio@twinsun.com>
1088
1089         * http.c (HEXD2asc): New macro.
1090         (dump_hash): Use it.
1091
1092 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1093
1094         * version.c: Wget 1.5-b13 is released.
1095
1096 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1097
1098         * main.c (main): Don't try to use `com'.
1099
1100 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1101
1102         * init.c (cmd_permissions): New function.
1103
1104 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1105
1106         * version.c: Wget 1.5-b12 is released.
1107
1108 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1109
1110         * init.c (commands): Renamed `numtries' to `tries'.
1111         (cmd_spec_debug): Removed.
1112         (home_dir): Under Windows, return `C:\' if HOME is undefined.
1113
1114 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1115
1116         * config.h.in: Define _XOPEN_SOURCE.
1117
1118         * init.c (check_user_specified_header): New function.
1119         (cmd_spec_header): Use it.
1120         (cmd_spec_useragent): New function.
1121
1122 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1123
1124         * version.c: Wget 1.5-b11 is released.
1125
1126 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
1127
1128         * wget.h: Include <libintl.h> only if NLS is enabled.
1129
1130 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
1131
1132         * options.h (struct options): Made `wait' a long.
1133         (struct options): Ditto for `timeout'.
1134
1135 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
1136
1137         * utils.c (exists): Renamed to file_exists_p.
1138         (file_exists_p): Use access() if available.
1139
1140 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
1141
1142         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
1143         infloop.
1144
1145         * log.c: do_logging -> save_log_p.
1146
1147         * config.h.in: Added template for HAVE_VSNPRINTF.
1148
1149 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1150
1151         * init.c: Ditto.
1152
1153         * http.c: Protect declaration against non-ANSI compiler.
1154
1155         * log.c (logvprintf): Use vsnprintf() if available.
1156
1157         * getopt.c (main): Don't translate test stuff.
1158
1159 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1160
1161         * version.c: Wget 1.5-b10 is released.
1162
1163 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
1164
1165         * ftp.c (getftp): Don't translate "CWD %s".
1166
1167         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
1168
1169 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1170
1171         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
1172
1173         * log.c (logputs): New function.
1174         (logvprintf): Renamed from vlogmsg; use logputs().
1175
1176         * retr.c (show_progress): Print `[100%]' when the retrieval is
1177         finished.
1178
1179         * init.c (run_wgetrc): Use FILE, not PATH.
1180         (wgetrc_file_name): Ditto.
1181
1182 1998-03-07  Tim Adam  <tma@osa.com.au>
1183
1184         * recur.c (parse_robots): Correctly reset `entries' on empty
1185         disallow.
1186
1187 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1188
1189         * init.c (cmd_spec_debug): Use cmd_boolean().
1190
1191 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
1192
1193         * http.c (gethttp): Create proxy-authorization correctly.
1194
1195 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1196
1197         * md5.c: Ditto.
1198
1199         * getopt.c: Use ANSI function definitions.
1200
1201         * ftp-opie.c: New file.
1202
1203         * options.h: Don't redefine EXTERN.
1204
1205         * init.c: Sort it correctly.
1206
1207 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1208
1209         * version.c: Wget 1.5-b9 is released.
1210
1211 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1212
1213         * recur.c (recursive_retrieve): Reset `first_time'.
1214
1215         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
1216
1217         * rbuf.c (rbuf_peek): Simplified.
1218         (rbuf_flush): Use MINVAL.
1219
1220         * wget.h (MINVAL): Moved from url.h.
1221
1222         * rbuf.h (RBUF_FD): New macro.
1223
1224         * url.c (add_url): Add to the head of the list.
1225
1226         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
1227         file.
1228         (getftp): Set the default permissions to 0600.
1229
1230 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
1231
1232         * url.c (get_urls_html): Ditto.
1233         (convert_links): Ditto.
1234
1235         * recur.c (parse_robots): Ditto.
1236
1237         * html.c (ftp_index): Ditto.
1238
1239         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
1240
1241         * init.c (defaults): Initialize `opt' to zero via memset.
1242
1243         * http.c (digest_authentication_encode): goto considered harmful.
1244
1245 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
1246
1247         * ftp.c (delelement): Simplify and fix leak.
1248
1249 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
1250
1251         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
1252
1253         * url.h (HEXD2ASC): Removed warning.
1254
1255         * init.c (comind): Use binary search.
1256         (commands): Reorganized.
1257         (setval): Ditto.
1258         (cmd_boolean): New function.
1259         (cmd_number): Ditto.
1260         (cmd_number_inf): Ditto.
1261         (cmd_string): Ditto.
1262         (cmd_vector): Ditto.
1263         (cmd_directory_vector): Ditto.
1264         (cmd_bytes): Ditto.
1265         (cmd_time): Ditto.
1266         (cmd_spec_debug): Ditto.
1267         (cmd_spec_dirmode): Ditto.
1268         (cmd_spec_dirstruct): Ditto.
1269         (cmd_spec_dotstyle): Ditto.
1270         (cmd_spec_header): Ditto.
1271         (cmd_spec_htmlify): Ditto.
1272         (cmd_spec_mirror): Ditto.
1273         (cmd_spec_outputdocument): Ditto.
1274         (cmd_spec_recursive): Ditto.
1275         (settime): Merged with cmd_time().
1276         (setbytes): Merged with cmd_bytes().
1277         (setonoff): Merged with cmd_boolean().
1278         (onoff): Ditto.
1279
1280 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1281
1282         * Makefile.in (distclean): Remove `config.h'.
1283
1284 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1285
1286         * version.c: Wget 1.5-b8 is released.
1287
1288 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1289
1290         * http.c (digest_authentication_encode): New function.
1291         (create_authorization_line): Use it.
1292         (dump_hash): New function.
1293         (digest_authentication_encode): Use it.
1294
1295         * fnmatch.c: Renamed from `mtch.c'.
1296
1297 1998-02-15  Karl Eichwalder  <ke@suse.de>
1298
1299         * main.c (main): Tag "Written by..." string as translatable.
1300
1301 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1302
1303         * wget.h (FREE_MAYBE): New macro.
1304
1305         * http.c (create_authorization_line): Don't use ANSI C string
1306         concatenation feature.
1307         (basic_authentication_encode): Use alloca() for temporary
1308         variables.
1309
1310         * recur.h: Ditto.
1311
1312         * http.c: Ditto.
1313
1314         * headers.h: Ditto.
1315
1316         * ftp-basic.c: Protect declaration against non-ANSI compiler.
1317
1318         * http.c (create_authorization_line): Cast `unsigned char *' to
1319         `char *' for sprintf, to shut up the noisy Digital Unix cc.
1320
1321 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1322
1323         * version.c: Wget 1.5-b7 is released.
1324
1325 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1326
1327         * cmpt.c (strstr): Synched with glibc-2.0.6.
1328
1329         * ftp-basic.c (calculate_skey_response): Ditto.
1330         (calculate_skey_response): Use alloca().
1331
1332         * http.c (create_authorization_line): Work with FSF's version of
1333         md5.c.
1334
1335         * md5.c: New file, from GNU libc.
1336
1337 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
1338
1339         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
1340
1341 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1342
1343         * http.c (basic_authentication_encode): New function, instead of
1344         the macro.
1345
1346 1998-02-13  Junio Hamano  <junio@twinsun.com>
1347
1348         * http.c: Add HTTP-DA support.
1349         * ftp-basic.c: Add Opie/S-key support.
1350         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
1351         * md5.c, md5.h: New files.
1352
1353 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1354
1355         * http.c (http_process_range): Renamed from hprocrange().
1356         (http_process_range): Parse the whole header.
1357
1358         * headers.c: New file.
1359         (header_process): New function.
1360         (header_get): Renamed from fetch_next_header.
1361
1362         * all: Include utils.h only where necessary.
1363
1364         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
1365
1366         * wget.h: Add provisions for dmalloc.
1367
1368 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1369
1370         * version.c: Wget 1.5-b6 is released.
1371
1372 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1373
1374         * ftp.c (ftp_loop): Determine `filename' more precisely.
1375
1376         * init.c (setval): Don't set `opt.quiet' if output-document is
1377         `-'.
1378
1379         * log.c (log_init): Print to STDERR instead of STDOUT.
1380         (vlogmsg): Use STDERR by default.
1381         (logflush): Ditto.
1382
1383 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
1384
1385         * host.c: Use addr_in again.
1386
1387 1998-02-08  Karl Eichwalder  <karl@suse.de>
1388
1389         * http.c (gethttp): Fixed typo.
1390
1391 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1392
1393         * version.c: Wget 1.5-b5 is released.
1394
1395 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1396
1397         * retr.c (show_progress): Use it.
1398
1399         * log.c (logflush): New function.
1400
1401         * wget.h: Utilize __attribute__ if on gcc.
1402
1403 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
1404
1405         * http.c (base64_encode_line): New argument LENGTH.
1406         (BASIC_AUTHENTICATION_ENCODE): Use it.
1407         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
1408
1409         * main.c (main): Fixed fprintf() format mismatch.
1410
1411 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
1412
1413         * version.c: Wget 1.5-b4 is released.
1414
1415 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
1416
1417         * host.c: use sockaddr_in instead of addr_in.
1418
1419 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
1420
1421         * init.c (cleanup): Use it.
1422
1423         * recur.c (recursive_cleanup): New function.
1424
1425         * retr.c (retrieve_from_file): Ditto.
1426
1427         * main.c (main): Use it.
1428
1429         * recur.c (recursive_reset): New function.
1430
1431         * retr.c (retrieve_from_file): Ditto.
1432
1433         * main.c (main): Simplify call to recursive_retrieve().
1434
1435         * recur.c (recursive_retrieve): Removed FLAGS argument.
1436
1437         * http.c (gethttp): Changed call to iwrite().
1438
1439 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1440
1441         * url.c (get_urls_html): Ditto.
1442         (free_urlpos): Ditto.
1443         (mkstruct): Ditto.
1444         (construct): Ditto.
1445
1446         * retr.c (retrieve_url): Move declaration of local variables to
1447         smaller scope.
1448
1449         * url.c (urlproto): Use it.
1450         (parseurl): Ditto.
1451         (str_url): Ditto.
1452         (get_urls_html): Ditto.
1453
1454         * utils.h (ARRAY_SIZE): New macro.
1455
1456         * url.c (proto): Moved from url.h.
1457
1458         * url.h (URL_CLEANSE): Reformatted.
1459         (USE_PROXY_P): Renamed from USE_PROXY.
1460
1461         * ftp-basic.c: Adjust to the new interface of iwrite().
1462
1463         * ftp-basic.c (ftp_port): Use alloca().
1464
1465 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1466
1467         * version.c: Wget 1.5-b3 is released.
1468
1469         * host.c (ftp_getaddress): Don't print to stderr directly.
1470
1471         * init.c (setbytes): Support `g' for gigabytes.
1472         (cmdtype): New specification CTIME.
1473         (setval): Use it with settime().
1474         (commands): Use it for WAIT and TIMEOUT.
1475
1476 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
1477
1478         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
1479         (gethttp): Use it.
1480
1481         * utils.c (unique_name_1): Moved from url.c.
1482         (unique_name): Ditto.
1483
1484         * url.c (url_filename): Ditto.
1485
1486         * log.c (redirect_output): Changed call to unique_name().
1487
1488         * url.c (unique_name_1): Renamed from unique_name().
1489         (unique_name): Changed interface.
1490
1491         * init.c (enum cmdid): Moved from init.h.
1492         (cmdtype): Ditto.
1493         (struct cmd): Ditto.
1494
1495         * main.c (main): Use it.
1496         (main): Moved `--backups' to not have a short option.
1497
1498         * options.h (struct options): New member BACKGROUND.
1499
1500         * main.c (print_help): Rearranged.
1501         (main): New long options for -n* short options: --no-directories,
1502         --no-host-directories, --non-verbose, --no-host-lookup and
1503         --dont-remove-listing.
1504
1505 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
1506
1507         * main.c (main): Use log_close().
1508
1509         * log.c: New variable LOGFP.
1510         (vlogmsg): Use it.
1511         (redirect_output): Don't open /dev/null; set LOGFP to stdin
1512         instead.
1513         (log_close): New function.
1514
1515         * options.h (struct options): Removed LFILE.
1516
1517         * log.c (log_enable): Removed.
1518
1519         * main.c (main): Use it.
1520
1521         * log.c (log_init): New function.
1522
1523         * url.c (get_urls_html): Removed needless assignment to BASE.
1524
1525         * host.c (add_hlist): Don't set CMP needlessly.
1526
1527         * utils.c (match_backwards): Ditto.
1528         (in_acclist): Ditto.
1529
1530         * url.c (findurl): Ditto.
1531
1532         * netrc.c (parse_netrc): Ditto.
1533
1534         * log.c (log_dump): Ditto.
1535
1536         * html.c (html_quote_string): Ditto.
1537
1538         * ftp-basic.c (ftp_request): Made static.
1539
1540         * connect.c: Made global variables static.
1541
1542         * url.c (construct): Ditto.
1543
1544         * init.c (init_path): Avoid assignment inside `if'-condition.
1545
1546         * ftp.c: Don't include in.h or winsock.h.
1547
1548         * ftp.c (ftp_loop): Use SZ.
1549
1550         * connect.c (bindport): Cast &addrlen to int *.
1551         (conaddr): Ditto.
1552
1553         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
1554
1555 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1556
1557         * ftp.c (getftp): Initialize opt.ftp_pass here.
1558         (ftp_retrieve_dirs): Use alloca().
1559
1560         * init.c (defaults): Don't initialize opt.ftp_pass.
1561
1562         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
1563         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
1564
1565 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1566
1567         * recur.c (parse_robots): Check for comments more correctly.
1568
1569         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
1570         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
1571         hostname.
1572
1573 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1574
1575         * version.c: Wget 1.5-b2 is released.
1576
1577         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
1578
1579         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
1580
1581         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
1582         char.
1583
1584         * log.c: Don't attempt to hide arguments from ansi2knr.
1585
1586         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
1587
1588         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
1589
1590         * ftp.c (getftp): Ditto.
1591
1592         * http.c (gethttp): Use it.
1593
1594         * retr.c (get_contents): New argument EXPECTED; pass it to
1595         show_progress().
1596         (show_progress): New argument EXPECTED; use it to display
1597         percentages.
1598
1599         * init.c (setval): Ditto.
1600
1601         * http.c (gethttp): Ditto.
1602         (http_loop): Ditto.
1603
1604         * ftp.c (getftp): Ditto.
1605         (ftp_loop_internal): Ditto.
1606
1607         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
1608
1609         * sysdep.h (CLOSE): Simplify; use DEBUGP.
1610
1611         * netrc.c (search_netrc): Use alloca().
1612
1613         * init.c (defaults): Initialize no_flush.
1614
1615         * log.c (vlogmsg): Don't flush if no_flush.
1616
1617         * options.h (struct options): New variable no_flush.
1618
1619         * main.c (main): Don't play games with buffering.
1620
1621         * log.c (vlogmsg): Flush the output after every message.
1622
1623 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1624
1625         * init.c (parse_line): Ditto.
1626
1627         * url.c (get_urls_html): Ditto.
1628
1629         * main.c (main): Don't cast to unsigned char.
1630
1631         * init.c (run_wgetrc): Don't cast to unsigned char.
1632         (parse_line): Accept char instead of unsigned char.
1633
1634         * html.c (htmlfindurl): Use char instead of unsigned char.
1635
1636         * all: Use them.
1637
1638         * sysdep.h: Add wrappers to ctype macros to make them
1639         eight-bit-clean:
1640
1641 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
1642
1643         * html.c (htmlfindurl): Download <img lowsrc=...>
1644
1645         * main.c (main): Ignore SIGPIPE.
1646
1647         * connect.c (select_fd): New argument WRITEP.
1648         (iwrite): Call select_fd().
1649
1650 1997-02-27  Fila Kolodny <fila@ibi.com>
1651
1652         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
1653         one already exists, just skip it.
1654
1655 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
1656
1657         * http.c (gethttp): Cosmetic changes.
1658
1659         * http.c (check_end): Allow `+D...' instead of `GMT'.
1660         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
1661
1662         * url.c (process_ftp_type): New function.
1663         (parseurl): Use it.
1664
1665         * connect.c (iwrite): Allow writing in a few chunks.
1666         (bindport): Made SRV static, so addr can point to it.
1667         (select_fd): Removed HPUX kludge.
1668
1669         * host.c (free_hlist): Incorporated into clean_hosts().
1670
1671 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
1672
1673         * host.c (hlist): Made static.
1674         (search_address): Cosmetic change.
1675
1676 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
1677
1678         * version.c: Wget v1.5-b1 is released.
1679
1680         * http.c (hgetlen): Use sizeof() to get the header length.
1681         (hgetrange): Ditto.
1682         (hgettype): Ditto.
1683         (hgetlocation): Ditto.
1684         (hgetmodified): Ditto.
1685         (haccepts_none): Ditto.
1686
1687         * main.c (main): Updated `--version' and `--help' output, as per
1688         Francois Pinard's suggestions.
1689
1690         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
1691         textdomain().
1692
1693         * config.h.in: Define stubs for I18N3.
1694
1695         * wget.h: Include libintl.h.
1696
1697 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
1698
1699         * url.c (mkstruct): Check for opt.cut_dirs.
1700         (mkstruct): alloca()-te more, xmalloc() less.
1701
1702         * utils.c (load_file): Check for ferror().
1703
1704         * url.c (get_urls_file): Close only the files we opened.
1705         (get_urls_html): Ditto.
1706         (count_slashes): New function.
1707
1708         * http.h: Removed.
1709
1710         * http.c (gethttp): Respect username and password provided by
1711         proxy URL.
1712         (base64_encode_line): Write into an existing buffer instead of
1713         malloc-ing a new one.
1714         (struct http_stat): Moved from http.h
1715
1716         * retr.c (retrieve_url): Free SUF.
1717
1718         * all: Removed lots of unnecessary .h dependencies.
1719
1720         * html.c (global_state): Made static.
1721
1722         * utils.h (ALLOCA_ARRAY): New macro.
1723
1724         * main.c (main): New option `--cut-dirs'.
1725
1726         * url.c (construct): Use alloca() for T.
1727
1728         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
1729
1730         * host.c (_host_t): Moved from host.h.
1731         (struct host): Renamed from _host_t.
1732         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
1733         (realhost): Ditto.
1734
1735         * host.h: Don't include url.h.
1736
1737         * ftp.c (LIST_FILENAME): Moved from ftp.h.
1738
1739         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
1740
1741         * main.c (main): Enable log if the output goes to a TTY.
1742
1743         * connect.h: Removed unused constant `BACKLOG'.
1744
1745         * config.h.in: Check for isatty().
1746
1747         * Makefile.in (LINK): Use CFLAGS when linking.
1748
1749 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
1750
1751         * mswindows.c (ws_hangup): Use redirect_output().
1752
1753         * main.c (redirect_output_signal): New function; use
1754         redirect_output().
1755
1756         * log.c (redirect_output): New function, based on hangup(), which
1757         is deleted.
1758
1759         * log.c (vlogmsg): New function.
1760
1761         * wget.h (DEBUGP): Use debug_logmsg().
1762
1763         * main.c (hangup): Use it.
1764
1765         * log.c (log_dump): New function.
1766
1767         * utils.h (DO_REALLOC): Use `long' for various sizes.
1768
1769         * http.c (hskip_lws): Use `while', for clarity.
1770         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
1771         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
1772
1773         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
1774         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
1775
1776         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
1777         (LEGIBLE_SEPARATOR): Ditto.
1778         (FILE_BUFFER_SIZE): Ditto.
1779
1780         * retr.c (BUFFER_SIZE): Moved from retr.h.
1781
1782         * log.c: New file.
1783         (logmsg): Moved from utils.c.
1784         (debug_logmsg): New function.
1785
1786         * mswindows.h: Include it here.
1787
1788         * init.c: Ditto.
1789
1790         * utils.c: Don't include <windows.h>.
1791
1792 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
1793
1794         * host.c (ftp_getaddress): Ditto.
1795
1796         * main.c (main): Use it.
1797
1798         * utils.h (STRDUP_ALLOCA): New macro.
1799
1800         * init.c: Prepend `wget: ' to error messages printed on stderr.
1801
1802         * utils.c (mkdirhier): Renamed from mymkdir.
1803         (touch): Renamed from my_touch.
1804         (pwd_cuserid): Renamed from my_cuserid().
1805
1806 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
1807
1808         * utils.c (accdir): Process wildcards.
1809         (proclist): New function.
1810         (accdir): Use it to avoid code repetition.
1811
1812 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
1813
1814         * recur.c (parse_robots): Respect opt.useragent; use alloca().
1815
1816         * http.c (gethttp): Construct useragent accordingly.
1817
1818         * version.c: Changed version string to numbers-only.
1819
1820         * main.c (print_help): List all the options.
1821
1822         * mswindows.c (windows_main_junk): Initialize argv0 here.
1823
1824 1998-01-24  Karl Heuer  <kwzh@gnu.org>
1825
1826         * netrc.c (search_netrc): Initialize `l' only after processing
1827         netrc.
1828
1829         * main.c (main): Don't trap SIGHUP if it's being ignored.
1830
1831 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
1832
1833         * all: Use logmsg().
1834
1835         * utils.c (time_str): Moved from retr.c.
1836         (logmsg): New function.
1837         (logmsg_noflush): Ditto.
1838
1839         * rbuf.c: New file, moved buf_* functions here.
1840
1841         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
1842
1843         * ftp-basic.c (ftp_rest): Use prnum().
1844
1845         * ftp-basic.c: Ditto.
1846
1847         * ftp.c: Use the new reading functions and macros.
1848
1849         * retr.c (buf_initialize): New function.
1850         (buf_initialized_p): Ditto.
1851         (buf_uninitialize): Ditto.
1852         (buf_fd): Ditto.
1853
1854         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
1855         efficiency.
1856         (gethttp): Use alloca() where appropriate.
1857
1858         * retr.c (buf_readchar): Use it.
1859         (buf_peek): Use rstreams.
1860
1861         * retr.h (BUF_READCHAR): New macro.
1862
1863         * init.c (home_dir): Rewritten for clarity.
1864         (init_path): Ditto.
1865
1866         * mswindows.c (ws_backgnd): Made static.
1867         (read_registry): Ditto.
1868         (ws_cleanup): Ditto.
1869         (ws_handler): Ditto.
1870
1871 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
1872
1873         * alloca.c: New file.
1874
1875         * Makefile.in (ALLOCA): Define.
1876
1877         * mswindows.c (ws_help): Constify.
1878         (ws_help): Use alloca.
1879
1880         * mswindows.c: Reformat.
1881
1882         * all: Added _(...) annotations for I18N snarfing and translation.
1883
1884         * host.c (ftp_getaddress): Nuke SYSINFO.
1885         (ftp_getaddress): Don't use getdomainname().
1886         (ftp_getaddress): Use uname(), where available.
1887
1888         * http.c (gethttp): Protect a stray fprintf().
1889
1890         * init.c (settime): New function.
1891         (setval): Treat WAIT specially, allowing suffixes like `m' for
1892         minutes, etc.
1893
1894 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
1895
1896         * url.c (get_urls_html): Use alloca() for TEMP.
1897
1898 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
1899
1900         * url.c (rotate_backups): New function.
1901
1902         * http.c (gethttp): Ditto.
1903
1904         * ftp.c (getftp): Rotate backups.
1905
1906 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
1907
1908         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
1909         xrealloc() and xstrdup().  Use the new functions.
1910
1911         * url.c (decode_string): Made static.
1912         (has_proto): Ditto.
1913         (parse_dir): Ditto.
1914         (parse_uname): Ditto.
1915         (mkstruct): Ditto.
1916         (construct): Ditto.
1917         (construct_relative): Ditto.
1918
1919         * retr.c (show_progress): Made static.
1920
1921         * recur.c (robots_url): Made static.
1922         (retrieve_robots): Ditto.
1923         (parse_robots): Ditto.
1924         (robots_match): Ditto.
1925
1926         * main.h: Removed.
1927
1928         * main.c (printhelp): Made static.
1929         (hangup): Ditto.
1930
1931         * init.c (comind): Made static.
1932         (defaults): Ditto.
1933         (init_path): Ditto.
1934         (run_wgetrc): Ditto.
1935         (onoff): Ditto.
1936         (setonoff): Ditto.
1937         (setnum): Ditto.
1938         (myatoi): Ditto.
1939         (getperms): Ditto.
1940         (setbytes): Ditto.
1941
1942         * http.c (fetch_next_header): Made static.
1943         (hparsestatline): Ditto.
1944         (hskip_lws): Ditto.
1945         (hgetlen): Ditto.
1946         (hgetrange): Ditto.
1947         (hgettype): Ditto.
1948         (hgetlocation): Ditto.
1949         (hgetmodified): Ditto.
1950         (haccepts_none): Ditto.
1951         (gethttp): Ditto.
1952         (base64_encode_line): Ditto.
1953         (mktime_from_utc): Ditto.
1954         (http_atotm): Ditto.
1955
1956         * html.c (idmatch): Made static.
1957
1958         * host.c (search_host): Made static.
1959         (search_address): Ditto.
1960         (free_hlist): Ditto.
1961
1962         * ftp.c (getftp): Made static.
1963         (ftp_loop_internal): Ditto.
1964         (ftp_get_listing): Ditto.
1965         (ftp_retrieve_list): Ditto.
1966         (ftp_retrieve_dirs): Ditto.
1967         (ftp_retrieve_glob): Ditto.
1968         (freefileinfo): Ditto.
1969         (delelement): Ditto.
1970
1971         * ftp-ls.c (symperms): Made static.
1972         (ftp_parse_unix_ls): Ditto.
1973
1974         * connect.c (select_fd): Made static.
1975
1976         * utils.c (xmalloc): Renamed from nmalloc.
1977         (xrealloc): Renamed from nrealloc.
1978         (xstrdup): Renamed from nstrdup.
1979
1980         * getopt.c (exchange): Use alloca.
1981
1982         * mswindows.c (mycuserid): Use strncpy.
1983
1984         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
1985         systhings.h, windecl.h and winjunk.h removed.
1986
1987         * mswindows.c (sleep): New function.
1988
1989         * utils.c: Include <windows.h> under Windows.
1990
1991 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
1992
1993         * url.h (URL_UNSAFE): Change default under Windows.
1994
1995         * retr.c (retrieve_from_file): Respect opt.delete_after.
1996
1997         * main.c (main): Call ws_help on Windows.
1998
1999         * winjunk.c (windows_main_junk): New function.
2000
2001         * main.c (main): Junk-process argv[0].
2002
2003         * http.c (mktime_from_utc): Return -1 if mktime failed.
2004
2005         * http.c (http_loop): Ditto.
2006
2007         * ftp.c (ftp_loop_internal): Change title on Windows when using a
2008         new URL.
2009
2010         * winjunk.c (getdomainname): Lots of functions.
2011
2012 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
2013
2014         * cmpt.c (strptime_internal): Handle years more correctly for
2015         `%y'.
2016
2017 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
2018
2019         * http.c (gethttp): Allocate enough space for
2020         `Proxy-Authorization' header.
2021
2022 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2023
2024         * version.c: Wget/1.4.5 is released.
2025
2026 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2027
2028         * retr.c (get_contents): Check return value of fwrite more
2029         carefully.
2030
2031 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2032
2033         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
2034         year, regardless of century.
2035
2036 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2037
2038         * utils.c (isfile): Use `lstat' instead of `stat'.
2039
2040 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2041
2042         * utils.c (numdigit): Use explicit test.
2043
2044 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
2045
2046         * http.c (http_loop): Always use `url_filename' to get u->local.
2047
2048 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
2049
2050         * url.c: Recognize https.
2051
2052 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
2053
2054         * recur.c (recursive_retrieve): Lowercase just the host name.
2055
2056 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
2057
2058         * url.c (get_urls_file): Use the correct test.
2059         (get_urls_html): Ditto.
2060
2061 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2062
2063         * connect.c: Reverted addrlen to int.
2064
2065         * init.c (parse_line): Check for -1 instead of NONE.
2066
2067         * version.c: Changed version to 1.4.5.
2068
2069 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2070
2071         * init.c: New option netrc.
2072         (initialize): Don't parse .netrc.
2073
2074         * cmpt.c (recursive): Return rp.
2075         (strptime_internal): Match the long strings first, the abbreviated
2076         second.
2077
2078 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
2079
2080         * http.c (check_end): New function.
2081         (http_atotm): Use it.
2082
2083 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
2084
2085         * http.c (gethttp): Use them.
2086
2087         * init.c: New options proxy_user and proxy_passwd.
2088
2089 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2090
2091         * ftp.c (ftp_retrieve_list): Create links even if not relative.
2092
2093 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
2094
2095         * recur.c (recursive_retrieve): Lowercase the host name, if the
2096         URL is not "optimized".
2097
2098         * host.c (realhost): Return l->hostname, even if it matches with
2099         host.
2100
2101 1997-02-10  Marin Purgar  <pmc@asgard.hr>
2102
2103         * connect.c: Make addrlen size_t instead of int.
2104         (conaddr): Ditto.
2105
2106 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2107
2108         * systhings.h: Define S_ISLNK on NeXT too.
2109
2110 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
2111
2112         * version.c: Released 1.4.3.
2113
2114         * url.c: Futher update to list of protostrings.
2115         (skip_proto): Skip `//' correctly for FTP and HTTP.
2116
2117         * url.c (get_urls_html): Handle bogus `http:' things a little
2118         different.
2119
2120         * main.c (main): Removed `follow-ftp' from `f'.
2121         (main): Dumped the `prefix-files' and `file-prefix' options and
2122         features; old and bogus.
2123         (main): Exit on failed setval() in `-e'.
2124
2125         * http.c (fetch_next_header): Use it to detect header continuation
2126         correctly.
2127
2128         * retr.c (buf_peek): New function.
2129
2130 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2131
2132         * wget.h: Include time.h and stuff.
2133
2134 1997-02-08  Roger Beeman  <beeman@cisco.com>
2135
2136         * ftp.c: Include <time.h>
2137
2138 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2139
2140         * url.c (findurl): Would read over buffer limits.
2141
2142 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2143
2144         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
2145
2146 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
2147
2148         * http.c (http_atotm): Initialize tm.is_dst.
2149
2150 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2151
2152         * http.c (gethttp): Don't print the number of retrieved headers.
2153
2154         * main.c (main): New option `--no-clobber', alias for `-nc'.
2155
2156         * url.c: Recognize `https://'.
2157
2158 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2159
2160         * host.c (herrmsg): Don't use h_errno.
2161
2162 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2163
2164         * host.c (accept_domain): Use it.
2165
2166         * main.c (main): New option `--exclude-domains'.
2167
2168         * retr.c (retrieve_url): Use it.
2169         (retrieve_url): Bail out when an URL is redirecting to itself.
2170
2171         * url.c (url_equal): New function.
2172
2173 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2174
2175         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
2176
2177         * http.c (mk_utc_time): New function.
2178         (http_atotm): Use it; handle time zones correctly.
2179
2180 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2181
2182         * http.c: Ditto.
2183
2184         * ftp-basic.c: Use it instead of WRITE.
2185
2186         * connect.c (iwrite): New function.
2187
2188 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2189
2190         * cmpt.c (mktime): New function.
2191
2192         * netrc.c: Include <sys/types.h>.
2193
2194         * main.c (main): Wouldn't recognize --spider.
2195
2196         * retr.c (rate): Use `B', `KB' and `MB'.
2197         (reset_timer,elapsed_time): Moved from utils.c.
2198
2199         * ftp.c (ftp_retrieve_list): Ditto.
2200
2201         * http.c (http_loop): Don't touch the file if opt.dfp.
2202
2203 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2204
2205         * cmpt.c: New file.
2206
2207         * ftp.c (ftp_retrieve_glob): New argument semantics.
2208         (ftp_retrieve_dirs): Use it.
2209         (ftp_loop): Ditto.
2210
2211         * html.c (htmlfindurl): Recognize `'' as the quote char.
2212
2213 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2214
2215         * ftp.c (ftp_loop_internal): Use it.
2216
2217         * utils.c (remove_link): New function.
2218
2219 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
2220
2221         * retr.c (retrieve_url): Require STRICT redirection URL.
2222
2223         * url.c (parseurl): New argument STRICT.
2224
2225         * http.c (hparsestatline): Be a little-bit less strict about
2226         status line format.
2227
2228 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2229
2230         * http.c (gethttp): Use it.
2231
2232         * main.c (main): Don't use '<digit>' as options.
2233
2234         * init.c: New option ignore_length.
2235
2236         * http.c (gethttp): Ditto.
2237         (http_loop): Check for redirection without Location:.
2238         (gethttp): Don't print Length unless RETROKF.
2239
2240         * ftp.c (getftp): Use it.
2241
2242         * url.c (mkalldirs): New function.
2243
2244         * utils.c (mymkdir): Don't check for existing non-directory.
2245
2246         * url.c (mkstruct): Don't create the directory.
2247
2248 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
2249
2250         * init.c (setval): Removed NO_RECURSION checks.
2251
2252 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
2253
2254         * version.c: "Released" 1.4.3-pre2.
2255
2256         * recur.c (recursive_retrieve): Bypass host checking only if URL
2257         is ftp AND parent URL is not ftp.
2258
2259         * ftp-basic.c (ftp_request): Print out Turtle Power.
2260
2261         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
2262         wildcard.
2263         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
2264         not glob.
2265
2266         * http.c (gethttp): Be a little bit smarter about status codes.
2267
2268         * recur.c (recursive_retrieve): Always reset opt.recursive when
2269         dealing with FTP.
2270
2271 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
2272
2273         * retr.c (retrieve_url): New variable location_changed; use it for
2274         tests instead of mynewloc.
2275         (retrieve_url): Allow heuristic adding of html.
2276
2277         * url.c (url_filename): Don't use the `%' in Windows file names.
2278
2279         * http.c (http_loop): Always time-stamp the local file.
2280
2281         * http.c (http_loop): Ditto.
2282
2283         * ftp.c (ftp_retrieve_list): Use it.
2284
2285         * utils.c (my_touch): New function.
2286
2287         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
2288         instead of #ifndef NeXT.
2289
2290         * utils.c (strptime): New version, by Ulrich Drepper.
2291
2292 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
2293
2294         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
2295         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
2296         (http_loop): Would remove ACCEPTRANGES.
2297
2298         * ftp.c (getftp): Call ftp_list with NULL.
2299
2300 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
2301
2302         * html.c (ftp_index): Don't print minutes and seconds if we don't
2303         know them; beautify the output.
2304
2305         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
2306
2307 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
2308
2309         * utils.c (strptime): New function.
2310         (strptime): Don't use get_alt_number.
2311         (strptime): Don't use locale.
2312         (match_string): Made it a function.
2313
2314 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
2315
2316         * http.c (http_atotm): New function.
2317         (http_loop): Use it.
2318
2319         * atotm.c: Removed from the distribution.
2320
2321         * http.c (base64_encode_line): Rewrite.
2322
2323 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
2324
2325         * ftp.c (getftp): Use ftp_expected_bytes; print size.
2326
2327         * ftp-basic.c (ftp_response): Use ftp_last_respline.
2328         (ftp_expected_bytes): New function.
2329
2330         * ftp.c (getftp): Print the unauthoritative file length.
2331
2332         * ftp-ls.c: Renamed from ftp-unix.c.
2333         (ftp_parse_ls): Moved from ftp.c.
2334         (ftp_parse_unix_ls): Recognize seconds in time spec.
2335         (ftp_parse_unix_ls): Recognize year-less dates of the previous
2336         year.
2337
2338 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
2339
2340         * ftp-basic.c: Don't declare errno if #defined.
2341
2342         * host.c (ftp_getaddress): Check for sysinfo legally.
2343
2344 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
2345
2346         * connect.c (iread): Use READ.
2347
2348 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
2349
2350         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
2351         schemes.
2352
2353 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2354
2355         * host.c (ftp_getaddress): Allow `.' in hostname.
2356
2357 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
2358
2359         * wget.h: READ and WRITE macros for use instead of read and write
2360         on sockets, grep READ *.c, grep WRITE *.c
2361
2362         * wsstartup.c: new file - startup for winsock
2363
2364         * wsstartup.h: new file
2365
2366         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
2367
2368         * configure.bat: Configure utility for MSVC
2369
2370         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
2371
2372 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2373
2374         * version.c: Released 1.4.3-pre.
2375
2376         * utils.c (prnum): Accept long.
2377         (legible): Use prnum().
2378
2379         * connect.c (make_connection): Accept port as short.
2380         (bindport): Ditto.
2381
2382         * http.c (gethttp): Use search_netrc.
2383
2384 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
2385
2386         * ftp.c (getftp): Use search_netrc.
2387
2388         * netrc.c (free_netrc): New function.
2389
2390         * init.c (home_dir): New function.
2391
2392         * url.c (convert_links): Allow REL2ABS changes.
2393
2394 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
2395
2396         * netrc.c: New file.
2397         (parse_netrc, maybe_add_to_list): New functions.
2398
2399 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
2400
2401         * retr.c (retrieve_url): Reset opt.recursion before calling
2402         ftp_loop if it is reached through newloc.
2403
2404         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
2405         error; don't use "Syntax error", since we don't know if it is
2406         really a syntax error.
2407
2408 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
2409
2410         * utils.c (acceptable): Extract the filename part of the path.
2411
2412         * recur.c (recursive_retrieve): Call acceptable() with the right
2413         argument; would bug out on wildcards.
2414
2415         * init.c (parse_line): Likewise.
2416
2417         * html.c (htmlfindurl): Cast to char * when calling stuff.
2418
2419 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2420
2421         * ftp.c (getftp): Use ftp_pasv.
2422
2423         * ftp-basic.c (ftp_request): Accept NULL value.
2424         (ftp_pasv): New function.
2425
2426         * options.h (struct options): Add passive FTP option.
2427
2428 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2429
2430         * url.c (parseurl): Debug output.
2431
2432         * utils.c (path_simplify): New one, adapted from bash's
2433         canonicalize_pathname().
2434
2435 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
2436
2437         * ftp.c (getftp): Don't discard the buffer.
2438
2439         * retr.c (get_contents): New parameter nobuf.
2440
2441 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2442
2443         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
2444
2445         * init.c (setval): Strip the trailing slashes on CVECDIR.
2446
2447 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2448
2449         * init.c: Make excludes and includes under CVECDIR instead of
2450         CVEC.
2451
2452 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2453
2454         * url.c (get_urls_html): Skip "http:".
2455
2456 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2457
2458         * utils.c (strcasecmp): From glibc.
2459         (strncasecmp): Also.
2460         (strstr): Also.
2461
2462         * url.c: Added javascript: to the list of URLs prefixes.
2463
2464 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
2465
2466         * recur.c (retrieve_robots): Print the warning message only if
2467         verbose.
2468
2469 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2470
2471         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
2472
2473 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
2474
2475         * systhings.h: New file.
2476
2477         * ../configure.in: Check for utime.h
2478
2479         * ftp.c: Check whether we have unistd.h.
2480
2481 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
2482
2483         * recur.c (recursive_retrieve): Send the canonical URL as referer.
2484         (recursive_retrieve): Call get_urls_html with the canonical URL.
2485
2486 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2487
2488         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
2489         ansi2knr support for compilers which don't support ANSI style
2490         function prototypes and signatures.
2491
2492         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
2493
2494 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
2495
2496         * url.c: Use it; Recognize paths ending with "." and ".." as
2497         directories.
2498         (url_filename): Append .n whenever file exists and could be a
2499         directory.
2500
2501         * url.h (ISDDOT): New macro.
2502
2503         * init.c (parse_line): Use unsigned char.
2504
2505         * url.c (get_urls_html): Cast to unsigned char * when calling
2506         htmlfindurl.
2507
2508         * html.c (htmlfindurl): Use unsigned char.
2509
2510         * version.c: Changed version to 1.4.3.
2511
2512 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
2513
2514         * version.c: Released 1.4.2.
2515
2516         * ftp.c (getftp): Simplified assertion.
2517         (ftp_loop_internal): Remove symlink before downloading.
2518         (ftp_retrieve_list): Unlink the symlink name before attempting to
2519         create a symlink!
2520
2521         * options.h (struct options): Renamed print_server_response to
2522         server_response.
2523
2524         * ftp.c (rel_constr): Removed.
2525         (ftp_retrieve_list): Don't use it.
2526         (ftp_retrieve_list): Use opt.retr_symlinks.
2527
2528 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2529
2530         * main.c (main): New option retr_symlinks.
2531
2532         * url.c (convert_links): Print verbose message.
2533
2534 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2535
2536         * http.c (http_loop): Reset newloc in the beginning of function;
2537         would cause FMR in retrieve_url.
2538
2539 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
2540
2541         * recur.c (convert_all_links): Find the URL of each HTML document,
2542         and feed it to get_urls_html; would bug out.
2543         (convert_all_links): Check for l2 instead of dl; removed dl.
2544
2545         * url.c (convert_links): Don't refer to freed newname.
2546
2547         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
2548
2549         * main.c (main): Print the OS_TYPE in the debug output, too.
2550
2551         * recur.c (recursive_retrieve): Check for opt.delete_after.
2552
2553         * main.c (main): New option delete-after.
2554
2555         * init.c (setval): Cleaned up.
2556
2557 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
2558
2559         * Makefile.in (wget): Make `wget' the default target.
2560
2561         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
2562         loop.
2563         (ftp_retrieve_list): Warn about non-matching sizes.
2564
2565         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
2566
2567         * init.c (setnum): Renamed from setnuminf; New argument flags.
2568         (setval): Use it.
2569
2570         * main.c (main): Sorted the options.
2571         (main): New option --wait.
2572
2573 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
2574
2575         * html.c (htmlfindurl): Reset s->in_quote after getting out of
2576         quotes.
2577
2578 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2579
2580         * version.c: Changed version to 1.4.2.
2581
2582 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2583
2584         * version.c: Released 1.4.1.
2585
2586         * html.c (html_quote_string): New function.
2587         (ftp_index): Use it.
2588         (htmlfindurl): A more gentle ending debug message.
2589
2590         * ftp.c (ftp_loop): Check for opt.htmlify.
2591
2592         * init.c: New command htmlify.
2593
2594         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
2595         strings.
2596         (ftp_loop): Print size of index.html.
2597
2598         * init.c (setval): Implement "styles".
2599
2600         * main.c (main): New option dotstyle.
2601
2602 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
2603
2604         * ftp.c (getftp): Close the master socket in case of errors, after
2605         bindport().
2606
2607         * connect.c (bindport): Initialize msock to -1.
2608
2609         * ftp.c (getftp): Initialize dtsock to -1.
2610
2611         * connect.c (closeport): Don't close sock if sock == -1.
2612
2613 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
2614
2615         * init.c (setnuminf): Nuked default value -- just leave unchanged.
2616         (setval): Don't send default values.
2617         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
2618
2619         * options.h (struct options): Use long for dot_bytes.
2620
2621         * init.c (setquota): Renamed to setbytes.
2622         (setval): Use setbytes on DOTBYTES.
2623
2624 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
2625
2626         * ftp.c (getftp): Initialize con->dltime.
2627
2628         * recur.c (recursive_retrieve): Use same_host instead of
2629         try_robots; simply load robots_txt whenever the host is changed.
2630         (recursive_retrieve): Free forbidden before calling parse_robots.
2631
2632 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
2633
2634         * retr.c (show_progress): Use them.
2635
2636         * options.h (struct options): New options dot_bytes, dots_on_line
2637         and dot_spacing.
2638
2639 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
2640
2641         * recur.c (recursive_retrieve): Retrieve directories regardless of
2642         acc/rej rules; check for empty u->file.
2643
2644 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
2645
2646         * init.c (setval): Use it.
2647
2648         * utils.c (merge_vecs): New function.
2649
2650         * init.c (setval): Reset the list-type functions when encountering
2651         "".
2652
2653 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
2654
2655         * recur.c (recursive_retrieve): Use base_url instead of this_url
2656         for no_parent.
2657
2658 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
2659
2660         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
2661
2662 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
2663
2664         * utils.c (sepstring): Rewrote; don't use strtok.
2665
2666         * recur.c (recursive_retrieve): Enter assorted this_url to slist
2667         when running the first time.
2668         (retrieve_robots): Warn to ignore errors when robots are loaded.
2669
2670         * utils.c (load_file): Moved from url.c.
2671
2672         * http.c: Made static variables const too in h* functions.
2673
2674         * main.c (main): Renamed --continue-ftp to --continue.
2675
2676         * recur.c (recursive_retrieve): Use it.
2677
2678         * utils.c (frontcmp): New function.
2679
2680         * url.c (accdir): New function.
2681
2682         * html.c (htmlfindurl): Recognize <area href=...>.
2683
2684         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
2685
2686         * init.c (setval): Free the existing opt.excludes and
2687         opt.includes, if available.
2688
2689         * main.c (main): New option -I.
2690
2691 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
2692
2693         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
2694
2695         * version.c: Changed version to 1.4.1.
2696
2697 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
2698
2699         * version.c: Released 1.4.0.
2700
2701 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
2702
2703         * main.c (main): Free com and val after parse_line.
2704         (printhelp): Reorder the listing.
2705
2706         * http.c: More robust header parsing.
2707
2708         * http.c: Allow any number of spaces, or no spaces, precede ':'.
2709         (hskip_lws): New function.
2710         (haccepts_bytes): New function.
2711         (gethttp): Use it.
2712
2713         * init.c (setval): Check header sanity.
2714         (setval): Allow resetting of headers.
2715
2716 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
2717
2718         * http.c (http_loop): Don't use has_wildcards.
2719
2720         * http.c (gethttp): Free all_headers -- would leak.
2721
2722         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
2723         0 -- this fixes a long-standing bug in -rl.
2724
2725 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
2726
2727         * ftp.c: Use -1 as "impossible" value for con->fd.
2728
2729         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
2730
2731         * init.c (parse_line): Use isalpha.
2732
2733         * ftp-unix.c: Use HAVE_UNISTD_H.
2734
2735         * mtch.c (has_wildcards): Don't match \.
2736
2737         * http.c (http_loop): Warn on HTTP wildcard usage.
2738
2739 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
2740
2741         * url.c (url_filename): Do not create numbered suffixes if
2742         opt.noclobber -- would bug out on -nc.
2743
2744 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
2745
2746         * recur.c (parse_robots): Don't chuck out the commands without
2747         arguments (`Disallow:<empty>' didn't work).
2748         (parse_robots): Compare versions lowercase.
2749         (parse_robots): Match on base_version, not version_string!
2750         (parse_robots): Handle comments properly.
2751         (parse_robots): Match versions in a sane way.
2752
2753         * init.c: Print nicer error messages.
2754
2755         * version.c: Changed version to 1.4.0.
2756
2757 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
2758
2759         * version.c: Released 1.4.0-test2.
2760
2761         * init.c (run_wgetrc): Close fp.
2762
2763         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
2764         u->dir.
2765
2766 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
2767
2768         * init.c (setquota): Allow inf as quota specification.
2769
2770 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
2771
2772         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
2773         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
2774
2775         * main.c (main): Check for quota by comparison with downloaded
2776         stuff, not from status.
2777
2778         * connect.c (select_fd): Should compile on HPUX without warnings now.
2779
2780         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
2781         returned RETROK.
2782
2783 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
2784
2785         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
2786         (getftp): Return FTPRETRINT on control connection error.
2787
2788         * html.c (htmlfindurl): Recognize <embed src=...> and
2789         <bgsound src=...>.
2790         (ftp_index): Handle username and password correctly.
2791
2792         * main.c (main): Made `-np' a synonim for --no-parent.
2793
2794 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
2795
2796         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
2797         ftp_retrieve_glob.
2798
2799         * version.c: Changed version to 1.4.0-test2.
2800
2801 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
2802
2803         * version.c: Released 1.4.0-test1.
2804
2805         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
2806         directory.
2807         (convert_links): Removed definition of make_backup.
2808
2809         * http.h: Removed definition of MAX_ERROR_LENGTH.
2810
2811         * host.c (ftp_getaddress): Check for "(none)" domains.
2812
2813         * ftp.c (ftp_retrieve_dirs): Docfix.
2814
2815         * http.c (gethttp): Use ou->referer instead of u->referer.
2816
2817         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
2818         this was known to cause coredumps on Linux.
2819
2820         * html.c (ftp_index): Cast the argument to local_time to time_t *.
2821
2822 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
2823
2824         * connect.c (select_fd): Use exceptfds -- once and for all.
2825
2826         * retr.c (retrieve_from_file): Free filename after
2827         recursive_retrieve.
2828         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
2829         first-time retrieval.
2830         (retrieve_from_file): Return uerr_t; new argument, count.
2831         (retrieve_from_file): Break on QUOTEXC.
2832
2833         * init.c (setquota): Fixed a bug that caused rejection of
2834         non-postfixed values..
2835
2836 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
2837
2838         * version.c: Changed name to wget.
2839
2840         * connect.c (iread): Smarter use of select.
2841         (select_fd): Set errno on timeout.  If not timeout, return 1
2842         instead of 0.
2843
2844 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
2845
2846         * ftp.c (ftp_loop_internal): Don't use con->cmd before
2847         establishing it.
2848
2849 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
2850
2851         * http.c (gethttp): Send correct referer when using proxy.
2852         (gethttp): Use struct urlinfo ou to access the relevant data; send
2853         correct authorization in all cases.
2854
2855         * host.c (same_host): Use skip_uname to skip username and
2856         password.
2857
2858         * url.c (skip_uname): New function.
2859         (parseurl): Use it.
2860
2861         * host.c (same_host): Do not assume HTTP -- same_host should now
2862         be totally foolproof.
2863
2864         * url.c (skip_proto): New function.
2865         (parse_uname): Use it.
2866
2867         * http.c (gethttp): Create local user and passwd from what is
2868         given.
2869
2870         * url.c (parseurl): Check for HTTP username and password too.
2871
2872 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
2873
2874         * config.h.in: Removed #define gethostbyname R...
2875
2876 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
2877
2878         * version.c: Changed version to 1.4.0-test1.
2879
2880 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
2881
2882         * version.c: "Released" 1.4b29.
2883
2884         * recur.c (recursive_retrieve): Check for no_parent.
2885
2886         * init.c (setval): Option update.
2887
2888         * main.c (main): New option no-parent.
2889
2890         * options.h (struct options): New variable no_parent.
2891
2892         * recur.c (recursive_retrieve): Only files are checked for
2893         opt.accepts and opt.rejects.
2894         (recursive_retrieve): Check directories for opt.excludes.
2895         (recursive_retrieve): Make the dir absolute when checking
2896         opt.excludes.
2897
2898         * html.c (htmlfindurl): Recognize <applet code=...> and <script
2899         src=...>
2900
2901 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
2902
2903         * ftp.c (getftp): Do not line-break assert entries at all.
2904         (ftp_retrieve_dirs): docfix.
2905
2906         * connect.c (select_fd): Use fd + 1 as nfds.
2907
2908         * version.c: Changed version to 1.4b29.
2909
2910 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
2911
2912         * version.c: "Released" 1.4b28.
2913
2914         * ftp.c (ftp_loop_internal): Check whether f->size == len and
2915         don't continue the loop if it is.
2916         (ftp_get_listing): Remove list_filename on unsuccesful loop.
2917
2918 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
2919
2920         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
2921         (getftp): Do not use multiline assert.
2922
2923         * http.c (hparsestatline): Use mjr and mnr instead of major and
2924         minor, which don't compile on Ultrix.
2925         (http_loop): Use strcpy() to initialize tmp.
2926
2927         * all: Geturl -> Fetch
2928
2929 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
2930
2931         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
2932         ':'.
2933
2934         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
2935         moving `bufsize &&' to the beginning of each check in for-loops.
2936
2937         * recur.c (parse_robots): Close fp on exit.
2938
2939         * url.c (mymkdir): Check for each directory before creating.
2940
2941 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
2942
2943         * version.c: Changed version to 1.4b28.
2944
2945 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
2946
2947         * version.c: "Released" 1.4b27.
2948
2949         * init.c (parse_line): Use isspace.
2950         (parse_line): Free *com on all errors.
2951
2952         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
2953         (delelement): Use next instead of f->next and prev instead of
2954         f->prev.
2955         (delelement): Free the members of the deleted element.
2956
2957         * http.c (http_loop): Do not return RETROK on code != 20x.
2958
2959         * init.c (cleanup): Free opt.user_header.
2960         (cleanup): Free opt.domains.
2961
2962         * url.c (freelists): Moved to cleanup().
2963
2964         * http.c (hparsestatline): Docfix.
2965
2966         * main.c (main): Return with error status on unsuccesful
2967         retrieval.
2968
2969         * init.c (setval): Do not remove listing when mirroring.
2970
2971         * url.c (url_filename): Use opt.fileprefix.
2972
2973         * ftp.c (ftp_get_listing): Use url_filename to get filename for
2974         .listing.
2975
2976         * main.c (main): New option: -rn.
2977
2978 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
2979
2980         * Makefile.in (RM): Added RM = rm -f.
2981
2982         * host.c (clean_hosts): New function.
2983         (free_hlist): Just free the list, no reset.
2984
2985         * version.c: Changed version to 1.4b27.
2986
2987 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
2988
2989         * version.c: "Released" 1.4b26.
2990
2991         * retr.c (retrieve_from_file): If call get_urls_html with
2992         opt.spider to make it silent in spider mode.
2993
2994         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
2995
2996         * url.h (CLEANDUP): New macro.
2997
2998         * http.c (gethttp): Fixed a bug that freed location only when it
2999         was NULL.
3000
3001         * retr.c (retrieve_url): Free url if it will not be stored,
3002         i.e. newloc is NULL.
3003
3004         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
3005         old version would bug out on <a href="x#a"href="y">.
3006
3007         * html.h (state_t): New member in_quote.
3008
3009         * html.c (htmlfindurl): Free s->attr at the beginning of
3010         attr-loop.
3011
3012         * recur.c (recursive_retrieve): Recognize RCLEANUP.
3013         (tried_robots): Make hosts a global variable.
3014         (recursive_retrieve): Free constr after URL host optimization.
3015         (tried_robots): Free urlinfo before exiting.
3016
3017         * utils.c (free_slist): New function.
3018
3019         * recur.c (recursive_retrieve): Use flags to add cleanup
3020         possibility.
3021
3022         * main.c (main): Free filename after recursive_retrieve.
3023
3024         * http.c (gethttp): Store successful responses too.
3025
3026 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
3027
3028         * all: Constified the whole source.  This required some minor
3029         changes in many functions in url.c, possibly introducing bugs -- I
3030         hope not.
3031
3032         * ftp-basic.c: Removed last_respline.
3033
3034         * http.c (gethttp): Free type.
3035
3036         * host.c (same_host): Free real1 and real2.
3037
3038         * main.c (main): New option --spider.
3039
3040         * retr.c (get_contents): Don't reset errno.
3041
3042         * main.c (main): Sorted the options.
3043
3044         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
3045         uninitialized by select().
3046
3047         * http.c (http_loop): Print the time when the connection is
3048         closed.
3049         (gethttp): Debug-print the HTTP request.
3050
3051 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
3052
3053         * connect.c (iread): Do not try reading after timeout.
3054
3055         * main.c (main): Would bug out on -T.
3056
3057         * connect.c (select_fd): Do not use exceptfds.
3058         (iread): Set ETIMEDOUT on select_fd <= 0.
3059
3060         * version.c: Changed version to 1.4b26.
3061
3062 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
3063
3064         * version.c: "Released" 1.4b25.
3065
3066         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
3067         or link name.
3068
3069         * http.c (gethttp): Add errcode to struct hstat.
3070         (http_loop): Use it.
3071
3072         * url.c (no_proxy_match): Simplify using char** for no_proxy.
3073
3074         * options.h (struct options): Make opt.no_proxy a vector.
3075
3076         * utils.c (sepstring): Use !*s instead of !strlen(s).
3077
3078         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
3079         (getperms): Use ISODIGIT instead of isdigit.
3080
3081         * ftp.c (getftp): Print time.
3082
3083         * main.c (main): Use legible output of downloaded quantity.
3084
3085         * ftp.c (getftp): Use elapsed_time().
3086         (ftp_loop_internal): Use rate().
3087
3088         * http.c (http_loop): Add download ratio output; Use rate().
3089
3090         * utils.c (rate): New function.
3091
3092 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
3093
3094         * http.c (http_loop): Use timer.
3095
3096         * ftp.c: Split to ftp-basic.c and ftp.c
3097
3098         * utils.c (reset_timer): New function.
3099         (elapsed_time): New function.
3100
3101         * retr.c (show_progress): Make bytes_in_line and offs long; should
3102         work on 16-bit machines.
3103
3104 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
3105
3106         * url.c (in_acclist): New argument backward.
3107
3108         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
3109         a file should be retrieved according to suffix.
3110         (ftp_get_listing): Check the return value of unlink; Do not call
3111         ftp_retrieve_dirs if depth reached maxreclevel.
3112         (ftp_retrieve_dirs): Check whether the directory is in
3113         exclude-list.
3114
3115         * main.c (main): Print the version number at the beginning of
3116         DEBUG output.
3117         (main): Use strrchr when creating exec_name.
3118
3119         * ftp.c (ftp_retrieve_glob): Do not close control connection.
3120
3121         * version.c: Changed version to 1.4b25.
3122
3123 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
3124
3125         * version.c: "Released" 1.4b24.
3126
3127         * Makefile.in: Rewrite.
3128
3129         * ftp.c (ftp_loop_internal): Likewise.
3130
3131         * retr.c (time_str): Check for failed time().
3132
3133         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
3134         HTML3.0.
3135
3136         * retr.c (time_str): Return time_t *.
3137
3138         * connect.c (bindport): Close msock on unsuccesful bind.
3139         (bindport): The same for getsockname and listen.
3140
3141         * retr.c (retrieve_url): Allow any number of retries on
3142         proxy.
3143
3144         * http.c (gethttp): Do not treat errno == 0 as timeout.
3145         (http_loop): Likewise.
3146         (http_loop): Cosmetic changes.
3147
3148         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
3149
3150         * retr.c (get_contents): Reset errno.
3151
3152         * ftp.c (getftp): Minor fixes.
3153
3154 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3155
3156         * http.c: Do not use backups.
3157
3158         * geturl.1 (WARNING): Warn that man-page could be obsolete.
3159
3160         * getopt.c (getopt_long): Moved to getopt.c
3161
3162         * geturl.texi: Enhanced.
3163
3164         * main.c (main): Use it.
3165
3166         * recur.c (convert_all_links): New function.
3167
3168         * utils.c (add_slist): New argument flags.
3169
3170         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
3171         (parse_robots): Do not chuck out empty value fields.
3172         (parse_robots): Make yourself welcome on empty Disallow.
3173
3174         * version.c: Changed version to 1.4b24.
3175
3176 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3177
3178         * version.c: "Released" 1.4b23.
3179
3180         * ftp.c (ftp_loop_internal): Get the time after getftp.
3181
3182         * Makefile.in (install.info): New target.
3183         (install): Use it.
3184
3185         * http.c (http_loop): Fix output when doing -O.
3186
3187 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3188
3189         * geturl.texi: New file.
3190
3191         * main.c (main): Do not print the warnings and download summary if
3192         opt.quiet is set.
3193
3194         * version.c: Changed version to 1.4b23.
3195
3196 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3197
3198         * "Released" 1.4b22.
3199
3200         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
3201         to avoid redefinition warnings.
3202
3203         * host.c (store_hostaddress): Use memcpy() to copy the address
3204         returned by inet_addr.
3205
3206         * version.c: Changed version to 1.4b22.
3207
3208 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
3209
3210         * version.c: "Released" 1.4b21.
3211
3212         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
3213
3214         * ftp.c (ftp_port): Use conaddr.
3215         (getftp): Print the file length.
3216         (ftp_retrieve_list): Check the stamps of plain files only.
3217
3218         * connect.c (closeport): Do not call shutdown().
3219         (conaddr): New function.
3220
3221         * html.c (ftp_index): Made it dfp-aware.
3222
3223         * init.c (cleanup): New name of freemem. Close opt.dfp.
3224
3225         * ftp.c (getftp): Use opt.dfp if it is set.
3226
3227         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
3228
3229         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
3230         CWDs to be sent with recursive FTP retrievals.
3231
3232 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
3233
3234         * recur.c (parse_robots): Made it more compliant with "official"
3235         specifications.
3236
3237         * http.c: New function.
3238
3239         * ftp-unix.c (ftp_parse_ls): Added better debug output.
3240
3241         * ftp.c (getftp): Print out the LIST in case of
3242         opt.print_server_response.
3243
3244         * version.c: Changed version to 1.4b21.
3245
3246 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
3247
3248         * version.c: "Released" 1.4b20.
3249
3250         * README: Update.
3251
3252         * http.c (gethttp): Preset lengths of various headers instead of
3253         calculating them dynamically.
3254         (gethttp): Check for 206 partial contents.
3255
3256 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
3257
3258         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
3259
3260         * http.c (gethttp): Send the port number in the Host: header.
3261
3262 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
3263
3264         * http.c (gethttp): Send host: header.
3265         (gethttp): Add the possibility of user-defined headers.
3266         (gethttp): Move decision about pragma: no-cache to http_loop,
3267         where it belongs.
3268         (gethttp): Pass a struct instead of enormous argument list.
3269         (http_loop): Use a new, fancier display format.
3270         (ftp_loop): Likewise.
3271
3272         * main.c: (hangup): Turn off buffering of the new log file.
3273
3274         * install-sh: Likewise.
3275
3276         * config.sub: Replace with the one in autoconf-2.10
3277
3278         * geturl.1: Update.
3279
3280         * init.c: New options httpuser and httppasswd.
3281
3282         * http.c: (base64_encode_line): New function.
3283         (gethttp): Send authentication.
3284
3285         * connect.c (make_connection): Use store_hostaddress.
3286
3287 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
3288
3289         * host.c (store_hostaddress): New function.
3290
3291         * NEWS: Update.
3292
3293         * http.c (hgetrange): New function.
3294         (gethttp): Use ranges.
3295
3296         * utils.c (numdigit): Accept long instead of int.
3297
3298         * http.c (http_loop): Add restart capabilities.
3299
3300         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
3301         being used uninitialized.
3302         (ftp_retrieve_list): Similar fix.
3303
3304         * host.c (add_hlist): Fixed a bug that could cause cmp being used
3305         uninitialized.
3306
3307         * url.c (construct_relative): New function.
3308
3309         * recur.c (recursive_retrieve): Use it.
3310
3311         * retr.c (convert_links): New function.
3312
3313 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
3314
3315         * url.c (free_urlpos): New function.
3316
3317         * recur.c (recursive_retrieve): Adapt.
3318
3319         * url.c (get_urls_html): Return a linked list instead of a vector.
3320
3321         * url.c (get_urls_file): Return a linked list instead of a vector.
3322
3323         * geturl.1: Update.
3324
3325         * http.c (gethttp): Implement it.
3326
3327         * init.c (setval): New option: SAVEHEADERS
3328
3329         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
3330         be retrieved. Lack of this test caused bugs when the connection
3331         was lost during listing.
3332
3333         * retr.c (retrieve_url): Fixed a bug that caused
3334         coredumps. *newloc is now reset by default.
3335         (retrieve_url): Lift the twenty-tries limit on proxies.
3336
3337         * version.c: Changed version to 1.4b20.
3338
3339 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
3340
3341         * version.c: "Released" 1.4b19.
3342
3343 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
3344
3345         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
3346         (getftp): Changed prototype to accept ccon *.
3347
3348 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
3349
3350         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
3351         incorrect values to files pointed to by symbolic links.
3352         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
3353
3354 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
3355
3356         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
3357
3358         * main.c (main): New option: --user-agent.
3359
3360         * geturl.1: Ditto.
3361
3362         * init.h: Ditto.
3363
3364         * init.c (setval): Ditto.
3365
3366         * main.c (main): Rename "server-headers" to "server-response".
3367
3368         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
3369         executables in 'ls -F' listings.
3370
3371 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
3372
3373         * url.c (parseurl): Remove realloc() and sprintf().
3374         (str_url): Get rid of sprintf().
3375
3376         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
3377         servers.
3378
3379         * url.h (URL_CLEANSE): Made it else-resistant.
3380         (USE_PROXY): New macro.
3381
3382 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3383
3384         * NEWS: Update.
3385
3386         * version.c: Changed version to 1.4b19.
3387
3388 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3389
3390         * version.c: "Released" 1.4b18.
3391
3392         * url.c: Made it reallocate space exponentially.
3393
3394 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
3395
3396         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
3397         the list of stuff to fetch.
3398
3399 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
3400
3401         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
3402         -Fi.
3403
3404         * html.c (htmlfindurl): Rewrite.
3405
3406         * http.c (gethttp): Use opt.proxy_cache.
3407
3408         * main.c (main): Added --cache option.
3409
3410         * ftp.c (ftp_response): Print server response if opt.print_server
3411         response is set.
3412         (getftp): Print newlines after each request if the server response
3413         is to be printed.
3414         (ftp_response): Copy the last response line to last_respline.
3415
3416         * http.c (gethttp): Add Pragma: nocache for retried
3417         proxy-retrievals.
3418
3419         * ftp.c (getftp): Use it.
3420
3421         * retr.c (buf_discard): New function.
3422
3423         * ftp.c (ftp_response): Use buf_readchar().
3424         (getftp): Flush the control connection buffer before calling
3425         get_contents().
3426
3427         * retr.c (buf_readchar): New function.
3428         (buf_flush): New function.
3429         (get_contents): Use buf_readchar() instead of read(x, x, 1).
3430         (get_contents): Use buf_flush.
3431
3432 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3433
3434         * ftp.c: Incorporate changes to ftp_response.
3435
3436         * ftp.c (ftp_response): Allocate the server response dynamically,
3437         as in read_whole_line and fetch_next_header.
3438
3439         * utils.c (read_whole_line): Fixed a bug that prevented reading
3440         the last line if it is not \n-terminated. Also fixed a possible
3441         memory overflow.
3442
3443         * http.c (fetch_next_header): Return malloc-ed string as large as
3444         needed.
3445         (gethttp): Use new fetch_next_header.
3446
3447 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3448
3449         * http.c (hgetlen): Compute the header length the first time only.
3450         (hgettype): Ditto.
3451         (hgetlocation): Ditto.
3452         (hgetmodified): Ditto.
3453
3454 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3455
3456         * sample.geturlrc: Update.
3457
3458 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3459
3460         * http.c (http_loop): Ditto.
3461
3462         * ftp.c (getftp): Open the output file as binary.
3463
3464         * version.c: Changed version to 1.4b18.
3465
3466 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3467
3468         * version.c: "Released" 1.4b17.
3469
3470         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
3471         instead of failed assertion.
3472
3473 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
3474
3475         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
3476         if a file of that name already exists.
3477
3478 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
3479
3480         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
3481
3482         * config.h.in: Define gethostbyname as Rgethostbyname when using
3483         Socks.
3484
3485         * configure.in: Check for -lresolv if using Socks.
3486
3487         * version.c: Changed version to 1.4b17.
3488
3489 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
3490
3491         * version.c: "Released" 1.4b16.
3492
3493         * http.c (gethttp): More intelligent check for first line of HTTP
3494         response.
3495         (gethttp): Would bug out on time-stamping.
3496
3497         * version.c: Changed version to 1.4b16.
3498
3499 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3500
3501         * version.c: Released 1.4b15.
3502
3503         * http.c (http_loop): Print \n after the loop entry, not before.
3504
3505         * url.c (url_filename): Use ISDOT.
3506
3507         * url.h (ISDOT): New macro.
3508
3509         * recur.c (recursive_retrieve): Change only opt.recursive for
3510         following FTP.
3511
3512 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
3513
3514         * socks/geturl.cgi: Fixed version No.
3515
3516         * socks/download-netscape.html: Ditto.
3517
3518         * socks/download.html: Changed socks.html to download.html.
3519
3520 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3521
3522         * url.c (url_filename): Check for opt.dirstruct instead for
3523         opt.recursive && opt.dirstruct.
3524
3525         * init.c (defaults): Ditto.
3526         (defaults): Reset dirstruct by default.
3527         (setval): Set opt.dirstruct whenever setting recursive.
3528
3529         * init.h: Removed FORCEDIRHIER.
3530
3531         * INSTALL: Added -L to socks-description.
3532
3533         * version.c: Changed version to 1.4b15.
3534
3535 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
3536
3537         * version.c: "Released" 1.4b14.
3538
3539         * geturl.1: Update AUTHOR to include Rosella as contributor.
3540
3541         * NEWS: Update.
3542
3543         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
3544
3545         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
3546         (cal_time): Fix == to eq.
3547
3548         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
3549
3550         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
3551
3552         * Makefile.in: Use @VERSION@.
3553
3554         * configure.in: Check version from version.c.
3555
3556         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
3557
3558         * socks/download.html: Created from download-netscape.html, made
3559         HTML-2.0 compliant.
3560
3561         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
3562         following FTP links from recursions.
3563
3564 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3565
3566         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
3567         absolute directories correctly.
3568
3569         * version.c: Changed version to 1.4b14.
3570
3571 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3572
3573         * version.c: "Released" 1.4b13.
3574
3575         * url.c (make_backup): New function.
3576
3577         * http.c (http_loop): Make a backup copy of the local file (using
3578         rename(2)) before opening it.
3579
3580         * main.c (main): Added --backups.
3581
3582         * host.c (ftp_getaddress): Bail out on failed mycuserid().
3583         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
3584         (ftp_getaddress): Check for empty, null or (null) domain.
3585
3586         * url.c (get_urls_html): If this_url is NULL, the base must have a
3587         protocol.
3588         (parseurl): Use has_proto.
3589
3590         * retr.c (retrieve_url): Warn when proxy is used with more than 20
3591         retries.
3592
3593         * url.c (mkstruct): Create the directory (calling mymkdir()) only
3594         if it is not already there.
3595         (has_proto): New function.
3596         (get_urls_html): Eliminate the remaining call to findurl -- use
3597         has_proto.
3598
3599         * geturl.1: Ditto.
3600
3601         * main.c: Change -X to -x.
3602
3603         * url.c (url_filename): Simplify creation of filename if
3604         prefix_files is set.
3605         (url_filename): Simplify everything. And I do mean *everything*.
3606         (mkstruct): Add dir_prefix before hostname.
3607         (path_simplify): Fixed a bug that caused writing outside the path
3608         string in case of "." and ".." path strings.
3609
3610 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
3611
3612         * init.c: Added --mirror.
3613
3614         * main.c (main): Added -X to force saving of directory hierarchy.
3615
3616         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
3617         (ftp_retrieve_list): Check whether quota is exceeded.
3618
3619         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
3620
3621         * http.c (gethttp): Use referer if present.
3622
3623         * recur.c (recursive_retrieve): Set u->referer before calling
3624         retrieve_url.
3625
3626         * url.c (newurl): Use memset to nullify the struct members.
3627         (freeurl): Free the referer field too.
3628
3629         * url.h: Added referer to urlinfo.
3630
3631         * geturl.1: Updated the manual to document some of the new features.
3632
3633         * utils.c (numdigit): Moved from url.c.
3634
3635         * README: Rewritten.
3636
3637         * config.h.in: Add the support for socks.
3638
3639         * configure.in: Add the support for socks.
3640
3641         * url.c (url_filename): If the dir_prefix is ".", work with just
3642         the file name.
3643         (url_filename): Do not look for .n extensions if timestamping if
3644         turned on.
3645
3646         * retr.c (show_progress): Skip the over-abundant restval data, and
3647         print the rest of it with ',' instead of '.'.
3648
3649 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
3650
3651         * retr.c (show_progress): Changed second arg. to long (as it
3652         should be).
3653         (show_progress): Moved to retr.c.
3654         (get_contents): Moved to retr.c.
3655
3656         * version.c: Change version to 1.4b13.
3657
3658 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
3659
3660         * url.c (in_acclist): Would return after the first suffix.
3661
3662 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
3663
3664         * version.c: "Released" 1.4b12.
3665
3666         * url.c (path_simplify): More kludgifications.
3667         (get_urls_html): Use new parameters for htmlfindurl.
3668
3669         * html.c: Removed memorizing "parser states", since the new
3670         organization does not require them.
3671
3672         * init.c (run_geturlrc): Use read_whole_line.
3673
3674         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
3675
3676         * recur.c (parse_robots): Use read_whole_line.
3677
3678         * utils.c (read_whole_line): New function.
3679
3680         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
3681
3682         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
3683         tested on OSF and Ultrix.
3684         (add_hlist): New function.
3685         (free_hlist): New function.
3686         (search_host): New function.
3687         (search_address): New function.
3688         (realhost): Use search_host, search_address and add_hlist.
3689         (same_host): Replaced realloc() with strdupdelim(), made
3690         case-insensitive, fixed a memory leak.
3691
3692         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
3693         tm_min, like intended.
3694
3695         * version.c: Change user agent information to
3696         Geturl/version.
3697
3698 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
3699
3700         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
3701
3702         * url.c (acceptable): Always accept directories.
3703
3704         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
3705         servers by stripping trailing @ from symlinks and trailing / from
3706         directories.
3707
3708         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
3709
3710         * url.c (skip_url): Use toupper instead of UCASE.
3711
3712         * host.c (sufmatch): Made it case-insensitive.
3713
3714         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
3715         (match_backwards): New function, instead of
3716         match_backwards_or_pattern.
3717
3718         * recur.c (recursive_retrieve): Increased performance by
3719         introducing inl, which reduces number of calls to in_slist to only
3720         one.
3721
3722         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
3723         routine to use.
3724
3725         * main.c (printhelp): Removed the warranty stuff.
3726
3727 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
3728
3729         * url.c (add_slist): Simplify.
3730         (match_backwards_or_pattern): New function.
3731         (in_acclist): Use match_backwards_or_pattern.
3732         (matches): Remove.
3733
3734 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
3735
3736         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
3737         recursive.
3738
3739         * html.c (ftp_index): Fixed to work. Beautified the output.
3740
3741         * ftp.c (ftp_retrieve_glob): Another argument to control whether
3742         globbing is to be used.
3743         (ftp_retrieve_list): Compare the time-stamps of local and remote
3744         files to determine whether to download.
3745
3746 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
3747
3748         * ftp.c (rel_constr): New function.
3749
3750         * retr.c (retrieve_from_file): Check for text/html before
3751         retrieving recursively.
3752
3753         * main.c (main): Check whether the file is HTML before going into
3754         recursive HTML retrieving.
3755
3756         * ftp.c (ftp_retrieve_list): Manage directories.
3757         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
3758         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
3759         initialized, causing bugchecks in getftp to fail.
3760
3761         * configure.in: Check for symlink.
3762
3763         * ftp.c (ftp_retrieve_list): Added support for symlinks.
3764
3765         * version.c: "Released" 1.4b10.
3766
3767         * atotm.c (atotm): Redeclared as time_t.
3768
3769         * init.c: New variable "timestamping".
3770
3771         * main.c (main): New option 'N'.
3772
3773         * http.c (hgetlocation): Case-insensitive match.
3774         (hgetmodified): New function.
3775         (http_loop): Implement time-stamping.
3776
3777 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
3778
3779         * version.c: Changed version to 1.4b10
3780
3781         * atotm.c: New file, from phttpd.
3782
3783         * options.h (struct options): New parameter timestamping.
3784
3785         * version.c: 1.4b9 "released".
3786
3787         * recur.c (recursive_retrieve): Used linked list (ulist) for
3788         faster storing of URLs.
3789
3790         * url.c (get_urls_html): Removed the old kludge with comparing the
3791         outputs of htmlfindurl and findurl.
3792         (get_urls_html): Added better protocol support here.
3793         (create_hash): Removed, as well as add_hash and in_hash.
3794         (addslist): New function.
3795         (in_slist): ditto
3796
3797         * version.c: Released 1.4b8, changed version to b9.
3798
3799 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3800
3801         * ftp.c (freefileinfo): New function.
3802         (delelement): New function.
3803
3804         * everywhere: GPL!
3805
3806         * ftp.c (ftp_loop): Use ccon.
3807         (ftp_retrieve_glob): Likewise.
3808
3809         * ftp.h: Define ccon, to define status of control connection.
3810
3811         * ftp.c (ftp_get_listing): New function.
3812         (ftp_retrieve_more): New function.
3813         (ftp_retrieve_glob): New function.
3814
3815 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
3816
3817         * configure.in: Removed the search for cuserid().
3818
3819         * init.c (getmode): Renamed to getperms.
3820
3821 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
3822
3823         * version.c: New version.
3824
3825         * main.c (hangup): New function, that handles hangup. Hangup
3826         signal now causes geturl to stop writing on stdout, and to write
3827         to a log file.
3828
3829         * ftp.c (getftp): "Released" 1.4b7.
3830
3831         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
3832         (ftp_index): Use fileinfo/urlinfo.
3833
3834         * ftp-unix.c (ftp_parse_ls): New function.
3835         (symperms): New function.
3836
3837         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
3838
3839         * retr.c (retrieve_url): Added FTP support.
3840
3841 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3842
3843         * geturl.h: Removed NOTFTP2HTML enum.
3844         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
3845
3846         * ftp.c (getftp): Resynched with urlinfo.
3847         (getftp): Removed HMTL-ization of index.html from getftp.
3848
3849         * version.c: 1.4b6 "released".
3850
3851         * options.h (options): New struct, to keep options in.
3852
3853         * http.c (http_loop,gethttp): Synched with proxy.
3854
3855         * retr.c (retrieve_url): Implemented proxy retrieval.
3856
3857         * main.c (main): Use retrieve_from_file.
3858
3859 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
3860
3861         * retr.c (retrieve_from_file): New function.
3862
3863         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
3864         can be found in u->proto.
3865
3866         * ftp.c (ftp_response): Fixed to accept multi-line responses as
3867         per RFC 959.
3868
3869         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
3870
3871         * url.c (mymkdir): Removed the file of the same name, if one
3872         exists.
3873         (isfile): New function.
3874         (mkstruct): Fixed the '/' glitches.
3875         (path_simplify): Hacked to treat something/.. correctly.
3876
3877 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3878
3879         * http.c (gethttp): Close the socket after error in headers.
3880         (http_loop): HEOF no longer a fatal header.
3881
3882         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
3883         simplifies the syntax of calling retrieve_url.
3884
3885         * recr.c (recursive_retrieve): Modified to use get_urls_html.
3886
3887         * url.c (get_urls_file): New function.
3888         (get_urls_html): New function.
3889
3890         * recr.c (recursive_retrieve): Patched up to conform to the
3891         standards.
3892
3893         * http.c (gethttp): Synched with the rest...
3894         (gethttp): Treat only CONREFUSED specially, with connection
3895         errors.
3896
3897         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
3898
3899 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
3900
3901         * http.c (http_loop): New function.
3902
3903         * loop.c: Removed *lots* of stuff from retrieve_url.
3904
3905         * url.c (parseurl): Changed to work with urlinfo. Integrated
3906         username finding and path parsing.
3907         (newurl): New function.
3908         (freeurl): New function.
3909         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
3910         (url_filename): Likewise.
3911         (path_simplify): Accept relative paths too.
3912         (opt_url): Made urlinfo-compliant, removed bogosities.
3913         (path_simplify): Expanded to accept relative paths.
3914         (str_url): A replacement for hide_url
3915         (decode_string): Fixed a bug that caused malfunctioning when
3916         encountering an illegal %.. combination.
3917         (opt_url): Removed the argument. Dot-optimizations are now default.
3918
3919         * nmalloc.c (strdupdelim): New function.
3920
3921         * url.h: Added the urlinfo structure
3922
3923 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
3924
3925         * url.c (hide_url): Thrown out the protocol assertion. Do not
3926         change the URL if the protocol if not recognized.
3927         (findurl): Put continue instead of break.
3928
3929 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
3930
3931         * sample.geturlrc: Changed the defaults to be commented out and
3932         harmless (previous defaults caused pains if copied to
3933         ~/.geturlrc).
3934
3935         * http.c (gethttp): Print the HTTP request in debug mode.
3936
3937         * connect.c (iread): Added EINTR check loop to select-ing
3938         too. EINTR is now correctly handled with select().
3939
3940         * TODO: new file
3941
3942 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
3943
3944         * host.c (same_host): Made the function a little bit more
3945         intelligent regarding diversified URL syntaxes.
3946
3947         * url.c (skip_url): Spaces are now skipped after URL:
3948
3949         * Released 1.3.1 with the patch to prevent crashing when sending
3950         NULL to robot* functions and the patch to compile "out of the box"
3951         on AIX.
3952
3953         * recr.c (recursive_retrieve): Added checking whether this_url is
3954         NULL when calling the robot functions.
3955
3956         * ChangeLog: New file.