sjero.net Git - wget/blob - src/ChangeLog

   1 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
   2
   3         * main.c (print_help): Use multiple fputs instead of a single ugly
   4         printf().
   5         (main): Consistently assign numbers >128 to options without a
   6         corresponding character.
   7
   8 2001-03-09  Philipp Thomas  <pthomas@suse.de>
   9
  10         * safe-ctype.h: New file. Locale independent ctype.h
  11         replacement taken from libiberty.
  12         safe-ctype.c: New file. Tables for above.
  13         Makefile.in: Add safe-ctype$o to OBJS.
  14         Add dependencies for safe-ctype$o.
  15         cmpt.c: Remove include of ctype.h. Use ISSPACE instead
  16         of isspace.
  17         ftp-basic.c: Don't include ctype.h.
  18         ftp-ls.c: Likewise.
  19         ftp.c: Likewise.
  20         headers.c: Likewise.
  21         host.c: Likewise.
  22         html-parse.c: Likewise.
  23         html-url.c: Likewise.
  24         http.c: Likewise.
  25         init.c: Likewise.
  26         main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
  27         netrc.c: Likewise.
  28         recur.c: Likewise.
  29         retr.c: Likewise.
  30         snprintf.c: Replace ctype.h with safe-ctype.h. Use
  31         ISDIGIT instead of isdigit.
  32         sysdep.h: Remove defines of ctype macros as they aren't
  33         needed for safe-ctype-h.
  34         url.c: Don't include ctype.h.
  35         utils.c: Likewise.
  36         wget.h: Include safe-ctype.h.
  37
  38 2001-03-27  Dan Harkless  <wget@harkless.org>
  39
  40         * Makefile.in: Moved top_builddir out of "User configuration
  41         section" of top Makefile and analogous spot in this one.
  42
  43 2001-03-17  Dan Harkless  <wget@harkless.org>
  44
  45         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
  46         Define top_builddir.  Link wget with libtool so the user doesn't
  47         have to supply a bunch of custom environment variables to
  48         correctly link with the OpenSSL shared libraries.
  49
  50 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
  51
  52         * http.c (gethttp): skip :port in host header if it is the
  53         DEFAULT_HTTPS_PORT when using SSL.
  54
  55         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
  56         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
  57         rest of the code.
  58         * url.h: Ditto
  59
  60 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
  61
  62         * retr.c (show_progress): Correctly calculate the number of bytes
  63         in the first line of the download that have been actually
  64         downloaded in this run.
  65
  66 2001-02-23  Dan Harkless  <wget@harkless.org>
  67
  68         * main.c (print_help): --help documentation for -N said it would
  69         re-download files if they had the _same_ timestamp on server.
  70         (print_help): -nr belongs in "FTP options" section of --help
  71         output, not "Recursive retrieval" section.  Alphabetized FTP
  72         options by long option name.
  73
  74 2001-02-16  Dan Harkless  <wget@harkless.org>
  75
  76         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
  77         that "httpsproxy" had been inserted into commands[] out of
  78         alphabetical order, causing "BUG: unknown command `httpuser'".
  79
  80 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
  81
  82         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
  83         listing without correct permissons).
  84
  85         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
  86         FTP server.
  87
  88         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
  89         shall be donwloaded only when it's newer than the local copy or
  90         when it has the same timeestamp but its size is different. ST_VMS
  91         and ST_MACOS as special cases that lie about file size.
  92
  93         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
  94
  95         * Makefile.in: Removed dependency on ftpparse library due to unclear
  96         copyright issues and absence of any feedback to our queries.
  97
  98         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
  99         copyright issues and absence of any feedback to our queries.
 100         (ftp_parse_ls): Added a warning message when remote server system
 101         does not seem to be suported by wget.
 102         (ftp_parse_vms_ls): New function for parsing VMS ftp
 103         server listing output.
 104         (clean_line): New function responsible for removing
 105         end-of-line characters from FTP listing texts.
 106
 107         * ftp.c (getftp): Global variables pwd and host_type are now
 108         member of the ccon structure under names ccon.id and ccon.rs.
 109
 110         * ftp.h (struct ccon): Added formed global variables from ftp.c,
 111         enum stype rs (remote system identification) and char *id (initial
 112         working directory), as suggested by Hrvoje.
 113
 114         * url.c (parse_uname): Added support for passwords containing '@'
 115         characters.
 116         (skip_uname): Ditto.
 117
 118 >>>>>>> 1.123
 119 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 120
 121         * ftp.c (ftp_loop): Reset con.
 122
 123 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 124
 125         * url.c (parse_uname): Added support for passwords containing '@'
 126         characters.
 127         (skip_uname): Ditto.
 128
 129 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
 130
 131         * url.c (parseurl): Debug-print u->ftp_type.
 132
 133 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 134
 135         * ftp.c (ftp_loop_internal): Disable padding.
 136         (getftp): Ditto.
 137
 138         * http.c (http_loop): Disable padding.
 139
 140         * retr.c (show_progress): Use it to enable padding.
 141
 142         * retr.c (rate): Optional parameter PAD for padding the rate.
 143
 144 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 145
 146         * retr.c (show_progress): Make sure that the last output line
 147         includes progress.
 148
 149 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
 150
 151         * retr.c (show_progress): Print the download rate along with the
 152         percentages.
 153         Along with Anders Thorsby <anders@thorsby.dk>.
 154
 155 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
 156
 157         * ftp.h: Rename enums `command' to `wget_ftp_command' and
 158         `fstatus' to `wget_ftp_status' because old names clash with Tru64
 159         net/if.h.
 160
 161 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
 162
 163         * gen_sslfunc.c: verify_callback is now static
 164
 165         * gen_sslfunc.c (init_ssl): load certificate if specified
 166
 167         * gen_sslfunc.c (ssl_printerr): new function
 168
 169         * init.c: added new --sslcertfile and --sslcertkey switches
 170
 171         * main.c: ditto
 172
 173         * options.h: ditto
 174
 175         * http.c (gethttp): abort when init_ssl fails
 176
 177 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
 178
 179         * mswindows.h: Include <malloc.h>; it's needed for alloca().
 180
 181 2001-01-10  Dan Harkless  <wget@harkless.org>
 182
 183         * url.c (str_url): Clarified this function's comment header after
 184         Hrvoje answered my question on the list as to when hide != 1.
 185         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
 186
 187 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 188
 189         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
 190         Drazen Kacar <dave@arsdigita.com>.
 191         (conaddr): Ditto.
 192
 193 2001-01-09  Dan Harkless  <wget@harkless.org>
 194
 195         * html-url.c: A bunch of fixup of `--page-requisites'-related
 196         comments to reflect Hrvoje's changes to my code when transplanting
 197         it into this new file, to fix spelling mistakes, to clarify, etc.
 198
 199         * url.c (write_backup_file): Clarified a comment.
 200         (str_url): Henrik van Ginhoven pointed out on the list that we
 201         shouldn't give away the number of characters in the password by
 202         replacing each character with a 'x'.  Use "<password>" instead.
 203
 204         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
 205         directories didn't work if logging in put you in a directory other
 206         than "/" is fixed now.  Removed the comment here warning of the bug.
 207
 208         * main.c (print_help): --continue's description was misleading.
 209         We don't "restart", we "resume".  Also, better to say
 210         "partially-downloaded file" rather than just "existing file".
 211
 212 2001-01-06  Dan Harkless  <wget@harkless.org>
 213
 214         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
 215         the best way to go about my aim.  Removed them in favor of:
 216
 217         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
 218
 219 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 220
 221         * url.c (replace_attr): New function, to be used by both
 222         TO_COMPLETE and TO_RELATIVE case in convert_links.
 223         (find_fragment): New function for finding URL fragments.
 224         (replace_attr): Better handle the case where the original string
 225         is not quoted.  Use find_fragment.
 226         (convert_links): Use replace_attr().
 227
 228 2000-12-31  Dan Harkless  <wget@harkless.org>
 229
 230         * ChangeLog: Since this flat file doesn't have multiple branches,
 231         looking at the dates would make you think that things went into
 232         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
 233         in 1.6 branch.]" where appropriate to clarify.
 234
 235 2000-12-30  Dan Harkless  <wget@harkless.org>
 236
 237         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
 238         patch to deal with h_errno not being defined in netdb.h under Cygwin.
 239
 240 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
 241
 242         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
 243
 244 2000-12-17  Igor Khristophorov  <igor@atdot.org>
 245
 246         * http.c (check_end): Fix test for '+' or '-'.
 247
 248 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 249
 250         * url.c (parseurl): Rename inner loop var from i to ind to avoid
 251         clash with the function top-level-declared variable i.
 252         (str_url): Likewise, rename inner-loop i to j.
 253
 254         * recur.c (parse_robots): Don't declare LEN at top of function.
 255         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
 256         global variable.
 257
 258         * main.c (main): Change erroneous use of bitwise and to logical.
 259
 260         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
 261         the stack because it will be copied to closure.
 262
 263         Thanks to Csaba Raduly's run of PC-LINT over the sources.
 264
 265 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 266
 267         * http.c (basic_authentication_encode): Use xmalloc(), not
 268         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
 269         sources.
 270
 271 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
 272
 273         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
 274         compilation.
 275
 276 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 277
 278         * mswindows.c: Include <errno.h>.
 279
 280         * gen_sslfunc.c: Include <errno.h>.
 281
 282         * ftp-basic.c: Don't attempt to declare errno or h_errno because
 283         they're not used.
 284
 285         * main.c: Include <errno.h> because errno is used.
 286
 287         * ftp.c: Ditto.
 288
 289         * http.c: Include <netdb.h> for h_errno.
 290
 291 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 292
 293         * html-parse.c (advance_declaration): MSVC assert() chokes on
 294         '\"'.  Use '"' instead.
 295
 296 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 297
 298         * utils.c (xfree_real): Removed.
 299         (xfree_debug): Just call free().
 300
 301         * wget.h (xfree): Make it an alias for free.
 302
 303 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 304
 305         * http.c (http_loop): Furthermore, touch output_document only if
 306         it is known to be an existing regular file.
 307
 308 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
 309
 310         * ftp.c (ftp_retrieve_list): Ditto.
 311
 312         * http.c (http_loop): Touch output_document if that is used for
 313         output.
 314
 315 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 316
 317         * http.c: Include gen_sslfunc.h after including Wget's headers.
 318         (persistent_available_p): Needed coma before `int ssl'.
 319
 320 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 321
 322         * ftp.c (ftp_loop_internal): Ditto.
 323
 324         * http.c (http_loop): Use it.
 325
 326         * retr.c (sleep_between_retrievals): New function that handles the
 327         logic of opt.wait and opt.waitretry.
 328
 329 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 330
 331         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
 332         rbuf_read_bufferful when the buffer is depleted.
 333
 334         * rbuf.c (rbuf_read_bufferful): New function.
 335
 336 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 337
 338         * gen_sslfunc.h: Use ansi2knr style function declarations.
 339
 340         * gen_sslfunc.c: Reformat according to the GNU coding standards.
 341         More should be done.
 342
 343         * http.c (persistent_available_p): Place the cheap SSL test nearer
 344         the top of the function.
 345         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
 346
 347 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 348
 349         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
 350         char.
 351
 352 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
 353
 354         * Makefile.in: added gen_sslfunc object
 355         * config.h.in: added HAVE_SSL define
 356         * connect.c: changed select_fd from static int to int
 357         * connect.h: ditto
 358         * gen_sslfunc.h: New file
 359         * gen_sslfunc.c: ditto
 360         * http.c: added HTTPS fuctionality
 361         * retrc.c: ditto
 362         * url.c: ditto
 363         * init.c: added opt.httpsproxy
 364         * options.h: ditto
 365         * rbuf.h: added alternate rbuf struct
 366         * wget.h: added CONSSLERR
 367         * rbuf.c: ditto
 368
 369         * http.c: Added HTTPS fuctionality.
 370
 371         * retrc.c: Ditto.
 372
 373         * url.c: Ditto.
 374
 375         * init.c: Added opt.httpsproxy.
 376
 377         * options.h: Ditto.
 378
 379         * rbuf.h: Added alternate rbuf struct.
 380
 381         * wget.h: Added CONSSLERR.
 382
 383         * rbuf.c: Ditto.
 384
 385 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 386
 387         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
 388         "ignore_perms" to ignore file and directory permissions for
 389         Windows NT FTP server listings.
 390         (ftp_parse_winnt_ls): New function.
 391         (ftp_parse_ls): Parses UNIX and Windows NT listings
 392         separately. Simple heuristics for distinguishing between UNIX and
 393         MS-DOS-like FTP listing provided by Windows NT FTP service.
 394
 395 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 396
 397         * ftpparse.c, ftpparse.h: New files.
 398
 399         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
 400         only. Use ftp_parse_nonunix_ls otherwise.
 401         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
 402         exotic FTP servers.
 403
 404         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
 405         FTP servers.
 406
 407         * ftp.c: New static wariables host_type, pwd, and pwd_len.
 408         (getftp): Support for VMS. Support for FTP servers that do not
 409         place you in the root directory after login.
 410         (ftp_retrieve_list): VMS is silent about the real file size, issue
 411         a more appropriate message.
 412         (ftp_get_listing): Pass host_type to ftp_parse_ls.
 413
 414         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
 415
 416 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 417
 418         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
 419         "ignore_perms" to ignore file and directory permissions for
 420         Windows NT FTP server listings.
 421         (ftp_parse_winnt_ls): New function.
 422         (ftp_parse_ls): Parses UNIX and Windows NT listings
 423         separately. Simple heuristics for distinguishing between UNIX
 424         and MS-DOS-like FTP listing provided by Windows NT FTP service.
 425
 426 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
 427
 428         * netrc.c (parse_netrc): Get rid of line ending.
 429
 430 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
 431
 432         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
 433         Dan.
 434
 435 2000-11-24  Karl Eichwalder  <ke@suse.de>
 436
 437         * main.c (print_help): Untabify.
 438
 439 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
 440
 441         * utils.c (xrealloc_debug): Do the unregister/register thing only
 442         if the pointer has actually changed.
 443         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
 444         (xfree_real): Ditto.
 445         (xrealloc_real): Ditto.
 446         (xstrdup_real): Ditto.
 447
 448 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 449
 450         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
 451         string; no need to strdup() it.
 452         (getftp): Make pwd_len a local variable.
 453         (ftp_loop): Free PWD before returning.
 454
 455         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
 456
 457 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
 458
 459         * all: Use xfree() instead of free.
 460
 461         * utils.c (xfree): New function.
 462
 463 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 464
 465         * url.c (convert_links): HTML-quote the converted string.
 466
 467         * utils.c (html_quote_string): Move here from ftp-ls.c
 468         (html_quote_string): Make non-static; declare in utils.h.
 469         (html_quote_string): Convert SP to &#32;.
 470
 471 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 472
 473         * ftp.c (getftp): Reformat Jan's code according to GNU coding
 474         standards; remove (debugging?) printf's; use '\0' for the ASCII
 475         zero character.  Use alloca() instead of malloc() for
 476         inter-function temporary allocations.
 477
 478 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
 479
 480         * ftpparse.c, ftpparse.h: New files.
 481
 482         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
 483         only. Use ftp_parse_nonunix_ls otherwise.
 484         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
 485         exotic FTP servers.
 486
 487         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
 488         FTP servers.
 489
 490         * ftp.c: New static wariables host_type, pwd, and pwd_len.
 491         (getftp): Support for VMS. Support for FTP servers that do not
 492         place you in the root directory after login.
 493         (ftp_retrieve_list): VMS is silent about the real file size, issue
 494         a more appropriate message.
 495         (ftp_get_listing): Pass host_type to ftp_parse_ls.
 496
 497         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
 498
 499 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 500
 501         * hash.c (hash_table_put): Don't overwrite deleted mappings.
 502
 503 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
 504
 505         * hash.c (find_mapping): New function.
 506         (hash_table_get): Use it.
 507         (hash_table_get_pair): Ditto.
 508         (hash_table_exists): Ditto.
 509         (hash_table_remove): Ditto.
 510         (hash_table_remove): Really delete the entry if the mapping
 511         following LOCATION is empty.
 512
 513         * utils.c (string_set_add): Check whether the element has existed
 514         before.
 515
 516         * hash.c (hash_table_get_pair): New function.
 517
 518 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 519
 520         * http.c (http_process_type): Ignore trailing whitespace; use
 521         strdupdelim().
 522
 523         * recur.c (recursive_retrieve): Use the new `convert' field.
 524         (convert_all_links): Ditto.
 525         (convert_all_links): Don't respect meta_disallow_follow.
 526
 527         * html-url.c (handle_link): Fill out link_relative_p and
 528         link_complete_p.
 529
 530         * url.h (struct _urlpos): Make elements more readable.
 531
 532         * recur.c (recursive_retrieve): Call slist_prepend instead of
 533         slist_append.
 534         (convert_all_links): Call slist_nreverse before iterating through
 535         urls_html.
 536
 537         * utils.c (slist_prepend): New function.
 538         (slist_nreverse): Ditto.
 539
 540 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 541
 542         * http.c (check_end): Constify.
 543
 544 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 545
 546         * http.c (http_loop): If username and password are known, try the
 547         `Basic' authentication scheme by default.
 548
 549         * connect.h: Declare test_socket_open.
 550
 551 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 552
 553         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
 554
 555 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 556
 557         * http.c (gethttp): Don't use the return value of sprintf().
 558         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
 559
 560 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
 561
 562         * recur.c (recursive_retrieve): Print the "so we don't load"
 563         debugging message only if we really don't load.
 564
 565         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
 566         (gethttp): Don't request keep-alive if keep-alive is inhibited.
 567
 568 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 569
 570         * http.c (gethttp): Make the HTTP persistent connections more
 571         robust.
 572
 573 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 574
 575         * retr.c (get_contents): If use_expected, make sure that the
 576         appropriate amount of data is being read.
 577
 578         * http.c (gethttp): Check for both `Keep-Alive: ...' and
 579         `Connection: Keep-Alive'.
 580
 581         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
 582         turned on.
 583
 584 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 585
 586         * http.c (connection_available_p): Use it.
 587
 588         * connect.c (test_socket_open): New function.
 589
 590         * http.c (gethttp): Support persistent connections.  Based on the
 591         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
 592         (register_persistent): New function.
 593         (connection_available_p): Ditto.
 594         (invalidate_connection): Ditto.
 595
 596 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
 597
 598         * url.c (convert_links): Handle UREL2ABS case.
 599
 600         * recur.c (recursive_retrieve): Instead of the list
 601         urls_downloaded, use hash tables dl_file_url_map and
 602         dl_url_file_map.
 603         (convert_all_links): Use them to retrieve data.
 604
 605         * host.c (clean_hosts): Free the hash tables.
 606
 607         * main.c (private_initialize): Call host_init().
 608
 609         * host.c (store_hostaddress): Use a saner, hash table-based data
 610         model.
 611         (realhost): Ditto.
 612         (host_init): Initialize the hash tables.
 613
 614 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
 615
 616         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
 617         used for what the sorted slists used to be used for.
 618         (slist_contains): Don't rely on the list being sorted.
 619         (slist_append): Simplify the code.
 620
 621         * recur.c (recursive_cleanup): Use free_string_set.
 622
 623         * utils.c (string_set_add, string_set_exists, string_set_free):
 624         New functions for easier freeing of hash tables whose keys are
 625         strdup'ed strings.
 626
 627         * recur.c (recursive_retrieve): Use the hash table functions for
 628         storing undesirable URLs.
 629
 630         * hash.c: New file.
 631
 632 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
 633
 634         * main.c (private_initialize): Call url_init.
 635         (main): Call private_initialize.
 636
 637         * url.c (unsafe_char_table): New table.
 638         (UNSAFE_CHAR): Use it.
 639         (init_unsafe_char_table): New function.
 640         (url_init): New function; call init_unsafe_char_table.
 641
 642 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
 643
 644         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
 645         _vsnprintf respectively.
 646
 647 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 648
 649         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
 650         on Linux.
 651
 652 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
 653
 654         * html-url.c (handle_link): Handle HTML fragment identifiers.
 655
 656         * recur.c (recursive_retrieve): If norobot info is respected and
 657         the file is specified not to be followed by robots, respect that.
 658
 659         * html-url.c (collect_tags_mapper): Handle <meta name=robots
 660         content=X>.  For us the important cases are where X is NONE or
 661         where X contains NOFOLLOW.
 662         (get_urls_html): Propagate that information to the caller.
 663
 664 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
 665
 666         * url.c (convert_links): Unlink the file we might be reading from
 667         before writing to it.
 668         (convert_links): Use alloca instead of malloc for
 669         filename_plus_orig_suffix.
 670
 671 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
 672
 673         * host.c (realhost): Add HOST to the list with quality==0 only if
 674         it wasn't already there.
 675         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
 676
 677 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 678
 679         * url.c (get_urls_file): Ditto.
 680         (convert_links): Ditto.
 681
 682         * html-url.c (get_urls_html): Use read_file() instead of
 683         load_file().
 684
 685         * utils.c (read_file): New function, instead of the old
 686         load_file().
 687         (read_file_free): Ditto.
 688
 689         * url.c (findurl): Search only for the supported protocols.
 690         (convert_links): Use fwrite() when writing out a region of
 691         characters.
 692
 693 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 694
 695         * ftp-ls.c: Move html_quote_string and ftp_index here.
 696
 697         * url.c: Remove get_urls_html, since that's now in html-url.c.
 698
 699         * html-url.c: New file.
 700
 701         * html-parse.c: New file.
 702
 703 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 704
 705         * init.c (run_wgetrc): Don't bother killing off '\r' since
 706         pars_line() skips whitespace at end of line anyway.
 707         (parse_line): Oops, it didn't.  Now it does.
 708
 709         * recur.c (parse_robots): Ditto here.
 710
 711         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
 712         manually because read_whole_line no longer does.
 713
 714         * utils.c (read_whole_line): Rewrite to: a) use less memory
 715         (reallocates to needed size after work), b) work faster -->
 716         fgets() instead of getc, c) be more correct --> doesn't kill the
 717         newline character at the end of line.
 718
 719 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
 720
 721         * init.c (comind): Initialize MAX to array size - 1.
 722
 723 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 724
 725         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
 726         Suggested by Edward J. Sabol.
 727
 728 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
 729
 730         * url.c (construct): Handle the case where host name is not
 731         followed by a slash.
 732
 733 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
 734
 735         * init.c: commands[] need to be sorted!  ("base" wasn't.)
 736
 737 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 738
 739         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
 740         `if'.
 741
 742 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 743
 744         * url.c (construct): Insert unneeded initialization for the
 745         compiler to shut up.
 746
 747         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
 748         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
 749         otherwise gets lost when you define _XOPEN_SOURCE.
 750
 751         * utils.c (touch): Include the file name in the error message.
 752         From Debian.
 753
 754 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 755
 756         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
 757         resize the buffer to fit the formated message.  That way, messages
 758         of arbitrary size may be printed.
 759         (logvprintf): Use saved_append() to optionally log the last
 760         several lines of output.
 761         (logputs): Ditto.
 762         (log_close): Adapt to new data structures.
 763         (log_dump): Ditto.
 764         (redirect_output): Print messages to stderr, not to stdout.
 765
 766         * log.c (saved_append_1): New function.  Replaces the old logging
 767         system ("log all output until 10M characters") with a new, much
 768         more reasonable one ("log last screenful of text").
 769         (saved_append): New function; call saved_append_1.
 770         (free_log_line): New function.
 771
 772 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
 773
 774         * url.c (construct): Fix comment.
 775         (find_last_char): Document.
 776
 777 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
 778
 779         * snprintf.c: New file.
 780
 781 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
 782
 783         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
 784         types to logprintf() and debug_logprintf().
 785
 786 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 787
 788         * ftp.c (ftp_loop_internal): Hide the password from the URL when
 789         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
 790         <darekm@bydg.lomac.com.pl>.
 791
 792 2000-11-02  Junio Hamano  <junio@twinsun.com>
 793
 794         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
 795
 796 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
 797
 798         * http.c (known_authentication_scheme_p): Recognize NTML
 799         authentication.
 800         (create_authorization_line): Treat NTML the same as `Basic'.
 801
 802 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 803
 804         * retr.c (retrieve_url): Free url before returning.
 805         (retrieve_url): Free mynewloc before returning.
 806         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
 807
 808 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
 809
 810         * url.c (parseurl): Remove possible reading past the end of
 811         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
 812
 813 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 814
 815         * main.c (main): In case of opt.downloaded overflowing, print
 816         <overflow> instead of a totally bogus random value.
 817
 818         * retr.c (retrieve_from_file): Ditto.
 819
 820         * recur.c (recursive_retrieve): Ditto.
 821
 822         * main.c (main): Ditto.
 823
 824         * http.c (http_loop): Ditto.
 825
 826         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
 827         `+=', and downloaded_exceeds_quota() instead of the simple-minded
 828         check.
 829         (ftp_retrieve_list): Ditto.
 830         (ftp_retrieve_dirs): Ditto.
 831         (ftp_retrieve_glob): Ditto.
 832
 833         * retr.c (downloaded_increase): New function.  Notice overflows of
 834         opt.downloaded.
 835         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
 836         used if it overflowed.
 837
 838         * options.h (struct options): New member downloaded_overflow.
 839
 840 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 841
 842         * wget.h (enum): Remove extra space after last enumeration.
 843
 844 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 845
 846         * main.c (main): Use legible_very_long() for printing
 847         opt.downloaded.
 848
 849         * utils.c (legible_1): New function that operates on strings and
 850         does the brunt of legible()'s work.
 851         (legible): Use legible_1().
 852         (legible_very_long): New function; dump the argument with
 853         sprintf(), and call legible_1().
 854
 855         * options.h (struct options): Use VERY_LONG_TYPE for
 856         opt.downloaded.
 857
 858         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
 859         type.
 860
 861         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
 862         defined.  Define HAVE_LONG_LONG if long long is available.
 863
 864 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 865
 866         * utils.c (long_to_string): Update with a later, better version.
 867
 868 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 869
 870         * url.c (path_simplify_with_kludge): New function.
 871         (path_simplify_with_kludge): Disable it.  Instead...
 872         (parse_dir): ...make sure that at this point the right thing is
 873         done, i.e. that "query" part of the URL (?...) is always assigned
 874         to the file, never to the directory portion of the path.
 875
 876 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 877
 878         * retr.c (retrieve_url): Detect redirection cycles.
 879
 880 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 881
 882         * url.c (get_urls_html): Decode HTML entities using
 883         html_decode_entities.
 884
 885         * html.c (htmlfindurl): Don't count the `#' in numeric entities
 886         (&#NNN;) as an HTML fragemnt.
 887         (html_decode_entities): New function.
 888
 889 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 890
 891         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
 892
 893 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
 894
 895         * url.c (construct): Rewritten for clarity.  Avoids the
 896         unnecessary copying and stack-allocation the old version
 897         performed.
 898
 899 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 900
 901         * ftp.c (getftp): Ditto.
 902
 903         * http.c (gethttp): Rewind the stream when retrying from scratch.
 904
 905 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
 906
 907         * retr.c (retrieve_url): Use url_concat() to handle relative
 908         redirections instead of /ad hoc/ code.
 909
 910         * url.c (url_concat): New function encapsulating weird
 911         construct().
 912         (urllen_http_hack): New function.
 913         (construct): When constructing new URLs, recognize that `?' does
 914         not form part of the file name in HTTP.
 915
 916 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
 917
 918         * retr.c: Add msec timing support for WINDOWS.
 919         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
 920         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
 921
 922 2000-10-27  Dan Harkless  <wget@harkless.org>
 923
 924         * retr.c (retrieve_url): Manually applied T. Bharath
 925         <TBharath@responsenetworks.com>'s patch to get wget to grok
 926         illegal relative URL redirects.  Reformatted and re-commented it.
 927
 928 2000-10-23  Dan Harkless  <wget@harkless.org>
 929
 930         * connect.c (make_connection and bindport): Manually applied Rob
 931         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
 932         changing coding style to GNU's.
 933
 934         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
 935         files downloaded via FTP.  Per a comment, .listing files were not
 936         counted towards number of bytes and files downloaded because they're
 937         deleted anyway.  Well, they aren't under -nr, so count them then.
 938
 939         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
 940         --bind-address, alphabetizing, changing coding style to GNU's,
 941         commenting, and renaming cmd_ip_address() to cmd_address() to
 942         imply hostnames also okay.
 943
 944         * main.c (main): --delete-after didn't delete the root of the
 945         tree.  Ignore --convert-links if --delete-after was specified.
 946         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
 947         fixing duplicate use of added-since-1.5.3 case value.
 948         (print_help): Clarified that --delete-after deletes local files.
 949         Rob forgot to add a line for his new --bind-address option.
 950
 951         * options.h (struct options): Manually applied Rob Mayoff's patch
 952         to add --bind-address (bind_address structure member).
 953
 954         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
 955         Ignore --convert-links if --delete-after was specified.
 956
 957         * retr.c (retrieve_from_file): Just added a DEBUGP().
 958
 959 2000-10-19  Dan Harkless  <wget@harkless.org>
 960
 961         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
 962         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
 963         patch to work around FTP servers that incorrectly respond to the
 964         "REST" command with the remaining size rather than the total file size.
 965
 966         * http.c (gethttp): Improved a comment and added code to tack on
 967         ".html" to text/html files without that extension when -E specified.
 968         (http_loop): Use new downloaded_file() enumerators and deal with
 969         the case of gethttp() called xrealloc() on u->local.
 970
 971         * init.c (commands): Added new "htmlextension" command.
 972         Also renamed John Daily's cmd_quad() to the more descriptive
 973         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
 974         removed duplicate cmd_boolean() declaration.
 975
 976         * main.c (print_help): Added my new -E / --html-extension option.
 977         (main): Undocumented --email-address option previously used -E synonym.
 978         Stole it away for the much more deserving --html-extension's use.
 979
 980         * options.h (struct options): Added html_extension field.
 981
 982         * url.c (convert_links): URL X that we saved as X.html locally due
 983         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
 984         (downloaded_file): Now remembers if we added .html extension to a file.
 985
 986         * url.h (downloaded_file_t): Added extra enumerators to support above.
 987         (downloaded_file): Now takes and returns a downloaded_file_t.
 988
 989         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
 990
 991 2000-10-09  Dan Harkless  <wget@harkless.org>
 992
 993         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
 994
 995         * main.c (print_help): Clarified what --retr-symlinks does.
 996
 997 2000-09-15  John Daily  <jdaily@cyberdude.com>
 998
 999         * init.c: Add support for "always" and "never" values to allow
1000         .wgetrc to override commandline (useful e.g. with .pm files
1001         calling `wget --passive-ftp' when your firewall doesn't allow that).
1002
1003         * ftp.c (getftp): passive_ftp is first option to support always/never.
1004
1005 2000-08-30  Dan Harkless  <wget@harkless.org>
1006
1007         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
1008
1009         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
1010         Wrapped some > 80-column lines.  When -p is specified and we're at a
1011         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
1012         <LINK REL="stylesheet">.
1013
1014         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
1015
1016         * init.c: Added new -p / --page-requisites / page_requisites option.
1017
1018         * main.c (print_help): Clarified that -l inf and -l 0 both allow
1019         infinite recursion.  Changed the unhelpful --mirrior description
1020         to simply give the options it's equivalent to.  Added new -p option.
1021         (main): Added some comments; handle new -p / --page-requisites.
1022
1023         * options.h (struct options): Added new page_requisites field.
1024
1025         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
1026         Calculate and pass down new `dash_p_leaf_HTML' parameter to
1027         get_urls_html().  Use new INFINITE_RECURSION #define.
1028
1029         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
1030         final `dash_p_leaf_HTML' parameter.
1031
1032         * url.c: get_urls_html() and htmlfindurl() now take final
1033         `dash_p_leaf_HTML' parameter.
1034
1035         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
1036
1037         * wget.h: Added some comments and new INFINITE_RECURSION #define.
1038
1039 2000-08-23  Dan Harkless  <wget@harkless.org>
1040
1041         * main.c (print_help): -B / --base was not mentioned.
1042
1043 2000-08-22  Dan Harkless  <wget@harkless.org>
1044
1045         * main.c (print_help): Modified -nc description to mention that it
1046         also prevents the creation of multiple versions of the same file
1047         with ".<number>" suffixes.
1048
1049 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1050
1051         * retr.c (retrieve_url): Consistently strdup opt.referer when
1052         setting u->referer.
1053
1054 2000-06-09  Dan Harkless  <wget@harkless.org>
1055
1056         * main.c (print_help): --help output for --waitretry was over 80 cols.
1057
1058 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
1059
1060         * url.c (encode_string): Fix comment.
1061         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
1062
1063 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
1064
1065         * ftp.c (ftp_retrieve_list): Change permissions only on plain
1066         files.
1067
1068 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
1069
1070         * url.c (str_url): Print the port number only if it's different
1071         from the default port number for that protocol.
1072
1073 2000-05-22  Dan Harkless  <wget@harkless.org>
1074
1075         * main.c (print_help): Added --help line for Damir Dzeko
1076         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
1077         Removed comments that --referer and --waitretry were undocumented.
1078         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
1079         line for --execute.
1080
1081 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
1082
1083         * ftp.c (getftp): Ditto.
1084
1085         * http.c (gethttp): Check for return value of fclose/fflush.
1086
1087 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1088
1089         * host.c (store_hostaddress): Instead of shifting ADDR, start
1090         copying from the correct address.
1091
1092 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1093
1094         * http.c (gethttp): Don't free REQUEST -- it was allocated with
1095         alloca().
1096         Pointed out by Gisle Vanem <gvanem@eunet.no>.
1097
1098 2000-04-04  Dan Harkless  <wget@harkless.org>
1099
1100         * host.c (store_hostaddress): R. K. Owen's patch introduces a
1101         "left shift count >= width of type" warning on 32-bit
1102         architectures.  Got rid of it by tricking the compiler w/ a variable.
1103
1104         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
1105         characters per RFC1738, namely everything above '~'.  It also
1106         generated a warning on OSes where char =~ unsigned char.  Fixed.
1107
1108 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
1109
1110         * http.c (http_process_type): Removed needless strdup(), a memory
1111         leak.
1112
1113 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
1114
1115         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
1116
1117 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
1118
1119         * init.c (wgetrc_file_name): Don't free HOME under Windows.
1120
1121 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
1122
1123         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
1124
1125 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1126
1127         * url.c (UNSAFE_CHAR): New macro.
1128         (contains_unsafe): Use it.
1129         (encode_string): Ditto.
1130
1131 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1132
1133         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
1134
1135 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1136
1137         * Use TOUPPER/TOLOWER.
1138
1139 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
1140
1141         * ftp-opie.c (btoe): Zero-terminate OSTORE.
1142
1143 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
1144
1145         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
1146
1147         * sysdep.h (ISALNUM): New macro.
1148         (TOLOWER): Ditto.
1149         (TOUPPER): Ditto.
1150
1151 2000-03-10  Dan Harkless  <wget@harkless.org>
1152
1153         * html.c (idmatch): Implemented checking of my new --follow-tags
1154         and --ignore-tags options.
1155
1156         * init.c (commands): Added comment reminding people adding new
1157         entries doing allocation to add corresponding freeing in cleanup().
1158         (commands): Added new followtags and ignoretags commands.
1159         (cleanup): Free storage for new followtags and ignoretags.
1160
1161         * main.c: Use of "comma-separated list" was random -- normalized
1162         it.  Did some alphabetization.  Added comments pointing out
1163         "Options without arguments" and "Options accepting an argument"
1164         sections of long_options[].  Added new options --follow-tags and
1165         -G / --ignore-tags.  Added comment that Damir's --referer is
1166         currently undocumented.  Added comment that Heiko's --waitretry is
1167         partially undocumented (mentioned in --help but not in
1168         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
1169
1170         * options.h (struct options): Added new fields follow_tags and
1171         ignore_tags.
1172
1173         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
1174
1175 2000-03-02  Dan Harkless  <wget@harkless.org>
1176
1177         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
1178         braces to avoid ambiguous `else'" warnings.  Eliminated them.
1179
1180         * http.c (gethttp): Dan Berger's query string patch is totally
1181         bogus.  If you have two different URLs, gen_page.cgi?page1 and
1182         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
1183         second will overwrite the first.  Also, parameters to implicit
1184         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
1185         be printed with trailing garbage characters, and could seg fault.
1186         Backing out the patch, which Dan B. informed me by email was just
1187         a kludge to download StarOffice from Sun made necessary due to
1188         wget's unconditional escaping of certain characters (room for an
1189         option there?).
1190         (http_loop): Heiko introduced "suggest explicit braces to avoid
1191         ambiguous `else'" warnings.  Eliminated them.
1192
1193         * main.c: Heiko's --wait / --waitretry backwards compatibility
1194         code looks to have been totally untested -- automatic variable
1195         'wr' was used without being initialized, and a long int was passed
1196         into setval()'s char* val parameter.
1197
1198         * recur.c (parse_robots): Applied Edward J. Sabol
1199         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
1200         problem with "User-agent:<space>*<space>" lines in robots.txt.
1201
1202         * url.c (parseurl, str_url): Removing Dan Berger's code (see
1203         http.c above for explanation).
1204
1205 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
1206
1207         * ftp.c: Respect new option waitretry.
1208
1209 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
1210
1211         * http.c (gethttp): Send custom Referer, if required.
1212
1213 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
1214
1215         * netrc.c (parse_netrc): Allow passwords to contain spaces.
1216
1217         * netrc.c (parse_netrc): New function.
1218
1219 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
1220
1221         * http.c (gethttp): Send it.
1222
1223         * url.c (parseurl): Detect query string in HTTP URL-s.
1224         (str_url): Print it.
1225
1226 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
1227
1228         * html.c (html_allow): Add <link href=...> and <script src=...>.
1229
1230 1999-05-02  andrew deryabin  <djsf@softhome.net>
1231
1232         * http.c (gethttp): Specify port in `Host' header only if it's
1233         different from 80.
1234
1235 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1236
1237         * recur.c (recursive_retrieve): If a finite maximum depth is
1238         specified, and we're are already at that depth, don't download the
1239         HTML file for parsing.
1240
1241 2000-03-01  Dan Harkless  <wget@harkless.org>
1242
1243         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
1244         even though we don't do conversion on HTML files retrieved via
1245         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
1246         (ftp_retrieve_list): Added a comment saying where we need to
1247         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
1248         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
1249         a lie -- reworded as "Server file no newer than local file '%s' --".
1250
1251         * http.c (http_loop): Fixed a typo and clarified a comment.
1252         (http_loop): When -K and -N are specified together, compare size
1253         and timestamp of server file X against local file X.orig (if
1254         extant) rather than converted local file X.
1255         (http_loop): "Local file '%s' is more recent," is sometimes a lie
1256         -- reworded as "Server file no newer than local file '%s' --".
1257         (http_loop): Call new downloaded_file() function to prevent
1258         wrongful overwriting of .orig file when -N is specified.
1259
1260         * url.c (convert_links): When -K specified, only rename X to
1261         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
1262         file X due to -N, we clobber an X.orig from a previous invocation.
1263         (convert_links): Call the failsafe xstrdup(), not the real strdup().
1264         (convert_links): Added a note asking anyone who understands how
1265         multiple URLs can correspond to a single file to comment it.
1266         (downloaded_file): Added this new function.
1267
1268         * url.h (downloaded_file): Added prototype for this new function
1269         as well as its downloaded_file_t enum type.
1270
1271         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
1272
1273 2000-02-29  Dan Harkless  <wget@harkless.org>
1274
1275         * version.c: Upped version to developer-only "1.5.3+dev".
1276
1277 2000-02-18  Dan Harkless  <wget@harkless.org>
1278
1279         * init.c (backup_converted): Added this new option.
1280
1281         * main.c (-K / --backup-converted): Added this new option.
1282
1283         * options.h (backup_converted): Added this new option.
1284
1285         * url.c (convert_links): When backup_converted is specified, save
1286         file X as X.orig before converting.
1287
1288         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
1289
1290 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1291
1292         * version.c: Wget 1.5.3 is released.
1293
1294 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1295
1296         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
1297         address doesn't yield FQDN.
1298
1299 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
1300
1301         * cmpt.c (strerror): Fix declaration of sys_errlist.
1302
1303 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
1304
1305         * main.c (main): Don't use an array subscript as the first
1306         argument to STRDUP_ALLOCA.
1307         From Kaveh R. Ghazi.
1308
1309 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
1310
1311         * html.c (htmlfindurl): Download table background.
1312
1313 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
1314
1315         * init.c (parse_line): Would free *com before allocating it.
1316         (parse_line): Would free com instead of *com.
1317
1318 1998-09-10  Howard Gayle  <howard@fjst.com>
1319
1320         * url.c (get_urls_html): Would drop the last character of the
1321         link.
1322
1323 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
1324
1325         * http.c (http_loop): Don't print status code if quiet.
1326
1327 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
1328
1329         * log.c: Use <stdarg.h> only when __STDC__.
1330
1331 1998-09-10  Adam D. Moss  <adam@foxbox.org>
1332
1333         * html.c (htmlfindurl): Download <layer src=...>.
1334
1335 1998-09-10  Howard Gayle  <howard@fjst.com>
1336
1337         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
1338         not retrieved.
1339
1340 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
1341
1342         * utils.c: Include <libc.h> on NeXT.
1343
1344 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
1345
1346         * url.c (get_urls_html): Fix calculation of URL position.
1347
1348 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
1349
1350         * version.c: Wget 1.5.2 is released.
1351
1352 1998-06-23  Dave Love  <d.love@dl.ac.uk>
1353
1354         * ftp.c, init.c, netrc.c: Include errno.h.
1355
1356         * http.c: Include errno.h and time header.
1357
1358         * Makefile.in (exext): Define.
1359         (install.bin, uninstall.bin): Use it.
1360
1361 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
1362
1363         * http.c (http_loop): Don't attempt to compare local and remote
1364         sizes if the remote size is unknown.
1365
1366 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
1367
1368         * url.c (get_urls_html): Use malloc() instead of alloca in the
1369         loop.
1370
1371 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1372
1373         * version.c: Wget 1.5.2-b4 is released.
1374
1375 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1376
1377         * url.c (get_urls_html): Ignore spaces before and after the URI.
1378
1379 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
1380
1381         * ftp.c (getftp): Translate `done'.
1382
1383 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1384
1385         * version.c: Wget 1.5.2-b3 is released.
1386
1387 1998-06-06  Alexander Kourakos  <awk@bnt.com>
1388
1389         * init.c (cleanup): Close dfp, don't free it.
1390
1391 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1392
1393         * utils.c (make_directory): Twiddle.
1394
1395         * config.h.in: Added template for access().
1396
1397 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
1398
1399         * html.c (htmlfindurl): Download <input src=...>
1400
1401 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
1402
1403         * utils.c (file_exists_p): Use access() with two arguments.
1404
1405 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
1406
1407         * netrc.c (parse_netrc): Correct logic.
1408
1409 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
1410
1411         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
1412         <ljm@ljm.wownet.net>.
1413
1414 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
1415
1416         * version.c: Wget 1.5.2-b2 is released.
1417
1418 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
1419
1420         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
1421
1422 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
1423
1424         * retr.c (elapsed_time): Return correct value when
1425         HAVE_GETTIMEOFDAY is undefined.
1426
1427 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
1428
1429         * version.c: Wget 1.5.2-b1 is released.
1430
1431 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
1432
1433         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
1434         (_getopt_internal): Don't translate `#if 0'-ed strings.
1435
1436 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1437
1438         * mswindows.c (ws_handler): Use fork_to_background().
1439
1440 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1441
1442         * version.c: Wget 1.5.1 is released.
1443
1444 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1445
1446         * http.c (parse_http_status_line): Avoid `minor' and `major'
1447         names.
1448
1449 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
1450
1451         * utils.c (mkdirhier): Renamed to make_directory.
1452
1453 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
1454
1455         * mswindows.c (fork_to_background): Define under Windows.
1456
1457         * utils.c (fork_to_background): New function.
1458
1459         * html.c (htmlfindurl): Removed rerdundant casts.
1460
1461 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1462
1463         * mswindows.c (ws_mypath): Cache the path.
1464
1465 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1466
1467         * ftp.h: Prefix enum ftype members with FT_.
1468
1469         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
1470
1471         * mswindows.h: Use stat under Borland, _stat under MSVC.
1472
1473 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
1474
1475         * http.c (known_authentication_scheme_p): New function.
1476         (gethttp): Handle authorization more correctly.
1477
1478         * ftp-basic.h: Removed.
1479
1480         * cmpt.h: Removed.
1481
1482         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
1483         with gcc 2.8.
1484         (numdigit): Use `while' loop.
1485
1486         * http.c (create_authorization_line): Detect authentication
1487         schemes case-insensitively.
1488
1489         * http.c (extract_header_attr): Use strdupdelim().
1490         (digest_authentication_encode): Move declaration of local
1491         variables to smaller scope.
1492         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
1493         (create_authorization_line): Detect authentication schemes
1494         case-insensitively.
1495
1496         * utils.c (touch): Constify.
1497
1498         * http.c (gethttp): Report a nicer error when no data is received.
1499
1500         * rbuf.h (RBUF_READCHAR): Ditto.
1501
1502         * ftp-basic.c (ftp_response): Use sizeof.
1503
1504 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
1505
1506         * retr.c (print_percentage): EXPECTED is long, not int.
1507         (print_percentage): Use floating-point arithmetic to avoid
1508         overflow with large files' sizes multiplied with 100.
1509
1510 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
1511
1512         * config.h.in: Added pid_t stub.
1513
1514         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
1515         define it).
1516
1517 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
1518
1519         * version.c: Wget 1.5.0 is released.
1520
1521 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
1522
1523         * url.c (str_url): Ditto.
1524
1525         * ftp-basic.c (ftp_rest): Use new name.
1526
1527         * utils.c (long_to_string): Renamed from prnum().
1528
1529 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
1530
1531         * version.c: Wget 1.5-b17 is released.
1532
1533 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1534
1535         * headers.c (header_get): New argument FLAGS.
1536
1537         * http.c (gethttp): If request is malformed, bail out of the
1538         header loop.
1539         (gethttp): Check for empty header *after* the status line checks.
1540         (gethttp): Disallow continuations for status line.
1541
1542 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1543
1544         * version.c: Wget 1.5-b16 is released.
1545
1546 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1547
1548         * init.c (commands): Renamed `always_rest' to `continue'.
1549
1550 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
1551
1552         * all: Use it.
1553
1554         * log.c (logputs): New argument.
1555         (logvprintf): Ditto.
1556         (logprintf): Ditto.
1557
1558 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1559
1560         * http.c (http_atotm): Update comment.
1561
1562         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
1563
1564         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
1565
1566         * main.c (i18n_initialize): New function.
1567         (main): Use it.
1568
1569         * log.c: Include <unistd.h>.
1570
1571         * retr.c (show_progress): Cast alloca to char *.
1572
1573 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1574
1575         * version.c: Wget 1.5-b15 is released.
1576
1577 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1578
1579         * utils.h: Declare file_non_directory_p().
1580
1581 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
1582
1583         * main.c (main): It's `tries', not `numtries' now.
1584
1585 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1586
1587         * init.c (getperms): Removed.
1588
1589 1998-04-01  Tim Charron  <tcharron@interlog.com>
1590
1591         * log.c (logvprintf): Don't use ARGS twice.
1592
1593 1998-04-01  John  <john@futuresguide.com>
1594
1595         * mswindows.c: Cleaned up.
1596
1597 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1598
1599         * version.c: Wget 1.5-b14 is released.
1600
1601 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1602
1603         * ftp-opie.c (STRLEN4): New macro.
1604         (btoe): Use it.
1605
1606 1998-04-01  Junio Hamano  <junio@twinsun.com>
1607
1608         * http.c: Document all the Digest functions.
1609
1610 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1611
1612         * utils.c (file_non_directory_p): Renamed from isfile().
1613
1614         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
1615
1616 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1617
1618         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
1619
1620         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
1621         style.
1622         (cmd_permissions): Removed.
1623
1624         * config.h.in: Add template for WORDS_BIGENDIAN.
1625
1626 1998-03-31  Junio Hamano  <junio@twinsun.com>
1627
1628         * http.c (HEXD2asc): New macro.
1629         (dump_hash): Use it.
1630
1631 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1632
1633         * version.c: Wget 1.5-b13 is released.
1634
1635 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1636
1637         * main.c (main): Don't try to use `com'.
1638
1639 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1640
1641         * init.c (cmd_permissions): New function.
1642
1643 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1644
1645         * version.c: Wget 1.5-b12 is released.
1646
1647 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1648
1649         * init.c (commands): Renamed `numtries' to `tries'.
1650         (cmd_spec_debug): Removed.
1651         (home_dir): Under Windows, return `C:\' if HOME is undefined.
1652
1653 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1654
1655         * config.h.in: Define _XOPEN_SOURCE.
1656
1657         * init.c (check_user_specified_header): New function.
1658         (cmd_spec_header): Use it.
1659         (cmd_spec_useragent): New function.
1660
1661 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1662
1663         * version.c: Wget 1.5-b11 is released.
1664
1665 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
1666
1667         * wget.h: Include <libintl.h> only if NLS is enabled.
1668
1669 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
1670
1671         * options.h (struct options): Made `wait' a long.
1672         (struct options): Ditto for `timeout'.
1673
1674 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
1675
1676         * utils.c (exists): Renamed to file_exists_p.
1677         (file_exists_p): Use access() if available.
1678
1679 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
1680
1681         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
1682         infloop.
1683
1684         * log.c: do_logging -> save_log_p.
1685
1686         * config.h.in: Added template for HAVE_VSNPRINTF.
1687
1688 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1689
1690         * init.c: Ditto.
1691
1692         * http.c: Protect declaration against non-ANSI compiler.
1693
1694         * log.c (logvprintf): Use vsnprintf() if available.
1695
1696         * getopt.c (main): Don't translate test stuff.
1697
1698 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1699
1700         * version.c: Wget 1.5-b10 is released.
1701
1702 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
1703
1704         * ftp.c (getftp): Don't translate "CWD %s".
1705
1706         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
1707
1708 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1709
1710         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
1711
1712         * log.c (logputs): New function.
1713         (logvprintf): Renamed from vlogmsg; use logputs().
1714
1715         * retr.c (show_progress): Print `[100%]' when the retrieval is
1716         finished.
1717
1718         * init.c (run_wgetrc): Use FILE, not PATH.
1719         (wgetrc_file_name): Ditto.
1720
1721 1998-03-07  Tim Adam  <tma@osa.com.au>
1722
1723         * recur.c (parse_robots): Correctly reset `entries' on empty
1724         disallow.
1725
1726 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1727
1728         * init.c (cmd_spec_debug): Use cmd_boolean().
1729
1730 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
1731
1732         * http.c (gethttp): Create proxy-authorization correctly.
1733
1734 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1735
1736         * md5.c: Ditto.
1737
1738         * getopt.c: Use ANSI function definitions.
1739
1740         * ftp-opie.c: New file.
1741
1742         * options.h: Don't redefine EXTERN.
1743
1744         * init.c: Sort it correctly.
1745
1746 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1747
1748         * version.c: Wget 1.5-b9 is released.
1749
1750 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1751
1752         * recur.c (recursive_retrieve): Reset `first_time'.
1753
1754         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
1755
1756         * rbuf.c (rbuf_peek): Simplified.
1757         (rbuf_flush): Use MINVAL.
1758
1759         * wget.h (MINVAL): Moved from url.h.
1760
1761         * rbuf.h (RBUF_FD): New macro.
1762
1763         * url.c (add_url): Add to the head of the list.
1764
1765         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
1766         file.
1767         (getftp): Set the default permissions to 0600.
1768
1769 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
1770
1771         * url.c (get_urls_html): Ditto.
1772         (convert_links): Ditto.
1773
1774         * recur.c (parse_robots): Ditto.
1775
1776         * html.c (ftp_index): Ditto.
1777
1778         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
1779
1780         * init.c (defaults): Initialize `opt' to zero via memset.
1781
1782         * http.c (digest_authentication_encode): goto considered harmful.
1783
1784 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
1785
1786         * ftp.c (delelement): Simplify and fix leak.
1787
1788 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
1789
1790         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
1791
1792         * url.h (HEXD2ASC): Removed warning.
1793
1794         * init.c (comind): Use binary search.
1795         (commands): Reorganized.
1796         (setval): Ditto.
1797         (cmd_boolean): New function.
1798         (cmd_number): Ditto.
1799         (cmd_number_inf): Ditto.
1800         (cmd_string): Ditto.
1801         (cmd_vector): Ditto.
1802         (cmd_directory_vector): Ditto.
1803         (cmd_bytes): Ditto.
1804         (cmd_time): Ditto.
1805         (cmd_spec_debug): Ditto.
1806         (cmd_spec_dirmode): Ditto.
1807         (cmd_spec_dirstruct): Ditto.
1808         (cmd_spec_dotstyle): Ditto.
1809         (cmd_spec_header): Ditto.
1810         (cmd_spec_htmlify): Ditto.
1811         (cmd_spec_mirror): Ditto.
1812         (cmd_spec_outputdocument): Ditto.
1813         (cmd_spec_recursive): Ditto.
1814         (settime): Merged with cmd_time().
1815         (setbytes): Merged with cmd_bytes().
1816         (setonoff): Merged with cmd_boolean().
1817         (onoff): Ditto.
1818
1819 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1820
1821         * Makefile.in (distclean): Remove `config.h'.
1822
1823 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1824
1825         * version.c: Wget 1.5-b8 is released.
1826
1827 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1828
1829         * http.c (digest_authentication_encode): New function.
1830         (create_authorization_line): Use it.
1831         (dump_hash): New function.
1832         (digest_authentication_encode): Use it.
1833
1834         * fnmatch.c: Renamed from `mtch.c'.
1835
1836 1998-02-15  Karl Eichwalder  <ke@suse.de>
1837
1838         * main.c (main): Tag "Written by..." string as translatable.
1839
1840 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1841
1842         * wget.h (FREE_MAYBE): New macro.
1843
1844         * http.c (create_authorization_line): Don't use ANSI C string
1845         concatenation feature.
1846         (basic_authentication_encode): Use alloca() for temporary
1847         variables.
1848
1849         * recur.h: Ditto.
1850
1851         * http.c: Ditto.
1852
1853         * headers.h: Ditto.
1854
1855         * ftp-basic.c: Protect declaration against non-ANSI compiler.
1856
1857         * http.c (create_authorization_line): Cast `unsigned char *' to
1858         `char *' for sprintf, to shut up the noisy Digital Unix cc.
1859
1860 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1861
1862         * version.c: Wget 1.5-b7 is released.
1863
1864 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1865
1866         * cmpt.c (strstr): Synched with glibc-2.0.6.
1867
1868         * ftp-basic.c (calculate_skey_response): Ditto.
1869         (calculate_skey_response): Use alloca().
1870
1871         * http.c (create_authorization_line): Work with FSF's version of
1872         md5.c.
1873
1874         * md5.c: New file, from GNU libc.
1875
1876 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
1877
1878         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
1879
1880 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1881
1882         * http.c (basic_authentication_encode): New function, instead of
1883         the macro.
1884
1885 1998-02-13  Junio Hamano  <junio@twinsun.com>
1886
1887         * http.c: Add HTTP-DA support.
1888         * ftp-basic.c: Add Opie/S-key support.
1889         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
1890         * md5.c, md5.h: New files.
1891
1892 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1893
1894         * http.c (http_process_range): Renamed from hprocrange().
1895         (http_process_range): Parse the whole header.
1896
1897         * headers.c: New file.
1898         (header_process): New function.
1899         (header_get): Renamed from fetch_next_header.
1900
1901         * all: Include utils.h only where necessary.
1902
1903         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
1904
1905         * wget.h: Add provisions for dmalloc.
1906
1907 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1908
1909         * version.c: Wget 1.5-b6 is released.
1910
1911 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1912
1913         * ftp.c (ftp_loop): Determine `filename' more precisely.
1914
1915         * init.c (setval): Don't set `opt.quiet' if output-document is
1916         `-'.
1917
1918         * log.c (log_init): Print to STDERR instead of STDOUT.
1919         (vlogmsg): Use STDERR by default.
1920         (logflush): Ditto.
1921
1922 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
1923
1924         * host.c: Use addr_in again.
1925
1926 1998-02-08  Karl Eichwalder  <karl@suse.de>
1927
1928         * http.c (gethttp): Fixed typo.
1929
1930 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1931
1932         * version.c: Wget 1.5-b5 is released.
1933
1934 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1935
1936         * retr.c (show_progress): Use it.
1937
1938         * log.c (logflush): New function.
1939
1940         * wget.h: Utilize __attribute__ if on gcc.
1941
1942 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
1943
1944         * http.c (base64_encode_line): New argument LENGTH.
1945         (BASIC_AUTHENTICATION_ENCODE): Use it.
1946         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
1947
1948         * main.c (main): Fixed fprintf() format mismatch.
1949
1950 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
1951
1952         * version.c: Wget 1.5-b4 is released.
1953
1954 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
1955
1956         * host.c: use sockaddr_in instead of addr_in.
1957
1958 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
1959
1960         * init.c (cleanup): Use it.
1961
1962         * recur.c (recursive_cleanup): New function.
1963
1964         * retr.c (retrieve_from_file): Ditto.
1965
1966         * main.c (main): Use it.
1967
1968         * recur.c (recursive_reset): New function.
1969
1970         * retr.c (retrieve_from_file): Ditto.
1971
1972         * main.c (main): Simplify call to recursive_retrieve().
1973
1974         * recur.c (recursive_retrieve): Removed FLAGS argument.
1975
1976         * http.c (gethttp): Changed call to iwrite().
1977
1978 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1979
1980         * url.c (get_urls_html): Ditto.
1981         (free_urlpos): Ditto.
1982         (mkstruct): Ditto.
1983         (construct): Ditto.
1984
1985         * retr.c (retrieve_url): Move declaration of local variables to
1986         smaller scope.
1987
1988         * url.c (urlproto): Use it.
1989         (parseurl): Ditto.
1990         (str_url): Ditto.
1991         (get_urls_html): Ditto.
1992
1993         * utils.h (ARRAY_SIZE): New macro.
1994
1995         * url.c (proto): Moved from url.h.
1996
1997         * url.h (URL_CLEANSE): Reformatted.
1998         (USE_PROXY_P): Renamed from USE_PROXY.
1999
2000         * ftp-basic.c: Adjust to the new interface of iwrite().
2001
2002         * ftp-basic.c (ftp_port): Use alloca().
2003
2004 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2005
2006         * version.c: Wget 1.5-b3 is released.
2007
2008         * host.c (ftp_getaddress): Don't print to stderr directly.
2009
2010         * init.c (setbytes): Support `g' for gigabytes.
2011         (cmdtype): New specification CTIME.
2012         (setval): Use it with settime().
2013         (commands): Use it for WAIT and TIMEOUT.
2014
2015 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2016
2017         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
2018         (gethttp): Use it.
2019
2020         * utils.c (unique_name_1): Moved from url.c.
2021         (unique_name): Ditto.
2022
2023         * url.c (url_filename): Ditto.
2024
2025         * log.c (redirect_output): Changed call to unique_name().
2026
2027         * url.c (unique_name_1): Renamed from unique_name().
2028         (unique_name): Changed interface.
2029
2030         * init.c (enum cmdid): Moved from init.h.
2031         (cmdtype): Ditto.
2032         (struct cmd): Ditto.
2033
2034         * main.c (main): Use it.
2035         (main): Moved `--backups' to not have a short option.
2036
2037         * options.h (struct options): New member BACKGROUND.
2038
2039         * main.c (print_help): Rearranged.
2040         (main): New long options for -n* short options: --no-directories,
2041         --no-host-directories, --non-verbose, --no-host-lookup and
2042         --dont-remove-listing.
2043
2044 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2045
2046         * main.c (main): Use log_close().
2047
2048         * log.c: New variable LOGFP.
2049         (vlogmsg): Use it.
2050         (redirect_output): Don't open /dev/null; set LOGFP to stdin
2051         instead.
2052         (log_close): New function.
2053
2054         * options.h (struct options): Removed LFILE.
2055
2056         * log.c (log_enable): Removed.
2057
2058         * main.c (main): Use it.
2059
2060         * log.c (log_init): New function.
2061
2062         * url.c (get_urls_html): Removed needless assignment to BASE.
2063
2064         * host.c (add_hlist): Don't set CMP needlessly.
2065
2066         * utils.c (match_backwards): Ditto.
2067         (in_acclist): Ditto.
2068
2069         * url.c (findurl): Ditto.
2070
2071         * netrc.c (parse_netrc): Ditto.
2072
2073         * log.c (log_dump): Ditto.
2074
2075         * html.c (html_quote_string): Ditto.
2076
2077         * ftp-basic.c (ftp_request): Made static.
2078
2079         * connect.c: Made global variables static.
2080
2081         * url.c (construct): Ditto.
2082
2083         * init.c (init_path): Avoid assignment inside `if'-condition.
2084
2085         * ftp.c: Don't include in.h or winsock.h.
2086
2087         * ftp.c (ftp_loop): Use SZ.
2088
2089         * connect.c (bindport): Cast &addrlen to int *.
2090         (conaddr): Ditto.
2091
2092         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
2093
2094 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2095
2096         * ftp.c (getftp): Initialize opt.ftp_pass here.
2097         (ftp_retrieve_dirs): Use alloca().
2098
2099         * init.c (defaults): Don't initialize opt.ftp_pass.
2100
2101         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
2102         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
2103
2104 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2105
2106         * recur.c (parse_robots): Check for comments more correctly.
2107
2108         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
2109         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
2110         hostname.
2111
2112 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2113
2114         * version.c: Wget 1.5-b2 is released.
2115
2116         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
2117
2118         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
2119
2120         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
2121         char.
2122
2123         * log.c: Don't attempt to hide arguments from ansi2knr.
2124
2125         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
2126
2127         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
2128
2129         * ftp.c (getftp): Ditto.
2130
2131         * http.c (gethttp): Use it.
2132
2133         * retr.c (get_contents): New argument EXPECTED; pass it to
2134         show_progress().
2135         (show_progress): New argument EXPECTED; use it to display
2136         percentages.
2137
2138         * init.c (setval): Ditto.
2139
2140         * http.c (gethttp): Ditto.
2141         (http_loop): Ditto.
2142
2143         * ftp.c (getftp): Ditto.
2144         (ftp_loop_internal): Ditto.
2145
2146         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
2147
2148         * sysdep.h (CLOSE): Simplify; use DEBUGP.
2149
2150         * netrc.c (search_netrc): Use alloca().
2151
2152         * init.c (defaults): Initialize no_flush.
2153
2154         * log.c (vlogmsg): Don't flush if no_flush.
2155
2156         * options.h (struct options): New variable no_flush.
2157
2158         * main.c (main): Don't play games with buffering.
2159
2160         * log.c (vlogmsg): Flush the output after every message.
2161
2162 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2163
2164         * init.c (parse_line): Ditto.
2165
2166         * url.c (get_urls_html): Ditto.
2167
2168         * main.c (main): Don't cast to unsigned char.
2169
2170         * init.c (run_wgetrc): Don't cast to unsigned char.
2171         (parse_line): Accept char instead of unsigned char.
2172
2173         * html.c (htmlfindurl): Use char instead of unsigned char.
2174
2175         * all: Use them.
2176
2177         * sysdep.h: Add wrappers to ctype macros to make them
2178         eight-bit-clean:
2179
2180 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2181
2182         * html.c (htmlfindurl): Download <img lowsrc=...>
2183
2184         * main.c (main): Ignore SIGPIPE.
2185
2186         * connect.c (select_fd): New argument WRITEP.
2187         (iwrite): Call select_fd().
2188
2189 1997-02-27  Fila Kolodny <fila@ibi.com>
2190
2191         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
2192         one already exists, just skip it.
2193
2194 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2195
2196         * http.c (gethttp): Cosmetic changes.
2197
2198         * http.c (check_end): Allow `+D...' instead of `GMT'.
2199         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
2200
2201         * url.c (process_ftp_type): New function.
2202         (parseurl): Use it.
2203
2204         * connect.c (iwrite): Allow writing in a few chunks.
2205         (bindport): Made SRV static, so addr can point to it.
2206         (select_fd): Removed HPUX kludge.
2207
2208         * host.c (free_hlist): Incorporated into clean_hosts().
2209
2210 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2211
2212         * host.c (hlist): Made static.
2213         (search_address): Cosmetic change.
2214
2215 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2216
2217         * version.c: Wget v1.5-b1 is released.
2218
2219         * http.c (hgetlen): Use sizeof() to get the header length.
2220         (hgetrange): Ditto.
2221         (hgettype): Ditto.
2222         (hgetlocation): Ditto.
2223         (hgetmodified): Ditto.
2224         (haccepts_none): Ditto.
2225
2226         * main.c (main): Updated `--version' and `--help' output, as per
2227         Francois Pinard's suggestions.
2228
2229         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
2230         textdomain().
2231
2232         * config.h.in: Define stubs for I18N3.
2233
2234         * wget.h: Include libintl.h.
2235
2236 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2237
2238         * url.c (mkstruct): Check for opt.cut_dirs.
2239         (mkstruct): alloca()-te more, xmalloc() less.
2240
2241         * utils.c (load_file): Check for ferror().
2242
2243         * url.c (get_urls_file): Close only the files we opened.
2244         (get_urls_html): Ditto.
2245         (count_slashes): New function.
2246
2247         * http.h: Removed.
2248
2249         * http.c (gethttp): Respect username and password provided by
2250         proxy URL.
2251         (base64_encode_line): Write into an existing buffer instead of
2252         malloc-ing a new one.
2253         (struct http_stat): Moved from http.h
2254
2255         * retr.c (retrieve_url): Free SUF.
2256
2257         * all: Removed lots of unnecessary .h dependencies.
2258
2259         * html.c (global_state): Made static.
2260
2261         * utils.h (ALLOCA_ARRAY): New macro.
2262
2263         * main.c (main): New option `--cut-dirs'.
2264
2265         * url.c (construct): Use alloca() for T.
2266
2267         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
2268
2269         * host.c (_host_t): Moved from host.h.
2270         (struct host): Renamed from _host_t.
2271         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
2272         (realhost): Ditto.
2273
2274         * host.h: Don't include url.h.
2275
2276         * ftp.c (LIST_FILENAME): Moved from ftp.h.
2277
2278         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
2279
2280         * main.c (main): Enable log if the output goes to a TTY.
2281
2282         * connect.h: Removed unused constant `BACKLOG'.
2283
2284         * config.h.in: Check for isatty().
2285
2286         * Makefile.in (LINK): Use CFLAGS when linking.
2287
2288 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2289
2290         * mswindows.c (ws_hangup): Use redirect_output().
2291
2292         * main.c (redirect_output_signal): New function; use
2293         redirect_output().
2294
2295         * log.c (redirect_output): New function, based on hangup(), which
2296         is deleted.
2297
2298         * log.c (vlogmsg): New function.
2299
2300         * wget.h (DEBUGP): Use debug_logmsg().
2301
2302         * main.c (hangup): Use it.
2303
2304         * log.c (log_dump): New function.
2305
2306         * utils.h (DO_REALLOC): Use `long' for various sizes.
2307
2308         * http.c (hskip_lws): Use `while', for clarity.
2309         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
2310         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
2311
2312         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
2313         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
2314
2315         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
2316         (LEGIBLE_SEPARATOR): Ditto.
2317         (FILE_BUFFER_SIZE): Ditto.
2318
2319         * retr.c (BUFFER_SIZE): Moved from retr.h.
2320
2321         * log.c: New file.
2322         (logmsg): Moved from utils.c.
2323         (debug_logmsg): New function.
2324
2325         * mswindows.h: Include it here.
2326
2327         * init.c: Ditto.
2328
2329         * utils.c: Don't include <windows.h>.
2330
2331 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
2332
2333         * host.c (ftp_getaddress): Ditto.
2334
2335         * main.c (main): Use it.
2336
2337         * utils.h (STRDUP_ALLOCA): New macro.
2338
2339         * init.c: Prepend `wget: ' to error messages printed on stderr.
2340
2341         * utils.c (mkdirhier): Renamed from mymkdir.
2342         (touch): Renamed from my_touch.
2343         (pwd_cuserid): Renamed from my_cuserid().
2344
2345 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
2346
2347         * utils.c (accdir): Process wildcards.
2348         (proclist): New function.
2349         (accdir): Use it to avoid code repetition.
2350
2351 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2352
2353         * recur.c (parse_robots): Respect opt.useragent; use alloca().
2354
2355         * http.c (gethttp): Construct useragent accordingly.
2356
2357         * version.c: Changed version string to numbers-only.
2358
2359         * main.c (print_help): List all the options.
2360
2361         * mswindows.c (windows_main_junk): Initialize argv0 here.
2362
2363 1998-01-24  Karl Heuer  <kwzh@gnu.org>
2364
2365         * netrc.c (search_netrc): Initialize `l' only after processing
2366         netrc.
2367
2368         * main.c (main): Don't trap SIGHUP if it's being ignored.
2369
2370 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2371
2372         * all: Use logmsg().
2373
2374         * utils.c (time_str): Moved from retr.c.
2375         (logmsg): New function.
2376         (logmsg_noflush): Ditto.
2377
2378         * rbuf.c: New file, moved buf_* functions here.
2379
2380         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
2381
2382         * ftp-basic.c (ftp_rest): Use prnum().
2383
2384         * ftp-basic.c: Ditto.
2385
2386         * ftp.c: Use the new reading functions and macros.
2387
2388         * retr.c (buf_initialize): New function.
2389         (buf_initialized_p): Ditto.
2390         (buf_uninitialize): Ditto.
2391         (buf_fd): Ditto.
2392
2393         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
2394         efficiency.
2395         (gethttp): Use alloca() where appropriate.
2396
2397         * retr.c (buf_readchar): Use it.
2398         (buf_peek): Use rstreams.
2399
2400         * retr.h (BUF_READCHAR): New macro.
2401
2402         * init.c (home_dir): Rewritten for clarity.
2403         (init_path): Ditto.
2404
2405         * mswindows.c (ws_backgnd): Made static.
2406         (read_registry): Ditto.
2407         (ws_cleanup): Ditto.
2408         (ws_handler): Ditto.
2409
2410 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2411
2412         * alloca.c: New file.
2413
2414         * Makefile.in (ALLOCA): Define.
2415
2416         * mswindows.c (ws_help): Constify.
2417         (ws_help): Use alloca.
2418
2419         * mswindows.c: Reformat.
2420
2421         * all: Added _(...) annotations for I18N snarfing and translation.
2422
2423         * host.c (ftp_getaddress): Nuke SYSINFO.
2424         (ftp_getaddress): Don't use getdomainname().
2425         (ftp_getaddress): Use uname(), where available.
2426
2427         * http.c (gethttp): Protect a stray fprintf().
2428
2429         * init.c (settime): New function.
2430         (setval): Treat WAIT specially, allowing suffixes like `m' for
2431         minutes, etc.
2432
2433 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2434
2435         * url.c (get_urls_html): Use alloca() for TEMP.
2436
2437 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
2438
2439         * url.c (rotate_backups): New function.
2440
2441         * http.c (gethttp): Ditto.
2442
2443         * ftp.c (getftp): Rotate backups.
2444
2445 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
2446
2447         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
2448         xrealloc() and xstrdup().  Use the new functions.
2449
2450         * url.c (decode_string): Made static.
2451         (has_proto): Ditto.
2452         (parse_dir): Ditto.
2453         (parse_uname): Ditto.
2454         (mkstruct): Ditto.
2455         (construct): Ditto.
2456         (construct_relative): Ditto.
2457
2458         * retr.c (show_progress): Made static.
2459
2460         * recur.c (robots_url): Made static.
2461         (retrieve_robots): Ditto.
2462         (parse_robots): Ditto.
2463         (robots_match): Ditto.
2464
2465         * main.h: Removed.
2466
2467         * main.c (printhelp): Made static.
2468         (hangup): Ditto.
2469
2470         * init.c (comind): Made static.
2471         (defaults): Ditto.
2472         (init_path): Ditto.
2473         (run_wgetrc): Ditto.
2474         (onoff): Ditto.
2475         (setonoff): Ditto.
2476         (setnum): Ditto.
2477         (myatoi): Ditto.
2478         (getperms): Ditto.
2479         (setbytes): Ditto.
2480
2481         * http.c (fetch_next_header): Made static.
2482         (hparsestatline): Ditto.
2483         (hskip_lws): Ditto.
2484         (hgetlen): Ditto.
2485         (hgetrange): Ditto.
2486         (hgettype): Ditto.
2487         (hgetlocation): Ditto.
2488         (hgetmodified): Ditto.
2489         (haccepts_none): Ditto.
2490         (gethttp): Ditto.
2491         (base64_encode_line): Ditto.
2492         (mktime_from_utc): Ditto.
2493         (http_atotm): Ditto.
2494
2495         * html.c (idmatch): Made static.
2496
2497         * host.c (search_host): Made static.
2498         (search_address): Ditto.
2499         (free_hlist): Ditto.
2500
2501         * ftp.c (getftp): Made static.
2502         (ftp_loop_internal): Ditto.
2503         (ftp_get_listing): Ditto.
2504         (ftp_retrieve_list): Ditto.
2505         (ftp_retrieve_dirs): Ditto.
2506         (ftp_retrieve_glob): Ditto.
2507         (freefileinfo): Ditto.
2508         (delelement): Ditto.
2509
2510         * ftp-ls.c (symperms): Made static.
2511         (ftp_parse_unix_ls): Ditto.
2512
2513         * connect.c (select_fd): Made static.
2514
2515         * utils.c (xmalloc): Renamed from nmalloc.
2516         (xrealloc): Renamed from nrealloc.
2517         (xstrdup): Renamed from nstrdup.
2518
2519         * getopt.c (exchange): Use alloca.
2520
2521         * mswindows.c (mycuserid): Use strncpy.
2522
2523         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
2524         systhings.h, windecl.h and winjunk.h removed.
2525
2526         * mswindows.c (sleep): New function.
2527
2528         * utils.c: Include <windows.h> under Windows.
2529
2530 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
2531
2532         * url.h (URL_UNSAFE): Change default under Windows.
2533
2534         * retr.c (retrieve_from_file): Respect opt.delete_after.
2535
2536         * main.c (main): Call ws_help on Windows.
2537
2538         * winjunk.c (windows_main_junk): New function.
2539
2540         * main.c (main): Junk-process argv[0].
2541
2542         * http.c (mktime_from_utc): Return -1 if mktime failed.
2543
2544         * http.c (http_loop): Ditto.
2545
2546         * ftp.c (ftp_loop_internal): Change title on Windows when using a
2547         new URL.
2548
2549         * winjunk.c (getdomainname): Lots of functions.
2550
2551 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
2552
2553         * cmpt.c (strptime_internal): Handle years more correctly for
2554         `%y'.
2555
2556 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
2557
2558         * http.c (gethttp): Allocate enough space for
2559         `Proxy-Authorization' header.
2560
2561 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2562
2563         * version.c: Wget/1.4.5 is released.
2564
2565 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2566
2567         * retr.c (get_contents): Check return value of fwrite more
2568         carefully.
2569
2570 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2571
2572         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
2573         year, regardless of century.
2574
2575 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2576
2577         * utils.c (isfile): Use `lstat' instead of `stat'.
2578
2579 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2580
2581         * utils.c (numdigit): Use explicit test.
2582
2583 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
2584
2585         * http.c (http_loop): Always use `url_filename' to get u->local.
2586
2587 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
2588
2589         * url.c: Recognize https.
2590
2591 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
2592
2593         * recur.c (recursive_retrieve): Lowercase just the host name.
2594
2595 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
2596
2597         * url.c (get_urls_file): Use the correct test.
2598         (get_urls_html): Ditto.
2599
2600 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2601
2602         * connect.c: Reverted addrlen to int.
2603
2604         * init.c (parse_line): Check for -1 instead of NONE.
2605
2606         * version.c: Changed version to 1.4.5.
2607
2608 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2609
2610         * init.c: New option netrc.
2611         (initialize): Don't parse .netrc.
2612
2613         * cmpt.c (recursive): Return rp.
2614         (strptime_internal): Match the long strings first, the abbreviated
2615         second.
2616
2617 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
2618
2619         * http.c (check_end): New function.
2620         (http_atotm): Use it.
2621
2622 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
2623
2624         * http.c (gethttp): Use them.
2625
2626         * init.c: New options proxy_user and proxy_passwd.
2627
2628 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2629
2630         * ftp.c (ftp_retrieve_list): Create links even if not relative.
2631
2632 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
2633
2634         * recur.c (recursive_retrieve): Lowercase the host name, if the
2635         URL is not "optimized".
2636
2637         * host.c (realhost): Return l->hostname, even if it matches with
2638         host.
2639
2640 1997-02-10  Marin Purgar  <pmc@asgard.hr>
2641
2642         * connect.c: Make addrlen size_t instead of int.
2643         (conaddr): Ditto.
2644
2645 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2646
2647         * systhings.h: Define S_ISLNK on NeXT too.
2648
2649 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
2650
2651         * version.c: Released 1.4.3.
2652
2653         * url.c: Futher update to list of protostrings.
2654         (skip_proto): Skip `//' correctly for FTP and HTTP.
2655
2656         * url.c (get_urls_html): Handle bogus `http:' things a little
2657         different.
2658
2659         * main.c (main): Removed `follow-ftp' from `f'.
2660         (main): Dumped the `prefix-files' and `file-prefix' options and
2661         features; old and bogus.
2662         (main): Exit on failed setval() in `-e'.
2663
2664         * http.c (fetch_next_header): Use it to detect header continuation
2665         correctly.
2666
2667         * retr.c (buf_peek): New function.
2668
2669 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2670
2671         * wget.h: Include time.h and stuff.
2672
2673 1997-02-08  Roger Beeman  <beeman@cisco.com>
2674
2675         * ftp.c: Include <time.h>
2676
2677 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2678
2679         * url.c (findurl): Would read over buffer limits.
2680
2681 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2682
2683         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
2684
2685 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
2686
2687         * http.c (http_atotm): Initialize tm.is_dst.
2688
2689 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2690
2691         * http.c (gethttp): Don't print the number of retrieved headers.
2692
2693         * main.c (main): New option `--no-clobber', alias for `-nc'.
2694
2695         * url.c: Recognize `https://'.
2696
2697 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2698
2699         * host.c (herrmsg): Don't use h_errno.
2700
2701 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2702
2703         * host.c (accept_domain): Use it.
2704
2705         * main.c (main): New option `--exclude-domains'.
2706
2707         * retr.c (retrieve_url): Use it.
2708         (retrieve_url): Bail out when an URL is redirecting to itself.
2709
2710         * url.c (url_equal): New function.
2711
2712 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2713
2714         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
2715
2716         * http.c (mk_utc_time): New function.
2717         (http_atotm): Use it; handle time zones correctly.
2718
2719 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2720
2721         * http.c: Ditto.
2722
2723         * ftp-basic.c: Use it instead of WRITE.
2724
2725         * connect.c (iwrite): New function.
2726
2727 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2728
2729         * cmpt.c (mktime): New function.
2730
2731         * netrc.c: Include <sys/types.h>.
2732
2733         * main.c (main): Wouldn't recognize --spider.
2734
2735         * retr.c (rate): Use `B', `KB' and `MB'.
2736         (reset_timer,elapsed_time): Moved from utils.c.
2737
2738         * ftp.c (ftp_retrieve_list): Ditto.
2739
2740         * http.c (http_loop): Don't touch the file if opt.dfp.
2741
2742 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2743
2744         * cmpt.c: New file.
2745
2746         * ftp.c (ftp_retrieve_glob): New argument semantics.
2747         (ftp_retrieve_dirs): Use it.
2748         (ftp_loop): Ditto.
2749
2750         * html.c (htmlfindurl): Recognize `'' as the quote char.
2751
2752 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2753
2754         * ftp.c (ftp_loop_internal): Use it.
2755
2756         * utils.c (remove_link): New function.
2757
2758 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
2759
2760         * retr.c (retrieve_url): Require STRICT redirection URL.
2761
2762         * url.c (parseurl): New argument STRICT.
2763
2764         * http.c (hparsestatline): Be a little-bit less strict about
2765         status line format.
2766
2767 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2768
2769         * http.c (gethttp): Use it.
2770
2771         * main.c (main): Don't use '<digit>' as options.
2772
2773         * init.c: New option ignore_length.
2774
2775         * http.c (gethttp): Ditto.
2776         (http_loop): Check for redirection without Location:.
2777         (gethttp): Don't print Length unless RETROKF.
2778
2779         * ftp.c (getftp): Use it.
2780
2781         * url.c (mkalldirs): New function.
2782
2783         * utils.c (mymkdir): Don't check for existing non-directory.
2784
2785         * url.c (mkstruct): Don't create the directory.
2786
2787 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
2788
2789         * init.c (setval): Removed NO_RECURSION checks.
2790
2791 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
2792
2793         * version.c: "Released" 1.4.3-pre2.
2794
2795         * recur.c (recursive_retrieve): Bypass host checking only if URL
2796         is ftp AND parent URL is not ftp.
2797
2798         * ftp-basic.c (ftp_request): Print out Turtle Power.
2799
2800         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
2801         wildcard.
2802         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
2803         not glob.
2804
2805         * http.c (gethttp): Be a little bit smarter about status codes.
2806
2807         * recur.c (recursive_retrieve): Always reset opt.recursive when
2808         dealing with FTP.
2809
2810 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
2811
2812         * retr.c (retrieve_url): New variable location_changed; use it for
2813         tests instead of mynewloc.
2814         (retrieve_url): Allow heuristic adding of html.
2815
2816         * url.c (url_filename): Don't use the `%' in Windows file names.
2817
2818         * http.c (http_loop): Always time-stamp the local file.
2819
2820         * http.c (http_loop): Ditto.
2821
2822         * ftp.c (ftp_retrieve_list): Use it.
2823
2824         * utils.c (my_touch): New function.
2825
2826         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
2827         instead of #ifndef NeXT.
2828
2829         * utils.c (strptime): New version, by Ulrich Drepper.
2830
2831 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
2832
2833         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
2834         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
2835         (http_loop): Would remove ACCEPTRANGES.
2836
2837         * ftp.c (getftp): Call ftp_list with NULL.
2838
2839 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
2840
2841         * html.c (ftp_index): Don't print minutes and seconds if we don't
2842         know them; beautify the output.
2843
2844         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
2845
2846 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
2847
2848         * utils.c (strptime): New function.
2849         (strptime): Don't use get_alt_number.
2850         (strptime): Don't use locale.
2851         (match_string): Made it a function.
2852
2853 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
2854
2855         * http.c (http_atotm): New function.
2856         (http_loop): Use it.
2857
2858         * atotm.c: Removed from the distribution.
2859
2860         * http.c (base64_encode_line): Rewrite.
2861
2862 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
2863
2864         * ftp.c (getftp): Use ftp_expected_bytes; print size.
2865
2866         * ftp-basic.c (ftp_response): Use ftp_last_respline.
2867         (ftp_expected_bytes): New function.
2868
2869         * ftp.c (getftp): Print the unauthoritative file length.
2870
2871         * ftp-ls.c: Renamed from ftp-unix.c.
2872         (ftp_parse_ls): Moved from ftp.c.
2873         (ftp_parse_unix_ls): Recognize seconds in time spec.
2874         (ftp_parse_unix_ls): Recognize year-less dates of the previous
2875         year.
2876
2877 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
2878
2879         * ftp-basic.c: Don't declare errno if #defined.
2880
2881         * host.c (ftp_getaddress): Check for sysinfo legally.
2882
2883 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
2884
2885         * connect.c (iread): Use READ.
2886
2887 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
2888
2889         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
2890         schemes.
2891
2892 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2893
2894         * host.c (ftp_getaddress): Allow `.' in hostname.
2895
2896 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
2897
2898         * wget.h: READ and WRITE macros for use instead of read and write
2899         on sockets, grep READ *.c, grep WRITE *.c
2900
2901         * wsstartup.c: new file - startup for winsock
2902
2903         * wsstartup.h: new file
2904
2905         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
2906
2907         * configure.bat: Configure utility for MSVC
2908
2909         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
2910
2911 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2912
2913         * version.c: Released 1.4.3-pre.
2914
2915         * utils.c (prnum): Accept long.
2916         (legible): Use prnum().
2917
2918         * connect.c (make_connection): Accept port as short.
2919         (bindport): Ditto.
2920
2921         * http.c (gethttp): Use search_netrc.
2922
2923 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
2924
2925         * ftp.c (getftp): Use search_netrc.
2926
2927         * netrc.c (free_netrc): New function.
2928
2929         * init.c (home_dir): New function.
2930
2931         * url.c (convert_links): Allow REL2ABS changes.
2932
2933 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
2934
2935         * netrc.c: New file.
2936         (parse_netrc, maybe_add_to_list): New functions.
2937
2938 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
2939
2940         * retr.c (retrieve_url): Reset opt.recursion before calling
2941         ftp_loop if it is reached through newloc.
2942
2943         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
2944         error; don't use "Syntax error", since we don't know if it is
2945         really a syntax error.
2946
2947 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
2948
2949         * utils.c (acceptable): Extract the filename part of the path.
2950
2951         * recur.c (recursive_retrieve): Call acceptable() with the right
2952         argument; would bug out on wildcards.
2953
2954         * init.c (parse_line): Likewise.
2955
2956         * html.c (htmlfindurl): Cast to char * when calling stuff.
2957
2958 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2959
2960         * ftp.c (getftp): Use ftp_pasv.
2961
2962         * ftp-basic.c (ftp_request): Accept NULL value.
2963         (ftp_pasv): New function.
2964
2965         * options.h (struct options): Add passive FTP option.
2966
2967 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2968
2969         * url.c (parseurl): Debug output.
2970
2971         * utils.c (path_simplify): New one, adapted from bash's
2972         canonicalize_pathname().
2973
2974 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
2975
2976         * ftp.c (getftp): Don't discard the buffer.
2977
2978         * retr.c (get_contents): New parameter nobuf.
2979
2980 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2981
2982         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
2983
2984         * init.c (setval): Strip the trailing slashes on CVECDIR.
2985
2986 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2987
2988         * init.c: Make excludes and includes under CVECDIR instead of
2989         CVEC.
2990
2991 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2992
2993         * url.c (get_urls_html): Skip "http:".
2994
2995 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2996
2997         * utils.c (strcasecmp): From glibc.
2998         (strncasecmp): Also.
2999         (strstr): Also.
3000
3001         * url.c: Added javascript: to the list of URLs prefixes.
3002
3003 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
3004
3005         * recur.c (retrieve_robots): Print the warning message only if
3006         verbose.
3007
3008 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3009
3010         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
3011
3012 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
3013
3014         * systhings.h: New file.
3015
3016         * ../configure.in: Check for utime.h
3017
3018         * ftp.c: Check whether we have unistd.h.
3019
3020 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
3021
3022         * recur.c (recursive_retrieve): Send the canonical URL as referer.
3023         (recursive_retrieve): Call get_urls_html with the canonical URL.
3024
3025 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3026
3027         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
3028         ansi2knr support for compilers which don't support ANSI style
3029         function prototypes and signatures.
3030
3031         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
3032
3033 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
3034
3035         * url.c: Use it; Recognize paths ending with "." and ".." as
3036         directories.
3037         (url_filename): Append .n whenever file exists and could be a
3038         directory.
3039
3040         * url.h (ISDDOT): New macro.
3041
3042         * init.c (parse_line): Use unsigned char.
3043
3044         * url.c (get_urls_html): Cast to unsigned char * when calling
3045         htmlfindurl.
3046
3047         * html.c (htmlfindurl): Use unsigned char.
3048
3049         * version.c: Changed version to 1.4.3.
3050
3051 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
3052
3053         * version.c: Released 1.4.2.
3054
3055         * ftp.c (getftp): Simplified assertion.
3056         (ftp_loop_internal): Remove symlink before downloading.
3057         (ftp_retrieve_list): Unlink the symlink name before attempting to
3058         create a symlink!
3059
3060         * options.h (struct options): Renamed print_server_response to
3061         server_response.
3062
3063         * ftp.c (rel_constr): Removed.
3064         (ftp_retrieve_list): Don't use it.
3065         (ftp_retrieve_list): Use opt.retr_symlinks.
3066
3067 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3068
3069         * main.c (main): New option retr_symlinks.
3070
3071         * url.c (convert_links): Print verbose message.
3072
3073 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3074
3075         * http.c (http_loop): Reset newloc in the beginning of function;
3076         would cause FMR in retrieve_url.
3077
3078 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
3079
3080         * recur.c (convert_all_links): Find the URL of each HTML document,
3081         and feed it to get_urls_html; would bug out.
3082         (convert_all_links): Check for l2 instead of dl; removed dl.
3083
3084         * url.c (convert_links): Don't refer to freed newname.
3085
3086         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
3087
3088         * main.c (main): Print the OS_TYPE in the debug output, too.
3089
3090         * recur.c (recursive_retrieve): Check for opt.delete_after.
3091
3092         * main.c (main): New option delete-after.
3093
3094         * init.c (setval): Cleaned up.
3095
3096 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
3097
3098         * Makefile.in (wget): Make `wget' the default target.
3099
3100         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
3101         loop.
3102         (ftp_retrieve_list): Warn about non-matching sizes.
3103
3104         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
3105
3106         * init.c (setnum): Renamed from setnuminf; New argument flags.
3107         (setval): Use it.
3108
3109         * main.c (main): Sorted the options.
3110         (main): New option --wait.
3111
3112 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
3113
3114         * html.c (htmlfindurl): Reset s->in_quote after getting out of
3115         quotes.
3116
3117 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3118
3119         * version.c: Changed version to 1.4.2.
3120
3121 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3122
3123         * version.c: Released 1.4.1.
3124
3125         * html.c (html_quote_string): New function.
3126         (ftp_index): Use it.
3127         (htmlfindurl): A more gentle ending debug message.
3128
3129         * ftp.c (ftp_loop): Check for opt.htmlify.
3130
3131         * init.c: New command htmlify.
3132
3133         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
3134         strings.
3135         (ftp_loop): Print size of index.html.
3136
3137         * init.c (setval): Implement "styles".
3138
3139         * main.c (main): New option dotstyle.
3140
3141 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
3142
3143         * ftp.c (getftp): Close the master socket in case of errors, after
3144         bindport().
3145
3146         * connect.c (bindport): Initialize msock to -1.
3147
3148         * ftp.c (getftp): Initialize dtsock to -1.
3149
3150         * connect.c (closeport): Don't close sock if sock == -1.
3151
3152 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
3153
3154         * init.c (setnuminf): Nuked default value -- just leave unchanged.
3155         (setval): Don't send default values.
3156         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
3157
3158         * options.h (struct options): Use long for dot_bytes.
3159
3160         * init.c (setquota): Renamed to setbytes.
3161         (setval): Use setbytes on DOTBYTES.
3162
3163 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
3164
3165         * ftp.c (getftp): Initialize con->dltime.
3166
3167         * recur.c (recursive_retrieve): Use same_host instead of
3168         try_robots; simply load robots_txt whenever the host is changed.
3169         (recursive_retrieve): Free forbidden before calling parse_robots.
3170
3171 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
3172
3173         * retr.c (show_progress): Use them.
3174
3175         * options.h (struct options): New options dot_bytes, dots_on_line
3176         and dot_spacing.
3177
3178 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
3179
3180         * recur.c (recursive_retrieve): Retrieve directories regardless of
3181         acc/rej rules; check for empty u->file.
3182
3183 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
3184
3185         * init.c (setval): Use it.
3186
3187         * utils.c (merge_vecs): New function.
3188
3189         * init.c (setval): Reset the list-type functions when encountering
3190         "".
3191
3192 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3193
3194         * recur.c (recursive_retrieve): Use base_url instead of this_url
3195         for no_parent.
3196
3197 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3198
3199         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
3200
3201 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
3202
3203         * utils.c (sepstring): Rewrote; don't use strtok.
3204
3205         * recur.c (recursive_retrieve): Enter assorted this_url to slist
3206         when running the first time.
3207         (retrieve_robots): Warn to ignore errors when robots are loaded.
3208
3209         * utils.c (load_file): Moved from url.c.
3210
3211         * http.c: Made static variables const too in h* functions.
3212
3213         * main.c (main): Renamed --continue-ftp to --continue.
3214
3215         * recur.c (recursive_retrieve): Use it.
3216
3217         * utils.c (frontcmp): New function.
3218
3219         * url.c (accdir): New function.
3220
3221         * html.c (htmlfindurl): Recognize <area href=...>.
3222
3223         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
3224
3225         * init.c (setval): Free the existing opt.excludes and
3226         opt.includes, if available.
3227
3228         * main.c (main): New option -I.
3229
3230 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
3231
3232         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
3233
3234         * version.c: Changed version to 1.4.1.
3235
3236 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
3237
3238         * version.c: Released 1.4.0.
3239
3240 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3241
3242         * main.c (main): Free com and val after parse_line.
3243         (printhelp): Reorder the listing.
3244
3245         * http.c: More robust header parsing.
3246
3247         * http.c: Allow any number of spaces, or no spaces, precede ':'.
3248         (hskip_lws): New function.
3249         (haccepts_bytes): New function.
3250         (gethttp): Use it.
3251
3252         * init.c (setval): Check header sanity.
3253         (setval): Allow resetting of headers.
3254
3255 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3256
3257         * http.c (http_loop): Don't use has_wildcards.
3258
3259         * http.c (gethttp): Free all_headers -- would leak.
3260
3261         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
3262         0 -- this fixes a long-standing bug in -rl.
3263
3264 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
3265
3266         * ftp.c: Use -1 as "impossible" value for con->fd.
3267
3268         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
3269
3270         * init.c (parse_line): Use isalpha.
3271
3272         * ftp-unix.c: Use HAVE_UNISTD_H.
3273
3274         * mtch.c (has_wildcards): Don't match \.
3275
3276         * http.c (http_loop): Warn on HTTP wildcard usage.
3277
3278 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
3279
3280         * url.c (url_filename): Do not create numbered suffixes if
3281         opt.noclobber -- would bug out on -nc.
3282
3283 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
3284
3285         * recur.c (parse_robots): Don't chuck out the commands without
3286         arguments (`Disallow:<empty>' didn't work).
3287         (parse_robots): Compare versions lowercase.
3288         (parse_robots): Match on base_version, not version_string!
3289         (parse_robots): Handle comments properly.
3290         (parse_robots): Match versions in a sane way.
3291
3292         * init.c: Print nicer error messages.
3293
3294         * version.c: Changed version to 1.4.0.
3295
3296 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3297
3298         * version.c: Released 1.4.0-test2.
3299
3300         * init.c (run_wgetrc): Close fp.
3301
3302         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
3303         u->dir.
3304
3305 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3306
3307         * init.c (setquota): Allow inf as quota specification.
3308
3309 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
3310
3311         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
3312         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
3313
3314         * main.c (main): Check for quota by comparison with downloaded
3315         stuff, not from status.
3316
3317         * connect.c (select_fd): Should compile on HPUX without warnings now.
3318
3319         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
3320         returned RETROK.
3321
3322 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
3323
3324         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
3325         (getftp): Return FTPRETRINT on control connection error.
3326
3327         * html.c (htmlfindurl): Recognize <embed src=...> and
3328         <bgsound src=...>.
3329         (ftp_index): Handle username and password correctly.
3330
3331         * main.c (main): Made `-np' a synonim for --no-parent.
3332
3333 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3334
3335         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
3336         ftp_retrieve_glob.
3337
3338         * version.c: Changed version to 1.4.0-test2.
3339
3340 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3341
3342         * version.c: Released 1.4.0-test1.
3343
3344         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
3345         directory.
3346         (convert_links): Removed definition of make_backup.
3347
3348         * http.h: Removed definition of MAX_ERROR_LENGTH.
3349
3350         * host.c (ftp_getaddress): Check for "(none)" domains.
3351
3352         * ftp.c (ftp_retrieve_dirs): Docfix.
3353
3354         * http.c (gethttp): Use ou->referer instead of u->referer.
3355
3356         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
3357         this was known to cause coredumps on Linux.
3358
3359         * html.c (ftp_index): Cast the argument to local_time to time_t *.
3360
3361 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
3362
3363         * connect.c (select_fd): Use exceptfds -- once and for all.
3364
3365         * retr.c (retrieve_from_file): Free filename after
3366         recursive_retrieve.
3367         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
3368         first-time retrieval.
3369         (retrieve_from_file): Return uerr_t; new argument, count.
3370         (retrieve_from_file): Break on QUOTEXC.
3371
3372         * init.c (setquota): Fixed a bug that caused rejection of
3373         non-postfixed values..
3374
3375 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
3376
3377         * version.c: Changed name to wget.
3378
3379         * connect.c (iread): Smarter use of select.
3380         (select_fd): Set errno on timeout.  If not timeout, return 1
3381         instead of 0.
3382
3383 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
3384
3385         * ftp.c (ftp_loop_internal): Don't use con->cmd before
3386         establishing it.
3387
3388 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
3389
3390         * http.c (gethttp): Send correct referer when using proxy.
3391         (gethttp): Use struct urlinfo ou to access the relevant data; send
3392         correct authorization in all cases.
3393
3394         * host.c (same_host): Use skip_uname to skip username and
3395         password.
3396
3397         * url.c (skip_uname): New function.
3398         (parseurl): Use it.
3399
3400         * host.c (same_host): Do not assume HTTP -- same_host should now
3401         be totally foolproof.
3402
3403         * url.c (skip_proto): New function.
3404         (parse_uname): Use it.
3405
3406         * http.c (gethttp): Create local user and passwd from what is
3407         given.
3408
3409         * url.c (parseurl): Check for HTTP username and password too.
3410
3411 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
3412
3413         * config.h.in: Removed #define gethostbyname R...
3414
3415 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
3416
3417         * version.c: Changed version to 1.4.0-test1.
3418
3419 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
3420
3421         * version.c: "Released" 1.4b29.
3422
3423         * recur.c (recursive_retrieve): Check for no_parent.
3424
3425         * init.c (setval): Option update.
3426
3427         * main.c (main): New option no-parent.
3428
3429         * options.h (struct options): New variable no_parent.
3430
3431         * recur.c (recursive_retrieve): Only files are checked for
3432         opt.accepts and opt.rejects.
3433         (recursive_retrieve): Check directories for opt.excludes.
3434         (recursive_retrieve): Make the dir absolute when checking
3435         opt.excludes.
3436
3437         * html.c (htmlfindurl): Recognize <applet code=...> and <script
3438         src=...>
3439
3440 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3441
3442         * ftp.c (getftp): Do not line-break assert entries at all.
3443         (ftp_retrieve_dirs): docfix.
3444
3445         * connect.c (select_fd): Use fd + 1 as nfds.
3446
3447         * version.c: Changed version to 1.4b29.
3448
3449 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3450
3451         * version.c: "Released" 1.4b28.
3452
3453         * ftp.c (ftp_loop_internal): Check whether f->size == len and
3454         don't continue the loop if it is.
3455         (ftp_get_listing): Remove list_filename on unsuccesful loop.
3456
3457 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3458
3459         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
3460         (getftp): Do not use multiline assert.
3461
3462         * http.c (hparsestatline): Use mjr and mnr instead of major and
3463         minor, which don't compile on Ultrix.
3464         (http_loop): Use strcpy() to initialize tmp.
3465
3466         * all: Geturl -> Fetch
3467
3468 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3469
3470         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
3471         ':'.
3472
3473         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
3474         moving `bufsize &&' to the beginning of each check in for-loops.
3475
3476         * recur.c (parse_robots): Close fp on exit.
3477
3478         * url.c (mymkdir): Check for each directory before creating.
3479
3480 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3481
3482         * version.c: Changed version to 1.4b28.
3483
3484 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3485
3486         * version.c: "Released" 1.4b27.
3487
3488         * init.c (parse_line): Use isspace.
3489         (parse_line): Free *com on all errors.
3490
3491         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
3492         (delelement): Use next instead of f->next and prev instead of
3493         f->prev.
3494         (delelement): Free the members of the deleted element.
3495
3496         * http.c (http_loop): Do not return RETROK on code != 20x.
3497
3498         * init.c (cleanup): Free opt.user_header.
3499         (cleanup): Free opt.domains.
3500
3501         * url.c (freelists): Moved to cleanup().
3502
3503         * http.c (hparsestatline): Docfix.
3504
3505         * main.c (main): Return with error status on unsuccesful
3506         retrieval.
3507
3508         * init.c (setval): Do not remove listing when mirroring.
3509
3510         * url.c (url_filename): Use opt.fileprefix.
3511
3512         * ftp.c (ftp_get_listing): Use url_filename to get filename for
3513         .listing.
3514
3515         * main.c (main): New option: -rn.
3516
3517 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
3518
3519         * Makefile.in (RM): Added RM = rm -f.
3520
3521         * host.c (clean_hosts): New function.
3522         (free_hlist): Just free the list, no reset.
3523
3524         * version.c: Changed version to 1.4b27.
3525
3526 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
3527
3528         * version.c: "Released" 1.4b26.
3529
3530         * retr.c (retrieve_from_file): If call get_urls_html with
3531         opt.spider to make it silent in spider mode.
3532
3533         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
3534
3535         * url.h (CLEANDUP): New macro.
3536
3537         * http.c (gethttp): Fixed a bug that freed location only when it
3538         was NULL.
3539
3540         * retr.c (retrieve_url): Free url if it will not be stored,
3541         i.e. newloc is NULL.
3542
3543         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
3544         old version would bug out on <a href="x#a"href="y">.
3545
3546         * html.h (state_t): New member in_quote.
3547
3548         * html.c (htmlfindurl): Free s->attr at the beginning of
3549         attr-loop.
3550
3551         * recur.c (recursive_retrieve): Recognize RCLEANUP.
3552         (tried_robots): Make hosts a global variable.
3553         (recursive_retrieve): Free constr after URL host optimization.
3554         (tried_robots): Free urlinfo before exiting.
3555
3556         * utils.c (free_slist): New function.
3557
3558         * recur.c (recursive_retrieve): Use flags to add cleanup
3559         possibility.
3560
3561         * main.c (main): Free filename after recursive_retrieve.
3562
3563         * http.c (gethttp): Store successful responses too.
3564
3565 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
3566
3567         * all: Constified the whole source.  This required some minor
3568         changes in many functions in url.c, possibly introducing bugs -- I
3569         hope not.
3570
3571         * ftp-basic.c: Removed last_respline.
3572
3573         * http.c (gethttp): Free type.
3574
3575         * host.c (same_host): Free real1 and real2.
3576
3577         * main.c (main): New option --spider.
3578
3579         * retr.c (get_contents): Don't reset errno.
3580
3581         * main.c (main): Sorted the options.
3582
3583         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
3584         uninitialized by select().
3585
3586         * http.c (http_loop): Print the time when the connection is
3587         closed.
3588         (gethttp): Debug-print the HTTP request.
3589
3590 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
3591
3592         * connect.c (iread): Do not try reading after timeout.
3593
3594         * main.c (main): Would bug out on -T.
3595
3596         * connect.c (select_fd): Do not use exceptfds.
3597         (iread): Set ETIMEDOUT on select_fd <= 0.
3598
3599         * version.c: Changed version to 1.4b26.
3600
3601 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
3602
3603         * version.c: "Released" 1.4b25.
3604
3605         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
3606         or link name.
3607
3608         * http.c (gethttp): Add errcode to struct hstat.
3609         (http_loop): Use it.
3610
3611         * url.c (no_proxy_match): Simplify using char** for no_proxy.
3612
3613         * options.h (struct options): Make opt.no_proxy a vector.
3614
3615         * utils.c (sepstring): Use !*s instead of !strlen(s).
3616
3617         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
3618         (getperms): Use ISODIGIT instead of isdigit.
3619
3620         * ftp.c (getftp): Print time.
3621
3622         * main.c (main): Use legible output of downloaded quantity.
3623
3624         * ftp.c (getftp): Use elapsed_time().
3625         (ftp_loop_internal): Use rate().
3626
3627         * http.c (http_loop): Add download ratio output; Use rate().
3628
3629         * utils.c (rate): New function.
3630
3631 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
3632
3633         * http.c (http_loop): Use timer.
3634
3635         * ftp.c: Split to ftp-basic.c and ftp.c
3636
3637         * utils.c (reset_timer): New function.
3638         (elapsed_time): New function.
3639
3640         * retr.c (show_progress): Make bytes_in_line and offs long; should
3641         work on 16-bit machines.
3642
3643 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
3644
3645         * url.c (in_acclist): New argument backward.
3646
3647         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
3648         a file should be retrieved according to suffix.
3649         (ftp_get_listing): Check the return value of unlink; Do not call
3650         ftp_retrieve_dirs if depth reached maxreclevel.
3651         (ftp_retrieve_dirs): Check whether the directory is in
3652         exclude-list.
3653
3654         * main.c (main): Print the version number at the beginning of
3655         DEBUG output.
3656         (main): Use strrchr when creating exec_name.
3657
3658         * ftp.c (ftp_retrieve_glob): Do not close control connection.
3659
3660         * version.c: Changed version to 1.4b25.
3661
3662 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
3663
3664         * version.c: "Released" 1.4b24.
3665
3666         * Makefile.in: Rewrite.
3667
3668         * ftp.c (ftp_loop_internal): Likewise.
3669
3670         * retr.c (time_str): Check for failed time().
3671
3672         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
3673         HTML3.0.
3674
3675         * retr.c (time_str): Return time_t *.
3676
3677         * connect.c (bindport): Close msock on unsuccesful bind.
3678         (bindport): The same for getsockname and listen.
3679
3680         * retr.c (retrieve_url): Allow any number of retries on
3681         proxy.
3682
3683         * http.c (gethttp): Do not treat errno == 0 as timeout.
3684         (http_loop): Likewise.
3685         (http_loop): Cosmetic changes.
3686
3687         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
3688
3689         * retr.c (get_contents): Reset errno.
3690
3691         * ftp.c (getftp): Minor fixes.
3692
3693 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3694
3695         * http.c: Do not use backups.
3696
3697         * geturl.1 (WARNING): Warn that man-page could be obsolete.
3698
3699         * getopt.c (getopt_long): Moved to getopt.c
3700
3701         * geturl.texi: Enhanced.
3702
3703         * main.c (main): Use it.
3704
3705         * recur.c (convert_all_links): New function.
3706
3707         * utils.c (add_slist): New argument flags.
3708
3709         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
3710         (parse_robots): Do not chuck out empty value fields.
3711         (parse_robots): Make yourself welcome on empty Disallow.
3712
3713         * version.c: Changed version to 1.4b24.
3714
3715 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3716
3717         * version.c: "Released" 1.4b23.
3718
3719         * ftp.c (ftp_loop_internal): Get the time after getftp.
3720
3721         * Makefile.in (install.info): New target.
3722         (install): Use it.
3723
3724         * http.c (http_loop): Fix output when doing -O.
3725
3726 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3727
3728         * geturl.texi: New file.
3729
3730         * main.c (main): Do not print the warnings and download summary if
3731         opt.quiet is set.
3732
3733         * version.c: Changed version to 1.4b23.
3734
3735 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3736
3737         * "Released" 1.4b22.
3738
3739         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
3740         to avoid redefinition warnings.
3741
3742         * host.c (store_hostaddress): Use memcpy() to copy the address
3743         returned by inet_addr.
3744
3745         * version.c: Changed version to 1.4b22.
3746
3747 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
3748
3749         * version.c: "Released" 1.4b21.
3750
3751         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
3752
3753         * ftp.c (ftp_port): Use conaddr.
3754         (getftp): Print the file length.
3755         (ftp_retrieve_list): Check the stamps of plain files only.
3756
3757         * connect.c (closeport): Do not call shutdown().
3758         (conaddr): New function.
3759
3760         * html.c (ftp_index): Made it dfp-aware.
3761
3762         * init.c (cleanup): New name of freemem. Close opt.dfp.
3763
3764         * ftp.c (getftp): Use opt.dfp if it is set.
3765
3766         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
3767
3768         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
3769         CWDs to be sent with recursive FTP retrievals.
3770
3771 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
3772
3773         * recur.c (parse_robots): Made it more compliant with "official"
3774         specifications.
3775
3776         * http.c: New function.
3777
3778         * ftp-unix.c (ftp_parse_ls): Added better debug output.
3779
3780         * ftp.c (getftp): Print out the LIST in case of
3781         opt.print_server_response.
3782
3783         * version.c: Changed version to 1.4b21.
3784
3785 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
3786
3787         * version.c: "Released" 1.4b20.
3788
3789         * README: Update.
3790
3791         * http.c (gethttp): Preset lengths of various headers instead of
3792         calculating them dynamically.
3793         (gethttp): Check for 206 partial contents.
3794
3795 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
3796
3797         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
3798
3799         * http.c (gethttp): Send the port number in the Host: header.
3800
3801 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
3802
3803         * http.c (gethttp): Send host: header.
3804         (gethttp): Add the possibility of user-defined headers.
3805         (gethttp): Move decision about pragma: no-cache to http_loop,
3806         where it belongs.
3807         (gethttp): Pass a struct instead of enormous argument list.
3808         (http_loop): Use a new, fancier display format.
3809         (ftp_loop): Likewise.
3810
3811         * main.c: (hangup): Turn off buffering of the new log file.
3812
3813         * install-sh: Likewise.
3814
3815         * config.sub: Replace with the one in autoconf-2.10
3816
3817         * geturl.1: Update.
3818
3819         * init.c: New options httpuser and httppasswd.
3820
3821         * http.c: (base64_encode_line): New function.
3822         (gethttp): Send authentication.
3823
3824         * connect.c (make_connection): Use store_hostaddress.
3825
3826 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
3827
3828         * host.c (store_hostaddress): New function.
3829
3830         * NEWS: Update.
3831
3832         * http.c (hgetrange): New function.
3833         (gethttp): Use ranges.
3834
3835         * utils.c (numdigit): Accept long instead of int.
3836
3837         * http.c (http_loop): Add restart capabilities.
3838
3839         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
3840         being used uninitialized.
3841         (ftp_retrieve_list): Similar fix.
3842
3843         * host.c (add_hlist): Fixed a bug that could cause cmp being used
3844         uninitialized.
3845
3846         * url.c (construct_relative): New function.
3847
3848         * recur.c (recursive_retrieve): Use it.
3849
3850         * retr.c (convert_links): New function.
3851
3852 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
3853
3854         * url.c (free_urlpos): New function.
3855
3856         * recur.c (recursive_retrieve): Adapt.
3857
3858         * url.c (get_urls_html): Return a linked list instead of a vector.
3859
3860         * url.c (get_urls_file): Return a linked list instead of a vector.
3861
3862         * geturl.1: Update.
3863
3864         * http.c (gethttp): Implement it.
3865
3866         * init.c (setval): New option: SAVEHEADERS
3867
3868         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
3869         be retrieved. Lack of this test caused bugs when the connection
3870         was lost during listing.
3871
3872         * retr.c (retrieve_url): Fixed a bug that caused
3873         coredumps. *newloc is now reset by default.
3874         (retrieve_url): Lift the twenty-tries limit on proxies.
3875
3876         * version.c: Changed version to 1.4b20.
3877
3878 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
3879
3880         * version.c: "Released" 1.4b19.
3881
3882 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
3883
3884         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
3885         (getftp): Changed prototype to accept ccon *.
3886
3887 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
3888
3889         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
3890         incorrect values to files pointed to by symbolic links.
3891         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
3892
3893 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
3894
3895         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
3896
3897         * main.c (main): New option: --user-agent.
3898
3899         * geturl.1: Ditto.
3900
3901         * init.h: Ditto.
3902
3903         * init.c (setval): Ditto.
3904
3905         * main.c (main): Rename "server-headers" to "server-response".
3906
3907         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
3908         executables in 'ls -F' listings.
3909
3910 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
3911
3912         * url.c (parseurl): Remove realloc() and sprintf().
3913         (str_url): Get rid of sprintf().
3914
3915         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
3916         servers.
3917
3918         * url.h (URL_CLEANSE): Made it else-resistant.
3919         (USE_PROXY): New macro.
3920
3921 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3922
3923         * NEWS: Update.
3924
3925         * version.c: Changed version to 1.4b19.
3926
3927 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3928
3929         * version.c: "Released" 1.4b18.
3930
3931         * url.c: Made it reallocate space exponentially.
3932
3933 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
3934
3935         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
3936         the list of stuff to fetch.
3937
3938 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
3939
3940         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
3941         -Fi.
3942
3943         * html.c (htmlfindurl): Rewrite.
3944
3945         * http.c (gethttp): Use opt.proxy_cache.
3946
3947         * main.c (main): Added --cache option.
3948
3949         * ftp.c (ftp_response): Print server response if opt.print_server
3950         response is set.
3951         (getftp): Print newlines after each request if the server response
3952         is to be printed.
3953         (ftp_response): Copy the last response line to last_respline.
3954
3955         * http.c (gethttp): Add Pragma: nocache for retried
3956         proxy-retrievals.
3957
3958         * ftp.c (getftp): Use it.
3959
3960         * retr.c (buf_discard): New function.
3961
3962         * ftp.c (ftp_response): Use buf_readchar().
3963         (getftp): Flush the control connection buffer before calling
3964         get_contents().
3965
3966         * retr.c (buf_readchar): New function.
3967         (buf_flush): New function.
3968         (get_contents): Use buf_readchar() instead of read(x, x, 1).
3969         (get_contents): Use buf_flush.
3970
3971 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3972
3973         * ftp.c: Incorporate changes to ftp_response.
3974
3975         * ftp.c (ftp_response): Allocate the server response dynamically,
3976         as in read_whole_line and fetch_next_header.
3977
3978         * utils.c (read_whole_line): Fixed a bug that prevented reading
3979         the last line if it is not \n-terminated. Also fixed a possible
3980         memory overflow.
3981
3982         * http.c (fetch_next_header): Return malloc-ed string as large as
3983         needed.
3984         (gethttp): Use new fetch_next_header.
3985
3986 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3987
3988         * http.c (hgetlen): Compute the header length the first time only.
3989         (hgettype): Ditto.
3990         (hgetlocation): Ditto.
3991         (hgetmodified): Ditto.
3992
3993 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3994
3995         * sample.geturlrc: Update.
3996
3997 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3998
3999         * http.c (http_loop): Ditto.
4000
4001         * ftp.c (getftp): Open the output file as binary.
4002
4003         * version.c: Changed version to 1.4b18.
4004
4005 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4006
4007         * version.c: "Released" 1.4b17.
4008
4009         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
4010         instead of failed assertion.
4011
4012 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
4013
4014         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
4015         if a file of that name already exists.
4016
4017 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
4018
4019         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
4020
4021         * config.h.in: Define gethostbyname as Rgethostbyname when using
4022         Socks.
4023
4024         * configure.in: Check for -lresolv if using Socks.
4025
4026         * version.c: Changed version to 1.4b17.
4027
4028 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
4029
4030         * version.c: "Released" 1.4b16.
4031
4032         * http.c (gethttp): More intelligent check for first line of HTTP
4033         response.
4034         (gethttp): Would bug out on time-stamping.
4035
4036         * version.c: Changed version to 1.4b16.
4037
4038 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4039
4040         * version.c: Released 1.4b15.
4041
4042         * http.c (http_loop): Print \n after the loop entry, not before.
4043
4044         * url.c (url_filename): Use ISDOT.
4045
4046         * url.h (ISDOT): New macro.
4047
4048         * recur.c (recursive_retrieve): Change only opt.recursive for
4049         following FTP.
4050
4051 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
4052
4053         * socks/geturl.cgi: Fixed version No.
4054
4055         * socks/download-netscape.html: Ditto.
4056
4057         * socks/download.html: Changed socks.html to download.html.
4058
4059 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4060
4061         * url.c (url_filename): Check for opt.dirstruct instead for
4062         opt.recursive && opt.dirstruct.
4063
4064         * init.c (defaults): Ditto.
4065         (defaults): Reset dirstruct by default.
4066         (setval): Set opt.dirstruct whenever setting recursive.
4067
4068         * init.h: Removed FORCEDIRHIER.
4069
4070         * INSTALL: Added -L to socks-description.
4071
4072         * version.c: Changed version to 1.4b15.
4073
4074 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
4075
4076         * version.c: "Released" 1.4b14.
4077
4078         * geturl.1: Update AUTHOR to include Rosella as contributor.
4079
4080         * NEWS: Update.
4081
4082         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
4083
4084         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
4085         (cal_time): Fix == to eq.
4086
4087         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
4088
4089         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
4090
4091         * Makefile.in: Use @VERSION@.
4092
4093         * configure.in: Check version from version.c.
4094
4095         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
4096
4097         * socks/download.html: Created from download-netscape.html, made
4098         HTML-2.0 compliant.
4099
4100         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
4101         following FTP links from recursions.
4102
4103 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4104
4105         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
4106         absolute directories correctly.
4107
4108         * version.c: Changed version to 1.4b14.
4109
4110 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4111
4112         * version.c: "Released" 1.4b13.
4113
4114         * url.c (make_backup): New function.
4115
4116         * http.c (http_loop): Make a backup copy of the local file (using
4117         rename(2)) before opening it.
4118
4119         * main.c (main): Added --backups.
4120
4121         * host.c (ftp_getaddress): Bail out on failed mycuserid().
4122         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
4123         (ftp_getaddress): Check for empty, null or (null) domain.
4124
4125         * url.c (get_urls_html): If this_url is NULL, the base must have a
4126         protocol.
4127         (parseurl): Use has_proto.
4128
4129         * retr.c (retrieve_url): Warn when proxy is used with more than 20
4130         retries.
4131
4132         * url.c (mkstruct): Create the directory (calling mymkdir()) only
4133         if it is not already there.
4134         (has_proto): New function.
4135         (get_urls_html): Eliminate the remaining call to findurl -- use
4136         has_proto.
4137
4138         * geturl.1: Ditto.
4139
4140         * main.c: Change -X to -x.
4141
4142         * url.c (url_filename): Simplify creation of filename if
4143         prefix_files is set.
4144         (url_filename): Simplify everything. And I do mean *everything*.
4145         (mkstruct): Add dir_prefix before hostname.
4146         (path_simplify): Fixed a bug that caused writing outside the path
4147         string in case of "." and ".." path strings.
4148
4149 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
4150
4151         * init.c: Added --mirror.
4152
4153         * main.c (main): Added -X to force saving of directory hierarchy.
4154
4155         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
4156         (ftp_retrieve_list): Check whether quota is exceeded.
4157
4158         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
4159
4160         * http.c (gethttp): Use referer if present.
4161
4162         * recur.c (recursive_retrieve): Set u->referer before calling
4163         retrieve_url.
4164
4165         * url.c (newurl): Use memset to nullify the struct members.
4166         (freeurl): Free the referer field too.
4167
4168         * url.h: Added referer to urlinfo.
4169
4170         * geturl.1: Updated the manual to document some of the new features.
4171
4172         * utils.c (numdigit): Moved from url.c.
4173
4174         * README: Rewritten.
4175
4176         * config.h.in: Add the support for socks.
4177
4178         * configure.in: Add the support for socks.
4179
4180         * url.c (url_filename): If the dir_prefix is ".", work with just
4181         the file name.
4182         (url_filename): Do not look for .n extensions if timestamping if
4183         turned on.
4184
4185         * retr.c (show_progress): Skip the over-abundant restval data, and
4186         print the rest of it with ',' instead of '.'.
4187
4188 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
4189
4190         * retr.c (show_progress): Changed second arg. to long (as it
4191         should be).
4192         (show_progress): Moved to retr.c.
4193         (get_contents): Moved to retr.c.
4194
4195         * version.c: Change version to 1.4b13.
4196
4197 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
4198
4199         * url.c (in_acclist): Would return after the first suffix.
4200
4201 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
4202
4203         * version.c: "Released" 1.4b12.
4204
4205         * url.c (path_simplify): More kludgifications.
4206         (get_urls_html): Use new parameters for htmlfindurl.
4207
4208         * html.c: Removed memorizing "parser states", since the new
4209         organization does not require them.
4210
4211         * init.c (run_geturlrc): Use read_whole_line.
4212
4213         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
4214
4215         * recur.c (parse_robots): Use read_whole_line.
4216
4217         * utils.c (read_whole_line): New function.
4218
4219         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
4220
4221         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
4222         tested on OSF and Ultrix.
4223         (add_hlist): New function.
4224         (free_hlist): New function.
4225         (search_host): New function.
4226         (search_address): New function.
4227         (realhost): Use search_host, search_address and add_hlist.
4228         (same_host): Replaced realloc() with strdupdelim(), made
4229         case-insensitive, fixed a memory leak.
4230
4231         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
4232         tm_min, like intended.
4233
4234         * version.c: Change user agent information to
4235         Geturl/version.
4236
4237 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
4238
4239         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
4240
4241         * url.c (acceptable): Always accept directories.
4242
4243         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
4244         servers by stripping trailing @ from symlinks and trailing / from
4245         directories.
4246
4247         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
4248
4249         * url.c (skip_url): Use toupper instead of UCASE.
4250
4251         * host.c (sufmatch): Made it case-insensitive.
4252
4253         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
4254         (match_backwards): New function, instead of
4255         match_backwards_or_pattern.
4256
4257         * recur.c (recursive_retrieve): Increased performance by
4258         introducing inl, which reduces number of calls to in_slist to only
4259         one.
4260
4261         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
4262         routine to use.
4263
4264         * main.c (printhelp): Removed the warranty stuff.
4265
4266 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
4267
4268         * url.c (add_slist): Simplify.
4269         (match_backwards_or_pattern): New function.
4270         (in_acclist): Use match_backwards_or_pattern.
4271         (matches): Remove.
4272
4273 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
4274
4275         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
4276         recursive.
4277
4278         * html.c (ftp_index): Fixed to work. Beautified the output.
4279
4280         * ftp.c (ftp_retrieve_glob): Another argument to control whether
4281         globbing is to be used.
4282         (ftp_retrieve_list): Compare the time-stamps of local and remote
4283         files to determine whether to download.
4284
4285 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
4286
4287         * ftp.c (rel_constr): New function.
4288
4289         * retr.c (retrieve_from_file): Check for text/html before
4290         retrieving recursively.
4291
4292         * main.c (main): Check whether the file is HTML before going into
4293         recursive HTML retrieving.
4294
4295         * ftp.c (ftp_retrieve_list): Manage directories.
4296         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
4297         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
4298         initialized, causing bugchecks in getftp to fail.
4299
4300         * configure.in: Check for symlink.
4301
4302         * ftp.c (ftp_retrieve_list): Added support for symlinks.
4303
4304         * version.c: "Released" 1.4b10.
4305
4306         * atotm.c (atotm): Redeclared as time_t.
4307
4308         * init.c: New variable "timestamping".
4309
4310         * main.c (main): New option 'N'.
4311
4312         * http.c (hgetlocation): Case-insensitive match.
4313         (hgetmodified): New function.
4314         (http_loop): Implement time-stamping.
4315
4316 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
4317
4318         * version.c: Changed version to 1.4b10
4319
4320         * atotm.c: New file, from phttpd.
4321
4322         * options.h (struct options): New parameter timestamping.
4323
4324         * version.c: 1.4b9 "released".
4325
4326         * recur.c (recursive_retrieve): Used linked list (ulist) for
4327         faster storing of URLs.
4328
4329         * url.c (get_urls_html): Removed the old kludge with comparing the
4330         outputs of htmlfindurl and findurl.
4331         (get_urls_html): Added better protocol support here.
4332         (create_hash): Removed, as well as add_hash and in_hash.
4333         (addslist): New function.
4334         (in_slist): ditto
4335
4336         * version.c: Released 1.4b8, changed version to b9.
4337
4338 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4339
4340         * ftp.c (freefileinfo): New function.
4341         (delelement): New function.
4342
4343         * everywhere: GPL!
4344
4345         * ftp.c (ftp_loop): Use ccon.
4346         (ftp_retrieve_glob): Likewise.
4347
4348         * ftp.h: Define ccon, to define status of control connection.
4349
4350         * ftp.c (ftp_get_listing): New function.
4351         (ftp_retrieve_more): New function.
4352         (ftp_retrieve_glob): New function.
4353
4354 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
4355
4356         * configure.in: Removed the search for cuserid().
4357
4358         * init.c (getmode): Renamed to getperms.
4359
4360 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
4361
4362         * version.c: New version.
4363
4364         * main.c (hangup): New function, that handles hangup. Hangup
4365         signal now causes geturl to stop writing on stdout, and to write
4366         to a log file.
4367
4368         * ftp.c (getftp): "Released" 1.4b7.
4369
4370         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
4371         (ftp_index): Use fileinfo/urlinfo.
4372
4373         * ftp-unix.c (ftp_parse_ls): New function.
4374         (symperms): New function.
4375
4376         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
4377
4378         * retr.c (retrieve_url): Added FTP support.
4379
4380 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4381
4382         * geturl.h: Removed NOTFTP2HTML enum.
4383         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
4384
4385         * ftp.c (getftp): Resynched with urlinfo.
4386         (getftp): Removed HMTL-ization of index.html from getftp.
4387
4388         * version.c: 1.4b6 "released".
4389
4390         * options.h (options): New struct, to keep options in.
4391
4392         * http.c (http_loop,gethttp): Synched with proxy.
4393
4394         * retr.c (retrieve_url): Implemented proxy retrieval.
4395
4396         * main.c (main): Use retrieve_from_file.
4397
4398 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
4399
4400         * retr.c (retrieve_from_file): New function.
4401
4402         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
4403         can be found in u->proto.
4404
4405         * ftp.c (ftp_response): Fixed to accept multi-line responses as
4406         per RFC 959.
4407
4408         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
4409
4410         * url.c (mymkdir): Removed the file of the same name, if one
4411         exists.
4412         (isfile): New function.
4413         (mkstruct): Fixed the '/' glitches.
4414         (path_simplify): Hacked to treat something/.. correctly.
4415
4416 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4417
4418         * http.c (gethttp): Close the socket after error in headers.
4419         (http_loop): HEOF no longer a fatal header.
4420
4421         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
4422         simplifies the syntax of calling retrieve_url.
4423
4424         * recr.c (recursive_retrieve): Modified to use get_urls_html.
4425
4426         * url.c (get_urls_file): New function.
4427         (get_urls_html): New function.
4428
4429         * recr.c (recursive_retrieve): Patched up to conform to the
4430         standards.
4431
4432         * http.c (gethttp): Synched with the rest...
4433         (gethttp): Treat only CONREFUSED specially, with connection
4434         errors.
4435
4436         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
4437
4438 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
4439
4440         * http.c (http_loop): New function.
4441
4442         * loop.c: Removed *lots* of stuff from retrieve_url.
4443
4444         * url.c (parseurl): Changed to work with urlinfo. Integrated
4445         username finding and path parsing.
4446         (newurl): New function.
4447         (freeurl): New function.
4448         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
4449         (url_filename): Likewise.
4450         (path_simplify): Accept relative paths too.
4451         (opt_url): Made urlinfo-compliant, removed bogosities.
4452         (path_simplify): Expanded to accept relative paths.
4453         (str_url): A replacement for hide_url
4454         (decode_string): Fixed a bug that caused malfunctioning when
4455         encountering an illegal %.. combination.
4456         (opt_url): Removed the argument. Dot-optimizations are now default.
4457
4458         * nmalloc.c (strdupdelim): New function.
4459
4460         * url.h: Added the urlinfo structure
4461
4462 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
4463
4464         * url.c (hide_url): Thrown out the protocol assertion. Do not
4465         change the URL if the protocol if not recognized.
4466         (findurl): Put continue instead of break.
4467
4468 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
4469
4470         * sample.geturlrc: Changed the defaults to be commented out and
4471         harmless (previous defaults caused pains if copied to
4472         ~/.geturlrc).
4473
4474         * http.c (gethttp): Print the HTTP request in debug mode.
4475
4476         * connect.c (iread): Added EINTR check loop to select-ing
4477         too. EINTR is now correctly handled with select().
4478
4479         * TODO: new file
4480
4481 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
4482
4483         * host.c (same_host): Made the function a little bit more
4484         intelligent regarding diversified URL syntaxes.
4485
4486         * url.c (skip_url): Spaces are now skipped after URL:
4487
4488         * Released 1.3.1 with the patch to prevent crashing when sending
4489         NULL to robot* functions and the patch to compile "out of the box"
4490         on AIX.
4491
4492         * recr.c (recursive_retrieve): Added checking whether this_url is
4493         NULL when calling the robot functions.
4494
4495         * ChangeLog: New file.