]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Fix opt.wait.
[wget] / src / ChangeLog
1 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2
3         * ftp.c (ftp_loop_internal): Ditto.
4
5         * http.c (http_loop): Use it.
6
7         * retr.c (sleep_between_retrievals): New function that handles the
8         logic of opt.wait and opt.waitretry.
9
10 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
11
12         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
13         rbuf_read_bufferful when the buffer is depleted.
14
15         * rbuf.c (rbuf_read_bufferful): New function.
16
17 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
18
19         * gen_sslfunc.h: Use ansi2knr style function declarations.
20
21         * gen_sslfunc.c: Reformat according to the GNU coding standards.
22         More should be done.
23
24         * http.c (persistent_available_p): Place the cheap SSL test nearer
25         the top of the function.
26         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
27
28 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
29
30         * Makefile.in: added gen_sslfunc object
31         * config.h.in: added HAVE_SSL define
32         * connect.c: changed select_fd from static int to int
33         * connect.h: ditto
34         * gen_sslfunc.h: New file
35         * gen_sslfunc.c: ditto
36         * http.c: added HTTPS fuctionality
37         * retrc.c: ditto
38         * url.c: ditto
39         * init.c: added opt.httpsproxy
40         * options.h: ditto
41         * rbuf.h: added alternate rbuf struct
42         * wget.h: added CONSSLERR
43         * rbuf.c: ditto
44
45 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
46
47         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
48         "ignore_perms" to ignore file and directory permissions for
49         Windows NT FTP server listings.
50         (ftp_parse_winnt_ls): New function.
51         (ftp_parse_ls): Parses UNIX and Windows NT listings
52         separately. Simple heuristics for distinguishing between UNIX
53         and MS-DOS-like FTP listing provided by Windows NT FTP service.
54
55 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
56
57         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
58         char.
59
60 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
61
62         * netrc.c (parse_netrc): Get rid of line ending.
63
64 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
65
66         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
67         Dan.
68
69 2000-11-24  Karl Eichwalder  <ke@suse.de>
70
71         * main.c (print_help): Untabify.
72
73 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
74
75         * utils.c (xrealloc_debug): Do the unregister/register thing only
76         if the pointer has actually changed.
77         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
78         (xfree_real): Ditto.
79         (xrealloc_real): Ditto.
80         (xstrdup_real): Ditto.
81
82 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
83
84         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
85         string; no need to strdup() it.
86         (getftp): Make pwd_len a local variable.
87         (ftp_loop): Free PWD before returning.
88
89         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
90
91 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
92
93         * all: Use xfree() instead of free.
94
95         * utils.c (xfree): New function.
96
97 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
98
99         * url.c (convert_links): HTML-quote the converted string.
100
101         * utils.c (html_quote_string): Move here from ftp-ls.c
102         (html_quote_string): Make non-static; declare in utils.h.
103         (html_quote_string): Convert SP to &#32;.
104
105 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
106
107         * ftp.c (getftp): Reformat Jan's code according to GNU coding
108         standards; remove (debugging?) printf's; use '\0' for the ASCII
109         zero character.  Use alloca() instead of malloc() for
110         inter-function temporary allocations.
111
112 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
113
114         * ftpparse.c, ftpparse.h: New files.
115
116         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
117         only. Use ftp_parse_nonunix_ls otherwise.
118         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
119         exotic FTP servers.
120
121         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
122         FTP servers.
123
124         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
125         (getftp): Support for VMS. Support for FTP servers that do not
126         place you in the root directory after login.
127         (ftp_retrieve_list): VMS is silent about the real file size, issue
128         a more appropriate message.
129         (ftp_get_listing): Pass host_type to ftp_parse_ls.
130
131         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
132
133 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
134
135         * hash.c (hash_table_put): Don't overwrite deleted mappings.
136
137 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
138
139         * hash.c (find_mapping): New function.
140         (hash_table_get): Use it.
141         (hash_table_get_pair): Ditto.
142         (hash_table_exists): Ditto.
143         (hash_table_remove): Ditto.
144         (hash_table_remove): Really delete the entry if the mapping
145         following LOCATION is empty.
146
147         * utils.c (string_set_add): Check whether the element has existed
148         before.
149
150         * hash.c (hash_table_get_pair): New function.
151
152 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
153
154         * http.c (http_process_type): Ignore trailing whitespace; use
155         strdupdelim().
156
157         * recur.c (recursive_retrieve): Use the new `convert' field.
158         (convert_all_links): Ditto.
159         (convert_all_links): Don't respect meta_disallow_follow.
160
161         * html-url.c (handle_link): Fill out link_relative_p and
162         link_complete_p.
163
164         * url.h (struct _urlpos): Make elements more readable.
165
166         * recur.c (recursive_retrieve): Call slist_prepend instead of
167         slist_append.
168         (convert_all_links): Call slist_nreverse before iterating through
169         urls_html.
170
171         * utils.c (slist_prepend): New function.
172         (slist_nreverse): Ditto.
173
174 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
175
176         * http.c (check_end): Constify.
177
178 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
179
180         * http.c (http_loop): If username and password are known, try the
181         `Basic' authentication scheme by default.
182
183         * connect.h: Declare test_socket_open.
184
185 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
186
187         * version.c: Bump version to 1.7-dev.
188
189 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
190
191         * http.c (gethttp): Don't use the return value of sprintf().
192         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
193
194 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
195
196         * recur.c (recursive_retrieve): Print the "so we don't load"
197         debugging message only if we really don't load.
198
199         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
200         (gethttp): Don't request keep-alive if keep-alive is inhibited.
201
202 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
203
204         * http.c (gethttp): Make the HTTP persistent connections more
205         robust.
206
207 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
208
209         * retr.c (get_contents): If use_expected, make sure that the
210         appropriate amount of data is being read.
211
212         * http.c (gethttp): Check for both `Keep-Alive: ...' and
213         `Connection: Keep-Alive'.
214
215         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
216         turned on.
217
218 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
219
220         * http.c (connection_available_p): Use it.
221
222         * connect.c (test_socket_open): New function.
223
224         * http.c (gethttp): Support persistent connections.  Based on the
225         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
226         (register_persistent): New function.
227         (connection_available_p): Ditto.
228         (invalidate_connection): Ditto.
229
230 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
231
232         * url.c (convert_links): Handle UREL2ABS case.
233
234         * recur.c (recursive_retrieve): Instead of the list
235         urls_downloaded, use hash tables dl_file_url_map and
236         dl_url_file_map.
237         (convert_all_links): Use them to retrieve data.
238
239         * host.c (clean_hosts): Free the hash tables.
240
241         * main.c (private_initialize): Call host_init().
242
243         * host.c (store_hostaddress): Use a saner, hash table-based data
244         model.
245         (realhost): Ditto.
246         (host_init): Initialize the hash tables.
247
248 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
249
250         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
251         used for what the sorted slists used to be used for.
252         (slist_contains): Don't rely on the list being sorted.
253         (slist_append): Simplify the code.
254
255         * recur.c (recursive_cleanup): Use free_string_set.
256
257         * utils.c (string_set_add, string_set_exists, string_set_free):
258         New functions for easier freeing of hash tables whose keys are
259         strdup'ed strings.
260
261         * recur.c (recursive_retrieve): Use the hash table functions for
262         storing undesirable URLs.
263
264         * hash.c: New file.
265
266 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
267
268         * main.c (private_initialize): Call url_init.
269         (main): Call private_initialize.
270
271         * url.c (unsafe_char_table): New table.
272         (UNSAFE_CHAR): Use it.
273         (init_unsafe_char_table): New function.
274         (url_init): New function; call init_unsafe_char_table.
275
276 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
277
278         * html-url.c (handle_link): Handle HTML fragment identifiers.
279
280         * recur.c (recursive_retrieve): If norobot info is respected and
281         the file is specified not to be followed by robots, respect that.
282
283         * html-url.c (collect_tags_mapper): Handle <meta name=robots
284         content=X>.  For us the important cases are where X is NONE or
285         where X contains NOFOLLOW.
286         (get_urls_html): Propagate that information to the caller.
287
288 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
289
290         * url.c (convert_links): Unlink the file we might be reading from
291         before writing to it.
292         (convert_links): Use alloca instead of malloc for
293         filename_plus_orig_suffix.
294
295 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
296
297         * url.c (get_urls_file): Ditto.
298         (convert_links): Ditto.
299
300         * html-url.c (get_urls_html): Use read_file() instead of
301         load_file().
302
303         * utils.c (read_file): New function, instead of the old
304         load_file().
305         (read_file_free): Ditto.
306
307         * url.c (findurl): Search only for the supported protocols.
308         (convert_links): Use fwrite() when writing out a region of
309         characters.
310
311 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
312
313         * ftp-ls.c: Move html_quote_string and ftp_index here.
314
315         * url.c: Remove get_urls_html, since that's now in html-url.c.
316
317         * html-url.c: New file.
318
319         * html-parse.c: New file.
320
321 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
322
323         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
324         _vsnprintf respectively.
325
326 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
327
328         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
329         on Linux.
330
331 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
332
333         * host.c (realhost): Add HOST to the list with quality==0 only if
334         it wasn't already there.
335         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
336
337 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
338
339         * init.c (run_wgetrc): Don't bother killing off '\r' since
340         pars_line() skips whitespace at end of line anyway.
341         (parse_line): Oops, it didn't.  Now it does.
342
343         * recur.c (parse_robots): Ditto here.
344
345         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
346         manually because read_whole_line no longer does.
347
348         * utils.c (read_whole_line): Rewrite to: a) use less memory
349         (reallocates to needed size after work), b) work faster -->
350         fgets() instead of getc, c) be more correct --> doesn't kill the
351         newline character at the end of line.
352
353 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
354
355         * init.c (comind): Initialize MAX to array size - 1.
356
357 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
358
359         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
360         Suggested by Edward J. Sabol.
361
362 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
363
364         * url.c (construct): Handle the case where host name is not
365         followed by a slash.
366
367 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
368
369         * init.c: commands[] need to be sorted!  ("base" wasn't.)
370
371 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
372
373         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
374         `if'.
375
376 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
377
378         * url.c (construct): Insert unneeded initialization for the
379         compiler to shut up.
380
381         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
382         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
383         otherwise gets lost when you define _XOPEN_SOURCE.
384
385         * utils.c (touch): Include the file name in the error message.
386         From Debian.
387
388 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
389
390         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
391         resize the buffer to fit the formated message.  That way, messages
392         of arbitrary size may be printed.
393         (logvprintf): Use saved_append() to optionally log the last
394         several lines of output.
395         (logputs): Ditto.
396         (log_close): Adapt to new data structures.
397         (log_dump): Ditto.
398         (redirect_output): Print messages to stderr, not to stdout.
399
400         * log.c (saved_append_1): New function.  Replaces the old logging
401         system ("log all output until 10M characters") with a new, much
402         more reasonable one ("log last screenful of text").
403         (saved_append): New function; call saved_append_1.
404         (free_log_line): New function.
405
406 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
407
408         * url.c (construct): Fix comment.
409         (find_last_char): Document.
410
411 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
412
413         * snprintf.c: New file.
414
415 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
416
417         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
418         types to logprintf() and debug_logprintf().
419
420 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
421
422         * ftp.c (ftp_loop_internal): Hide the password from the URL when
423         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
424         <darekm@bydg.lomac.com.pl>.
425
426 2000-11-02  Junio Hamano  <junio@twinsun.com>
427
428         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
429
430 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
431
432         * http.c (known_authentication_scheme_p): Recognize NTML
433         authentication.
434         (create_authorization_line): Treat NTML the same as `Basic'.
435
436 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
437
438         * retr.c (retrieve_url): Free url before returning.
439         (retrieve_url): Free mynewloc before returning.
440         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
441
442 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
443
444         * url.c (parseurl): Remove possible reading past the end of
445         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
446
447 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
448
449         * main.c (main): In case of opt.downloaded overflowing, print
450         <overflow> instead of a totally bogus random value.
451
452         * retr.c (retrieve_from_file): Ditto.
453
454         * recur.c (recursive_retrieve): Ditto.
455
456         * main.c (main): Ditto.
457
458         * http.c (http_loop): Ditto.
459
460         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
461         `+=', and downloaded_exceeds_quota() instead of the simple-minded
462         check.
463         (ftp_retrieve_list): Ditto.
464         (ftp_retrieve_dirs): Ditto.
465         (ftp_retrieve_glob): Ditto.
466
467         * retr.c (downloaded_increase): New function.  Notice overflows of
468         opt.downloaded.
469         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
470         used if it overflowed.
471
472         * options.h (struct options): New member downloaded_overflow.
473
474 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
475
476         * wget.h (enum): Remove extra space after last enumeration.
477
478 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
479
480         * main.c (main): Use legible_very_long() for printing
481         opt.downloaded.
482
483         * utils.c (legible_1): New function that operates on strings and
484         does the brunt of legible()'s work.
485         (legible): Use legible_1().
486         (legible_very_long): New function; dump the argument with
487         sprintf(), and call legible_1().
488
489         * options.h (struct options): Use VERY_LONG_TYPE for
490         opt.downloaded.
491
492         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
493         type.
494
495         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
496         defined.  Define HAVE_LONG_LONG if long long is available.
497
498 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
499
500         * utils.c (long_to_string): Update with a later, better version.
501
502 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
503
504         * url.c (path_simplify_with_kludge): New function.
505         (path_simplify_with_kludge): Disable it.  Instead...
506         (parse_dir): ...make sure that at this point the right thing is
507         done, i.e. that "query" part of the URL (?...) is always assigned
508         to the file, never to the directory portion of the path.
509
510 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
511
512         * retr.c (retrieve_url): Detect redirection cycles.
513
514 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
515
516         * url.c (get_urls_html): Decode HTML entities using
517         html_decode_entities.
518
519         * html.c (htmlfindurl): Don't count the `#' in numeric entities
520         (&#NNN;) as an HTML fragemnt.
521         (html_decode_entities): New function.
522
523 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
524
525         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
526
527 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
528
529         * url.c (construct): Rewritten for clarity.  Avoids the
530         unnecessary copying and stack-allocation the old version
531         performed.
532
533 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
534
535         * ftp.c (getftp): Ditto.
536
537         * http.c (gethttp): Rewind the stream when retrying from scratch.
538
539 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
540
541         * retr.c (retrieve_url): Use url_concat() to handle relative
542         redirections instead of /ad hoc/ code.
543
544         * url.c (url_concat): New function encapsulating weird
545         construct().
546         (urllen_http_hack): New function.
547         (construct): When constructing new URLs, recognize that `?' does
548         not form part of the file name in HTTP.
549
550 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
551
552         * retr.c: Add msec timing support for WINDOWS.
553         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
554         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
555
556 2000-10-27  Dan Harkless  <dan-wget@dilvish.speed.net>
557
558         * retr.c (retrieve_url): Manually applied T. Bharath
559         <TBharath@responsenetworks.com>'s patch to get wget to grok
560         illegal relative URL redirects.  Reformatted and re-commented it.
561
562 2000-10-23  Dan Harkless  <dan-wget@dilvish.speed.net>
563
564         * connect.c (make_connection and bindport): Manually applied Rob
565         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
566         changing coding style to GNU's.
567
568         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
569         files downloaded via FTP.  Per a comment, .listing files were not
570         counted towards number of bytes and files downloaded because they're 
571         deleted anyway.  Well, they aren't under -nr, so count them then.
572
573         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
574         --bind-address, alphabetizing, changing coding style to GNU's,
575         commenting, and renaming cmd_ip_address() to cmd_address() to
576         imply hostnames also okay.
577                 
578         * main.c (main): --delete-after didn't delete the root of the
579         tree.  Ignore --convert-links if --delete-after was specified.
580         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
581         fixing duplicate use of added-since-1.5.3 case value.
582         (print_help): Clarified that --delete-after deletes local files.
583         Rob forgot to add a line for his new --bind-address option.
584                 
585         * options.h (struct options): Manually applied Rob Mayoff's patch
586         to add --bind-address (bind_address structure member).
587                 
588         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
589         Ignore --convert-links if --delete-after was specified.
590                 
591         * retr.c (retrieve_from_file): Just added a DEBUGP().
592                 
593 2000-10-19  Dan Harkless  <dan-wget@dilvish.speed.net>
594
595         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
596         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
597         patch to work around FTP servers that incorrectly respond to the
598         "REST" command with the remaining size rather than the total file size.
599                 
600         * http.c (gethttp): Improved a comment and added code to tack on
601         ".html" to text/html files without that extension when -E specified.
602         (http_loop): Use new downloaded_file() enumerators and deal with
603         the case of gethttp() called xrealloc() on u->local.
604
605         * init.c (commands): Added new "htmlextension" command.
606         Also renamed John Daily's cmd_quad() to the more descriptive
607         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
608         removed duplicate cmd_boolean() declaration.
609
610         * main.c (print_help): Added my new -E / --html-extension option.
611         (main): Undocumented --email-address option previously used -E synonym.
612         Stole it away for the much more deserving --html-extension's use.
613
614         * options.h (struct options): Added html_extension field.
615
616         * url.c (convert_links): URL X that we saved as X.html locally due
617         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
618         (downloaded_file): Now remembers if we added .html extension to a file.
619
620         * url.h (downloaded_file_t): Added extra enumerators to support above.
621         (downloaded_file): Now takes and returns a downloaded_file_t.
622
623         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
624         
625 2000-10-09  Dan Harkless  <dan-wget@dilvish.speed.net>
626
627         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
628                 
629         * main.c (print_help): Clarified what --retr-symlinks does.
630         
631 2000-09-15  John Daily  <jdaily@cyberdude.com>
632
633         * init.c: Add support for "always" and "never" values to allow
634         .wgetrc to override commandline (useful e.g. with .pm files
635         calling `wget --passive-ftp' when your firewall doesn't allow that).
636
637         * ftp.c (getftp): passive_ftp is first option to support always/never.
638
639 2000-08-30  Dan Harkless  <dan-wget@dilvish.speed.net>
640
641         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
642         
643         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
644         Wrapped some > 80-column lines.  When -p is specified and we're at a 
645         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
646         <LINK REL="stylesheet">.
647         
648         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
649         
650         * init.c: Added new -p / --page-requisites / page_requisites option.
651
652         * main.c (print_help): Clarified that -l inf and -l 0 both allow
653         infinite recursion.  Changed the unhelpful --mirrior description
654         to simply give the options it's equivalent to.  Added new -p option.
655         (main): Added some comments; handle new -p / --page-requisites.
656         
657         * options.h (struct options): Added new page_requisites field.
658
659         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
660         Calculate and pass down new `dash_p_leaf_HTML' parameter to
661         get_urls_html().  Use new INFINITE_RECURSION #define.
662
663         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
664         final `dash_p_leaf_HTML' parameter.
665
666         * url.c: get_urls_html() and htmlfindurl() now take final
667         `dash_p_leaf_HTML' parameter.
668
669         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
670
671         * wget.h: Added some comments and new INFINITE_RECURSION #define.
672         
673 2000-08-23  Dan Harkless  <dan-wget@dilvish.speed.net>
674
675         * main.c (print_help): -B / --base was not mentioned.
676
677 2000-08-22  Dan Harkless  <dan-wget@dilvish.speed.net>
678
679         * main.c (print_help): Modified -nc description to mention that it
680         also prevents the creation of multiple versions of the same file
681         with ".<number>" suffixes.
682
683 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
684
685         * retr.c (retrieve_url): Consistently strdup opt.referer when
686         setting u->referer.
687
688 2000-06-09  Dan Harkless  <dan-wget@dilvish.speed.net>
689
690         * main.c (print_help): --help output for --waitretry was over 80 cols.
691
692 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
693
694         * url.c (encode_string): Fix comment.
695         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
696
697 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
698
699         * ftp.c (ftp_retrieve_list): Change permissions only on plain
700         files.
701
702 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
703
704         * url.c (str_url): Print the port number only if it's different
705         from the default port number for that protocol.
706
707 2000-05-22  Dan Harkless  <dan-wget@dilvish.speed.net>
708
709         * main.c (print_help): Added --help line for Damir Dzeko
710         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
711         Removed comments that --referer and --waitretry were undocumented.
712         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
713         line for --execute.
714
715 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
716
717         * ftp.c (getftp): Ditto.
718
719         * http.c (gethttp): Check for return value of fclose/fflush.
720
721 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
722
723         * host.c (store_hostaddress): Instead of shifting ADDR, start
724         copying from the correct address.
725
726 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
727
728         * http.c (gethttp): Don't free REQUEST -- it was allocated with
729         alloca().
730         Pointed out by Gisle Vanem <gvanem@eunet.no>.
731
732 2000-04-04  Dan Harkless  <dan-wget@dilvish.speed.net>
733
734         * host.c (store_hostaddress): R. K. Owen's patch introduces a
735         "left shift count >= width of type" warning on 32-bit
736         architectures.  Got rid of it by tricking the compiler w/ a variable.
737         
738         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
739         characters per RFC1738, namely everything above '~'.  It also
740         generated a warning on OSes where char =~ unsigned char.  Fixed.
741         
742 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
743
744         * http.c (http_process_type): Removed needless strdup(), a memory
745         leak.
746
747 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
748
749         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
750
751 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
752
753         * init.c (wgetrc_file_name): Don't free HOME under Windows.
754
755 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
756
757         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
758
759 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
760
761         * url.c (UNSAFE_CHAR): New macro.
762         (contains_unsafe): Use it.
763         (encode_string): Ditto.
764
765 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
766
767         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
768
769 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
770
771         * Use TOUPPER/TOLOWER.
772
773 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
774
775         * ftp-opie.c (btoe): Zero-terminate OSTORE.
776
777 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
778
779         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
780
781         * sysdep.h (ISALNUM): New macro.
782         (TOLOWER): Ditto.
783         (TOUPPER): Ditto.
784
785 2000-03-10  Dan Harkless  <dan-wget@dilvish.speed.net>
786
787         * html.c (idmatch): Implemented checking of my new --follow-tags
788         and --ignore-tags options.
789         
790         * init.c (commands): Added comment reminding people adding new
791         entries doing allocation to add corresponding freeing in cleanup().
792         (commands): Added new followtags and ignoretags commands.
793         (cleanup): Free storage for new followtags and ignoretags.
794         
795         * main.c: Use of "comma-separated list" was random -- normalized
796         it.  Did some alphabetization.  Added comments pointing out
797         "Options without arguments" and "Options accepting an argument"
798         sections of long_options[].  Added new options --follow-tags and
799         -G / --ignore-tags.  Added comment that Damir's --referer is
800         currently undocumented.  Added comment that Heiko's --waitretry is
801         partially undocumented (mentioned in --help but not in
802         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
803         
804         * options.h (struct options): Added new fields follow_tags and
805         ignore_tags. 
806         
807         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
808         
809 2000-03-02  Dan Harkless  <dan-wget@dilvish.speed.net>
810
811         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
812         braces to avoid ambiguous `else'" warnings.  Eliminated them.
813         
814         * http.c (gethttp): Dan Berger's query string patch is totally
815         bogus.  If you have two different URLs, gen_page.cgi?page1 and
816         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
817         second will overwrite the first.  Also, parameters to implicit
818         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
819         be printed with trailing garbage characters, and could seg fault.
820         Backing out the patch, which Dan B. informed me by email was just
821         a kludge to download StarOffice from Sun made necessary due to
822         wget's unconditional escaping of certain characters (room for an
823         option there?).
824         (http_loop): Heiko introduced "suggest explicit braces to avoid
825         ambiguous `else'" warnings.  Eliminated them.
826         
827         * main.c: Heiko's --wait / --waitretry backwards compatibility
828         code looks to have been totally untested -- automatic variable
829         'wr' was used without being initialized, and a long int was passed
830         into setval()'s char* val parameter.
831         
832         * recur.c (parse_robots): Applied Edward J. Sabol
833         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
834         problem with "User-agent:<space>*<space>" lines in robots.txt.
835         
836         * url.c (parseurl, str_url): Removing Dan Berger's code (see
837         http.c above for explanation).
838         
839 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
840
841         * ftp.c: Respect new option waitretry.
842
843 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
844
845         * http.c (gethttp): Send custom Referer, if required.
846
847 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
848
849         * netrc.c (parse_netrc): Allow passwords to contain spaces.
850
851         * netrc.c (parse_netrc): New function.
852
853 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
854
855         * http.c (gethttp): Send it.
856
857         * url.c (parseurl): Detect query string in HTTP URL-s.
858         (str_url): Print it.
859
860 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
861
862         * html.c (html_allow): Add <link href=...> and <script src=...>.
863
864 1999-05-02  andrew deryabin  <djsf@softhome.net>
865
866         * http.c (gethttp): Specify port in `Host' header only if it's
867         different from 80.
868
869 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
870
871         * recur.c (recursive_retrieve): If a finite maximum depth is
872         specified, and we're are already at that depth, don't download the
873         HTML file for parsing.
874
875 2000-03-01  Dan Harkless  <dan-wget@dilvish.speed.net>
876
877         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
878         even though we don't do conversion on HTML files retrieved via
879         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
880         (ftp_retrieve_list): Added a comment saying where we need to
881         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
882         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
883         a lie -- reworded as "Server file no newer than local file '%s' --".
884         
885         * http.c (http_loop): Fixed a typo and clarified a comment.
886         (http_loop): When -K and -N are specified together, compare size
887         and timestamp of server file X against local file X.orig (if
888         extant) rather than converted local file X.
889         (http_loop): "Local file '%s' is more recent," is sometimes a lie
890         -- reworded as "Server file no newer than local file '%s' --".
891         (http_loop): Call new downloaded_file() function to prevent
892         wrongful overwriting of .orig file when -N is specified.
893         
894         * url.c (convert_links): When -K specified, only rename X to
895         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
896         file X due to -N, we clobber an X.orig from a previous invocation.
897         (convert_links): Call the failsafe xstrdup(), not the real strdup().
898         (convert_links): Added a note asking anyone who understands how
899         multiple URLs can correspond to a single file to comment it.
900         (downloaded_file): Added this new function.
901         
902         * url.h (downloaded_file): Added prototype for this new function
903         as well as its downloaded_file_t enum type.
904
905         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
906
907 2000-02-29  Dan Harkless  <dan-wget@dilvish.speed.net>
908
909         * version.c: Upped version to developer-only "1.5.3+dev".
910
911 2000-02-18  Dan Harkless  <dan-wget@dilvish.speed.net>
912
913         * init.c (backup_converted): Added this new option.
914
915         * main.c (-K / --backup-converted): Added this new option.
916
917         * options.h (backup_converted): Added this new option.
918
919         * url.c (convert_links): When backup_converted is specified, save
920         file X as X.orig before converting.
921
922         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
923
924 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
925
926         * version.c: Wget 1.5.3 is released.
927
928 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
929
930         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
931         address doesn't yield FQDN.
932
933 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
934
935         * cmpt.c (strerror): Fix declaration of sys_errlist.
936
937 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
938
939         * main.c (main): Don't use an array subscript as the first
940         argument to STRDUP_ALLOCA.
941         From Kaveh R. Ghazi.
942
943 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
944
945         * html.c (htmlfindurl): Download table background.
946
947 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
948
949         * init.c (parse_line): Would free *com before allocating it.
950         (parse_line): Would free com instead of *com.
951
952 1998-09-10  Howard Gayle  <howard@fjst.com>
953
954         * url.c (get_urls_html): Would drop the last character of the
955         link.
956
957 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
958
959         * http.c (http_loop): Don't print status code if quiet.
960
961 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
962
963         * log.c: Use <stdarg.h> only when __STDC__.
964
965 1998-09-10  Adam D. Moss  <adam@foxbox.org>
966
967         * html.c (htmlfindurl): Download <layer src=...>.
968
969 1998-09-10  Howard Gayle  <howard@fjst.com>
970
971         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
972         not retrieved.
973
974 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
975
976         * utils.c: Include <libc.h> on NeXT.
977
978 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
979
980         * url.c (get_urls_html): Fix calculation of URL position.
981
982 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
983
984         * version.c: Wget 1.5.2 is released.
985
986 1998-06-23  Dave Love  <d.love@dl.ac.uk>
987
988         * ftp.c, init.c, netrc.c: Include errno.h.
989
990         * http.c: Include errno.h and time header.
991
992         * Makefile.in (exext): Define.
993         (install.bin, uninstall.bin): Use it.
994
995 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
996
997         * http.c (http_loop): Don't attempt to compare local and remote
998         sizes if the remote size is unknown.
999
1000 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
1001
1002         * url.c (get_urls_html): Use malloc() instead of alloca in the
1003         loop.
1004
1005 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1006
1007         * version.c: Wget 1.5.2-b4 is released.
1008
1009 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1010
1011         * url.c (get_urls_html): Ignore spaces before and after the URI.
1012
1013 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
1014
1015         * ftp.c (getftp): Translate `done'.
1016
1017 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1018
1019         * version.c: Wget 1.5.2-b3 is released.
1020
1021 1998-06-06  Alexander Kourakos  <awk@bnt.com>
1022
1023         * init.c (cleanup): Close dfp, don't free it.
1024
1025 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1026
1027         * utils.c (make_directory): Twiddle.
1028
1029         * config.h.in: Added template for access().
1030
1031 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
1032
1033         * html.c (htmlfindurl): Download <input src=...>
1034
1035 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
1036
1037         * utils.c (file_exists_p): Use access() with two arguments.
1038
1039 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
1040
1041         * netrc.c (parse_netrc): Correct logic.
1042
1043 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
1044
1045         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
1046         <ljm@ljm.wownet.net>.
1047
1048 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
1049
1050         * version.c: Wget 1.5.2-b2 is released.
1051
1052 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
1053
1054         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
1055
1056 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
1057
1058         * retr.c (elapsed_time): Return correct value when
1059         HAVE_GETTIMEOFDAY is undefined.
1060
1061 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
1062
1063         * version.c: Wget 1.5.2-b1 is released.
1064
1065 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
1066
1067         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
1068         (_getopt_internal): Don't translate `#if 0'-ed strings.
1069
1070 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1071
1072         * mswindows.c (ws_handler): Use fork_to_background().
1073
1074 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1075
1076         * version.c: Wget 1.5.1 is released.
1077
1078 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1079
1080         * http.c (parse_http_status_line): Avoid `minor' and `major'
1081         names.
1082
1083 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
1084
1085         * utils.c (mkdirhier): Renamed to make_directory.
1086
1087 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
1088
1089         * mswindows.c (fork_to_background): Define under Windows.
1090
1091         * utils.c (fork_to_background): New function.
1092
1093         * html.c (htmlfindurl): Removed rerdundant casts.
1094
1095 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1096
1097         * mswindows.c (ws_mypath): Cache the path.
1098
1099 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1100
1101         * ftp.h: Prefix enum ftype members with FT_.
1102
1103         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
1104
1105         * mswindows.h: Use stat under Borland, _stat under MSVC.
1106
1107 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
1108
1109         * http.c (known_authentication_scheme_p): New function.
1110         (gethttp): Handle authorization more correctly.
1111
1112         * ftp-basic.h: Removed.
1113
1114         * cmpt.h: Removed.
1115
1116         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
1117         with gcc 2.8.
1118         (numdigit): Use `while' loop.
1119
1120         * http.c (create_authorization_line): Detect authentication
1121         schemes case-insensitively.
1122
1123         * http.c (extract_header_attr): Use strdupdelim().
1124         (digest_authentication_encode): Move declaration of local
1125         variables to smaller scope.
1126         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
1127         (create_authorization_line): Detect authentication schemes
1128         case-insensitively.
1129
1130         * utils.c (touch): Constify.
1131
1132         * http.c (gethttp): Report a nicer error when no data is received.
1133
1134         * rbuf.h (RBUF_READCHAR): Ditto.
1135
1136         * ftp-basic.c (ftp_response): Use sizeof.
1137
1138 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
1139
1140         * retr.c (print_percentage): EXPECTED is long, not int.
1141         (print_percentage): Use floating-point arithmetic to avoid
1142         overflow with large files' sizes multiplied with 100.
1143
1144 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
1145
1146         * config.h.in: Added pid_t stub.
1147
1148         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
1149         define it).
1150
1151 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
1152
1153         * version.c: Wget 1.5.0 is released.
1154
1155 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
1156
1157         * url.c (str_url): Ditto.
1158
1159         * ftp-basic.c (ftp_rest): Use new name.
1160
1161         * utils.c (long_to_string): Renamed from prnum().
1162
1163 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
1164
1165         * version.c: Wget 1.5-b17 is released.
1166
1167 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1168
1169         * headers.c (header_get): New argument FLAGS.
1170
1171         * http.c (gethttp): If request is malformed, bail out of the
1172         header loop.
1173         (gethttp): Check for empty header *after* the status line checks.
1174         (gethttp): Disallow continuations for status line.
1175
1176 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1177
1178         * version.c: Wget 1.5-b16 is released.
1179
1180 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1181
1182         * init.c (commands): Renamed `always_rest' to `continue'.
1183
1184 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
1185
1186         * all: Use it.
1187
1188         * log.c (logputs): New argument.
1189         (logvprintf): Ditto.
1190         (logprintf): Ditto.
1191
1192 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1193
1194         * http.c (http_atotm): Update comment.
1195
1196         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
1197
1198         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
1199
1200         * main.c (i18n_initialize): New function.
1201         (main): Use it.
1202
1203         * log.c: Include <unistd.h>.
1204
1205         * retr.c (show_progress): Cast alloca to char *.
1206
1207 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1208
1209         * version.c: Wget 1.5-b15 is released.
1210
1211 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1212
1213         * utils.h: Declare file_non_directory_p().
1214
1215 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
1216
1217         * main.c (main): It's `tries', not `numtries' now.
1218
1219 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1220
1221         * init.c (getperms): Removed.
1222
1223 1998-04-01  Tim Charron  <tcharron@interlog.com>
1224
1225         * log.c (logvprintf): Don't use ARGS twice.
1226
1227 1998-04-01  John  <john@futuresguide.com>
1228
1229         * mswindows.c: Cleaned up.
1230
1231 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1232
1233         * version.c: Wget 1.5-b14 is released.
1234
1235 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1236
1237         * ftp-opie.c (STRLEN4): New macro.
1238         (btoe): Use it.
1239
1240 1998-04-01  Junio Hamano  <junio@twinsun.com>
1241
1242         * http.c: Document all the Digest functions.
1243
1244 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1245
1246         * utils.c (file_non_directory_p): Renamed from isfile().
1247
1248         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
1249
1250 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1251
1252         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
1253
1254         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
1255         style.
1256         (cmd_permissions): Removed.
1257
1258         * config.h.in: Add template for WORDS_BIGENDIAN.
1259
1260 1998-03-31  Junio Hamano  <junio@twinsun.com>
1261
1262         * http.c (HEXD2asc): New macro.
1263         (dump_hash): Use it.
1264
1265 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1266
1267         * version.c: Wget 1.5-b13 is released.
1268
1269 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1270
1271         * main.c (main): Don't try to use `com'.
1272
1273 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1274
1275         * init.c (cmd_permissions): New function.
1276
1277 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1278
1279         * version.c: Wget 1.5-b12 is released.
1280
1281 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1282
1283         * init.c (commands): Renamed `numtries' to `tries'.
1284         (cmd_spec_debug): Removed.
1285         (home_dir): Under Windows, return `C:\' if HOME is undefined.
1286
1287 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1288
1289         * config.h.in: Define _XOPEN_SOURCE.
1290
1291         * init.c (check_user_specified_header): New function.
1292         (cmd_spec_header): Use it.
1293         (cmd_spec_useragent): New function.
1294
1295 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1296
1297         * version.c: Wget 1.5-b11 is released.
1298
1299 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
1300
1301         * wget.h: Include <libintl.h> only if NLS is enabled.
1302
1303 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
1304
1305         * options.h (struct options): Made `wait' a long.
1306         (struct options): Ditto for `timeout'.
1307
1308 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
1309
1310         * utils.c (exists): Renamed to file_exists_p.
1311         (file_exists_p): Use access() if available.
1312
1313 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
1314
1315         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
1316         infloop.
1317
1318         * log.c: do_logging -> save_log_p.
1319
1320         * config.h.in: Added template for HAVE_VSNPRINTF.
1321
1322 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1323
1324         * init.c: Ditto.
1325
1326         * http.c: Protect declaration against non-ANSI compiler.
1327
1328         * log.c (logvprintf): Use vsnprintf() if available.
1329
1330         * getopt.c (main): Don't translate test stuff.
1331
1332 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1333
1334         * version.c: Wget 1.5-b10 is released.
1335
1336 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
1337
1338         * ftp.c (getftp): Don't translate "CWD %s".
1339
1340         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
1341
1342 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1343
1344         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
1345
1346         * log.c (logputs): New function.
1347         (logvprintf): Renamed from vlogmsg; use logputs().
1348
1349         * retr.c (show_progress): Print `[100%]' when the retrieval is
1350         finished.
1351
1352         * init.c (run_wgetrc): Use FILE, not PATH.
1353         (wgetrc_file_name): Ditto.
1354
1355 1998-03-07  Tim Adam  <tma@osa.com.au>
1356
1357         * recur.c (parse_robots): Correctly reset `entries' on empty
1358         disallow.
1359
1360 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1361
1362         * init.c (cmd_spec_debug): Use cmd_boolean().
1363
1364 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
1365
1366         * http.c (gethttp): Create proxy-authorization correctly.
1367
1368 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1369
1370         * md5.c: Ditto.
1371
1372         * getopt.c: Use ANSI function definitions.
1373
1374         * ftp-opie.c: New file.
1375
1376         * options.h: Don't redefine EXTERN.
1377
1378         * init.c: Sort it correctly.
1379
1380 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1381
1382         * version.c: Wget 1.5-b9 is released.
1383
1384 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1385
1386         * recur.c (recursive_retrieve): Reset `first_time'.
1387
1388         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
1389
1390         * rbuf.c (rbuf_peek): Simplified.
1391         (rbuf_flush): Use MINVAL.
1392
1393         * wget.h (MINVAL): Moved from url.h.
1394
1395         * rbuf.h (RBUF_FD): New macro.
1396
1397         * url.c (add_url): Add to the head of the list.
1398
1399         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
1400         file.
1401         (getftp): Set the default permissions to 0600.
1402
1403 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
1404
1405         * url.c (get_urls_html): Ditto.
1406         (convert_links): Ditto.
1407
1408         * recur.c (parse_robots): Ditto.
1409
1410         * html.c (ftp_index): Ditto.
1411
1412         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
1413
1414         * init.c (defaults): Initialize `opt' to zero via memset.
1415
1416         * http.c (digest_authentication_encode): goto considered harmful.
1417
1418 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
1419
1420         * ftp.c (delelement): Simplify and fix leak.
1421
1422 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
1423
1424         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
1425
1426         * url.h (HEXD2ASC): Removed warning.
1427
1428         * init.c (comind): Use binary search.
1429         (commands): Reorganized.
1430         (setval): Ditto.
1431         (cmd_boolean): New function.
1432         (cmd_number): Ditto.
1433         (cmd_number_inf): Ditto.
1434         (cmd_string): Ditto.
1435         (cmd_vector): Ditto.
1436         (cmd_directory_vector): Ditto.
1437         (cmd_bytes): Ditto.
1438         (cmd_time): Ditto.
1439         (cmd_spec_debug): Ditto.
1440         (cmd_spec_dirmode): Ditto.
1441         (cmd_spec_dirstruct): Ditto.
1442         (cmd_spec_dotstyle): Ditto.
1443         (cmd_spec_header): Ditto.
1444         (cmd_spec_htmlify): Ditto.
1445         (cmd_spec_mirror): Ditto.
1446         (cmd_spec_outputdocument): Ditto.
1447         (cmd_spec_recursive): Ditto.
1448         (settime): Merged with cmd_time().
1449         (setbytes): Merged with cmd_bytes().
1450         (setonoff): Merged with cmd_boolean().
1451         (onoff): Ditto.
1452
1453 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1454
1455         * Makefile.in (distclean): Remove `config.h'.
1456
1457 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1458
1459         * version.c: Wget 1.5-b8 is released.
1460
1461 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1462
1463         * http.c (digest_authentication_encode): New function.
1464         (create_authorization_line): Use it.
1465         (dump_hash): New function.
1466         (digest_authentication_encode): Use it.
1467
1468         * fnmatch.c: Renamed from `mtch.c'.
1469
1470 1998-02-15  Karl Eichwalder  <ke@suse.de>
1471
1472         * main.c (main): Tag "Written by..." string as translatable.
1473
1474 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1475
1476         * wget.h (FREE_MAYBE): New macro.
1477
1478         * http.c (create_authorization_line): Don't use ANSI C string
1479         concatenation feature.
1480         (basic_authentication_encode): Use alloca() for temporary
1481         variables.
1482
1483         * recur.h: Ditto.
1484
1485         * http.c: Ditto.
1486
1487         * headers.h: Ditto.
1488
1489         * ftp-basic.c: Protect declaration against non-ANSI compiler.
1490
1491         * http.c (create_authorization_line): Cast `unsigned char *' to
1492         `char *' for sprintf, to shut up the noisy Digital Unix cc.
1493
1494 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1495
1496         * version.c: Wget 1.5-b7 is released.
1497
1498 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1499
1500         * cmpt.c (strstr): Synched with glibc-2.0.6.
1501
1502         * ftp-basic.c (calculate_skey_response): Ditto.
1503         (calculate_skey_response): Use alloca().
1504
1505         * http.c (create_authorization_line): Work with FSF's version of
1506         md5.c.
1507
1508         * md5.c: New file, from GNU libc.
1509
1510 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
1511
1512         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
1513
1514 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1515
1516         * http.c (basic_authentication_encode): New function, instead of
1517         the macro.
1518
1519 1998-02-13  Junio Hamano  <junio@twinsun.com>
1520
1521         * http.c: Add HTTP-DA support.
1522         * ftp-basic.c: Add Opie/S-key support.
1523         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
1524         * md5.c, md5.h: New files.
1525
1526 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1527
1528         * http.c (http_process_range): Renamed from hprocrange().
1529         (http_process_range): Parse the whole header.
1530
1531         * headers.c: New file.
1532         (header_process): New function.
1533         (header_get): Renamed from fetch_next_header.
1534
1535         * all: Include utils.h only where necessary.
1536
1537         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
1538
1539         * wget.h: Add provisions for dmalloc.
1540
1541 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1542
1543         * version.c: Wget 1.5-b6 is released.
1544
1545 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1546
1547         * ftp.c (ftp_loop): Determine `filename' more precisely.
1548
1549         * init.c (setval): Don't set `opt.quiet' if output-document is
1550         `-'.
1551
1552         * log.c (log_init): Print to STDERR instead of STDOUT.
1553         (vlogmsg): Use STDERR by default.
1554         (logflush): Ditto.
1555
1556 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
1557
1558         * host.c: Use addr_in again.
1559
1560 1998-02-08  Karl Eichwalder  <karl@suse.de>
1561
1562         * http.c (gethttp): Fixed typo.
1563
1564 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1565
1566         * version.c: Wget 1.5-b5 is released.
1567
1568 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1569
1570         * retr.c (show_progress): Use it.
1571
1572         * log.c (logflush): New function.
1573
1574         * wget.h: Utilize __attribute__ if on gcc.
1575
1576 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
1577
1578         * http.c (base64_encode_line): New argument LENGTH.
1579         (BASIC_AUTHENTICATION_ENCODE): Use it.
1580         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
1581
1582         * main.c (main): Fixed fprintf() format mismatch.
1583
1584 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
1585
1586         * version.c: Wget 1.5-b4 is released.
1587
1588 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
1589
1590         * host.c: use sockaddr_in instead of addr_in.
1591
1592 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
1593
1594         * init.c (cleanup): Use it.
1595
1596         * recur.c (recursive_cleanup): New function.
1597
1598         * retr.c (retrieve_from_file): Ditto.
1599
1600         * main.c (main): Use it.
1601
1602         * recur.c (recursive_reset): New function.
1603
1604         * retr.c (retrieve_from_file): Ditto.
1605
1606         * main.c (main): Simplify call to recursive_retrieve().
1607
1608         * recur.c (recursive_retrieve): Removed FLAGS argument.
1609
1610         * http.c (gethttp): Changed call to iwrite().
1611
1612 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1613
1614         * url.c (get_urls_html): Ditto.
1615         (free_urlpos): Ditto.
1616         (mkstruct): Ditto.
1617         (construct): Ditto.
1618
1619         * retr.c (retrieve_url): Move declaration of local variables to
1620         smaller scope.
1621
1622         * url.c (urlproto): Use it.
1623         (parseurl): Ditto.
1624         (str_url): Ditto.
1625         (get_urls_html): Ditto.
1626
1627         * utils.h (ARRAY_SIZE): New macro.
1628
1629         * url.c (proto): Moved from url.h.
1630
1631         * url.h (URL_CLEANSE): Reformatted.
1632         (USE_PROXY_P): Renamed from USE_PROXY.
1633
1634         * ftp-basic.c: Adjust to the new interface of iwrite().
1635
1636         * ftp-basic.c (ftp_port): Use alloca().
1637
1638 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1639
1640         * version.c: Wget 1.5-b3 is released.
1641
1642         * host.c (ftp_getaddress): Don't print to stderr directly.
1643
1644         * init.c (setbytes): Support `g' for gigabytes.
1645         (cmdtype): New specification CTIME.
1646         (setval): Use it with settime().
1647         (commands): Use it for WAIT and TIMEOUT.
1648
1649 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
1650
1651         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
1652         (gethttp): Use it.
1653
1654         * utils.c (unique_name_1): Moved from url.c.
1655         (unique_name): Ditto.
1656
1657         * url.c (url_filename): Ditto.
1658
1659         * log.c (redirect_output): Changed call to unique_name().
1660
1661         * url.c (unique_name_1): Renamed from unique_name().
1662         (unique_name): Changed interface.
1663
1664         * init.c (enum cmdid): Moved from init.h.
1665         (cmdtype): Ditto.
1666         (struct cmd): Ditto.
1667
1668         * main.c (main): Use it.
1669         (main): Moved `--backups' to not have a short option.
1670
1671         * options.h (struct options): New member BACKGROUND.
1672
1673         * main.c (print_help): Rearranged.
1674         (main): New long options for -n* short options: --no-directories,
1675         --no-host-directories, --non-verbose, --no-host-lookup and
1676         --dont-remove-listing.
1677
1678 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
1679
1680         * main.c (main): Use log_close().
1681
1682         * log.c: New variable LOGFP.
1683         (vlogmsg): Use it.
1684         (redirect_output): Don't open /dev/null; set LOGFP to stdin
1685         instead.
1686         (log_close): New function.
1687
1688         * options.h (struct options): Removed LFILE.
1689
1690         * log.c (log_enable): Removed.
1691
1692         * main.c (main): Use it.
1693
1694         * log.c (log_init): New function.
1695
1696         * url.c (get_urls_html): Removed needless assignment to BASE.
1697
1698         * host.c (add_hlist): Don't set CMP needlessly.
1699
1700         * utils.c (match_backwards): Ditto.
1701         (in_acclist): Ditto.
1702
1703         * url.c (findurl): Ditto.
1704
1705         * netrc.c (parse_netrc): Ditto.
1706
1707         * log.c (log_dump): Ditto.
1708
1709         * html.c (html_quote_string): Ditto.
1710
1711         * ftp-basic.c (ftp_request): Made static.
1712
1713         * connect.c: Made global variables static.
1714
1715         * url.c (construct): Ditto.
1716
1717         * init.c (init_path): Avoid assignment inside `if'-condition.
1718
1719         * ftp.c: Don't include in.h or winsock.h.
1720
1721         * ftp.c (ftp_loop): Use SZ.
1722
1723         * connect.c (bindport): Cast &addrlen to int *.
1724         (conaddr): Ditto.
1725
1726         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
1727
1728 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1729
1730         * ftp.c (getftp): Initialize opt.ftp_pass here.
1731         (ftp_retrieve_dirs): Use alloca().
1732
1733         * init.c (defaults): Don't initialize opt.ftp_pass.
1734
1735         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
1736         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
1737
1738 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1739
1740         * recur.c (parse_robots): Check for comments more correctly.
1741
1742         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
1743         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
1744         hostname.
1745
1746 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1747
1748         * version.c: Wget 1.5-b2 is released.
1749
1750         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
1751
1752         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
1753
1754         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
1755         char.
1756
1757         * log.c: Don't attempt to hide arguments from ansi2knr.
1758
1759         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
1760
1761         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
1762
1763         * ftp.c (getftp): Ditto.
1764
1765         * http.c (gethttp): Use it.
1766
1767         * retr.c (get_contents): New argument EXPECTED; pass it to
1768         show_progress().
1769         (show_progress): New argument EXPECTED; use it to display
1770         percentages.
1771
1772         * init.c (setval): Ditto.
1773
1774         * http.c (gethttp): Ditto.
1775         (http_loop): Ditto.
1776
1777         * ftp.c (getftp): Ditto.
1778         (ftp_loop_internal): Ditto.
1779
1780         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
1781
1782         * sysdep.h (CLOSE): Simplify; use DEBUGP.
1783
1784         * netrc.c (search_netrc): Use alloca().
1785
1786         * init.c (defaults): Initialize no_flush.
1787
1788         * log.c (vlogmsg): Don't flush if no_flush.
1789
1790         * options.h (struct options): New variable no_flush.
1791
1792         * main.c (main): Don't play games with buffering.
1793
1794         * log.c (vlogmsg): Flush the output after every message.
1795
1796 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1797
1798         * init.c (parse_line): Ditto.
1799
1800         * url.c (get_urls_html): Ditto.
1801
1802         * main.c (main): Don't cast to unsigned char.
1803
1804         * init.c (run_wgetrc): Don't cast to unsigned char.
1805         (parse_line): Accept char instead of unsigned char.
1806
1807         * html.c (htmlfindurl): Use char instead of unsigned char.
1808
1809         * all: Use them.
1810
1811         * sysdep.h: Add wrappers to ctype macros to make them
1812         eight-bit-clean:
1813
1814 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
1815
1816         * html.c (htmlfindurl): Download <img lowsrc=...>
1817
1818         * main.c (main): Ignore SIGPIPE.
1819
1820         * connect.c (select_fd): New argument WRITEP.
1821         (iwrite): Call select_fd().
1822
1823 1997-02-27  Fila Kolodny <fila@ibi.com>
1824
1825         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
1826         one already exists, just skip it.
1827
1828 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
1829
1830         * http.c (gethttp): Cosmetic changes.
1831
1832         * http.c (check_end): Allow `+D...' instead of `GMT'.
1833         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
1834
1835         * url.c (process_ftp_type): New function.
1836         (parseurl): Use it.
1837
1838         * connect.c (iwrite): Allow writing in a few chunks.
1839         (bindport): Made SRV static, so addr can point to it.
1840         (select_fd): Removed HPUX kludge.
1841
1842         * host.c (free_hlist): Incorporated into clean_hosts().
1843
1844 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
1845
1846         * host.c (hlist): Made static.
1847         (search_address): Cosmetic change.
1848
1849 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
1850
1851         * version.c: Wget v1.5-b1 is released.
1852
1853         * http.c (hgetlen): Use sizeof() to get the header length.
1854         (hgetrange): Ditto.
1855         (hgettype): Ditto.
1856         (hgetlocation): Ditto.
1857         (hgetmodified): Ditto.
1858         (haccepts_none): Ditto.
1859
1860         * main.c (main): Updated `--version' and `--help' output, as per
1861         Francois Pinard's suggestions.
1862
1863         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
1864         textdomain().
1865
1866         * config.h.in: Define stubs for I18N3.
1867
1868         * wget.h: Include libintl.h.
1869
1870 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
1871
1872         * url.c (mkstruct): Check for opt.cut_dirs.
1873         (mkstruct): alloca()-te more, xmalloc() less.
1874
1875         * utils.c (load_file): Check for ferror().
1876
1877         * url.c (get_urls_file): Close only the files we opened.
1878         (get_urls_html): Ditto.
1879         (count_slashes): New function.
1880
1881         * http.h: Removed.
1882
1883         * http.c (gethttp): Respect username and password provided by
1884         proxy URL.
1885         (base64_encode_line): Write into an existing buffer instead of
1886         malloc-ing a new one.
1887         (struct http_stat): Moved from http.h
1888
1889         * retr.c (retrieve_url): Free SUF.
1890
1891         * all: Removed lots of unnecessary .h dependencies.
1892
1893         * html.c (global_state): Made static.
1894
1895         * utils.h (ALLOCA_ARRAY): New macro.
1896
1897         * main.c (main): New option `--cut-dirs'.
1898
1899         * url.c (construct): Use alloca() for T.
1900
1901         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
1902
1903         * host.c (_host_t): Moved from host.h.
1904         (struct host): Renamed from _host_t.
1905         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
1906         (realhost): Ditto.
1907
1908         * host.h: Don't include url.h.
1909
1910         * ftp.c (LIST_FILENAME): Moved from ftp.h.
1911
1912         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
1913
1914         * main.c (main): Enable log if the output goes to a TTY.
1915
1916         * connect.h: Removed unused constant `BACKLOG'.
1917
1918         * config.h.in: Check for isatty().
1919
1920         * Makefile.in (LINK): Use CFLAGS when linking.
1921
1922 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
1923
1924         * mswindows.c (ws_hangup): Use redirect_output().
1925
1926         * main.c (redirect_output_signal): New function; use
1927         redirect_output().
1928
1929         * log.c (redirect_output): New function, based on hangup(), which
1930         is deleted.
1931
1932         * log.c (vlogmsg): New function.
1933
1934         * wget.h (DEBUGP): Use debug_logmsg().
1935
1936         * main.c (hangup): Use it.
1937
1938         * log.c (log_dump): New function.
1939
1940         * utils.h (DO_REALLOC): Use `long' for various sizes.
1941
1942         * http.c (hskip_lws): Use `while', for clarity.
1943         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
1944         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
1945
1946         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
1947         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
1948
1949         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
1950         (LEGIBLE_SEPARATOR): Ditto.
1951         (FILE_BUFFER_SIZE): Ditto.
1952
1953         * retr.c (BUFFER_SIZE): Moved from retr.h.
1954
1955         * log.c: New file.
1956         (logmsg): Moved from utils.c.
1957         (debug_logmsg): New function.
1958
1959         * mswindows.h: Include it here.
1960
1961         * init.c: Ditto.
1962
1963         * utils.c: Don't include <windows.h>.
1964
1965 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
1966
1967         * host.c (ftp_getaddress): Ditto.
1968
1969         * main.c (main): Use it.
1970
1971         * utils.h (STRDUP_ALLOCA): New macro.
1972
1973         * init.c: Prepend `wget: ' to error messages printed on stderr.
1974
1975         * utils.c (mkdirhier): Renamed from mymkdir.
1976         (touch): Renamed from my_touch.
1977         (pwd_cuserid): Renamed from my_cuserid().
1978
1979 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
1980
1981         * utils.c (accdir): Process wildcards.
1982         (proclist): New function.
1983         (accdir): Use it to avoid code repetition.
1984
1985 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
1986
1987         * recur.c (parse_robots): Respect opt.useragent; use alloca().
1988
1989         * http.c (gethttp): Construct useragent accordingly.
1990
1991         * version.c: Changed version string to numbers-only.
1992
1993         * main.c (print_help): List all the options.
1994
1995         * mswindows.c (windows_main_junk): Initialize argv0 here.
1996
1997 1998-01-24  Karl Heuer  <kwzh@gnu.org>
1998
1999         * netrc.c (search_netrc): Initialize `l' only after processing
2000         netrc.
2001
2002         * main.c (main): Don't trap SIGHUP if it's being ignored.
2003
2004 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2005
2006         * all: Use logmsg().
2007
2008         * utils.c (time_str): Moved from retr.c.
2009         (logmsg): New function.
2010         (logmsg_noflush): Ditto.
2011
2012         * rbuf.c: New file, moved buf_* functions here.
2013
2014         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
2015
2016         * ftp-basic.c (ftp_rest): Use prnum().
2017
2018         * ftp-basic.c: Ditto.
2019
2020         * ftp.c: Use the new reading functions and macros.
2021
2022         * retr.c (buf_initialize): New function.
2023         (buf_initialized_p): Ditto.
2024         (buf_uninitialize): Ditto.
2025         (buf_fd): Ditto.
2026
2027         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
2028         efficiency.
2029         (gethttp): Use alloca() where appropriate.
2030
2031         * retr.c (buf_readchar): Use it.
2032         (buf_peek): Use rstreams.
2033
2034         * retr.h (BUF_READCHAR): New macro.
2035
2036         * init.c (home_dir): Rewritten for clarity.
2037         (init_path): Ditto.
2038
2039         * mswindows.c (ws_backgnd): Made static.
2040         (read_registry): Ditto.
2041         (ws_cleanup): Ditto.
2042         (ws_handler): Ditto.
2043
2044 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2045
2046         * alloca.c: New file.
2047
2048         * Makefile.in (ALLOCA): Define.
2049
2050         * mswindows.c (ws_help): Constify.
2051         (ws_help): Use alloca.
2052
2053         * mswindows.c: Reformat.
2054
2055         * all: Added _(...) annotations for I18N snarfing and translation.
2056
2057         * host.c (ftp_getaddress): Nuke SYSINFO.
2058         (ftp_getaddress): Don't use getdomainname().
2059         (ftp_getaddress): Use uname(), where available.
2060
2061         * http.c (gethttp): Protect a stray fprintf().
2062
2063         * init.c (settime): New function.
2064         (setval): Treat WAIT specially, allowing suffixes like `m' for
2065         minutes, etc.
2066
2067 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2068
2069         * url.c (get_urls_html): Use alloca() for TEMP.
2070
2071 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
2072
2073         * url.c (rotate_backups): New function.
2074
2075         * http.c (gethttp): Ditto.
2076
2077         * ftp.c (getftp): Rotate backups.
2078
2079 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
2080
2081         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
2082         xrealloc() and xstrdup().  Use the new functions.
2083
2084         * url.c (decode_string): Made static.
2085         (has_proto): Ditto.
2086         (parse_dir): Ditto.
2087         (parse_uname): Ditto.
2088         (mkstruct): Ditto.
2089         (construct): Ditto.
2090         (construct_relative): Ditto.
2091
2092         * retr.c (show_progress): Made static.
2093
2094         * recur.c (robots_url): Made static.
2095         (retrieve_robots): Ditto.
2096         (parse_robots): Ditto.
2097         (robots_match): Ditto.
2098
2099         * main.h: Removed.
2100
2101         * main.c (printhelp): Made static.
2102         (hangup): Ditto.
2103
2104         * init.c (comind): Made static.
2105         (defaults): Ditto.
2106         (init_path): Ditto.
2107         (run_wgetrc): Ditto.
2108         (onoff): Ditto.
2109         (setonoff): Ditto.
2110         (setnum): Ditto.
2111         (myatoi): Ditto.
2112         (getperms): Ditto.
2113         (setbytes): Ditto.
2114
2115         * http.c (fetch_next_header): Made static.
2116         (hparsestatline): Ditto.
2117         (hskip_lws): Ditto.
2118         (hgetlen): Ditto.
2119         (hgetrange): Ditto.
2120         (hgettype): Ditto.
2121         (hgetlocation): Ditto.
2122         (hgetmodified): Ditto.
2123         (haccepts_none): Ditto.
2124         (gethttp): Ditto.
2125         (base64_encode_line): Ditto.
2126         (mktime_from_utc): Ditto.
2127         (http_atotm): Ditto.
2128
2129         * html.c (idmatch): Made static.
2130
2131         * host.c (search_host): Made static.
2132         (search_address): Ditto.
2133         (free_hlist): Ditto.
2134
2135         * ftp.c (getftp): Made static.
2136         (ftp_loop_internal): Ditto.
2137         (ftp_get_listing): Ditto.
2138         (ftp_retrieve_list): Ditto.
2139         (ftp_retrieve_dirs): Ditto.
2140         (ftp_retrieve_glob): Ditto.
2141         (freefileinfo): Ditto.
2142         (delelement): Ditto.
2143
2144         * ftp-ls.c (symperms): Made static.
2145         (ftp_parse_unix_ls): Ditto.
2146
2147         * connect.c (select_fd): Made static.
2148
2149         * utils.c (xmalloc): Renamed from nmalloc.
2150         (xrealloc): Renamed from nrealloc.
2151         (xstrdup): Renamed from nstrdup.
2152
2153         * getopt.c (exchange): Use alloca.
2154
2155         * mswindows.c (mycuserid): Use strncpy.
2156
2157         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
2158         systhings.h, windecl.h and winjunk.h removed.
2159
2160         * mswindows.c (sleep): New function.
2161
2162         * utils.c: Include <windows.h> under Windows.
2163
2164 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
2165
2166         * url.h (URL_UNSAFE): Change default under Windows.
2167
2168         * retr.c (retrieve_from_file): Respect opt.delete_after.
2169
2170         * main.c (main): Call ws_help on Windows.
2171
2172         * winjunk.c (windows_main_junk): New function.
2173
2174         * main.c (main): Junk-process argv[0].
2175
2176         * http.c (mktime_from_utc): Return -1 if mktime failed.
2177
2178         * http.c (http_loop): Ditto.
2179
2180         * ftp.c (ftp_loop_internal): Change title on Windows when using a
2181         new URL.
2182
2183         * winjunk.c (getdomainname): Lots of functions.
2184
2185 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
2186
2187         * cmpt.c (strptime_internal): Handle years more correctly for
2188         `%y'.
2189
2190 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
2191
2192         * http.c (gethttp): Allocate enough space for
2193         `Proxy-Authorization' header.
2194
2195 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2196
2197         * version.c: Wget/1.4.5 is released.
2198
2199 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2200
2201         * retr.c (get_contents): Check return value of fwrite more
2202         carefully.
2203
2204 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2205
2206         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
2207         year, regardless of century.
2208
2209 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2210
2211         * utils.c (isfile): Use `lstat' instead of `stat'.
2212
2213 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2214
2215         * utils.c (numdigit): Use explicit test.
2216
2217 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
2218
2219         * http.c (http_loop): Always use `url_filename' to get u->local.
2220
2221 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
2222
2223         * url.c: Recognize https.
2224
2225 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
2226
2227         * recur.c (recursive_retrieve): Lowercase just the host name.
2228
2229 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
2230
2231         * url.c (get_urls_file): Use the correct test.
2232         (get_urls_html): Ditto.
2233
2234 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2235
2236         * connect.c: Reverted addrlen to int.
2237
2238         * init.c (parse_line): Check for -1 instead of NONE.
2239
2240         * version.c: Changed version to 1.4.5.
2241
2242 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2243
2244         * init.c: New option netrc.
2245         (initialize): Don't parse .netrc.
2246
2247         * cmpt.c (recursive): Return rp.
2248         (strptime_internal): Match the long strings first, the abbreviated
2249         second.
2250
2251 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
2252
2253         * http.c (check_end): New function.
2254         (http_atotm): Use it.
2255  
2256 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
2257
2258         * http.c (gethttp): Use them.
2259
2260         * init.c: New options proxy_user and proxy_passwd.
2261
2262 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2263
2264         * ftp.c (ftp_retrieve_list): Create links even if not relative.
2265
2266 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
2267
2268         * recur.c (recursive_retrieve): Lowercase the host name, if the
2269         URL is not "optimized".
2270
2271         * host.c (realhost): Return l->hostname, even if it matches with
2272         host.
2273
2274 1997-02-10  Marin Purgar  <pmc@asgard.hr>
2275
2276         * connect.c: Make addrlen size_t instead of int.
2277         (conaddr): Ditto.
2278
2279 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2280
2281         * systhings.h: Define S_ISLNK on NeXT too.
2282
2283 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
2284
2285         * version.c: Released 1.4.3.
2286
2287         * url.c: Futher update to list of protostrings.
2288         (skip_proto): Skip `//' correctly for FTP and HTTP.
2289
2290         * url.c (get_urls_html): Handle bogus `http:' things a little
2291         different.
2292
2293         * main.c (main): Removed `follow-ftp' from `f'.
2294         (main): Dumped the `prefix-files' and `file-prefix' options and
2295         features; old and bogus.
2296         (main): Exit on failed setval() in `-e'.
2297
2298         * http.c (fetch_next_header): Use it to detect header continuation
2299         correctly.
2300
2301         * retr.c (buf_peek): New function.
2302
2303 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2304
2305         * wget.h: Include time.h and stuff.
2306
2307 1997-02-08  Roger Beeman  <beeman@cisco.com>
2308
2309         * ftp.c: Include <time.h>
2310
2311 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2312
2313         * url.c (findurl): Would read over buffer limits.
2314
2315 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2316
2317         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
2318
2319 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
2320
2321         * http.c (http_atotm): Initialize tm.is_dst.
2322
2323 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2324
2325         * http.c (gethttp): Don't print the number of retrieved headers.
2326
2327         * main.c (main): New option `--no-clobber', alias for `-nc'.
2328
2329         * url.c: Recognize `https://'.
2330
2331 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2332
2333         * host.c (herrmsg): Don't use h_errno.
2334
2335 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2336
2337         * host.c (accept_domain): Use it.
2338
2339         * main.c (main): New option `--exclude-domains'.
2340
2341         * retr.c (retrieve_url): Use it.
2342         (retrieve_url): Bail out when an URL is redirecting to itself.
2343
2344         * url.c (url_equal): New function.
2345
2346 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2347
2348         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
2349
2350         * http.c (mk_utc_time): New function.
2351         (http_atotm): Use it; handle time zones correctly.
2352
2353 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2354
2355         * http.c: Ditto.
2356
2357         * ftp-basic.c: Use it instead of WRITE.
2358
2359         * connect.c (iwrite): New function.
2360
2361 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2362
2363         * cmpt.c (mktime): New function.
2364
2365         * netrc.c: Include <sys/types.h>.
2366
2367         * main.c (main): Wouldn't recognize --spider.
2368
2369         * retr.c (rate): Use `B', `KB' and `MB'.
2370         (reset_timer,elapsed_time): Moved from utils.c.
2371
2372         * ftp.c (ftp_retrieve_list): Ditto.
2373
2374         * http.c (http_loop): Don't touch the file if opt.dfp.
2375
2376 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2377
2378         * cmpt.c: New file.
2379
2380         * ftp.c (ftp_retrieve_glob): New argument semantics.
2381         (ftp_retrieve_dirs): Use it.
2382         (ftp_loop): Ditto.
2383
2384         * html.c (htmlfindurl): Recognize `'' as the quote char.
2385
2386 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2387
2388         * ftp.c (ftp_loop_internal): Use it.
2389
2390         * utils.c (remove_link): New function.
2391
2392 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
2393
2394         * retr.c (retrieve_url): Require STRICT redirection URL.
2395
2396         * url.c (parseurl): New argument STRICT.
2397
2398         * http.c (hparsestatline): Be a little-bit less strict about
2399         status line format.
2400
2401 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2402
2403         * http.c (gethttp): Use it.
2404
2405         * main.c (main): Don't use '<digit>' as options.
2406
2407         * init.c: New option ignore_length.
2408
2409         * http.c (gethttp): Ditto.
2410         (http_loop): Check for redirection without Location:.
2411         (gethttp): Don't print Length unless RETROKF.
2412
2413         * ftp.c (getftp): Use it.
2414
2415         * url.c (mkalldirs): New function.
2416
2417         * utils.c (mymkdir): Don't check for existing non-directory.
2418
2419         * url.c (mkstruct): Don't create the directory.
2420
2421 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
2422
2423         * init.c (setval): Removed NO_RECURSION checks.
2424
2425 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
2426
2427         * version.c: "Released" 1.4.3-pre2.
2428
2429         * recur.c (recursive_retrieve): Bypass host checking only if URL
2430         is ftp AND parent URL is not ftp.
2431
2432         * ftp-basic.c (ftp_request): Print out Turtle Power.
2433
2434         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
2435         wildcard.
2436         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
2437         not glob.
2438
2439         * http.c (gethttp): Be a little bit smarter about status codes.
2440
2441         * recur.c (recursive_retrieve): Always reset opt.recursive when
2442         dealing with FTP.
2443
2444 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
2445
2446         * retr.c (retrieve_url): New variable location_changed; use it for
2447         tests instead of mynewloc.
2448         (retrieve_url): Allow heuristic adding of html.
2449
2450         * url.c (url_filename): Don't use the `%' in Windows file names.
2451
2452         * http.c (http_loop): Always time-stamp the local file.
2453
2454         * http.c (http_loop): Ditto.
2455
2456         * ftp.c (ftp_retrieve_list): Use it.
2457
2458         * utils.c (my_touch): New function.
2459
2460         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
2461         instead of #ifndef NeXT.
2462
2463         * utils.c (strptime): New version, by Ulrich Drepper.
2464
2465 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
2466
2467         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
2468         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
2469         (http_loop): Would remove ACCEPTRANGES.
2470
2471         * ftp.c (getftp): Call ftp_list with NULL.
2472
2473 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
2474
2475         * html.c (ftp_index): Don't print minutes and seconds if we don't
2476         know them; beautify the output.
2477
2478         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
2479
2480 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
2481
2482         * utils.c (strptime): New function.
2483         (strptime): Don't use get_alt_number.
2484         (strptime): Don't use locale.
2485         (match_string): Made it a function.
2486
2487 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
2488
2489         * http.c (http_atotm): New function.
2490         (http_loop): Use it.
2491
2492         * atotm.c: Removed from the distribution.
2493
2494         * http.c (base64_encode_line): Rewrite.
2495
2496 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
2497
2498         * ftp.c (getftp): Use ftp_expected_bytes; print size.
2499
2500         * ftp-basic.c (ftp_response): Use ftp_last_respline.
2501         (ftp_expected_bytes): New function.
2502
2503         * ftp.c (getftp): Print the unauthoritative file length.
2504
2505         * ftp-ls.c: Renamed from ftp-unix.c.
2506         (ftp_parse_ls): Moved from ftp.c.
2507         (ftp_parse_unix_ls): Recognize seconds in time spec.
2508         (ftp_parse_unix_ls): Recognize year-less dates of the previous
2509         year.
2510
2511 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
2512
2513         * ftp-basic.c: Don't declare errno if #defined.
2514
2515         * host.c (ftp_getaddress): Check for sysinfo legally.
2516
2517 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
2518
2519         * connect.c (iread): Use READ.
2520
2521 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
2522
2523         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
2524         schemes.
2525
2526 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2527
2528         * host.c (ftp_getaddress): Allow `.' in hostname.
2529
2530 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
2531
2532         * wget.h: READ and WRITE macros for use instead of read and write
2533         on sockets, grep READ *.c, grep WRITE *.c
2534
2535         * wsstartup.c: new file - startup for winsock
2536
2537         * wsstartup.h: new file
2538
2539         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
2540
2541         * configure.bat: Configure utility for MSVC
2542
2543         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
2544
2545 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2546
2547         * version.c: Released 1.4.3-pre.
2548
2549         * utils.c (prnum): Accept long.
2550         (legible): Use prnum().
2551
2552         * connect.c (make_connection): Accept port as short.
2553         (bindport): Ditto.
2554
2555         * http.c (gethttp): Use search_netrc.
2556
2557 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
2558
2559         * ftp.c (getftp): Use search_netrc.
2560
2561         * netrc.c (free_netrc): New function.
2562
2563         * init.c (home_dir): New function.
2564
2565         * url.c (convert_links): Allow REL2ABS changes.
2566
2567 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
2568
2569         * netrc.c: New file.
2570         (parse_netrc, maybe_add_to_list): New functions.
2571
2572 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
2573
2574         * retr.c (retrieve_url): Reset opt.recursion before calling
2575         ftp_loop if it is reached through newloc.
2576
2577         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
2578         error; don't use "Syntax error", since we don't know if it is
2579         really a syntax error.
2580
2581 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
2582
2583         * utils.c (acceptable): Extract the filename part of the path.
2584
2585         * recur.c (recursive_retrieve): Call acceptable() with the right
2586         argument; would bug out on wildcards.
2587
2588         * init.c (parse_line): Likewise.
2589
2590         * html.c (htmlfindurl): Cast to char * when calling stuff.
2591
2592 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2593
2594         * ftp.c (getftp): Use ftp_pasv.
2595
2596         * ftp-basic.c (ftp_request): Accept NULL value.
2597         (ftp_pasv): New function.
2598
2599         * options.h (struct options): Add passive FTP option.
2600
2601 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2602
2603         * url.c (parseurl): Debug output.
2604
2605         * utils.c (path_simplify): New one, adapted from bash's
2606         canonicalize_pathname().
2607
2608 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
2609
2610         * ftp.c (getftp): Don't discard the buffer.
2611
2612         * retr.c (get_contents): New parameter nobuf.
2613
2614 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2615
2616         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
2617
2618         * init.c (setval): Strip the trailing slashes on CVECDIR.
2619
2620 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2621
2622         * init.c: Make excludes and includes under CVECDIR instead of
2623         CVEC.
2624
2625 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2626
2627         * url.c (get_urls_html): Skip "http:".
2628
2629 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2630
2631         * utils.c (strcasecmp): From glibc.
2632         (strncasecmp): Also.
2633         (strstr): Also.
2634
2635         * url.c: Added javascript: to the list of URLs prefixes.
2636
2637 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
2638
2639         * recur.c (retrieve_robots): Print the warning message only if
2640         verbose.
2641
2642 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2643
2644         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
2645
2646 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
2647
2648         * systhings.h: New file.
2649
2650         * ../configure.in: Check for utime.h
2651
2652         * ftp.c: Check whether we have unistd.h.
2653
2654 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
2655
2656         * recur.c (recursive_retrieve): Send the canonical URL as referer.
2657         (recursive_retrieve): Call get_urls_html with the canonical URL.
2658
2659 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2660
2661         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
2662         ansi2knr support for compilers which don't support ANSI style
2663         function prototypes and signatures.
2664
2665         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
2666
2667 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
2668
2669         * url.c: Use it; Recognize paths ending with "." and ".." as
2670         directories.
2671         (url_filename): Append .n whenever file exists and could be a
2672         directory.
2673
2674         * url.h (ISDDOT): New macro.
2675
2676         * init.c (parse_line): Use unsigned char.
2677
2678         * url.c (get_urls_html): Cast to unsigned char * when calling
2679         htmlfindurl.
2680
2681         * html.c (htmlfindurl): Use unsigned char.
2682
2683         * version.c: Changed version to 1.4.3.
2684
2685 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
2686
2687         * version.c: Released 1.4.2.
2688
2689         * ftp.c (getftp): Simplified assertion.
2690         (ftp_loop_internal): Remove symlink before downloading.
2691         (ftp_retrieve_list): Unlink the symlink name before attempting to
2692         create a symlink!
2693
2694         * options.h (struct options): Renamed print_server_response to
2695         server_response.
2696
2697         * ftp.c (rel_constr): Removed.
2698         (ftp_retrieve_list): Don't use it.
2699         (ftp_retrieve_list): Use opt.retr_symlinks.
2700
2701 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2702
2703         * main.c (main): New option retr_symlinks.
2704
2705         * url.c (convert_links): Print verbose message.
2706
2707 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2708
2709         * http.c (http_loop): Reset newloc in the beginning of function;
2710         would cause FMR in retrieve_url.
2711
2712 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
2713
2714         * recur.c (convert_all_links): Find the URL of each HTML document,
2715         and feed it to get_urls_html; would bug out.
2716         (convert_all_links): Check for l2 instead of dl; removed dl.
2717
2718         * url.c (convert_links): Don't refer to freed newname.
2719
2720         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
2721
2722         * main.c (main): Print the OS_TYPE in the debug output, too.
2723
2724         * recur.c (recursive_retrieve): Check for opt.delete_after.
2725
2726         * main.c (main): New option delete-after.
2727
2728         * init.c (setval): Cleaned up.
2729
2730 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
2731
2732         * Makefile.in (wget): Make `wget' the default target.
2733
2734         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
2735         loop.
2736         (ftp_retrieve_list): Warn about non-matching sizes.
2737
2738         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
2739
2740         * init.c (setnum): Renamed from setnuminf; New argument flags.
2741         (setval): Use it.
2742
2743         * main.c (main): Sorted the options.
2744         (main): New option --wait.
2745
2746 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
2747
2748         * html.c (htmlfindurl): Reset s->in_quote after getting out of
2749         quotes.
2750
2751 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2752
2753         * version.c: Changed version to 1.4.2.
2754
2755 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2756
2757         * version.c: Released 1.4.1.
2758
2759         * html.c (html_quote_string): New function.
2760         (ftp_index): Use it.
2761         (htmlfindurl): A more gentle ending debug message.
2762
2763         * ftp.c (ftp_loop): Check for opt.htmlify.
2764
2765         * init.c: New command htmlify.
2766
2767         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
2768         strings.
2769         (ftp_loop): Print size of index.html.
2770
2771         * init.c (setval): Implement "styles".
2772
2773         * main.c (main): New option dotstyle.
2774
2775 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
2776
2777         * ftp.c (getftp): Close the master socket in case of errors, after
2778         bindport().
2779
2780         * connect.c (bindport): Initialize msock to -1.
2781
2782         * ftp.c (getftp): Initialize dtsock to -1.
2783
2784         * connect.c (closeport): Don't close sock if sock == -1.
2785
2786 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
2787
2788         * init.c (setnuminf): Nuked default value -- just leave unchanged.
2789         (setval): Don't send default values.
2790         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
2791
2792         * options.h (struct options): Use long for dot_bytes.
2793
2794         * init.c (setquota): Renamed to setbytes.
2795         (setval): Use setbytes on DOTBYTES.
2796
2797 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
2798
2799         * ftp.c (getftp): Initialize con->dltime.
2800
2801         * recur.c (recursive_retrieve): Use same_host instead of
2802         try_robots; simply load robots_txt whenever the host is changed.
2803         (recursive_retrieve): Free forbidden before calling parse_robots.
2804
2805 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
2806
2807         * retr.c (show_progress): Use them.
2808
2809         * options.h (struct options): New options dot_bytes, dots_on_line
2810         and dot_spacing.
2811
2812 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
2813
2814         * recur.c (recursive_retrieve): Retrieve directories regardless of
2815         acc/rej rules; check for empty u->file.
2816
2817 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
2818
2819         * init.c (setval): Use it.
2820
2821         * utils.c (merge_vecs): New function.
2822
2823         * init.c (setval): Reset the list-type functions when encountering
2824         "".
2825
2826 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
2827
2828         * recur.c (recursive_retrieve): Use base_url instead of this_url
2829         for no_parent.
2830
2831 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
2832
2833         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
2834
2835 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
2836
2837         * utils.c (sepstring): Rewrote; don't use strtok.
2838
2839         * recur.c (recursive_retrieve): Enter assorted this_url to slist
2840         when running the first time.
2841         (retrieve_robots): Warn to ignore errors when robots are loaded.
2842
2843         * utils.c (load_file): Moved from url.c.
2844
2845         * http.c: Made static variables const too in h* functions.
2846
2847         * main.c (main): Renamed --continue-ftp to --continue.
2848
2849         * recur.c (recursive_retrieve): Use it.
2850
2851         * utils.c (frontcmp): New function.
2852
2853         * url.c (accdir): New function.
2854
2855         * html.c (htmlfindurl): Recognize <area href=...>.
2856
2857         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
2858
2859         * init.c (setval): Free the existing opt.excludes and
2860         opt.includes, if available.
2861
2862         * main.c (main): New option -I.
2863
2864 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
2865
2866         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
2867
2868         * version.c: Changed version to 1.4.1.
2869
2870 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
2871
2872         * version.c: Released 1.4.0.
2873
2874 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
2875
2876         * main.c (main): Free com and val after parse_line.
2877         (printhelp): Reorder the listing.
2878
2879         * http.c: More robust header parsing.
2880
2881         * http.c: Allow any number of spaces, or no spaces, precede ':'.
2882         (hskip_lws): New function.
2883         (haccepts_bytes): New function.
2884         (gethttp): Use it.
2885
2886         * init.c (setval): Check header sanity.
2887         (setval): Allow resetting of headers.
2888
2889 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
2890
2891         * http.c (http_loop): Don't use has_wildcards.
2892
2893         * http.c (gethttp): Free all_headers -- would leak.
2894
2895         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
2896         0 -- this fixes a long-standing bug in -rl.
2897
2898 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
2899
2900         * ftp.c: Use -1 as "impossible" value for con->fd.
2901
2902         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
2903
2904         * init.c (parse_line): Use isalpha.
2905
2906         * ftp-unix.c: Use HAVE_UNISTD_H.
2907
2908         * mtch.c (has_wildcards): Don't match \.
2909
2910         * http.c (http_loop): Warn on HTTP wildcard usage.
2911
2912 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
2913
2914         * url.c (url_filename): Do not create numbered suffixes if
2915         opt.noclobber -- would bug out on -nc.
2916
2917 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
2918
2919         * recur.c (parse_robots): Don't chuck out the commands without
2920         arguments (`Disallow:<empty>' didn't work).
2921         (parse_robots): Compare versions lowercase.
2922         (parse_robots): Match on base_version, not version_string!
2923         (parse_robots): Handle comments properly.
2924         (parse_robots): Match versions in a sane way.
2925
2926         * init.c: Print nicer error messages.
2927
2928         * version.c: Changed version to 1.4.0.
2929
2930 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
2931
2932         * version.c: Released 1.4.0-test2.
2933
2934         * init.c (run_wgetrc): Close fp.
2935
2936         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
2937         u->dir.
2938
2939 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
2940
2941         * init.c (setquota): Allow inf as quota specification.
2942
2943 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
2944
2945         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
2946         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
2947
2948         * main.c (main): Check for quota by comparison with downloaded
2949         stuff, not from status.
2950
2951         * connect.c (select_fd): Should compile on HPUX without warnings now.
2952
2953         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
2954         returned RETROK.
2955
2956 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
2957
2958         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
2959         (getftp): Return FTPRETRINT on control connection error.
2960
2961         * html.c (htmlfindurl): Recognize <embed src=...> and
2962         <bgsound src=...>.
2963         (ftp_index): Handle username and password correctly.
2964
2965         * main.c (main): Made `-np' a synonim for --no-parent.
2966
2967 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
2968
2969         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
2970         ftp_retrieve_glob.
2971
2972         * version.c: Changed version to 1.4.0-test2.
2973
2974 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
2975
2976         * version.c: Released 1.4.0-test1.
2977
2978         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
2979         directory.
2980         (convert_links): Removed definition of make_backup.
2981
2982         * http.h: Removed definition of MAX_ERROR_LENGTH.
2983
2984         * host.c (ftp_getaddress): Check for "(none)" domains.
2985
2986         * ftp.c (ftp_retrieve_dirs): Docfix.
2987
2988         * http.c (gethttp): Use ou->referer instead of u->referer.
2989
2990         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
2991         this was known to cause coredumps on Linux.
2992
2993         * html.c (ftp_index): Cast the argument to local_time to time_t *.
2994
2995 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
2996
2997         * connect.c (select_fd): Use exceptfds -- once and for all.
2998
2999         * retr.c (retrieve_from_file): Free filename after
3000         recursive_retrieve.
3001         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
3002         first-time retrieval.
3003         (retrieve_from_file): Return uerr_t; new argument, count.
3004         (retrieve_from_file): Break on QUOTEXC.
3005
3006         * init.c (setquota): Fixed a bug that caused rejection of
3007         non-postfixed values..
3008
3009 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
3010
3011         * version.c: Changed name to wget.
3012
3013         * connect.c (iread): Smarter use of select.
3014         (select_fd): Set errno on timeout.  If not timeout, return 1
3015         instead of 0.
3016
3017 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
3018
3019         * ftp.c (ftp_loop_internal): Don't use con->cmd before
3020         establishing it.
3021
3022 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
3023
3024         * http.c (gethttp): Send correct referer when using proxy.
3025         (gethttp): Use struct urlinfo ou to access the relevant data; send
3026         correct authorization in all cases.
3027
3028         * host.c (same_host): Use skip_uname to skip username and
3029         password.
3030
3031         * url.c (skip_uname): New function.
3032         (parseurl): Use it.
3033
3034         * host.c (same_host): Do not assume HTTP -- same_host should now
3035         be totally foolproof.
3036
3037         * url.c (skip_proto): New function.
3038         (parse_uname): Use it.
3039
3040         * http.c (gethttp): Create local user and passwd from what is
3041         given.
3042
3043         * url.c (parseurl): Check for HTTP username and password too.
3044
3045 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
3046
3047         * config.h.in: Removed #define gethostbyname R...
3048
3049 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
3050
3051         * version.c: Changed version to 1.4.0-test1.
3052
3053 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
3054
3055         * version.c: "Released" 1.4b29.
3056
3057         * recur.c (recursive_retrieve): Check for no_parent.
3058
3059         * init.c (setval): Option update.
3060
3061         * main.c (main): New option no-parent.
3062
3063         * options.h (struct options): New variable no_parent.
3064
3065         * recur.c (recursive_retrieve): Only files are checked for
3066         opt.accepts and opt.rejects.
3067         (recursive_retrieve): Check directories for opt.excludes.
3068         (recursive_retrieve): Make the dir absolute when checking
3069         opt.excludes.
3070
3071         * html.c (htmlfindurl): Recognize <applet code=...> and <script
3072         src=...>
3073
3074 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3075
3076         * ftp.c (getftp): Do not line-break assert entries at all.
3077         (ftp_retrieve_dirs): docfix.
3078
3079         * connect.c (select_fd): Use fd + 1 as nfds.
3080
3081         * version.c: Changed version to 1.4b29.
3082
3083 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3084
3085         * version.c: "Released" 1.4b28.
3086
3087         * ftp.c (ftp_loop_internal): Check whether f->size == len and
3088         don't continue the loop if it is.
3089         (ftp_get_listing): Remove list_filename on unsuccesful loop.
3090
3091 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3092
3093         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
3094         (getftp): Do not use multiline assert.
3095
3096         * http.c (hparsestatline): Use mjr and mnr instead of major and
3097         minor, which don't compile on Ultrix.
3098         (http_loop): Use strcpy() to initialize tmp.
3099
3100         * all: Geturl -> Fetch
3101
3102 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3103
3104         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
3105         ':'.
3106
3107         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
3108         moving `bufsize &&' to the beginning of each check in for-loops.
3109
3110         * recur.c (parse_robots): Close fp on exit.
3111
3112         * url.c (mymkdir): Check for each directory before creating.
3113
3114 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3115
3116         * version.c: Changed version to 1.4b28.
3117
3118 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3119
3120         * version.c: "Released" 1.4b27.
3121
3122         * init.c (parse_line): Use isspace.
3123         (parse_line): Free *com on all errors.
3124
3125         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
3126         (delelement): Use next instead of f->next and prev instead of
3127         f->prev.
3128         (delelement): Free the members of the deleted element.
3129
3130         * http.c (http_loop): Do not return RETROK on code != 20x.
3131
3132         * init.c (cleanup): Free opt.user_header.
3133         (cleanup): Free opt.domains.
3134
3135         * url.c (freelists): Moved to cleanup().
3136
3137         * http.c (hparsestatline): Docfix.
3138
3139         * main.c (main): Return with error status on unsuccesful
3140         retrieval.
3141
3142         * init.c (setval): Do not remove listing when mirroring.
3143
3144         * url.c (url_filename): Use opt.fileprefix.
3145
3146         * ftp.c (ftp_get_listing): Use url_filename to get filename for
3147         .listing.
3148
3149         * main.c (main): New option: -rn.
3150
3151 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
3152
3153         * Makefile.in (RM): Added RM = rm -f.
3154
3155         * host.c (clean_hosts): New function.
3156         (free_hlist): Just free the list, no reset.
3157
3158         * version.c: Changed version to 1.4b27.
3159
3160 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
3161
3162         * version.c: "Released" 1.4b26.
3163
3164         * retr.c (retrieve_from_file): If call get_urls_html with
3165         opt.spider to make it silent in spider mode.
3166
3167         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
3168
3169         * url.h (CLEANDUP): New macro.
3170
3171         * http.c (gethttp): Fixed a bug that freed location only when it
3172         was NULL.
3173
3174         * retr.c (retrieve_url): Free url if it will not be stored,
3175         i.e. newloc is NULL.
3176
3177         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
3178         old version would bug out on <a href="x#a"href="y">.
3179
3180         * html.h (state_t): New member in_quote.
3181
3182         * html.c (htmlfindurl): Free s->attr at the beginning of
3183         attr-loop.
3184
3185         * recur.c (recursive_retrieve): Recognize RCLEANUP.
3186         (tried_robots): Make hosts a global variable.
3187         (recursive_retrieve): Free constr after URL host optimization.
3188         (tried_robots): Free urlinfo before exiting.
3189
3190         * utils.c (free_slist): New function.
3191
3192         * recur.c (recursive_retrieve): Use flags to add cleanup
3193         possibility.
3194
3195         * main.c (main): Free filename after recursive_retrieve.
3196
3197         * http.c (gethttp): Store successful responses too.
3198
3199 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
3200
3201         * all: Constified the whole source.  This required some minor
3202         changes in many functions in url.c, possibly introducing bugs -- I
3203         hope not.
3204
3205         * ftp-basic.c: Removed last_respline.
3206
3207         * http.c (gethttp): Free type.
3208
3209         * host.c (same_host): Free real1 and real2.
3210
3211         * main.c (main): New option --spider.
3212
3213         * retr.c (get_contents): Don't reset errno.
3214
3215         * main.c (main): Sorted the options.
3216
3217         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
3218         uninitialized by select().
3219
3220         * http.c (http_loop): Print the time when the connection is
3221         closed.
3222         (gethttp): Debug-print the HTTP request.
3223
3224 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
3225
3226         * connect.c (iread): Do not try reading after timeout.
3227
3228         * main.c (main): Would bug out on -T.
3229
3230         * connect.c (select_fd): Do not use exceptfds.
3231         (iread): Set ETIMEDOUT on select_fd <= 0.
3232
3233         * version.c: Changed version to 1.4b26.
3234
3235 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
3236
3237         * version.c: "Released" 1.4b25.
3238
3239         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
3240         or link name.
3241
3242         * http.c (gethttp): Add errcode to struct hstat.
3243         (http_loop): Use it.
3244
3245         * url.c (no_proxy_match): Simplify using char** for no_proxy.
3246
3247         * options.h (struct options): Make opt.no_proxy a vector.
3248
3249         * utils.c (sepstring): Use !*s instead of !strlen(s).
3250
3251         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
3252         (getperms): Use ISODIGIT instead of isdigit.
3253
3254         * ftp.c (getftp): Print time.
3255
3256         * main.c (main): Use legible output of downloaded quantity.
3257
3258         * ftp.c (getftp): Use elapsed_time().
3259         (ftp_loop_internal): Use rate().
3260
3261         * http.c (http_loop): Add download ratio output; Use rate().
3262
3263         * utils.c (rate): New function.
3264
3265 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
3266
3267         * http.c (http_loop): Use timer.
3268
3269         * ftp.c: Split to ftp-basic.c and ftp.c
3270
3271         * utils.c (reset_timer): New function.
3272         (elapsed_time): New function.
3273
3274         * retr.c (show_progress): Make bytes_in_line and offs long; should
3275         work on 16-bit machines.
3276
3277 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
3278
3279         * url.c (in_acclist): New argument backward.
3280
3281         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
3282         a file should be retrieved according to suffix.
3283         (ftp_get_listing): Check the return value of unlink; Do not call
3284         ftp_retrieve_dirs if depth reached maxreclevel.
3285         (ftp_retrieve_dirs): Check whether the directory is in
3286         exclude-list.
3287
3288         * main.c (main): Print the version number at the beginning of
3289         DEBUG output.
3290         (main): Use strrchr when creating exec_name.
3291
3292         * ftp.c (ftp_retrieve_glob): Do not close control connection.
3293
3294         * version.c: Changed version to 1.4b25.
3295
3296 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
3297
3298         * version.c: "Released" 1.4b24.
3299
3300         * Makefile.in: Rewrite.
3301
3302         * ftp.c (ftp_loop_internal): Likewise.
3303
3304         * retr.c (time_str): Check for failed time().
3305
3306         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
3307         HTML3.0.
3308
3309         * retr.c (time_str): Return time_t *.
3310
3311         * connect.c (bindport): Close msock on unsuccesful bind.
3312         (bindport): The same for getsockname and listen.
3313
3314         * retr.c (retrieve_url): Allow any number of retries on
3315         proxy.
3316
3317         * http.c (gethttp): Do not treat errno == 0 as timeout.
3318         (http_loop): Likewise.
3319         (http_loop): Cosmetic changes.
3320
3321         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
3322
3323         * retr.c (get_contents): Reset errno.
3324
3325         * ftp.c (getftp): Minor fixes.
3326
3327 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3328
3329         * http.c: Do not use backups.
3330
3331         * geturl.1 (WARNING): Warn that man-page could be obsolete.
3332
3333         * getopt.c (getopt_long): Moved to getopt.c
3334
3335         * geturl.texi: Enhanced.
3336
3337         * main.c (main): Use it.
3338
3339         * recur.c (convert_all_links): New function.
3340
3341         * utils.c (add_slist): New argument flags.
3342
3343         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
3344         (parse_robots): Do not chuck out empty value fields.
3345         (parse_robots): Make yourself welcome on empty Disallow.
3346
3347         * version.c: Changed version to 1.4b24.
3348
3349 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3350
3351         * version.c: "Released" 1.4b23.
3352
3353         * ftp.c (ftp_loop_internal): Get the time after getftp.
3354
3355         * Makefile.in (install.info): New target.
3356         (install): Use it.
3357
3358         * http.c (http_loop): Fix output when doing -O.
3359
3360 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3361
3362         * geturl.texi: New file.
3363
3364         * main.c (main): Do not print the warnings and download summary if
3365         opt.quiet is set.
3366
3367         * version.c: Changed version to 1.4b23.
3368
3369 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3370
3371         * "Released" 1.4b22.
3372
3373         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
3374         to avoid redefinition warnings.
3375
3376         * host.c (store_hostaddress): Use memcpy() to copy the address
3377         returned by inet_addr.
3378
3379         * version.c: Changed version to 1.4b22.
3380
3381 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
3382
3383         * version.c: "Released" 1.4b21.
3384
3385         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
3386
3387         * ftp.c (ftp_port): Use conaddr.
3388         (getftp): Print the file length.
3389         (ftp_retrieve_list): Check the stamps of plain files only.
3390
3391         * connect.c (closeport): Do not call shutdown().
3392         (conaddr): New function.
3393
3394         * html.c (ftp_index): Made it dfp-aware.
3395
3396         * init.c (cleanup): New name of freemem. Close opt.dfp.
3397
3398         * ftp.c (getftp): Use opt.dfp if it is set.
3399
3400         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
3401
3402         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
3403         CWDs to be sent with recursive FTP retrievals.
3404
3405 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
3406
3407         * recur.c (parse_robots): Made it more compliant with "official"
3408         specifications.
3409
3410         * http.c: New function.
3411
3412         * ftp-unix.c (ftp_parse_ls): Added better debug output.
3413
3414         * ftp.c (getftp): Print out the LIST in case of
3415         opt.print_server_response.
3416
3417         * version.c: Changed version to 1.4b21.
3418
3419 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
3420
3421         * version.c: "Released" 1.4b20.
3422
3423         * README: Update.
3424
3425         * http.c (gethttp): Preset lengths of various headers instead of
3426         calculating them dynamically.
3427         (gethttp): Check for 206 partial contents.
3428
3429 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
3430
3431         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
3432
3433         * http.c (gethttp): Send the port number in the Host: header.
3434
3435 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
3436
3437         * http.c (gethttp): Send host: header.
3438         (gethttp): Add the possibility of user-defined headers.
3439         (gethttp): Move decision about pragma: no-cache to http_loop,
3440         where it belongs.
3441         (gethttp): Pass a struct instead of enormous argument list.
3442         (http_loop): Use a new, fancier display format.
3443         (ftp_loop): Likewise.
3444
3445         * main.c: (hangup): Turn off buffering of the new log file.
3446
3447         * install-sh: Likewise.
3448
3449         * config.sub: Replace with the one in autoconf-2.10
3450
3451         * geturl.1: Update.
3452
3453         * init.c: New options httpuser and httppasswd.
3454
3455         * http.c: (base64_encode_line): New function.
3456         (gethttp): Send authentication.
3457
3458         * connect.c (make_connection): Use store_hostaddress.
3459
3460 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
3461
3462         * host.c (store_hostaddress): New function.
3463
3464         * NEWS: Update.
3465
3466         * http.c (hgetrange): New function.
3467         (gethttp): Use ranges.
3468
3469         * utils.c (numdigit): Accept long instead of int.
3470
3471         * http.c (http_loop): Add restart capabilities.
3472
3473         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
3474         being used uninitialized.
3475         (ftp_retrieve_list): Similar fix.
3476
3477         * host.c (add_hlist): Fixed a bug that could cause cmp being used
3478         uninitialized.
3479
3480         * url.c (construct_relative): New function.
3481
3482         * recur.c (recursive_retrieve): Use it.
3483
3484         * retr.c (convert_links): New function.
3485
3486 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
3487
3488         * url.c (free_urlpos): New function.
3489
3490         * recur.c (recursive_retrieve): Adapt.
3491
3492         * url.c (get_urls_html): Return a linked list instead of a vector.
3493
3494         * url.c (get_urls_file): Return a linked list instead of a vector.
3495
3496         * geturl.1: Update.
3497
3498         * http.c (gethttp): Implement it.
3499
3500         * init.c (setval): New option: SAVEHEADERS
3501
3502         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
3503         be retrieved. Lack of this test caused bugs when the connection
3504         was lost during listing.
3505
3506         * retr.c (retrieve_url): Fixed a bug that caused
3507         coredumps. *newloc is now reset by default.
3508         (retrieve_url): Lift the twenty-tries limit on proxies.
3509
3510         * version.c: Changed version to 1.4b20.
3511
3512 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
3513
3514         * version.c: "Released" 1.4b19.
3515
3516 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
3517
3518         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
3519         (getftp): Changed prototype to accept ccon *.
3520
3521 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
3522
3523         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
3524         incorrect values to files pointed to by symbolic links.
3525         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
3526
3527 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
3528
3529         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
3530
3531         * main.c (main): New option: --user-agent.
3532
3533         * geturl.1: Ditto.
3534
3535         * init.h: Ditto.
3536
3537         * init.c (setval): Ditto.
3538
3539         * main.c (main): Rename "server-headers" to "server-response".
3540
3541         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
3542         executables in 'ls -F' listings.
3543
3544 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
3545
3546         * url.c (parseurl): Remove realloc() and sprintf().
3547         (str_url): Get rid of sprintf().
3548
3549         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
3550         servers.
3551
3552         * url.h (URL_CLEANSE): Made it else-resistant.
3553         (USE_PROXY): New macro.
3554
3555 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3556
3557         * NEWS: Update.
3558
3559         * version.c: Changed version to 1.4b19.
3560
3561 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3562
3563         * version.c: "Released" 1.4b18.
3564
3565         * url.c: Made it reallocate space exponentially.
3566
3567 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
3568
3569         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
3570         the list of stuff to fetch.
3571
3572 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
3573
3574         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
3575         -Fi.
3576
3577         * html.c (htmlfindurl): Rewrite.
3578
3579         * http.c (gethttp): Use opt.proxy_cache.
3580
3581         * main.c (main): Added --cache option.
3582
3583         * ftp.c (ftp_response): Print server response if opt.print_server
3584         response is set.
3585         (getftp): Print newlines after each request if the server response
3586         is to be printed.
3587         (ftp_response): Copy the last response line to last_respline.
3588
3589         * http.c (gethttp): Add Pragma: nocache for retried
3590         proxy-retrievals.
3591
3592         * ftp.c (getftp): Use it.
3593
3594         * retr.c (buf_discard): New function.
3595
3596         * ftp.c (ftp_response): Use buf_readchar().
3597         (getftp): Flush the control connection buffer before calling
3598         get_contents().
3599
3600         * retr.c (buf_readchar): New function.
3601         (buf_flush): New function.
3602         (get_contents): Use buf_readchar() instead of read(x, x, 1).
3603         (get_contents): Use buf_flush.
3604
3605 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3606
3607         * ftp.c: Incorporate changes to ftp_response.
3608
3609         * ftp.c (ftp_response): Allocate the server response dynamically,
3610         as in read_whole_line and fetch_next_header.
3611
3612         * utils.c (read_whole_line): Fixed a bug that prevented reading
3613         the last line if it is not \n-terminated. Also fixed a possible
3614         memory overflow.
3615
3616         * http.c (fetch_next_header): Return malloc-ed string as large as
3617         needed.
3618         (gethttp): Use new fetch_next_header.
3619
3620 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3621
3622         * http.c (hgetlen): Compute the header length the first time only.
3623         (hgettype): Ditto.
3624         (hgetlocation): Ditto.
3625         (hgetmodified): Ditto.
3626
3627 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3628
3629         * sample.geturlrc: Update.
3630
3631 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3632
3633         * http.c (http_loop): Ditto.
3634
3635         * ftp.c (getftp): Open the output file as binary.
3636
3637         * version.c: Changed version to 1.4b18.
3638
3639 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3640
3641         * version.c: "Released" 1.4b17.
3642
3643         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
3644         instead of failed assertion.
3645
3646 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
3647
3648         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
3649         if a file of that name already exists.
3650
3651 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
3652
3653         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
3654
3655         * config.h.in: Define gethostbyname as Rgethostbyname when using
3656         Socks.
3657
3658         * configure.in: Check for -lresolv if using Socks.
3659
3660         * version.c: Changed version to 1.4b17.
3661
3662 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
3663
3664         * version.c: "Released" 1.4b16.
3665
3666         * http.c (gethttp): More intelligent check for first line of HTTP
3667         response.
3668         (gethttp): Would bug out on time-stamping.
3669
3670         * version.c: Changed version to 1.4b16.
3671
3672 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3673
3674         * version.c: Released 1.4b15.
3675
3676         * http.c (http_loop): Print \n after the loop entry, not before.
3677
3678         * url.c (url_filename): Use ISDOT.
3679
3680         * url.h (ISDOT): New macro.
3681
3682         * recur.c (recursive_retrieve): Change only opt.recursive for
3683         following FTP.
3684
3685 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
3686
3687         * socks/geturl.cgi: Fixed version No.
3688
3689         * socks/download-netscape.html: Ditto.
3690
3691         * socks/download.html: Changed socks.html to download.html.
3692
3693 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3694
3695         * url.c (url_filename): Check for opt.dirstruct instead for
3696         opt.recursive && opt.dirstruct.
3697
3698         * init.c (defaults): Ditto.
3699         (defaults): Reset dirstruct by default.
3700         (setval): Set opt.dirstruct whenever setting recursive.
3701
3702         * init.h: Removed FORCEDIRHIER.
3703
3704         * INSTALL: Added -L to socks-description.
3705
3706         * version.c: Changed version to 1.4b15.
3707
3708 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
3709
3710         * version.c: "Released" 1.4b14.
3711
3712         * geturl.1: Update AUTHOR to include Rosella as contributor.
3713
3714         * NEWS: Update.
3715
3716         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
3717
3718         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
3719         (cal_time): Fix == to eq.
3720
3721         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
3722
3723         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
3724
3725         * Makefile.in: Use @VERSION@.
3726
3727         * configure.in: Check version from version.c.
3728
3729         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
3730
3731         * socks/download.html: Created from download-netscape.html, made
3732         HTML-2.0 compliant.
3733
3734         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
3735         following FTP links from recursions.
3736
3737 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3738
3739         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
3740         absolute directories correctly.
3741
3742         * version.c: Changed version to 1.4b14.
3743
3744 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3745
3746         * version.c: "Released" 1.4b13.
3747
3748         * url.c (make_backup): New function.
3749
3750         * http.c (http_loop): Make a backup copy of the local file (using
3751         rename(2)) before opening it.
3752
3753         * main.c (main): Added --backups.
3754
3755         * host.c (ftp_getaddress): Bail out on failed mycuserid().
3756         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
3757         (ftp_getaddress): Check for empty, null or (null) domain.
3758
3759         * url.c (get_urls_html): If this_url is NULL, the base must have a
3760         protocol.
3761         (parseurl): Use has_proto.
3762
3763         * retr.c (retrieve_url): Warn when proxy is used with more than 20
3764         retries.
3765
3766         * url.c (mkstruct): Create the directory (calling mymkdir()) only
3767         if it is not already there.
3768         (has_proto): New function.
3769         (get_urls_html): Eliminate the remaining call to findurl -- use
3770         has_proto.
3771
3772         * geturl.1: Ditto.
3773
3774         * main.c: Change -X to -x.
3775
3776         * url.c (url_filename): Simplify creation of filename if
3777         prefix_files is set.
3778         (url_filename): Simplify everything. And I do mean *everything*.
3779         (mkstruct): Add dir_prefix before hostname.
3780         (path_simplify): Fixed a bug that caused writing outside the path
3781         string in case of "." and ".." path strings.
3782
3783 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
3784
3785         * init.c: Added --mirror.
3786
3787         * main.c (main): Added -X to force saving of directory hierarchy.
3788
3789         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
3790         (ftp_retrieve_list): Check whether quota is exceeded.
3791
3792         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
3793
3794         * http.c (gethttp): Use referer if present.
3795
3796         * recur.c (recursive_retrieve): Set u->referer before calling
3797         retrieve_url.
3798
3799         * url.c (newurl): Use memset to nullify the struct members.
3800         (freeurl): Free the referer field too.
3801
3802         * url.h: Added referer to urlinfo.
3803
3804         * geturl.1: Updated the manual to document some of the new features.
3805
3806         * utils.c (numdigit): Moved from url.c.
3807
3808         * README: Rewritten.
3809
3810         * config.h.in: Add the support for socks.
3811
3812         * configure.in: Add the support for socks.
3813
3814         * url.c (url_filename): If the dir_prefix is ".", work with just
3815         the file name.
3816         (url_filename): Do not look for .n extensions if timestamping if
3817         turned on.
3818
3819         * retr.c (show_progress): Skip the over-abundant restval data, and
3820         print the rest of it with ',' instead of '.'.
3821
3822 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
3823
3824         * retr.c (show_progress): Changed second arg. to long (as it
3825         should be).
3826         (show_progress): Moved to retr.c.
3827         (get_contents): Moved to retr.c.
3828
3829         * version.c: Change version to 1.4b13.
3830
3831 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
3832
3833         * url.c (in_acclist): Would return after the first suffix.
3834
3835 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
3836
3837         * version.c: "Released" 1.4b12.
3838
3839         * url.c (path_simplify): More kludgifications.
3840         (get_urls_html): Use new parameters for htmlfindurl.
3841
3842         * html.c: Removed memorizing "parser states", since the new
3843         organization does not require them.
3844
3845         * init.c (run_geturlrc): Use read_whole_line.
3846
3847         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
3848
3849         * recur.c (parse_robots): Use read_whole_line.
3850
3851         * utils.c (read_whole_line): New function.
3852
3853         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
3854
3855         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
3856         tested on OSF and Ultrix.
3857         (add_hlist): New function.
3858         (free_hlist): New function.
3859         (search_host): New function.
3860         (search_address): New function.
3861         (realhost): Use search_host, search_address and add_hlist.
3862         (same_host): Replaced realloc() with strdupdelim(), made
3863         case-insensitive, fixed a memory leak.
3864
3865         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
3866         tm_min, like intended.
3867
3868         * version.c: Change user agent information to
3869         Geturl/version.
3870
3871 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
3872
3873         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
3874
3875         * url.c (acceptable): Always accept directories.
3876
3877         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
3878         servers by stripping trailing @ from symlinks and trailing / from
3879         directories.
3880
3881         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
3882
3883         * url.c (skip_url): Use toupper instead of UCASE.
3884
3885         * host.c (sufmatch): Made it case-insensitive.
3886
3887         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
3888         (match_backwards): New function, instead of
3889         match_backwards_or_pattern.
3890
3891         * recur.c (recursive_retrieve): Increased performance by
3892         introducing inl, which reduces number of calls to in_slist to only
3893         one.
3894
3895         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
3896         routine to use.
3897
3898         * main.c (printhelp): Removed the warranty stuff.
3899
3900 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
3901
3902         * url.c (add_slist): Simplify.
3903         (match_backwards_or_pattern): New function.
3904         (in_acclist): Use match_backwards_or_pattern.
3905         (matches): Remove.
3906
3907 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
3908
3909         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
3910         recursive.
3911
3912         * html.c (ftp_index): Fixed to work. Beautified the output.
3913
3914         * ftp.c (ftp_retrieve_glob): Another argument to control whether
3915         globbing is to be used.
3916         (ftp_retrieve_list): Compare the time-stamps of local and remote
3917         files to determine whether to download.
3918
3919 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
3920
3921         * ftp.c (rel_constr): New function.
3922
3923         * retr.c (retrieve_from_file): Check for text/html before
3924         retrieving recursively.
3925
3926         * main.c (main): Check whether the file is HTML before going into
3927         recursive HTML retrieving.
3928
3929         * ftp.c (ftp_retrieve_list): Manage directories.
3930         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
3931         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
3932         initialized, causing bugchecks in getftp to fail.
3933
3934         * configure.in: Check for symlink.
3935
3936         * ftp.c (ftp_retrieve_list): Added support for symlinks.
3937
3938         * version.c: "Released" 1.4b10.
3939
3940         * atotm.c (atotm): Redeclared as time_t.
3941
3942         * init.c: New variable "timestamping".
3943
3944         * main.c (main): New option 'N'.
3945
3946         * http.c (hgetlocation): Case-insensitive match.
3947         (hgetmodified): New function.
3948         (http_loop): Implement time-stamping.
3949
3950 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
3951
3952         * version.c: Changed version to 1.4b10
3953
3954         * atotm.c: New file, from phttpd.
3955
3956         * options.h (struct options): New parameter timestamping.
3957
3958         * version.c: 1.4b9 "released".
3959
3960         * recur.c (recursive_retrieve): Used linked list (ulist) for
3961         faster storing of URLs.
3962
3963         * url.c (get_urls_html): Removed the old kludge with comparing the
3964         outputs of htmlfindurl and findurl.
3965         (get_urls_html): Added better protocol support here.
3966         (create_hash): Removed, as well as add_hash and in_hash.
3967         (addslist): New function.
3968         (in_slist): ditto
3969
3970         * version.c: Released 1.4b8, changed version to b9.
3971
3972 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3973
3974         * ftp.c (freefileinfo): New function.
3975         (delelement): New function.
3976
3977         * everywhere: GPL!
3978
3979         * ftp.c (ftp_loop): Use ccon.
3980         (ftp_retrieve_glob): Likewise.
3981
3982         * ftp.h: Define ccon, to define status of control connection.
3983
3984         * ftp.c (ftp_get_listing): New function.
3985         (ftp_retrieve_more): New function.
3986         (ftp_retrieve_glob): New function.
3987
3988 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
3989
3990         * configure.in: Removed the search for cuserid().
3991
3992         * init.c (getmode): Renamed to getperms.
3993
3994 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
3995
3996         * version.c: New version.
3997
3998         * main.c (hangup): New function, that handles hangup. Hangup
3999         signal now causes geturl to stop writing on stdout, and to write
4000         to a log file.
4001
4002         * ftp.c (getftp): "Released" 1.4b7.
4003
4004         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
4005         (ftp_index): Use fileinfo/urlinfo.
4006
4007         * ftp-unix.c (ftp_parse_ls): New function.
4008         (symperms): New function.
4009
4010         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
4011
4012         * retr.c (retrieve_url): Added FTP support.
4013
4014 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4015
4016         * geturl.h: Removed NOTFTP2HTML enum.
4017         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
4018
4019         * ftp.c (getftp): Resynched with urlinfo.
4020         (getftp): Removed HMTL-ization of index.html from getftp.
4021
4022         * version.c: 1.4b6 "released".
4023
4024         * options.h (options): New struct, to keep options in.
4025
4026         * http.c (http_loop,gethttp): Synched with proxy.
4027
4028         * retr.c (retrieve_url): Implemented proxy retrieval.
4029
4030         * main.c (main): Use retrieve_from_file.
4031
4032 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
4033
4034         * retr.c (retrieve_from_file): New function.
4035
4036         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
4037         can be found in u->proto.
4038
4039         * ftp.c (ftp_response): Fixed to accept multi-line responses as
4040         per RFC 959.
4041
4042         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
4043
4044         * url.c (mymkdir): Removed the file of the same name, if one
4045         exists.
4046         (isfile): New function.
4047         (mkstruct): Fixed the '/' glitches.
4048         (path_simplify): Hacked to treat something/.. correctly.
4049
4050 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4051
4052         * http.c (gethttp): Close the socket after error in headers.
4053         (http_loop): HEOF no longer a fatal header.
4054
4055         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
4056         simplifies the syntax of calling retrieve_url.
4057
4058         * recr.c (recursive_retrieve): Modified to use get_urls_html.
4059
4060         * url.c (get_urls_file): New function.
4061         (get_urls_html): New function.
4062
4063         * recr.c (recursive_retrieve): Patched up to conform to the
4064         standards.
4065
4066         * http.c (gethttp): Synched with the rest...
4067         (gethttp): Treat only CONREFUSED specially, with connection
4068         errors.
4069
4070         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
4071
4072 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
4073
4074         * http.c (http_loop): New function.
4075
4076         * loop.c: Removed *lots* of stuff from retrieve_url.
4077
4078         * url.c (parseurl): Changed to work with urlinfo. Integrated
4079         username finding and path parsing.
4080         (newurl): New function.
4081         (freeurl): New function.
4082         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
4083         (url_filename): Likewise.
4084         (path_simplify): Accept relative paths too.
4085         (opt_url): Made urlinfo-compliant, removed bogosities.
4086         (path_simplify): Expanded to accept relative paths.
4087         (str_url): A replacement for hide_url
4088         (decode_string): Fixed a bug that caused malfunctioning when
4089         encountering an illegal %.. combination.
4090         (opt_url): Removed the argument. Dot-optimizations are now default.
4091
4092         * nmalloc.c (strdupdelim): New function.
4093
4094         * url.h: Added the urlinfo structure
4095
4096 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
4097
4098         * url.c (hide_url): Thrown out the protocol assertion. Do not
4099         change the URL if the protocol if not recognized.
4100         (findurl): Put continue instead of break.
4101
4102 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
4103
4104         * sample.geturlrc: Changed the defaults to be commented out and
4105         harmless (previous defaults caused pains if copied to
4106         ~/.geturlrc).
4107
4108         * http.c (gethttp): Print the HTTP request in debug mode.
4109
4110         * connect.c (iread): Added EINTR check loop to select-ing
4111         too. EINTR is now correctly handled with select().
4112
4113         * TODO: new file
4114
4115 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
4116
4117         * host.c (same_host): Made the function a little bit more
4118         intelligent regarding diversified URL syntaxes.
4119
4120         * url.c (skip_url): Spaces are now skipped after URL:
4121
4122         * Released 1.3.1 with the patch to prevent crashing when sending
4123         NULL to robot* functions and the patch to compile "out of the box"
4124         on AIX.
4125
4126         * recr.c (recursive_retrieve): Added checking whether this_url is
4127         NULL when calling the robot functions.
4128
4129         * ChangeLog: New file.