]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Applied Jonas Jensen's download rate patch with my additions.
[wget] / src / ChangeLog
1 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2
3         * ftp.c (ftp_loop_internal): Disable padding.
4         (getftp): Ditto.
5
6         * http.c (http_loop): Disable padding.
7
8         * retr.c (show_progress): Use it to enable padding.
9
10         * retr.c (rate): Optional parameter PAD for padding the rate.
11
12 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
13
14         * retr.c (show_progress): Make sure that the last output line
15         includes progress.
16
17 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
18
19         * retr.c (show_progress): Print the download rate along with the
20         percentages.
21
22 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
23
24         * ftp.h: Rename enums `command' to `wget_ftp_command' and
25         `fstatus' to `wget_ftp_status' because old names clash with Tru64
26         net/if.h.
27
28 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
29
30         * gen_sslfunc.c: verify_callback is now static
31
32         * gen_sslfunc.c (init_ssl): load certificate if specified
33
34         * gen_sslfunc.c (ssl_printerr): new function
35
36         * init.c: added new --sslcertfile and --sslcertkey switches
37
38         * main.c: ditto
39
40         * options.h: ditto
41
42         * http.c (gethttp): abort when init_ssl fails
43
44 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
45
46         * mswindows.h: Include <malloc.h>; it's needed for alloca().
47
48 2001-01-10  Dan Harkless  <wget@harkless.org>
49
50         * url.c (str_url): Clarified this function's comment header after
51         Hrvoje answered my question on the list as to when hide != 1.
52         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
53
54 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
55
56         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
57         Drazen Kacar <dave@arsdigita.com>.
58         (conaddr): Ditto.
59
60 2001-01-09  Dan Harkless  <wget@harkless.org>
61
62         * html-url.c: A bunch of fixup of `--page-requisites'-related
63         comments to reflect Hrvoje's changes to my code when transplanting
64         it into this new file, to fix spelling mistakes, to clarify, etc.
65
66         * url.c (write_backup_file): Clarified a comment.
67         (str_url): Henrik van Ginhoven pointed out on the list that we
68         shouldn't give away the number of characters in the password by
69         replacing each character with a 'x'.  Use "<password>" instead.
70
71         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
72         directories didn't work if logging in put you in a directory other
73         than "/" is fixed now.  Removed the comment here warning of the bug.
74
75         * main.c (print_help): --continue's description was misleading.
76         We don't "restart", we "resume".  Also, better to say
77         "partially-downloaded file" rather than just "existing file".
78
79 2001-01-06  Dan Harkless  <wget@harkless.org>
80
81         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
82         the best way to go about my aim.  Removed them in favor of:
83
84         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
85
86 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
87
88         * url.c (replace_attr): New function, to be used by both
89         TO_COMPLETE and TO_RELATIVE case in convert_links.
90         (find_fragment): New function for finding URL fragments.
91         (replace_attr): Better handle the case where the original string
92         is not quoted.  Use find_fragment.
93         (convert_links): Use replace_attr().
94
95 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
96
97         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
98
99 2000-12-31  Dan Harkless  <wget@harkless.org>
100
101         * ChangeLog: Since this flat file doesn't have multiple branches,
102         looking at the dates would make you think that things went into
103         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
104         in 1.6 branch.]" where appropriate to clarify.
105         
106 2000-12-30  Dan Harkless  <wget@harkless.org>
107
108         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
109         patch to deal with h_errno not being defined in netdb.h under Cygwin.
110
111 2000-12-17  Igor Khristophorov  <igor@atdot.org>
112
113         * http.c (check_end): Fix test for '+' or '-'.
114
115 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
116
117         * url.c (parseurl): Rename inner loop var from i to ind to avoid
118         clash with the function top-level-declared variable i.
119         (str_url): Likewise, rename inner-loop i to j.
120
121         * recur.c (parse_robots): Don't declare LEN at top of function.
122         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
123         global variable.
124
125         * main.c (main): Change erroneous use of bitwise and to logical.
126
127         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
128         the stack because it will be copied to closure.
129
130         Thanks to Csaba Raduly's run of PC-LINT over the sources.
131
132 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
133
134         * http.c (basic_authentication_encode): Use xmalloc(), not
135         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
136         sources.
137
138 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
139
140         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
141         compilation.
142
143 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
144
145         * mswindows.c: Include <errno.h>.
146
147         * gen_sslfunc.c: Include <errno.h>.
148
149         * ftp-basic.c: Don't attempt to declare errno or h_errno because
150         they're not used.
151
152         * main.c: Include <errno.h> because errno is used.
153
154         * ftp.c: Ditto.
155
156         * http.c: Include <netdb.h> for h_errno.
157
158 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
159
160         * html-parse.c (advance_declaration): MSVC assert() chokes on
161         '\"'.  Use '"' instead.
162
163 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
164
165         * utils.c (xfree_real): Removed.
166         (xfree_debug): Just call free().
167
168         * wget.h (xfree): Make it an alias for free.
169
170 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
171
172         * http.c (http_loop): Furthermore, touch output_document only if
173         it is known to be an existing regular file.
174
175 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
176
177         * ftp.c (ftp_retrieve_list): Ditto.
178
179         * http.c (http_loop): Touch output_document if that is used for
180         output.
181
182 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
183
184         * http.c: Include gen_sslfunc.h after including Wget's headers.
185         (persistent_available_p): Needed coma before `int ssl'.
186
187 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
188
189         * ftp.c (ftp_loop_internal): Ditto.
190
191         * http.c (http_loop): Use it.
192
193         * retr.c (sleep_between_retrievals): New function that handles the
194         logic of opt.wait and opt.waitretry.
195
196 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
197
198         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
199         rbuf_read_bufferful when the buffer is depleted.
200
201         * rbuf.c (rbuf_read_bufferful): New function.
202
203 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
204
205         * gen_sslfunc.h: Use ansi2knr style function declarations.
206
207         * gen_sslfunc.c: Reformat according to the GNU coding standards.
208         More should be done.
209
210         * http.c (persistent_available_p): Place the cheap SSL test nearer
211         the top of the function.
212         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
213
214 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
215
216         * Makefile.in: added gen_sslfunc object
217         * config.h.in: added HAVE_SSL define
218         * connect.c: changed select_fd from static int to int
219         * connect.h: ditto
220         * gen_sslfunc.h: New file
221         * gen_sslfunc.c: ditto
222         * http.c: added HTTPS fuctionality
223         * retrc.c: ditto
224         * url.c: ditto
225         * init.c: added opt.httpsproxy
226         * options.h: ditto
227         * rbuf.h: added alternate rbuf struct
228         * wget.h: added CONSSLERR
229         * rbuf.c: ditto
230
231         * http.c: Added HTTPS fuctionality.
232
233         * retrc.c: Ditto.
234
235         * url.c: Ditto.
236
237         * init.c: Added opt.httpsproxy.
238
239         * options.h: Ditto.
240
241         * rbuf.h: Added alternate rbuf struct.
242
243         * wget.h: Added CONSSLERR.
244
245         * rbuf.c: Ditto.
246
247 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
248
249         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
250         "ignore_perms" to ignore file and directory permissions for
251         Windows NT FTP server listings.
252         (ftp_parse_winnt_ls): New function.
253         (ftp_parse_ls): Parses UNIX and Windows NT listings
254         separately. Simple heuristics for distinguishing between UNIX
255         and MS-DOS-like FTP listing provided by Windows NT FTP service.
256
257 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
258
259         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
260         char.
261
262 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
263
264         * netrc.c (parse_netrc): Get rid of line ending.
265
266 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
267
268         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
269         Dan.
270
271 2000-11-24  Karl Eichwalder  <ke@suse.de>
272
273         * main.c (print_help): Untabify.
274
275 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
276
277         * utils.c (xrealloc_debug): Do the unregister/register thing only
278         if the pointer has actually changed.
279         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
280         (xfree_real): Ditto.
281         (xrealloc_real): Ditto.
282         (xstrdup_real): Ditto.
283
284 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
285
286         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
287         string; no need to strdup() it.
288         (getftp): Make pwd_len a local variable.
289         (ftp_loop): Free PWD before returning.
290
291         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
292
293 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
294
295         * all: Use xfree() instead of free.
296
297         * utils.c (xfree): New function.
298
299 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
300
301         * url.c (convert_links): HTML-quote the converted string.
302
303         * utils.c (html_quote_string): Move here from ftp-ls.c
304         (html_quote_string): Make non-static; declare in utils.h.
305         (html_quote_string): Convert SP to &#32;.
306
307 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
308
309         * ftp.c (getftp): Reformat Jan's code according to GNU coding
310         standards; remove (debugging?) printf's; use '\0' for the ASCII
311         zero character.  Use alloca() instead of malloc() for
312         inter-function temporary allocations.
313
314 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
315
316         * ftpparse.c, ftpparse.h: New files.
317
318         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
319         only. Use ftp_parse_nonunix_ls otherwise.
320         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
321         exotic FTP servers.
322
323         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
324         FTP servers.
325
326         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
327         (getftp): Support for VMS. Support for FTP servers that do not
328         place you in the root directory after login.
329         (ftp_retrieve_list): VMS is silent about the real file size, issue
330         a more appropriate message.
331         (ftp_get_listing): Pass host_type to ftp_parse_ls.
332
333         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
334
335 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
336
337         * hash.c (hash_table_put): Don't overwrite deleted mappings.
338
339 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
340
341         * hash.c (find_mapping): New function.
342         (hash_table_get): Use it.
343         (hash_table_get_pair): Ditto.
344         (hash_table_exists): Ditto.
345         (hash_table_remove): Ditto.
346         (hash_table_remove): Really delete the entry if the mapping
347         following LOCATION is empty.
348
349         * utils.c (string_set_add): Check whether the element has existed
350         before.
351
352         * hash.c (hash_table_get_pair): New function.
353
354 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
355
356         * http.c (http_process_type): Ignore trailing whitespace; use
357         strdupdelim().
358
359         * recur.c (recursive_retrieve): Use the new `convert' field.
360         (convert_all_links): Ditto.
361         (convert_all_links): Don't respect meta_disallow_follow.
362
363         * html-url.c (handle_link): Fill out link_relative_p and
364         link_complete_p.
365
366         * url.h (struct _urlpos): Make elements more readable.
367
368         * recur.c (recursive_retrieve): Call slist_prepend instead of
369         slist_append.
370         (convert_all_links): Call slist_nreverse before iterating through
371         urls_html.
372
373         * utils.c (slist_prepend): New function.
374         (slist_nreverse): Ditto.
375
376 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
377
378         * http.c (check_end): Constify.
379
380 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
381
382         * http.c (http_loop): If username and password are known, try the
383         `Basic' authentication scheme by default.
384
385         * connect.h: Declare test_socket_open.
386
387 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
388
389         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
390
391 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
392
393         * http.c (gethttp): Don't use the return value of sprintf().
394         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
395
396 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
397
398         * recur.c (recursive_retrieve): Print the "so we don't load"
399         debugging message only if we really don't load.
400
401         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
402         (gethttp): Don't request keep-alive if keep-alive is inhibited.
403
404 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
405
406         * http.c (gethttp): Make the HTTP persistent connections more
407         robust.
408
409 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
410
411         * retr.c (get_contents): If use_expected, make sure that the
412         appropriate amount of data is being read.
413
414         * http.c (gethttp): Check for both `Keep-Alive: ...' and
415         `Connection: Keep-Alive'.
416
417         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
418         turned on.
419
420 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
421
422         * http.c (connection_available_p): Use it.
423
424         * connect.c (test_socket_open): New function.
425
426         * http.c (gethttp): Support persistent connections.  Based on the
427         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
428         (register_persistent): New function.
429         (connection_available_p): Ditto.
430         (invalidate_connection): Ditto.
431
432 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
433
434         * url.c (convert_links): Handle UREL2ABS case.
435
436         * recur.c (recursive_retrieve): Instead of the list
437         urls_downloaded, use hash tables dl_file_url_map and
438         dl_url_file_map.
439         (convert_all_links): Use them to retrieve data.
440
441         * host.c (clean_hosts): Free the hash tables.
442
443         * main.c (private_initialize): Call host_init().
444
445         * host.c (store_hostaddress): Use a saner, hash table-based data
446         model.
447         (realhost): Ditto.
448         (host_init): Initialize the hash tables.
449
450 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
451
452         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
453         used for what the sorted slists used to be used for.
454         (slist_contains): Don't rely on the list being sorted.
455         (slist_append): Simplify the code.
456
457         * recur.c (recursive_cleanup): Use free_string_set.
458
459         * utils.c (string_set_add, string_set_exists, string_set_free):
460         New functions for easier freeing of hash tables whose keys are
461         strdup'ed strings.
462
463         * recur.c (recursive_retrieve): Use the hash table functions for
464         storing undesirable URLs.
465
466         * hash.c: New file.
467
468 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
469
470         * main.c (private_initialize): Call url_init.
471         (main): Call private_initialize.
472
473         * url.c (unsafe_char_table): New table.
474         (UNSAFE_CHAR): Use it.
475         (init_unsafe_char_table): New function.
476         (url_init): New function; call init_unsafe_char_table.
477
478 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
479
480         * html-url.c (handle_link): Handle HTML fragment identifiers.
481
482         * recur.c (recursive_retrieve): If norobot info is respected and
483         the file is specified not to be followed by robots, respect that.
484
485         * html-url.c (collect_tags_mapper): Handle <meta name=robots
486         content=X>.  For us the important cases are where X is NONE or
487         where X contains NOFOLLOW.
488         (get_urls_html): Propagate that information to the caller.
489
490 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
491
492         * url.c (convert_links): Unlink the file we might be reading from
493         before writing to it.
494         (convert_links): Use alloca instead of malloc for
495         filename_plus_orig_suffix.
496
497 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
498
499         * url.c (get_urls_file): Ditto.
500         (convert_links): Ditto.
501
502         * html-url.c (get_urls_html): Use read_file() instead of
503         load_file().
504
505         * utils.c (read_file): New function, instead of the old
506         load_file().
507         (read_file_free): Ditto.
508
509         * url.c (findurl): Search only for the supported protocols.
510         (convert_links): Use fwrite() when writing out a region of
511         characters.
512
513 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
514
515         * ftp-ls.c: Move html_quote_string and ftp_index here.
516
517         * url.c: Remove get_urls_html, since that's now in html-url.c.
518
519         * html-url.c: New file.
520
521         * html-parse.c: New file.
522
523 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
524
525         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
526         _vsnprintf respectively.
527
528 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
529
530         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
531         on Linux.
532
533 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
534
535         * host.c (realhost): Add HOST to the list with quality==0 only if
536         it wasn't already there.
537         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
538
539 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
540
541         * init.c (run_wgetrc): Don't bother killing off '\r' since
542         pars_line() skips whitespace at end of line anyway.
543         (parse_line): Oops, it didn't.  Now it does.
544
545         * recur.c (parse_robots): Ditto here.
546
547         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
548         manually because read_whole_line no longer does.
549
550         * utils.c (read_whole_line): Rewrite to: a) use less memory
551         (reallocates to needed size after work), b) work faster -->
552         fgets() instead of getc, c) be more correct --> doesn't kill the
553         newline character at the end of line.
554
555 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
556
557         * init.c (comind): Initialize MAX to array size - 1.
558
559 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
560
561         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
562         Suggested by Edward J. Sabol.
563
564 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
565
566         * url.c (construct): Handle the case where host name is not
567         followed by a slash.
568
569 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
570
571         * init.c: commands[] need to be sorted!  ("base" wasn't.)
572
573 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
574
575         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
576         `if'.
577
578 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
579
580         * url.c (construct): Insert unneeded initialization for the
581         compiler to shut up.
582
583         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
584         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
585         otherwise gets lost when you define _XOPEN_SOURCE.
586
587         * utils.c (touch): Include the file name in the error message.
588         From Debian.
589
590 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
591
592         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
593         resize the buffer to fit the formated message.  That way, messages
594         of arbitrary size may be printed.
595         (logvprintf): Use saved_append() to optionally log the last
596         several lines of output.
597         (logputs): Ditto.
598         (log_close): Adapt to new data structures.
599         (log_dump): Ditto.
600         (redirect_output): Print messages to stderr, not to stdout.
601
602         * log.c (saved_append_1): New function.  Replaces the old logging
603         system ("log all output until 10M characters") with a new, much
604         more reasonable one ("log last screenful of text").
605         (saved_append): New function; call saved_append_1.
606         (free_log_line): New function.
607
608 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
609
610         * url.c (construct): Fix comment.
611         (find_last_char): Document.
612
613 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
614
615         * snprintf.c: New file.
616
617 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
618
619         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
620         types to logprintf() and debug_logprintf().
621
622 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
623
624         * ftp.c (ftp_loop_internal): Hide the password from the URL when
625         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
626         <darekm@bydg.lomac.com.pl>.
627
628 2000-11-02  Junio Hamano  <junio@twinsun.com>
629
630         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
631
632 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
633
634         * http.c (known_authentication_scheme_p): Recognize NTML
635         authentication.
636         (create_authorization_line): Treat NTML the same as `Basic'.
637
638 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
639
640         * retr.c (retrieve_url): Free url before returning.
641         (retrieve_url): Free mynewloc before returning.
642         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
643
644 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
645
646         * url.c (parseurl): Remove possible reading past the end of
647         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
648
649 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
650
651         * main.c (main): In case of opt.downloaded overflowing, print
652         <overflow> instead of a totally bogus random value.
653
654         * retr.c (retrieve_from_file): Ditto.
655
656         * recur.c (recursive_retrieve): Ditto.
657
658         * main.c (main): Ditto.
659
660         * http.c (http_loop): Ditto.
661
662         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
663         `+=', and downloaded_exceeds_quota() instead of the simple-minded
664         check.
665         (ftp_retrieve_list): Ditto.
666         (ftp_retrieve_dirs): Ditto.
667         (ftp_retrieve_glob): Ditto.
668
669         * retr.c (downloaded_increase): New function.  Notice overflows of
670         opt.downloaded.
671         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
672         used if it overflowed.
673
674         * options.h (struct options): New member downloaded_overflow.
675
676 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
677
678         * wget.h (enum): Remove extra space after last enumeration.
679
680 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
681
682         * main.c (main): Use legible_very_long() for printing
683         opt.downloaded.
684
685         * utils.c (legible_1): New function that operates on strings and
686         does the brunt of legible()'s work.
687         (legible): Use legible_1().
688         (legible_very_long): New function; dump the argument with
689         sprintf(), and call legible_1().
690
691         * options.h (struct options): Use VERY_LONG_TYPE for
692         opt.downloaded.
693
694         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
695         type.
696
697         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
698         defined.  Define HAVE_LONG_LONG if long long is available.
699
700 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
701
702         * utils.c (long_to_string): Update with a later, better version.
703
704 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
705
706         * url.c (path_simplify_with_kludge): New function.
707         (path_simplify_with_kludge): Disable it.  Instead...
708         (parse_dir): ...make sure that at this point the right thing is
709         done, i.e. that "query" part of the URL (?...) is always assigned
710         to the file, never to the directory portion of the path.
711
712 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
713
714         * retr.c (retrieve_url): Detect redirection cycles.
715
716 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
717
718         * url.c (get_urls_html): Decode HTML entities using
719         html_decode_entities.
720
721         * html.c (htmlfindurl): Don't count the `#' in numeric entities
722         (&#NNN;) as an HTML fragemnt.
723         (html_decode_entities): New function.
724
725 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
726
727         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
728
729 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
730
731         * url.c (construct): Rewritten for clarity.  Avoids the
732         unnecessary copying and stack-allocation the old version
733         performed.
734
735 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
736
737         * ftp.c (getftp): Ditto.
738
739         * http.c (gethttp): Rewind the stream when retrying from scratch.
740
741 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
742
743         * retr.c (retrieve_url): Use url_concat() to handle relative
744         redirections instead of /ad hoc/ code.
745
746         * url.c (url_concat): New function encapsulating weird
747         construct().
748         (urllen_http_hack): New function.
749         (construct): When constructing new URLs, recognize that `?' does
750         not form part of the file name in HTTP.
751
752 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
753
754         * retr.c: Add msec timing support for WINDOWS.
755         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
756         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
757
758 2000-10-27  Dan Harkless  <wget@harkless.org>
759
760         * retr.c (retrieve_url): Manually applied T. Bharath
761         <TBharath@responsenetworks.com>'s patch to get wget to grok
762         illegal relative URL redirects.  Reformatted and re-commented it.
763
764 2000-10-23  Dan Harkless  <wget@harkless.org>
765
766         * connect.c (make_connection and bindport): Manually applied Rob
767         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
768         changing coding style to GNU's.
769
770         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
771         files downloaded via FTP.  Per a comment, .listing files were not
772         counted towards number of bytes and files downloaded because they're 
773         deleted anyway.  Well, they aren't under -nr, so count them then.
774
775         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
776         --bind-address, alphabetizing, changing coding style to GNU's,
777         commenting, and renaming cmd_ip_address() to cmd_address() to
778         imply hostnames also okay.
779                 
780         * main.c (main): --delete-after didn't delete the root of the
781         tree.  Ignore --convert-links if --delete-after was specified.
782         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
783         fixing duplicate use of added-since-1.5.3 case value.
784         (print_help): Clarified that --delete-after deletes local files.
785         Rob forgot to add a line for his new --bind-address option.
786                 
787         * options.h (struct options): Manually applied Rob Mayoff's patch
788         to add --bind-address (bind_address structure member).
789                 
790         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
791         Ignore --convert-links if --delete-after was specified.
792                 
793         * retr.c (retrieve_from_file): Just added a DEBUGP().
794                 
795 2000-10-19  Dan Harkless  <wget@harkless.org>
796
797         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
798         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
799         patch to work around FTP servers that incorrectly respond to the
800         "REST" command with the remaining size rather than the total file size.
801                 
802         * http.c (gethttp): Improved a comment and added code to tack on
803         ".html" to text/html files without that extension when -E specified.
804         (http_loop): Use new downloaded_file() enumerators and deal with
805         the case of gethttp() called xrealloc() on u->local.
806
807         * init.c (commands): Added new "htmlextension" command.
808         Also renamed John Daily's cmd_quad() to the more descriptive
809         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
810         removed duplicate cmd_boolean() declaration.
811
812         * main.c (print_help): Added my new -E / --html-extension option.
813         (main): Undocumented --email-address option previously used -E synonym.
814         Stole it away for the much more deserving --html-extension's use.
815
816         * options.h (struct options): Added html_extension field.
817
818         * url.c (convert_links): URL X that we saved as X.html locally due
819         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
820         (downloaded_file): Now remembers if we added .html extension to a file.
821
822         * url.h (downloaded_file_t): Added extra enumerators to support above.
823         (downloaded_file): Now takes and returns a downloaded_file_t.
824
825         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
826         
827 2000-10-09  Dan Harkless  <wget@harkless.org>
828
829         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
830                 
831         * main.c (print_help): Clarified what --retr-symlinks does.
832         
833 2000-09-15  John Daily  <jdaily@cyberdude.com>
834
835         * init.c: Add support for "always" and "never" values to allow
836         .wgetrc to override commandline (useful e.g. with .pm files
837         calling `wget --passive-ftp' when your firewall doesn't allow that).
838
839         * ftp.c (getftp): passive_ftp is first option to support always/never.
840
841 2000-08-30  Dan Harkless  <wget@harkless.org>
842
843         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
844         
845         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
846         Wrapped some > 80-column lines.  When -p is specified and we're at a 
847         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
848         <LINK REL="stylesheet">.
849         
850         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
851         
852         * init.c: Added new -p / --page-requisites / page_requisites option.
853
854         * main.c (print_help): Clarified that -l inf and -l 0 both allow
855         infinite recursion.  Changed the unhelpful --mirrior description
856         to simply give the options it's equivalent to.  Added new -p option.
857         (main): Added some comments; handle new -p / --page-requisites.
858         
859         * options.h (struct options): Added new page_requisites field.
860
861         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
862         Calculate and pass down new `dash_p_leaf_HTML' parameter to
863         get_urls_html().  Use new INFINITE_RECURSION #define.
864
865         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
866         final `dash_p_leaf_HTML' parameter.
867
868         * url.c: get_urls_html() and htmlfindurl() now take final
869         `dash_p_leaf_HTML' parameter.
870
871         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
872
873         * wget.h: Added some comments and new INFINITE_RECURSION #define.
874         
875 2000-08-23  Dan Harkless  <wget@harkless.org>
876
877         * main.c (print_help): -B / --base was not mentioned.
878
879 2000-08-22  Dan Harkless  <wget@harkless.org>
880
881         * main.c (print_help): Modified -nc description to mention that it
882         also prevents the creation of multiple versions of the same file
883         with ".<number>" suffixes.
884
885 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
886
887         * retr.c (retrieve_url): Consistently strdup opt.referer when
888         setting u->referer.
889
890 2000-06-09  Dan Harkless  <wget@harkless.org>
891
892         * main.c (print_help): --help output for --waitretry was over 80 cols.
893
894 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
895
896         * url.c (encode_string): Fix comment.
897         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
898
899 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
900
901         * ftp.c (ftp_retrieve_list): Change permissions only on plain
902         files.
903
904 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
905
906         * url.c (str_url): Print the port number only if it's different
907         from the default port number for that protocol.
908
909 2000-05-22  Dan Harkless  <wget@harkless.org>
910
911         * main.c (print_help): Added --help line for Damir Dzeko
912         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
913         Removed comments that --referer and --waitretry were undocumented.
914         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
915         line for --execute.
916
917 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
918
919         * ftp.c (getftp): Ditto.
920
921         * http.c (gethttp): Check for return value of fclose/fflush.
922
923 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
924
925         * host.c (store_hostaddress): Instead of shifting ADDR, start
926         copying from the correct address.
927
928 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
929
930         * http.c (gethttp): Don't free REQUEST -- it was allocated with
931         alloca().
932         Pointed out by Gisle Vanem <gvanem@eunet.no>.
933
934 2000-04-04  Dan Harkless  <wget@harkless.org>
935
936         * host.c (store_hostaddress): R. K. Owen's patch introduces a
937         "left shift count >= width of type" warning on 32-bit
938         architectures.  Got rid of it by tricking the compiler w/ a variable.
939         
940         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
941         characters per RFC1738, namely everything above '~'.  It also
942         generated a warning on OSes where char =~ unsigned char.  Fixed.
943         
944 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
945
946         * http.c (http_process_type): Removed needless strdup(), a memory
947         leak.
948
949 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
950
951         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
952
953 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
954
955         * init.c (wgetrc_file_name): Don't free HOME under Windows.
956
957 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
958
959         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
960
961 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
962
963         * url.c (UNSAFE_CHAR): New macro.
964         (contains_unsafe): Use it.
965         (encode_string): Ditto.
966
967 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
968
969         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
970
971 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
972
973         * Use TOUPPER/TOLOWER.
974
975 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
976
977         * ftp-opie.c (btoe): Zero-terminate OSTORE.
978
979 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
980
981         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
982
983         * sysdep.h (ISALNUM): New macro.
984         (TOLOWER): Ditto.
985         (TOUPPER): Ditto.
986
987 2000-03-10  Dan Harkless  <wget@harkless.org>
988
989         * html.c (idmatch): Implemented checking of my new --follow-tags
990         and --ignore-tags options.
991         
992         * init.c (commands): Added comment reminding people adding new
993         entries doing allocation to add corresponding freeing in cleanup().
994         (commands): Added new followtags and ignoretags commands.
995         (cleanup): Free storage for new followtags and ignoretags.
996         
997         * main.c: Use of "comma-separated list" was random -- normalized
998         it.  Did some alphabetization.  Added comments pointing out
999         "Options without arguments" and "Options accepting an argument"
1000         sections of long_options[].  Added new options --follow-tags and
1001         -G / --ignore-tags.  Added comment that Damir's --referer is
1002         currently undocumented.  Added comment that Heiko's --waitretry is
1003         partially undocumented (mentioned in --help but not in
1004         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
1005         
1006         * options.h (struct options): Added new fields follow_tags and
1007         ignore_tags. 
1008         
1009         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
1010         
1011 2000-03-02  Dan Harkless  <wget@harkless.org>
1012
1013         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
1014         braces to avoid ambiguous `else'" warnings.  Eliminated them.
1015         
1016         * http.c (gethttp): Dan Berger's query string patch is totally
1017         bogus.  If you have two different URLs, gen_page.cgi?page1 and
1018         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
1019         second will overwrite the first.  Also, parameters to implicit
1020         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
1021         be printed with trailing garbage characters, and could seg fault.
1022         Backing out the patch, which Dan B. informed me by email was just
1023         a kludge to download StarOffice from Sun made necessary due to
1024         wget's unconditional escaping of certain characters (room for an
1025         option there?).
1026         (http_loop): Heiko introduced "suggest explicit braces to avoid
1027         ambiguous `else'" warnings.  Eliminated them.
1028         
1029         * main.c: Heiko's --wait / --waitretry backwards compatibility
1030         code looks to have been totally untested -- automatic variable
1031         'wr' was used without being initialized, and a long int was passed
1032         into setval()'s char* val parameter.
1033         
1034         * recur.c (parse_robots): Applied Edward J. Sabol
1035         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
1036         problem with "User-agent:<space>*<space>" lines in robots.txt.
1037         
1038         * url.c (parseurl, str_url): Removing Dan Berger's code (see
1039         http.c above for explanation).
1040         
1041 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
1042
1043         * ftp.c: Respect new option waitretry.
1044
1045 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
1046
1047         * http.c (gethttp): Send custom Referer, if required.
1048
1049 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
1050
1051         * netrc.c (parse_netrc): Allow passwords to contain spaces.
1052
1053         * netrc.c (parse_netrc): New function.
1054
1055 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
1056
1057         * http.c (gethttp): Send it.
1058
1059         * url.c (parseurl): Detect query string in HTTP URL-s.
1060         (str_url): Print it.
1061
1062 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
1063
1064         * html.c (html_allow): Add <link href=...> and <script src=...>.
1065
1066 1999-05-02  andrew deryabin  <djsf@softhome.net>
1067
1068         * http.c (gethttp): Specify port in `Host' header only if it's
1069         different from 80.
1070
1071 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1072
1073         * recur.c (recursive_retrieve): If a finite maximum depth is
1074         specified, and we're are already at that depth, don't download the
1075         HTML file for parsing.
1076
1077 2000-03-01  Dan Harkless  <wget@harkless.org>
1078
1079         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
1080         even though we don't do conversion on HTML files retrieved via
1081         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
1082         (ftp_retrieve_list): Added a comment saying where we need to
1083         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
1084         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
1085         a lie -- reworded as "Server file no newer than local file '%s' --".
1086         
1087         * http.c (http_loop): Fixed a typo and clarified a comment.
1088         (http_loop): When -K and -N are specified together, compare size
1089         and timestamp of server file X against local file X.orig (if
1090         extant) rather than converted local file X.
1091         (http_loop): "Local file '%s' is more recent," is sometimes a lie
1092         -- reworded as "Server file no newer than local file '%s' --".
1093         (http_loop): Call new downloaded_file() function to prevent
1094         wrongful overwriting of .orig file when -N is specified.
1095         
1096         * url.c (convert_links): When -K specified, only rename X to
1097         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
1098         file X due to -N, we clobber an X.orig from a previous invocation.
1099         (convert_links): Call the failsafe xstrdup(), not the real strdup().
1100         (convert_links): Added a note asking anyone who understands how
1101         multiple URLs can correspond to a single file to comment it.
1102         (downloaded_file): Added this new function.
1103         
1104         * url.h (downloaded_file): Added prototype for this new function
1105         as well as its downloaded_file_t enum type.
1106
1107         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
1108
1109 2000-02-29  Dan Harkless  <wget@harkless.org>
1110
1111         * version.c: Upped version to developer-only "1.5.3+dev".
1112
1113 2000-02-18  Dan Harkless  <wget@harkless.org>
1114
1115         * init.c (backup_converted): Added this new option.
1116
1117         * main.c (-K / --backup-converted): Added this new option.
1118
1119         * options.h (backup_converted): Added this new option.
1120
1121         * url.c (convert_links): When backup_converted is specified, save
1122         file X as X.orig before converting.
1123
1124         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
1125
1126 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1127
1128         * version.c: Wget 1.5.3 is released.
1129
1130 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1131
1132         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
1133         address doesn't yield FQDN.
1134
1135 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
1136
1137         * cmpt.c (strerror): Fix declaration of sys_errlist.
1138
1139 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
1140
1141         * main.c (main): Don't use an array subscript as the first
1142         argument to STRDUP_ALLOCA.
1143         From Kaveh R. Ghazi.
1144
1145 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
1146
1147         * html.c (htmlfindurl): Download table background.
1148
1149 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
1150
1151         * init.c (parse_line): Would free *com before allocating it.
1152         (parse_line): Would free com instead of *com.
1153
1154 1998-09-10  Howard Gayle  <howard@fjst.com>
1155
1156         * url.c (get_urls_html): Would drop the last character of the
1157         link.
1158
1159 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
1160
1161         * http.c (http_loop): Don't print status code if quiet.
1162
1163 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
1164
1165         * log.c: Use <stdarg.h> only when __STDC__.
1166
1167 1998-09-10  Adam D. Moss  <adam@foxbox.org>
1168
1169         * html.c (htmlfindurl): Download <layer src=...>.
1170
1171 1998-09-10  Howard Gayle  <howard@fjst.com>
1172
1173         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
1174         not retrieved.
1175
1176 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
1177
1178         * utils.c: Include <libc.h> on NeXT.
1179
1180 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
1181
1182         * url.c (get_urls_html): Fix calculation of URL position.
1183
1184 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
1185
1186         * version.c: Wget 1.5.2 is released.
1187
1188 1998-06-23  Dave Love  <d.love@dl.ac.uk>
1189
1190         * ftp.c, init.c, netrc.c: Include errno.h.
1191
1192         * http.c: Include errno.h and time header.
1193
1194         * Makefile.in (exext): Define.
1195         (install.bin, uninstall.bin): Use it.
1196
1197 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
1198
1199         * http.c (http_loop): Don't attempt to compare local and remote
1200         sizes if the remote size is unknown.
1201
1202 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
1203
1204         * url.c (get_urls_html): Use malloc() instead of alloca in the
1205         loop.
1206
1207 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1208
1209         * version.c: Wget 1.5.2-b4 is released.
1210
1211 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1212
1213         * url.c (get_urls_html): Ignore spaces before and after the URI.
1214
1215 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
1216
1217         * ftp.c (getftp): Translate `done'.
1218
1219 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1220
1221         * version.c: Wget 1.5.2-b3 is released.
1222
1223 1998-06-06  Alexander Kourakos  <awk@bnt.com>
1224
1225         * init.c (cleanup): Close dfp, don't free it.
1226
1227 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1228
1229         * utils.c (make_directory): Twiddle.
1230
1231         * config.h.in: Added template for access().
1232
1233 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
1234
1235         * html.c (htmlfindurl): Download <input src=...>
1236
1237 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
1238
1239         * utils.c (file_exists_p): Use access() with two arguments.
1240
1241 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
1242
1243         * netrc.c (parse_netrc): Correct logic.
1244
1245 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
1246
1247         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
1248         <ljm@ljm.wownet.net>.
1249
1250 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
1251
1252         * version.c: Wget 1.5.2-b2 is released.
1253
1254 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
1255
1256         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
1257
1258 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
1259
1260         * retr.c (elapsed_time): Return correct value when
1261         HAVE_GETTIMEOFDAY is undefined.
1262
1263 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
1264
1265         * version.c: Wget 1.5.2-b1 is released.
1266
1267 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
1268
1269         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
1270         (_getopt_internal): Don't translate `#if 0'-ed strings.
1271
1272 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1273
1274         * mswindows.c (ws_handler): Use fork_to_background().
1275
1276 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1277
1278         * version.c: Wget 1.5.1 is released.
1279
1280 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1281
1282         * http.c (parse_http_status_line): Avoid `minor' and `major'
1283         names.
1284
1285 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
1286
1287         * utils.c (mkdirhier): Renamed to make_directory.
1288
1289 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
1290
1291         * mswindows.c (fork_to_background): Define under Windows.
1292
1293         * utils.c (fork_to_background): New function.
1294
1295         * html.c (htmlfindurl): Removed rerdundant casts.
1296
1297 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1298
1299         * mswindows.c (ws_mypath): Cache the path.
1300
1301 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1302
1303         * ftp.h: Prefix enum ftype members with FT_.
1304
1305         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
1306
1307         * mswindows.h: Use stat under Borland, _stat under MSVC.
1308
1309 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
1310
1311         * http.c (known_authentication_scheme_p): New function.
1312         (gethttp): Handle authorization more correctly.
1313
1314         * ftp-basic.h: Removed.
1315
1316         * cmpt.h: Removed.
1317
1318         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
1319         with gcc 2.8.
1320         (numdigit): Use `while' loop.
1321
1322         * http.c (create_authorization_line): Detect authentication
1323         schemes case-insensitively.
1324
1325         * http.c (extract_header_attr): Use strdupdelim().
1326         (digest_authentication_encode): Move declaration of local
1327         variables to smaller scope.
1328         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
1329         (create_authorization_line): Detect authentication schemes
1330         case-insensitively.
1331
1332         * utils.c (touch): Constify.
1333
1334         * http.c (gethttp): Report a nicer error when no data is received.
1335
1336         * rbuf.h (RBUF_READCHAR): Ditto.
1337
1338         * ftp-basic.c (ftp_response): Use sizeof.
1339
1340 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
1341
1342         * retr.c (print_percentage): EXPECTED is long, not int.
1343         (print_percentage): Use floating-point arithmetic to avoid
1344         overflow with large files' sizes multiplied with 100.
1345
1346 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
1347
1348         * config.h.in: Added pid_t stub.
1349
1350         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
1351         define it).
1352
1353 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
1354
1355         * version.c: Wget 1.5.0 is released.
1356
1357 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
1358
1359         * url.c (str_url): Ditto.
1360
1361         * ftp-basic.c (ftp_rest): Use new name.
1362
1363         * utils.c (long_to_string): Renamed from prnum().
1364
1365 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
1366
1367         * version.c: Wget 1.5-b17 is released.
1368
1369 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1370
1371         * headers.c (header_get): New argument FLAGS.
1372
1373         * http.c (gethttp): If request is malformed, bail out of the
1374         header loop.
1375         (gethttp): Check for empty header *after* the status line checks.
1376         (gethttp): Disallow continuations for status line.
1377
1378 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1379
1380         * version.c: Wget 1.5-b16 is released.
1381
1382 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1383
1384         * init.c (commands): Renamed `always_rest' to `continue'.
1385
1386 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
1387
1388         * all: Use it.
1389
1390         * log.c (logputs): New argument.
1391         (logvprintf): Ditto.
1392         (logprintf): Ditto.
1393
1394 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1395
1396         * http.c (http_atotm): Update comment.
1397
1398         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
1399
1400         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
1401
1402         * main.c (i18n_initialize): New function.
1403         (main): Use it.
1404
1405         * log.c: Include <unistd.h>.
1406
1407         * retr.c (show_progress): Cast alloca to char *.
1408
1409 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1410
1411         * version.c: Wget 1.5-b15 is released.
1412
1413 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1414
1415         * utils.h: Declare file_non_directory_p().
1416
1417 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
1418
1419         * main.c (main): It's `tries', not `numtries' now.
1420
1421 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1422
1423         * init.c (getperms): Removed.
1424
1425 1998-04-01  Tim Charron  <tcharron@interlog.com>
1426
1427         * log.c (logvprintf): Don't use ARGS twice.
1428
1429 1998-04-01  John  <john@futuresguide.com>
1430
1431         * mswindows.c: Cleaned up.
1432
1433 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1434
1435         * version.c: Wget 1.5-b14 is released.
1436
1437 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1438
1439         * ftp-opie.c (STRLEN4): New macro.
1440         (btoe): Use it.
1441
1442 1998-04-01  Junio Hamano  <junio@twinsun.com>
1443
1444         * http.c: Document all the Digest functions.
1445
1446 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1447
1448         * utils.c (file_non_directory_p): Renamed from isfile().
1449
1450         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
1451
1452 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1453
1454         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
1455
1456         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
1457         style.
1458         (cmd_permissions): Removed.
1459
1460         * config.h.in: Add template for WORDS_BIGENDIAN.
1461
1462 1998-03-31  Junio Hamano  <junio@twinsun.com>
1463
1464         * http.c (HEXD2asc): New macro.
1465         (dump_hash): Use it.
1466
1467 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1468
1469         * version.c: Wget 1.5-b13 is released.
1470
1471 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1472
1473         * main.c (main): Don't try to use `com'.
1474
1475 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1476
1477         * init.c (cmd_permissions): New function.
1478
1479 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1480
1481         * version.c: Wget 1.5-b12 is released.
1482
1483 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
1484
1485         * init.c (commands): Renamed `numtries' to `tries'.
1486         (cmd_spec_debug): Removed.
1487         (home_dir): Under Windows, return `C:\' if HOME is undefined.
1488
1489 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1490
1491         * config.h.in: Define _XOPEN_SOURCE.
1492
1493         * init.c (check_user_specified_header): New function.
1494         (cmd_spec_header): Use it.
1495         (cmd_spec_useragent): New function.
1496
1497 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
1498
1499         * version.c: Wget 1.5-b11 is released.
1500
1501 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
1502
1503         * wget.h: Include <libintl.h> only if NLS is enabled.
1504
1505 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
1506
1507         * options.h (struct options): Made `wait' a long.
1508         (struct options): Ditto for `timeout'.
1509
1510 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
1511
1512         * utils.c (exists): Renamed to file_exists_p.
1513         (file_exists_p): Use access() if available.
1514
1515 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
1516
1517         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
1518         infloop.
1519
1520         * log.c: do_logging -> save_log_p.
1521
1522         * config.h.in: Added template for HAVE_VSNPRINTF.
1523
1524 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1525
1526         * init.c: Ditto.
1527
1528         * http.c: Protect declaration against non-ANSI compiler.
1529
1530         * log.c (logvprintf): Use vsnprintf() if available.
1531
1532         * getopt.c (main): Don't translate test stuff.
1533
1534 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
1535
1536         * version.c: Wget 1.5-b10 is released.
1537
1538 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
1539
1540         * ftp.c (getftp): Don't translate "CWD %s".
1541
1542         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
1543
1544 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1545
1546         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
1547
1548         * log.c (logputs): New function.
1549         (logvprintf): Renamed from vlogmsg; use logputs().
1550
1551         * retr.c (show_progress): Print `[100%]' when the retrieval is
1552         finished.
1553
1554         * init.c (run_wgetrc): Use FILE, not PATH.
1555         (wgetrc_file_name): Ditto.
1556
1557 1998-03-07  Tim Adam  <tma@osa.com.au>
1558
1559         * recur.c (parse_robots): Correctly reset `entries' on empty
1560         disallow.
1561
1562 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
1563
1564         * init.c (cmd_spec_debug): Use cmd_boolean().
1565
1566 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
1567
1568         * http.c (gethttp): Create proxy-authorization correctly.
1569
1570 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1571
1572         * md5.c: Ditto.
1573
1574         * getopt.c: Use ANSI function definitions.
1575
1576         * ftp-opie.c: New file.
1577
1578         * options.h: Don't redefine EXTERN.
1579
1580         * init.c: Sort it correctly.
1581
1582 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1583
1584         * version.c: Wget 1.5-b9 is released.
1585
1586 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
1587
1588         * recur.c (recursive_retrieve): Reset `first_time'.
1589
1590         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
1591
1592         * rbuf.c (rbuf_peek): Simplified.
1593         (rbuf_flush): Use MINVAL.
1594
1595         * wget.h (MINVAL): Moved from url.h.
1596
1597         * rbuf.h (RBUF_FD): New macro.
1598
1599         * url.c (add_url): Add to the head of the list.
1600
1601         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
1602         file.
1603         (getftp): Set the default permissions to 0600.
1604
1605 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
1606
1607         * url.c (get_urls_html): Ditto.
1608         (convert_links): Ditto.
1609
1610         * recur.c (parse_robots): Ditto.
1611
1612         * html.c (ftp_index): Ditto.
1613
1614         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
1615
1616         * init.c (defaults): Initialize `opt' to zero via memset.
1617
1618         * http.c (digest_authentication_encode): goto considered harmful.
1619
1620 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
1621
1622         * ftp.c (delelement): Simplify and fix leak.
1623
1624 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
1625
1626         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
1627
1628         * url.h (HEXD2ASC): Removed warning.
1629
1630         * init.c (comind): Use binary search.
1631         (commands): Reorganized.
1632         (setval): Ditto.
1633         (cmd_boolean): New function.
1634         (cmd_number): Ditto.
1635         (cmd_number_inf): Ditto.
1636         (cmd_string): Ditto.
1637         (cmd_vector): Ditto.
1638         (cmd_directory_vector): Ditto.
1639         (cmd_bytes): Ditto.
1640         (cmd_time): Ditto.
1641         (cmd_spec_debug): Ditto.
1642         (cmd_spec_dirmode): Ditto.
1643         (cmd_spec_dirstruct): Ditto.
1644         (cmd_spec_dotstyle): Ditto.
1645         (cmd_spec_header): Ditto.
1646         (cmd_spec_htmlify): Ditto.
1647         (cmd_spec_mirror): Ditto.
1648         (cmd_spec_outputdocument): Ditto.
1649         (cmd_spec_recursive): Ditto.
1650         (settime): Merged with cmd_time().
1651         (setbytes): Merged with cmd_bytes().
1652         (setonoff): Merged with cmd_boolean().
1653         (onoff): Ditto.
1654
1655 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1656
1657         * Makefile.in (distclean): Remove `config.h'.
1658
1659 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1660
1661         * version.c: Wget 1.5-b8 is released.
1662
1663 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
1664
1665         * http.c (digest_authentication_encode): New function.
1666         (create_authorization_line): Use it.
1667         (dump_hash): New function.
1668         (digest_authentication_encode): Use it.
1669
1670         * fnmatch.c: Renamed from `mtch.c'.
1671
1672 1998-02-15  Karl Eichwalder  <ke@suse.de>
1673
1674         * main.c (main): Tag "Written by..." string as translatable.
1675
1676 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1677
1678         * wget.h (FREE_MAYBE): New macro.
1679
1680         * http.c (create_authorization_line): Don't use ANSI C string
1681         concatenation feature.
1682         (basic_authentication_encode): Use alloca() for temporary
1683         variables.
1684
1685         * recur.h: Ditto.
1686
1687         * http.c: Ditto.
1688
1689         * headers.h: Ditto.
1690
1691         * ftp-basic.c: Protect declaration against non-ANSI compiler.
1692
1693         * http.c (create_authorization_line): Cast `unsigned char *' to
1694         `char *' for sprintf, to shut up the noisy Digital Unix cc.
1695
1696 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1697
1698         * version.c: Wget 1.5-b7 is released.
1699
1700 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
1701
1702         * cmpt.c (strstr): Synched with glibc-2.0.6.
1703
1704         * ftp-basic.c (calculate_skey_response): Ditto.
1705         (calculate_skey_response): Use alloca().
1706
1707         * http.c (create_authorization_line): Work with FSF's version of
1708         md5.c.
1709
1710         * md5.c: New file, from GNU libc.
1711
1712 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
1713
1714         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
1715
1716 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1717
1718         * http.c (basic_authentication_encode): New function, instead of
1719         the macro.
1720
1721 1998-02-13  Junio Hamano  <junio@twinsun.com>
1722
1723         * http.c: Add HTTP-DA support.
1724         * ftp-basic.c: Add Opie/S-key support.
1725         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
1726         * md5.c, md5.h: New files.
1727
1728 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
1729
1730         * http.c (http_process_range): Renamed from hprocrange().
1731         (http_process_range): Parse the whole header.
1732
1733         * headers.c: New file.
1734         (header_process): New function.
1735         (header_get): Renamed from fetch_next_header.
1736
1737         * all: Include utils.h only where necessary.
1738
1739         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
1740
1741         * wget.h: Add provisions for dmalloc.
1742
1743 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1744
1745         * version.c: Wget 1.5-b6 is released.
1746
1747 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
1748
1749         * ftp.c (ftp_loop): Determine `filename' more precisely.
1750
1751         * init.c (setval): Don't set `opt.quiet' if output-document is
1752         `-'.
1753
1754         * log.c (log_init): Print to STDERR instead of STDOUT.
1755         (vlogmsg): Use STDERR by default.
1756         (logflush): Ditto.
1757
1758 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
1759
1760         * host.c: Use addr_in again.
1761
1762 1998-02-08  Karl Eichwalder  <karl@suse.de>
1763
1764         * http.c (gethttp): Fixed typo.
1765
1766 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1767
1768         * version.c: Wget 1.5-b5 is released.
1769
1770 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
1771
1772         * retr.c (show_progress): Use it.
1773
1774         * log.c (logflush): New function.
1775
1776         * wget.h: Utilize __attribute__ if on gcc.
1777
1778 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
1779
1780         * http.c (base64_encode_line): New argument LENGTH.
1781         (BASIC_AUTHENTICATION_ENCODE): Use it.
1782         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
1783
1784         * main.c (main): Fixed fprintf() format mismatch.
1785
1786 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
1787
1788         * version.c: Wget 1.5-b4 is released.
1789
1790 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
1791
1792         * host.c: use sockaddr_in instead of addr_in.
1793
1794 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
1795
1796         * init.c (cleanup): Use it.
1797
1798         * recur.c (recursive_cleanup): New function.
1799
1800         * retr.c (retrieve_from_file): Ditto.
1801
1802         * main.c (main): Use it.
1803
1804         * recur.c (recursive_reset): New function.
1805
1806         * retr.c (retrieve_from_file): Ditto.
1807
1808         * main.c (main): Simplify call to recursive_retrieve().
1809
1810         * recur.c (recursive_retrieve): Removed FLAGS argument.
1811
1812         * http.c (gethttp): Changed call to iwrite().
1813
1814 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1815
1816         * url.c (get_urls_html): Ditto.
1817         (free_urlpos): Ditto.
1818         (mkstruct): Ditto.
1819         (construct): Ditto.
1820
1821         * retr.c (retrieve_url): Move declaration of local variables to
1822         smaller scope.
1823
1824         * url.c (urlproto): Use it.
1825         (parseurl): Ditto.
1826         (str_url): Ditto.
1827         (get_urls_html): Ditto.
1828
1829         * utils.h (ARRAY_SIZE): New macro.
1830
1831         * url.c (proto): Moved from url.h.
1832
1833         * url.h (URL_CLEANSE): Reformatted.
1834         (USE_PROXY_P): Renamed from USE_PROXY.
1835
1836         * ftp-basic.c: Adjust to the new interface of iwrite().
1837
1838         * ftp-basic.c (ftp_port): Use alloca().
1839
1840 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
1841
1842         * version.c: Wget 1.5-b3 is released.
1843
1844         * host.c (ftp_getaddress): Don't print to stderr directly.
1845
1846         * init.c (setbytes): Support `g' for gigabytes.
1847         (cmdtype): New specification CTIME.
1848         (setval): Use it with settime().
1849         (commands): Use it for WAIT and TIMEOUT.
1850
1851 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
1852
1853         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
1854         (gethttp): Use it.
1855
1856         * utils.c (unique_name_1): Moved from url.c.
1857         (unique_name): Ditto.
1858
1859         * url.c (url_filename): Ditto.
1860
1861         * log.c (redirect_output): Changed call to unique_name().
1862
1863         * url.c (unique_name_1): Renamed from unique_name().
1864         (unique_name): Changed interface.
1865
1866         * init.c (enum cmdid): Moved from init.h.
1867         (cmdtype): Ditto.
1868         (struct cmd): Ditto.
1869
1870         * main.c (main): Use it.
1871         (main): Moved `--backups' to not have a short option.
1872
1873         * options.h (struct options): New member BACKGROUND.
1874
1875         * main.c (print_help): Rearranged.
1876         (main): New long options for -n* short options: --no-directories,
1877         --no-host-directories, --non-verbose, --no-host-lookup and
1878         --dont-remove-listing.
1879
1880 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
1881
1882         * main.c (main): Use log_close().
1883
1884         * log.c: New variable LOGFP.
1885         (vlogmsg): Use it.
1886         (redirect_output): Don't open /dev/null; set LOGFP to stdin
1887         instead.
1888         (log_close): New function.
1889
1890         * options.h (struct options): Removed LFILE.
1891
1892         * log.c (log_enable): Removed.
1893
1894         * main.c (main): Use it.
1895
1896         * log.c (log_init): New function.
1897
1898         * url.c (get_urls_html): Removed needless assignment to BASE.
1899
1900         * host.c (add_hlist): Don't set CMP needlessly.
1901
1902         * utils.c (match_backwards): Ditto.
1903         (in_acclist): Ditto.
1904
1905         * url.c (findurl): Ditto.
1906
1907         * netrc.c (parse_netrc): Ditto.
1908
1909         * log.c (log_dump): Ditto.
1910
1911         * html.c (html_quote_string): Ditto.
1912
1913         * ftp-basic.c (ftp_request): Made static.
1914
1915         * connect.c: Made global variables static.
1916
1917         * url.c (construct): Ditto.
1918
1919         * init.c (init_path): Avoid assignment inside `if'-condition.
1920
1921         * ftp.c: Don't include in.h or winsock.h.
1922
1923         * ftp.c (ftp_loop): Use SZ.
1924
1925         * connect.c (bindport): Cast &addrlen to int *.
1926         (conaddr): Ditto.
1927
1928         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
1929
1930 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1931
1932         * ftp.c (getftp): Initialize opt.ftp_pass here.
1933         (ftp_retrieve_dirs): Use alloca().
1934
1935         * init.c (defaults): Don't initialize opt.ftp_pass.
1936
1937         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
1938         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
1939
1940 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1941
1942         * recur.c (parse_robots): Check for comments more correctly.
1943
1944         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
1945         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
1946         hostname.
1947
1948 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1949
1950         * version.c: Wget 1.5-b2 is released.
1951
1952         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
1953
1954         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
1955
1956         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
1957         char.
1958
1959         * log.c: Don't attempt to hide arguments from ansi2knr.
1960
1961         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
1962
1963         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
1964
1965         * ftp.c (getftp): Ditto.
1966
1967         * http.c (gethttp): Use it.
1968
1969         * retr.c (get_contents): New argument EXPECTED; pass it to
1970         show_progress().
1971         (show_progress): New argument EXPECTED; use it to display
1972         percentages.
1973
1974         * init.c (setval): Ditto.
1975
1976         * http.c (gethttp): Ditto.
1977         (http_loop): Ditto.
1978
1979         * ftp.c (getftp): Ditto.
1980         (ftp_loop_internal): Ditto.
1981
1982         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
1983
1984         * sysdep.h (CLOSE): Simplify; use DEBUGP.
1985
1986         * netrc.c (search_netrc): Use alloca().
1987
1988         * init.c (defaults): Initialize no_flush.
1989
1990         * log.c (vlogmsg): Don't flush if no_flush.
1991
1992         * options.h (struct options): New variable no_flush.
1993
1994         * main.c (main): Don't play games with buffering.
1995
1996         * log.c (vlogmsg): Flush the output after every message.
1997
1998 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
1999
2000         * init.c (parse_line): Ditto.
2001
2002         * url.c (get_urls_html): Ditto.
2003
2004         * main.c (main): Don't cast to unsigned char.
2005
2006         * init.c (run_wgetrc): Don't cast to unsigned char.
2007         (parse_line): Accept char instead of unsigned char.
2008
2009         * html.c (htmlfindurl): Use char instead of unsigned char.
2010
2011         * all: Use them.
2012
2013         * sysdep.h: Add wrappers to ctype macros to make them
2014         eight-bit-clean:
2015
2016 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2017
2018         * html.c (htmlfindurl): Download <img lowsrc=...>
2019
2020         * main.c (main): Ignore SIGPIPE.
2021
2022         * connect.c (select_fd): New argument WRITEP.
2023         (iwrite): Call select_fd().
2024
2025 1997-02-27  Fila Kolodny <fila@ibi.com>
2026
2027         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
2028         one already exists, just skip it.
2029
2030 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2031
2032         * http.c (gethttp): Cosmetic changes.
2033
2034         * http.c (check_end): Allow `+D...' instead of `GMT'.
2035         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
2036
2037         * url.c (process_ftp_type): New function.
2038         (parseurl): Use it.
2039
2040         * connect.c (iwrite): Allow writing in a few chunks.
2041         (bindport): Made SRV static, so addr can point to it.
2042         (select_fd): Removed HPUX kludge.
2043
2044         * host.c (free_hlist): Incorporated into clean_hosts().
2045
2046 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2047
2048         * host.c (hlist): Made static.
2049         (search_address): Cosmetic change.
2050
2051 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2052
2053         * version.c: Wget v1.5-b1 is released.
2054
2055         * http.c (hgetlen): Use sizeof() to get the header length.
2056         (hgetrange): Ditto.
2057         (hgettype): Ditto.
2058         (hgetlocation): Ditto.
2059         (hgetmodified): Ditto.
2060         (haccepts_none): Ditto.
2061
2062         * main.c (main): Updated `--version' and `--help' output, as per
2063         Francois Pinard's suggestions.
2064
2065         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
2066         textdomain().
2067
2068         * config.h.in: Define stubs for I18N3.
2069
2070         * wget.h: Include libintl.h.
2071
2072 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2073
2074         * url.c (mkstruct): Check for opt.cut_dirs.
2075         (mkstruct): alloca()-te more, xmalloc() less.
2076
2077         * utils.c (load_file): Check for ferror().
2078
2079         * url.c (get_urls_file): Close only the files we opened.
2080         (get_urls_html): Ditto.
2081         (count_slashes): New function.
2082
2083         * http.h: Removed.
2084
2085         * http.c (gethttp): Respect username and password provided by
2086         proxy URL.
2087         (base64_encode_line): Write into an existing buffer instead of
2088         malloc-ing a new one.
2089         (struct http_stat): Moved from http.h
2090
2091         * retr.c (retrieve_url): Free SUF.
2092
2093         * all: Removed lots of unnecessary .h dependencies.
2094
2095         * html.c (global_state): Made static.
2096
2097         * utils.h (ALLOCA_ARRAY): New macro.
2098
2099         * main.c (main): New option `--cut-dirs'.
2100
2101         * url.c (construct): Use alloca() for T.
2102
2103         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
2104
2105         * host.c (_host_t): Moved from host.h.
2106         (struct host): Renamed from _host_t.
2107         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
2108         (realhost): Ditto.
2109
2110         * host.h: Don't include url.h.
2111
2112         * ftp.c (LIST_FILENAME): Moved from ftp.h.
2113
2114         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
2115
2116         * main.c (main): Enable log if the output goes to a TTY.
2117
2118         * connect.h: Removed unused constant `BACKLOG'.
2119
2120         * config.h.in: Check for isatty().
2121
2122         * Makefile.in (LINK): Use CFLAGS when linking.
2123
2124 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2125
2126         * mswindows.c (ws_hangup): Use redirect_output().
2127
2128         * main.c (redirect_output_signal): New function; use
2129         redirect_output().
2130
2131         * log.c (redirect_output): New function, based on hangup(), which
2132         is deleted.
2133
2134         * log.c (vlogmsg): New function.
2135
2136         * wget.h (DEBUGP): Use debug_logmsg().
2137
2138         * main.c (hangup): Use it.
2139
2140         * log.c (log_dump): New function.
2141
2142         * utils.h (DO_REALLOC): Use `long' for various sizes.
2143
2144         * http.c (hskip_lws): Use `while', for clarity.
2145         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
2146         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
2147
2148         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
2149         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
2150
2151         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
2152         (LEGIBLE_SEPARATOR): Ditto.
2153         (FILE_BUFFER_SIZE): Ditto.
2154
2155         * retr.c (BUFFER_SIZE): Moved from retr.h.
2156
2157         * log.c: New file.
2158         (logmsg): Moved from utils.c.
2159         (debug_logmsg): New function.
2160
2161         * mswindows.h: Include it here.
2162
2163         * init.c: Ditto.
2164
2165         * utils.c: Don't include <windows.h>.
2166
2167 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
2168
2169         * host.c (ftp_getaddress): Ditto.
2170
2171         * main.c (main): Use it.
2172
2173         * utils.h (STRDUP_ALLOCA): New macro.
2174
2175         * init.c: Prepend `wget: ' to error messages printed on stderr.
2176
2177         * utils.c (mkdirhier): Renamed from mymkdir.
2178         (touch): Renamed from my_touch.
2179         (pwd_cuserid): Renamed from my_cuserid().
2180
2181 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
2182
2183         * utils.c (accdir): Process wildcards.
2184         (proclist): New function.
2185         (accdir): Use it to avoid code repetition.
2186
2187 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2188
2189         * recur.c (parse_robots): Respect opt.useragent; use alloca().
2190
2191         * http.c (gethttp): Construct useragent accordingly.
2192
2193         * version.c: Changed version string to numbers-only.
2194
2195         * main.c (print_help): List all the options.
2196
2197         * mswindows.c (windows_main_junk): Initialize argv0 here.
2198
2199 1998-01-24  Karl Heuer  <kwzh@gnu.org>
2200
2201         * netrc.c (search_netrc): Initialize `l' only after processing
2202         netrc.
2203
2204         * main.c (main): Don't trap SIGHUP if it's being ignored.
2205
2206 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2207
2208         * all: Use logmsg().
2209
2210         * utils.c (time_str): Moved from retr.c.
2211         (logmsg): New function.
2212         (logmsg_noflush): Ditto.
2213
2214         * rbuf.c: New file, moved buf_* functions here.
2215
2216         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
2217
2218         * ftp-basic.c (ftp_rest): Use prnum().
2219
2220         * ftp-basic.c: Ditto.
2221
2222         * ftp.c: Use the new reading functions and macros.
2223
2224         * retr.c (buf_initialize): New function.
2225         (buf_initialized_p): Ditto.
2226         (buf_uninitialize): Ditto.
2227         (buf_fd): Ditto.
2228
2229         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
2230         efficiency.
2231         (gethttp): Use alloca() where appropriate.
2232
2233         * retr.c (buf_readchar): Use it.
2234         (buf_peek): Use rstreams.
2235
2236         * retr.h (BUF_READCHAR): New macro.
2237
2238         * init.c (home_dir): Rewritten for clarity.
2239         (init_path): Ditto.
2240
2241         * mswindows.c (ws_backgnd): Made static.
2242         (read_registry): Ditto.
2243         (ws_cleanup): Ditto.
2244         (ws_handler): Ditto.
2245
2246 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2247
2248         * alloca.c: New file.
2249
2250         * Makefile.in (ALLOCA): Define.
2251
2252         * mswindows.c (ws_help): Constify.
2253         (ws_help): Use alloca.
2254
2255         * mswindows.c: Reformat.
2256
2257         * all: Added _(...) annotations for I18N snarfing and translation.
2258
2259         * host.c (ftp_getaddress): Nuke SYSINFO.
2260         (ftp_getaddress): Don't use getdomainname().
2261         (ftp_getaddress): Use uname(), where available.
2262
2263         * http.c (gethttp): Protect a stray fprintf().
2264
2265         * init.c (settime): New function.
2266         (setval): Treat WAIT specially, allowing suffixes like `m' for
2267         minutes, etc.
2268
2269 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2270
2271         * url.c (get_urls_html): Use alloca() for TEMP.
2272
2273 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
2274
2275         * url.c (rotate_backups): New function.
2276
2277         * http.c (gethttp): Ditto.
2278
2279         * ftp.c (getftp): Rotate backups.
2280
2281 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
2282
2283         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
2284         xrealloc() and xstrdup().  Use the new functions.
2285
2286         * url.c (decode_string): Made static.
2287         (has_proto): Ditto.
2288         (parse_dir): Ditto.
2289         (parse_uname): Ditto.
2290         (mkstruct): Ditto.
2291         (construct): Ditto.
2292         (construct_relative): Ditto.
2293
2294         * retr.c (show_progress): Made static.
2295
2296         * recur.c (robots_url): Made static.
2297         (retrieve_robots): Ditto.
2298         (parse_robots): Ditto.
2299         (robots_match): Ditto.
2300
2301         * main.h: Removed.
2302
2303         * main.c (printhelp): Made static.
2304         (hangup): Ditto.
2305
2306         * init.c (comind): Made static.
2307         (defaults): Ditto.
2308         (init_path): Ditto.
2309         (run_wgetrc): Ditto.
2310         (onoff): Ditto.
2311         (setonoff): Ditto.
2312         (setnum): Ditto.
2313         (myatoi): Ditto.
2314         (getperms): Ditto.
2315         (setbytes): Ditto.
2316
2317         * http.c (fetch_next_header): Made static.
2318         (hparsestatline): Ditto.
2319         (hskip_lws): Ditto.
2320         (hgetlen): Ditto.
2321         (hgetrange): Ditto.
2322         (hgettype): Ditto.
2323         (hgetlocation): Ditto.
2324         (hgetmodified): Ditto.
2325         (haccepts_none): Ditto.
2326         (gethttp): Ditto.
2327         (base64_encode_line): Ditto.
2328         (mktime_from_utc): Ditto.
2329         (http_atotm): Ditto.
2330
2331         * html.c (idmatch): Made static.
2332
2333         * host.c (search_host): Made static.
2334         (search_address): Ditto.
2335         (free_hlist): Ditto.
2336
2337         * ftp.c (getftp): Made static.
2338         (ftp_loop_internal): Ditto.
2339         (ftp_get_listing): Ditto.
2340         (ftp_retrieve_list): Ditto.
2341         (ftp_retrieve_dirs): Ditto.
2342         (ftp_retrieve_glob): Ditto.
2343         (freefileinfo): Ditto.
2344         (delelement): Ditto.
2345
2346         * ftp-ls.c (symperms): Made static.
2347         (ftp_parse_unix_ls): Ditto.
2348
2349         * connect.c (select_fd): Made static.
2350
2351         * utils.c (xmalloc): Renamed from nmalloc.
2352         (xrealloc): Renamed from nrealloc.
2353         (xstrdup): Renamed from nstrdup.
2354
2355         * getopt.c (exchange): Use alloca.
2356
2357         * mswindows.c (mycuserid): Use strncpy.
2358
2359         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
2360         systhings.h, windecl.h and winjunk.h removed.
2361
2362         * mswindows.c (sleep): New function.
2363
2364         * utils.c: Include <windows.h> under Windows.
2365
2366 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
2367
2368         * url.h (URL_UNSAFE): Change default under Windows.
2369
2370         * retr.c (retrieve_from_file): Respect opt.delete_after.
2371
2372         * main.c (main): Call ws_help on Windows.
2373
2374         * winjunk.c (windows_main_junk): New function.
2375
2376         * main.c (main): Junk-process argv[0].
2377
2378         * http.c (mktime_from_utc): Return -1 if mktime failed.
2379
2380         * http.c (http_loop): Ditto.
2381
2382         * ftp.c (ftp_loop_internal): Change title on Windows when using a
2383         new URL.
2384
2385         * winjunk.c (getdomainname): Lots of functions.
2386
2387 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
2388
2389         * cmpt.c (strptime_internal): Handle years more correctly for
2390         `%y'.
2391
2392 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
2393
2394         * http.c (gethttp): Allocate enough space for
2395         `Proxy-Authorization' header.
2396
2397 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2398
2399         * version.c: Wget/1.4.5 is released.
2400
2401 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2402
2403         * retr.c (get_contents): Check return value of fwrite more
2404         carefully.
2405
2406 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2407
2408         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
2409         year, regardless of century.
2410
2411 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2412
2413         * utils.c (isfile): Use `lstat' instead of `stat'.
2414
2415 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2416
2417         * utils.c (numdigit): Use explicit test.
2418
2419 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
2420
2421         * http.c (http_loop): Always use `url_filename' to get u->local.
2422
2423 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
2424
2425         * url.c: Recognize https.
2426
2427 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
2428
2429         * recur.c (recursive_retrieve): Lowercase just the host name.
2430
2431 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
2432
2433         * url.c (get_urls_file): Use the correct test.
2434         (get_urls_html): Ditto.
2435
2436 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2437
2438         * connect.c: Reverted addrlen to int.
2439
2440         * init.c (parse_line): Check for -1 instead of NONE.
2441
2442         * version.c: Changed version to 1.4.5.
2443
2444 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2445
2446         * init.c: New option netrc.
2447         (initialize): Don't parse .netrc.
2448
2449         * cmpt.c (recursive): Return rp.
2450         (strptime_internal): Match the long strings first, the abbreviated
2451         second.
2452
2453 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
2454
2455         * http.c (check_end): New function.
2456         (http_atotm): Use it.
2457  
2458 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
2459
2460         * http.c (gethttp): Use them.
2461
2462         * init.c: New options proxy_user and proxy_passwd.
2463
2464 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2465
2466         * ftp.c (ftp_retrieve_list): Create links even if not relative.
2467
2468 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
2469
2470         * recur.c (recursive_retrieve): Lowercase the host name, if the
2471         URL is not "optimized".
2472
2473         * host.c (realhost): Return l->hostname, even if it matches with
2474         host.
2475
2476 1997-02-10  Marin Purgar  <pmc@asgard.hr>
2477
2478         * connect.c: Make addrlen size_t instead of int.
2479         (conaddr): Ditto.
2480
2481 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2482
2483         * systhings.h: Define S_ISLNK on NeXT too.
2484
2485 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
2486
2487         * version.c: Released 1.4.3.
2488
2489         * url.c: Futher update to list of protostrings.
2490         (skip_proto): Skip `//' correctly for FTP and HTTP.
2491
2492         * url.c (get_urls_html): Handle bogus `http:' things a little
2493         different.
2494
2495         * main.c (main): Removed `follow-ftp' from `f'.
2496         (main): Dumped the `prefix-files' and `file-prefix' options and
2497         features; old and bogus.
2498         (main): Exit on failed setval() in `-e'.
2499
2500         * http.c (fetch_next_header): Use it to detect header continuation
2501         correctly.
2502
2503         * retr.c (buf_peek): New function.
2504
2505 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2506
2507         * wget.h: Include time.h and stuff.
2508
2509 1997-02-08  Roger Beeman  <beeman@cisco.com>
2510
2511         * ftp.c: Include <time.h>
2512
2513 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2514
2515         * url.c (findurl): Would read over buffer limits.
2516
2517 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2518
2519         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
2520
2521 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
2522
2523         * http.c (http_atotm): Initialize tm.is_dst.
2524
2525 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2526
2527         * http.c (gethttp): Don't print the number of retrieved headers.
2528
2529         * main.c (main): New option `--no-clobber', alias for `-nc'.
2530
2531         * url.c: Recognize `https://'.
2532
2533 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2534
2535         * host.c (herrmsg): Don't use h_errno.
2536
2537 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2538
2539         * host.c (accept_domain): Use it.
2540
2541         * main.c (main): New option `--exclude-domains'.
2542
2543         * retr.c (retrieve_url): Use it.
2544         (retrieve_url): Bail out when an URL is redirecting to itself.
2545
2546         * url.c (url_equal): New function.
2547
2548 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2549
2550         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
2551
2552         * http.c (mk_utc_time): New function.
2553         (http_atotm): Use it; handle time zones correctly.
2554
2555 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2556
2557         * http.c: Ditto.
2558
2559         * ftp-basic.c: Use it instead of WRITE.
2560
2561         * connect.c (iwrite): New function.
2562
2563 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2564
2565         * cmpt.c (mktime): New function.
2566
2567         * netrc.c: Include <sys/types.h>.
2568
2569         * main.c (main): Wouldn't recognize --spider.
2570
2571         * retr.c (rate): Use `B', `KB' and `MB'.
2572         (reset_timer,elapsed_time): Moved from utils.c.
2573
2574         * ftp.c (ftp_retrieve_list): Ditto.
2575
2576         * http.c (http_loop): Don't touch the file if opt.dfp.
2577
2578 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2579
2580         * cmpt.c: New file.
2581
2582         * ftp.c (ftp_retrieve_glob): New argument semantics.
2583         (ftp_retrieve_dirs): Use it.
2584         (ftp_loop): Ditto.
2585
2586         * html.c (htmlfindurl): Recognize `'' as the quote char.
2587
2588 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2589
2590         * ftp.c (ftp_loop_internal): Use it.
2591
2592         * utils.c (remove_link): New function.
2593
2594 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
2595
2596         * retr.c (retrieve_url): Require STRICT redirection URL.
2597
2598         * url.c (parseurl): New argument STRICT.
2599
2600         * http.c (hparsestatline): Be a little-bit less strict about
2601         status line format.
2602
2603 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2604
2605         * http.c (gethttp): Use it.
2606
2607         * main.c (main): Don't use '<digit>' as options.
2608
2609         * init.c: New option ignore_length.
2610
2611         * http.c (gethttp): Ditto.
2612         (http_loop): Check for redirection without Location:.
2613         (gethttp): Don't print Length unless RETROKF.
2614
2615         * ftp.c (getftp): Use it.
2616
2617         * url.c (mkalldirs): New function.
2618
2619         * utils.c (mymkdir): Don't check for existing non-directory.
2620
2621         * url.c (mkstruct): Don't create the directory.
2622
2623 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
2624
2625         * init.c (setval): Removed NO_RECURSION checks.
2626
2627 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
2628
2629         * version.c: "Released" 1.4.3-pre2.
2630
2631         * recur.c (recursive_retrieve): Bypass host checking only if URL
2632         is ftp AND parent URL is not ftp.
2633
2634         * ftp-basic.c (ftp_request): Print out Turtle Power.
2635
2636         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
2637         wildcard.
2638         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
2639         not glob.
2640
2641         * http.c (gethttp): Be a little bit smarter about status codes.
2642
2643         * recur.c (recursive_retrieve): Always reset opt.recursive when
2644         dealing with FTP.
2645
2646 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
2647
2648         * retr.c (retrieve_url): New variable location_changed; use it for
2649         tests instead of mynewloc.
2650         (retrieve_url): Allow heuristic adding of html.
2651
2652         * url.c (url_filename): Don't use the `%' in Windows file names.
2653
2654         * http.c (http_loop): Always time-stamp the local file.
2655
2656         * http.c (http_loop): Ditto.
2657
2658         * ftp.c (ftp_retrieve_list): Use it.
2659
2660         * utils.c (my_touch): New function.
2661
2662         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
2663         instead of #ifndef NeXT.
2664
2665         * utils.c (strptime): New version, by Ulrich Drepper.
2666
2667 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
2668
2669         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
2670         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
2671         (http_loop): Would remove ACCEPTRANGES.
2672
2673         * ftp.c (getftp): Call ftp_list with NULL.
2674
2675 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
2676
2677         * html.c (ftp_index): Don't print minutes and seconds if we don't
2678         know them; beautify the output.
2679
2680         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
2681
2682 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
2683
2684         * utils.c (strptime): New function.
2685         (strptime): Don't use get_alt_number.
2686         (strptime): Don't use locale.
2687         (match_string): Made it a function.
2688
2689 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
2690
2691         * http.c (http_atotm): New function.
2692         (http_loop): Use it.
2693
2694         * atotm.c: Removed from the distribution.
2695
2696         * http.c (base64_encode_line): Rewrite.
2697
2698 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
2699
2700         * ftp.c (getftp): Use ftp_expected_bytes; print size.
2701
2702         * ftp-basic.c (ftp_response): Use ftp_last_respline.
2703         (ftp_expected_bytes): New function.
2704
2705         * ftp.c (getftp): Print the unauthoritative file length.
2706
2707         * ftp-ls.c: Renamed from ftp-unix.c.
2708         (ftp_parse_ls): Moved from ftp.c.
2709         (ftp_parse_unix_ls): Recognize seconds in time spec.
2710         (ftp_parse_unix_ls): Recognize year-less dates of the previous
2711         year.
2712
2713 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
2714
2715         * ftp-basic.c: Don't declare errno if #defined.
2716
2717         * host.c (ftp_getaddress): Check for sysinfo legally.
2718
2719 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
2720
2721         * connect.c (iread): Use READ.
2722
2723 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
2724
2725         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
2726         schemes.
2727
2728 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2729
2730         * host.c (ftp_getaddress): Allow `.' in hostname.
2731
2732 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
2733
2734         * wget.h: READ and WRITE macros for use instead of read and write
2735         on sockets, grep READ *.c, grep WRITE *.c
2736
2737         * wsstartup.c: new file - startup for winsock
2738
2739         * wsstartup.h: new file
2740
2741         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
2742
2743         * configure.bat: Configure utility for MSVC
2744
2745         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
2746
2747 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
2748
2749         * version.c: Released 1.4.3-pre.
2750
2751         * utils.c (prnum): Accept long.
2752         (legible): Use prnum().
2753
2754         * connect.c (make_connection): Accept port as short.
2755         (bindport): Ditto.
2756
2757         * http.c (gethttp): Use search_netrc.
2758
2759 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
2760
2761         * ftp.c (getftp): Use search_netrc.
2762
2763         * netrc.c (free_netrc): New function.
2764
2765         * init.c (home_dir): New function.
2766
2767         * url.c (convert_links): Allow REL2ABS changes.
2768
2769 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
2770
2771         * netrc.c: New file.
2772         (parse_netrc, maybe_add_to_list): New functions.
2773
2774 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
2775
2776         * retr.c (retrieve_url): Reset opt.recursion before calling
2777         ftp_loop if it is reached through newloc.
2778
2779         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
2780         error; don't use "Syntax error", since we don't know if it is
2781         really a syntax error.
2782
2783 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
2784
2785         * utils.c (acceptable): Extract the filename part of the path.
2786
2787         * recur.c (recursive_retrieve): Call acceptable() with the right
2788         argument; would bug out on wildcards.
2789
2790         * init.c (parse_line): Likewise.
2791
2792         * html.c (htmlfindurl): Cast to char * when calling stuff.
2793
2794 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2795
2796         * ftp.c (getftp): Use ftp_pasv.
2797
2798         * ftp-basic.c (ftp_request): Accept NULL value.
2799         (ftp_pasv): New function.
2800
2801         * options.h (struct options): Add passive FTP option.
2802
2803 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
2804
2805         * url.c (parseurl): Debug output.
2806
2807         * utils.c (path_simplify): New one, adapted from bash's
2808         canonicalize_pathname().
2809
2810 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
2811
2812         * ftp.c (getftp): Don't discard the buffer.
2813
2814         * retr.c (get_contents): New parameter nobuf.
2815
2816 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2817
2818         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
2819
2820         * init.c (setval): Strip the trailing slashes on CVECDIR.
2821
2822 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2823
2824         * init.c: Make excludes and includes under CVECDIR instead of
2825         CVEC.
2826
2827 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
2828
2829         * url.c (get_urls_html): Skip "http:".
2830
2831 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
2832
2833         * utils.c (strcasecmp): From glibc.
2834         (strncasecmp): Also.
2835         (strstr): Also.
2836
2837         * url.c: Added javascript: to the list of URLs prefixes.
2838
2839 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
2840
2841         * recur.c (retrieve_robots): Print the warning message only if
2842         verbose.
2843
2844 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
2845
2846         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
2847
2848 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
2849
2850         * systhings.h: New file.
2851
2852         * ../configure.in: Check for utime.h
2853
2854         * ftp.c: Check whether we have unistd.h.
2855
2856 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
2857
2858         * recur.c (recursive_retrieve): Send the canonical URL as referer.
2859         (recursive_retrieve): Call get_urls_html with the canonical URL.
2860
2861 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
2862
2863         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
2864         ansi2knr support for compilers which don't support ANSI style
2865         function prototypes and signatures.
2866
2867         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
2868
2869 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
2870
2871         * url.c: Use it; Recognize paths ending with "." and ".." as
2872         directories.
2873         (url_filename): Append .n whenever file exists and could be a
2874         directory.
2875
2876         * url.h (ISDDOT): New macro.
2877
2878         * init.c (parse_line): Use unsigned char.
2879
2880         * url.c (get_urls_html): Cast to unsigned char * when calling
2881         htmlfindurl.
2882
2883         * html.c (htmlfindurl): Use unsigned char.
2884
2885         * version.c: Changed version to 1.4.3.
2886
2887 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
2888
2889         * version.c: Released 1.4.2.
2890
2891         * ftp.c (getftp): Simplified assertion.
2892         (ftp_loop_internal): Remove symlink before downloading.
2893         (ftp_retrieve_list): Unlink the symlink name before attempting to
2894         create a symlink!
2895
2896         * options.h (struct options): Renamed print_server_response to
2897         server_response.
2898
2899         * ftp.c (rel_constr): Removed.
2900         (ftp_retrieve_list): Don't use it.
2901         (ftp_retrieve_list): Use opt.retr_symlinks.
2902
2903 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2904
2905         * main.c (main): New option retr_symlinks.
2906
2907         * url.c (convert_links): Print verbose message.
2908
2909 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
2910
2911         * http.c (http_loop): Reset newloc in the beginning of function;
2912         would cause FMR in retrieve_url.
2913
2914 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
2915
2916         * recur.c (convert_all_links): Find the URL of each HTML document,
2917         and feed it to get_urls_html; would bug out.
2918         (convert_all_links): Check for l2 instead of dl; removed dl.
2919
2920         * url.c (convert_links): Don't refer to freed newname.
2921
2922         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
2923
2924         * main.c (main): Print the OS_TYPE in the debug output, too.
2925
2926         * recur.c (recursive_retrieve): Check for opt.delete_after.
2927
2928         * main.c (main): New option delete-after.
2929
2930         * init.c (setval): Cleaned up.
2931
2932 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
2933
2934         * Makefile.in (wget): Make `wget' the default target.
2935
2936         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
2937         loop.
2938         (ftp_retrieve_list): Warn about non-matching sizes.
2939
2940         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
2941
2942         * init.c (setnum): Renamed from setnuminf; New argument flags.
2943         (setval): Use it.
2944
2945         * main.c (main): Sorted the options.
2946         (main): New option --wait.
2947
2948 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
2949
2950         * html.c (htmlfindurl): Reset s->in_quote after getting out of
2951         quotes.
2952
2953 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2954
2955         * version.c: Changed version to 1.4.2.
2956
2957 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
2958
2959         * version.c: Released 1.4.1.
2960
2961         * html.c (html_quote_string): New function.
2962         (ftp_index): Use it.
2963         (htmlfindurl): A more gentle ending debug message.
2964
2965         * ftp.c (ftp_loop): Check for opt.htmlify.
2966
2967         * init.c: New command htmlify.
2968
2969         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
2970         strings.
2971         (ftp_loop): Print size of index.html.
2972
2973         * init.c (setval): Implement "styles".
2974
2975         * main.c (main): New option dotstyle.
2976
2977 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
2978
2979         * ftp.c (getftp): Close the master socket in case of errors, after
2980         bindport().
2981
2982         * connect.c (bindport): Initialize msock to -1.
2983
2984         * ftp.c (getftp): Initialize dtsock to -1.
2985
2986         * connect.c (closeport): Don't close sock if sock == -1.
2987
2988 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
2989
2990         * init.c (setnuminf): Nuked default value -- just leave unchanged.
2991         (setval): Don't send default values.
2992         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
2993
2994         * options.h (struct options): Use long for dot_bytes.
2995
2996         * init.c (setquota): Renamed to setbytes.
2997         (setval): Use setbytes on DOTBYTES.
2998
2999 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
3000
3001         * ftp.c (getftp): Initialize con->dltime.
3002
3003         * recur.c (recursive_retrieve): Use same_host instead of
3004         try_robots; simply load robots_txt whenever the host is changed.
3005         (recursive_retrieve): Free forbidden before calling parse_robots.
3006
3007 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
3008
3009         * retr.c (show_progress): Use them.
3010
3011         * options.h (struct options): New options dot_bytes, dots_on_line
3012         and dot_spacing.
3013
3014 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
3015
3016         * recur.c (recursive_retrieve): Retrieve directories regardless of
3017         acc/rej rules; check for empty u->file.
3018
3019 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
3020
3021         * init.c (setval): Use it.
3022
3023         * utils.c (merge_vecs): New function.
3024
3025         * init.c (setval): Reset the list-type functions when encountering
3026         "".
3027
3028 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3029
3030         * recur.c (recursive_retrieve): Use base_url instead of this_url
3031         for no_parent.
3032
3033 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3034
3035         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
3036
3037 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
3038
3039         * utils.c (sepstring): Rewrote; don't use strtok.
3040
3041         * recur.c (recursive_retrieve): Enter assorted this_url to slist
3042         when running the first time.
3043         (retrieve_robots): Warn to ignore errors when robots are loaded.
3044
3045         * utils.c (load_file): Moved from url.c.
3046
3047         * http.c: Made static variables const too in h* functions.
3048
3049         * main.c (main): Renamed --continue-ftp to --continue.
3050
3051         * recur.c (recursive_retrieve): Use it.
3052
3053         * utils.c (frontcmp): New function.
3054
3055         * url.c (accdir): New function.
3056
3057         * html.c (htmlfindurl): Recognize <area href=...>.
3058
3059         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
3060
3061         * init.c (setval): Free the existing opt.excludes and
3062         opt.includes, if available.
3063
3064         * main.c (main): New option -I.
3065
3066 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
3067
3068         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
3069
3070         * version.c: Changed version to 1.4.1.
3071
3072 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
3073
3074         * version.c: Released 1.4.0.
3075
3076 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3077
3078         * main.c (main): Free com and val after parse_line.
3079         (printhelp): Reorder the listing.
3080
3081         * http.c: More robust header parsing.
3082
3083         * http.c: Allow any number of spaces, or no spaces, precede ':'.
3084         (hskip_lws): New function.
3085         (haccepts_bytes): New function.
3086         (gethttp): Use it.
3087
3088         * init.c (setval): Check header sanity.
3089         (setval): Allow resetting of headers.
3090
3091 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3092
3093         * http.c (http_loop): Don't use has_wildcards.
3094
3095         * http.c (gethttp): Free all_headers -- would leak.
3096
3097         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
3098         0 -- this fixes a long-standing bug in -rl.
3099
3100 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
3101
3102         * ftp.c: Use -1 as "impossible" value for con->fd.
3103
3104         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
3105
3106         * init.c (parse_line): Use isalpha.
3107
3108         * ftp-unix.c: Use HAVE_UNISTD_H.
3109
3110         * mtch.c (has_wildcards): Don't match \.
3111
3112         * http.c (http_loop): Warn on HTTP wildcard usage.
3113
3114 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
3115
3116         * url.c (url_filename): Do not create numbered suffixes if
3117         opt.noclobber -- would bug out on -nc.
3118
3119 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
3120
3121         * recur.c (parse_robots): Don't chuck out the commands without
3122         arguments (`Disallow:<empty>' didn't work).
3123         (parse_robots): Compare versions lowercase.
3124         (parse_robots): Match on base_version, not version_string!
3125         (parse_robots): Handle comments properly.
3126         (parse_robots): Match versions in a sane way.
3127
3128         * init.c: Print nicer error messages.
3129
3130         * version.c: Changed version to 1.4.0.
3131
3132 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3133
3134         * version.c: Released 1.4.0-test2.
3135
3136         * init.c (run_wgetrc): Close fp.
3137
3138         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
3139         u->dir.
3140
3141 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3142
3143         * init.c (setquota): Allow inf as quota specification.
3144
3145 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
3146
3147         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
3148         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
3149
3150         * main.c (main): Check for quota by comparison with downloaded
3151         stuff, not from status.
3152
3153         * connect.c (select_fd): Should compile on HPUX without warnings now.
3154
3155         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
3156         returned RETROK.
3157
3158 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
3159
3160         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
3161         (getftp): Return FTPRETRINT on control connection error.
3162
3163         * html.c (htmlfindurl): Recognize <embed src=...> and
3164         <bgsound src=...>.
3165         (ftp_index): Handle username and password correctly.
3166
3167         * main.c (main): Made `-np' a synonim for --no-parent.
3168
3169 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3170
3171         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
3172         ftp_retrieve_glob.
3173
3174         * version.c: Changed version to 1.4.0-test2.
3175
3176 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3177
3178         * version.c: Released 1.4.0-test1.
3179
3180         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
3181         directory.
3182         (convert_links): Removed definition of make_backup.
3183
3184         * http.h: Removed definition of MAX_ERROR_LENGTH.
3185
3186         * host.c (ftp_getaddress): Check for "(none)" domains.
3187
3188         * ftp.c (ftp_retrieve_dirs): Docfix.
3189
3190         * http.c (gethttp): Use ou->referer instead of u->referer.
3191
3192         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
3193         this was known to cause coredumps on Linux.
3194
3195         * html.c (ftp_index): Cast the argument to local_time to time_t *.
3196
3197 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
3198
3199         * connect.c (select_fd): Use exceptfds -- once and for all.
3200
3201         * retr.c (retrieve_from_file): Free filename after
3202         recursive_retrieve.
3203         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
3204         first-time retrieval.
3205         (retrieve_from_file): Return uerr_t; new argument, count.
3206         (retrieve_from_file): Break on QUOTEXC.
3207
3208         * init.c (setquota): Fixed a bug that caused rejection of
3209         non-postfixed values..
3210
3211 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
3212
3213         * version.c: Changed name to wget.
3214
3215         * connect.c (iread): Smarter use of select.
3216         (select_fd): Set errno on timeout.  If not timeout, return 1
3217         instead of 0.
3218
3219 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
3220
3221         * ftp.c (ftp_loop_internal): Don't use con->cmd before
3222         establishing it.
3223
3224 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
3225
3226         * http.c (gethttp): Send correct referer when using proxy.
3227         (gethttp): Use struct urlinfo ou to access the relevant data; send
3228         correct authorization in all cases.
3229
3230         * host.c (same_host): Use skip_uname to skip username and
3231         password.
3232
3233         * url.c (skip_uname): New function.
3234         (parseurl): Use it.
3235
3236         * host.c (same_host): Do not assume HTTP -- same_host should now
3237         be totally foolproof.
3238
3239         * url.c (skip_proto): New function.
3240         (parse_uname): Use it.
3241
3242         * http.c (gethttp): Create local user and passwd from what is
3243         given.
3244
3245         * url.c (parseurl): Check for HTTP username and password too.
3246
3247 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
3248
3249         * config.h.in: Removed #define gethostbyname R...
3250
3251 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
3252
3253         * version.c: Changed version to 1.4.0-test1.
3254
3255 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
3256
3257         * version.c: "Released" 1.4b29.
3258
3259         * recur.c (recursive_retrieve): Check for no_parent.
3260
3261         * init.c (setval): Option update.
3262
3263         * main.c (main): New option no-parent.
3264
3265         * options.h (struct options): New variable no_parent.
3266
3267         * recur.c (recursive_retrieve): Only files are checked for
3268         opt.accepts and opt.rejects.
3269         (recursive_retrieve): Check directories for opt.excludes.
3270         (recursive_retrieve): Make the dir absolute when checking
3271         opt.excludes.
3272
3273         * html.c (htmlfindurl): Recognize <applet code=...> and <script
3274         src=...>
3275
3276 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3277
3278         * ftp.c (getftp): Do not line-break assert entries at all.
3279         (ftp_retrieve_dirs): docfix.
3280
3281         * connect.c (select_fd): Use fd + 1 as nfds.
3282
3283         * version.c: Changed version to 1.4b29.
3284
3285 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3286
3287         * version.c: "Released" 1.4b28.
3288
3289         * ftp.c (ftp_loop_internal): Check whether f->size == len and
3290         don't continue the loop if it is.
3291         (ftp_get_listing): Remove list_filename on unsuccesful loop.
3292
3293 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3294
3295         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
3296         (getftp): Do not use multiline assert.
3297
3298         * http.c (hparsestatline): Use mjr and mnr instead of major and
3299         minor, which don't compile on Ultrix.
3300         (http_loop): Use strcpy() to initialize tmp.
3301
3302         * all: Geturl -> Fetch
3303
3304 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3305
3306         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
3307         ':'.
3308
3309         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
3310         moving `bufsize &&' to the beginning of each check in for-loops.
3311
3312         * recur.c (parse_robots): Close fp on exit.
3313
3314         * url.c (mymkdir): Check for each directory before creating.
3315
3316 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3317
3318         * version.c: Changed version to 1.4b28.
3319
3320 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3321
3322         * version.c: "Released" 1.4b27.
3323
3324         * init.c (parse_line): Use isspace.
3325         (parse_line): Free *com on all errors.
3326
3327         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
3328         (delelement): Use next instead of f->next and prev instead of
3329         f->prev.
3330         (delelement): Free the members of the deleted element.
3331
3332         * http.c (http_loop): Do not return RETROK on code != 20x.
3333
3334         * init.c (cleanup): Free opt.user_header.
3335         (cleanup): Free opt.domains.
3336
3337         * url.c (freelists): Moved to cleanup().
3338
3339         * http.c (hparsestatline): Docfix.
3340
3341         * main.c (main): Return with error status on unsuccesful
3342         retrieval.
3343
3344         * init.c (setval): Do not remove listing when mirroring.
3345
3346         * url.c (url_filename): Use opt.fileprefix.
3347
3348         * ftp.c (ftp_get_listing): Use url_filename to get filename for
3349         .listing.
3350
3351         * main.c (main): New option: -rn.
3352
3353 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
3354
3355         * Makefile.in (RM): Added RM = rm -f.
3356
3357         * host.c (clean_hosts): New function.
3358         (free_hlist): Just free the list, no reset.
3359
3360         * version.c: Changed version to 1.4b27.
3361
3362 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
3363
3364         * version.c: "Released" 1.4b26.
3365
3366         * retr.c (retrieve_from_file): If call get_urls_html with
3367         opt.spider to make it silent in spider mode.
3368
3369         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
3370
3371         * url.h (CLEANDUP): New macro.
3372
3373         * http.c (gethttp): Fixed a bug that freed location only when it
3374         was NULL.
3375
3376         * retr.c (retrieve_url): Free url if it will not be stored,
3377         i.e. newloc is NULL.
3378
3379         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
3380         old version would bug out on <a href="x#a"href="y">.
3381
3382         * html.h (state_t): New member in_quote.
3383
3384         * html.c (htmlfindurl): Free s->attr at the beginning of
3385         attr-loop.
3386
3387         * recur.c (recursive_retrieve): Recognize RCLEANUP.
3388         (tried_robots): Make hosts a global variable.
3389         (recursive_retrieve): Free constr after URL host optimization.
3390         (tried_robots): Free urlinfo before exiting.
3391
3392         * utils.c (free_slist): New function.
3393
3394         * recur.c (recursive_retrieve): Use flags to add cleanup
3395         possibility.
3396
3397         * main.c (main): Free filename after recursive_retrieve.
3398
3399         * http.c (gethttp): Store successful responses too.
3400
3401 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
3402
3403         * all: Constified the whole source.  This required some minor
3404         changes in many functions in url.c, possibly introducing bugs -- I
3405         hope not.
3406
3407         * ftp-basic.c: Removed last_respline.
3408
3409         * http.c (gethttp): Free type.
3410
3411         * host.c (same_host): Free real1 and real2.
3412
3413         * main.c (main): New option --spider.
3414
3415         * retr.c (get_contents): Don't reset errno.
3416
3417         * main.c (main): Sorted the options.
3418
3419         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
3420         uninitialized by select().
3421
3422         * http.c (http_loop): Print the time when the connection is
3423         closed.
3424         (gethttp): Debug-print the HTTP request.
3425
3426 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
3427
3428         * connect.c (iread): Do not try reading after timeout.
3429
3430         * main.c (main): Would bug out on -T.
3431
3432         * connect.c (select_fd): Do not use exceptfds.
3433         (iread): Set ETIMEDOUT on select_fd <= 0.
3434
3435         * version.c: Changed version to 1.4b26.
3436
3437 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
3438
3439         * version.c: "Released" 1.4b25.
3440
3441         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
3442         or link name.
3443
3444         * http.c (gethttp): Add errcode to struct hstat.
3445         (http_loop): Use it.
3446
3447         * url.c (no_proxy_match): Simplify using char** for no_proxy.
3448
3449         * options.h (struct options): Make opt.no_proxy a vector.
3450
3451         * utils.c (sepstring): Use !*s instead of !strlen(s).
3452
3453         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
3454         (getperms): Use ISODIGIT instead of isdigit.
3455
3456         * ftp.c (getftp): Print time.
3457
3458         * main.c (main): Use legible output of downloaded quantity.
3459
3460         * ftp.c (getftp): Use elapsed_time().
3461         (ftp_loop_internal): Use rate().
3462
3463         * http.c (http_loop): Add download ratio output; Use rate().
3464
3465         * utils.c (rate): New function.
3466
3467 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
3468
3469         * http.c (http_loop): Use timer.
3470
3471         * ftp.c: Split to ftp-basic.c and ftp.c
3472
3473         * utils.c (reset_timer): New function.
3474         (elapsed_time): New function.
3475
3476         * retr.c (show_progress): Make bytes_in_line and offs long; should
3477         work on 16-bit machines.
3478
3479 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
3480
3481         * url.c (in_acclist): New argument backward.
3482
3483         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
3484         a file should be retrieved according to suffix.
3485         (ftp_get_listing): Check the return value of unlink; Do not call
3486         ftp_retrieve_dirs if depth reached maxreclevel.
3487         (ftp_retrieve_dirs): Check whether the directory is in
3488         exclude-list.
3489
3490         * main.c (main): Print the version number at the beginning of
3491         DEBUG output.
3492         (main): Use strrchr when creating exec_name.
3493
3494         * ftp.c (ftp_retrieve_glob): Do not close control connection.
3495
3496         * version.c: Changed version to 1.4b25.
3497
3498 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
3499
3500         * version.c: "Released" 1.4b24.
3501
3502         * Makefile.in: Rewrite.
3503
3504         * ftp.c (ftp_loop_internal): Likewise.
3505
3506         * retr.c (time_str): Check for failed time().
3507
3508         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
3509         HTML3.0.
3510
3511         * retr.c (time_str): Return time_t *.
3512
3513         * connect.c (bindport): Close msock on unsuccesful bind.
3514         (bindport): The same for getsockname and listen.
3515
3516         * retr.c (retrieve_url): Allow any number of retries on
3517         proxy.
3518
3519         * http.c (gethttp): Do not treat errno == 0 as timeout.
3520         (http_loop): Likewise.
3521         (http_loop): Cosmetic changes.
3522
3523         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
3524
3525         * retr.c (get_contents): Reset errno.
3526
3527         * ftp.c (getftp): Minor fixes.
3528
3529 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3530
3531         * http.c: Do not use backups.
3532
3533         * geturl.1 (WARNING): Warn that man-page could be obsolete.
3534
3535         * getopt.c (getopt_long): Moved to getopt.c
3536
3537         * geturl.texi: Enhanced.
3538
3539         * main.c (main): Use it.
3540
3541         * recur.c (convert_all_links): New function.
3542
3543         * utils.c (add_slist): New argument flags.
3544
3545         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
3546         (parse_robots): Do not chuck out empty value fields.
3547         (parse_robots): Make yourself welcome on empty Disallow.
3548
3549         * version.c: Changed version to 1.4b24.
3550
3551 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
3552
3553         * version.c: "Released" 1.4b23.
3554
3555         * ftp.c (ftp_loop_internal): Get the time after getftp.
3556
3557         * Makefile.in (install.info): New target.
3558         (install): Use it.
3559
3560         * http.c (http_loop): Fix output when doing -O.
3561
3562 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3563
3564         * geturl.texi: New file.
3565
3566         * main.c (main): Do not print the warnings and download summary if
3567         opt.quiet is set.
3568
3569         * version.c: Changed version to 1.4b23.
3570
3571 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
3572
3573         * "Released" 1.4b22.
3574
3575         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
3576         to avoid redefinition warnings.
3577
3578         * host.c (store_hostaddress): Use memcpy() to copy the address
3579         returned by inet_addr.
3580
3581         * version.c: Changed version to 1.4b22.
3582
3583 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
3584
3585         * version.c: "Released" 1.4b21.
3586
3587         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
3588
3589         * ftp.c (ftp_port): Use conaddr.
3590         (getftp): Print the file length.
3591         (ftp_retrieve_list): Check the stamps of plain files only.
3592
3593         * connect.c (closeport): Do not call shutdown().
3594         (conaddr): New function.
3595
3596         * html.c (ftp_index): Made it dfp-aware.
3597
3598         * init.c (cleanup): New name of freemem. Close opt.dfp.
3599
3600         * ftp.c (getftp): Use opt.dfp if it is set.
3601
3602         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
3603
3604         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
3605         CWDs to be sent with recursive FTP retrievals.
3606
3607 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
3608
3609         * recur.c (parse_robots): Made it more compliant with "official"
3610         specifications.
3611
3612         * http.c: New function.
3613
3614         * ftp-unix.c (ftp_parse_ls): Added better debug output.
3615
3616         * ftp.c (getftp): Print out the LIST in case of
3617         opt.print_server_response.
3618
3619         * version.c: Changed version to 1.4b21.
3620
3621 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
3622
3623         * version.c: "Released" 1.4b20.
3624
3625         * README: Update.
3626
3627         * http.c (gethttp): Preset lengths of various headers instead of
3628         calculating them dynamically.
3629         (gethttp): Check for 206 partial contents.
3630
3631 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
3632
3633         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
3634
3635         * http.c (gethttp): Send the port number in the Host: header.
3636
3637 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
3638
3639         * http.c (gethttp): Send host: header.
3640         (gethttp): Add the possibility of user-defined headers.
3641         (gethttp): Move decision about pragma: no-cache to http_loop,
3642         where it belongs.
3643         (gethttp): Pass a struct instead of enormous argument list.
3644         (http_loop): Use a new, fancier display format.
3645         (ftp_loop): Likewise.
3646
3647         * main.c: (hangup): Turn off buffering of the new log file.
3648
3649         * install-sh: Likewise.
3650
3651         * config.sub: Replace with the one in autoconf-2.10
3652
3653         * geturl.1: Update.
3654
3655         * init.c: New options httpuser and httppasswd.
3656
3657         * http.c: (base64_encode_line): New function.
3658         (gethttp): Send authentication.
3659
3660         * connect.c (make_connection): Use store_hostaddress.
3661
3662 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
3663
3664         * host.c (store_hostaddress): New function.
3665
3666         * NEWS: Update.
3667
3668         * http.c (hgetrange): New function.
3669         (gethttp): Use ranges.
3670
3671         * utils.c (numdigit): Accept long instead of int.
3672
3673         * http.c (http_loop): Add restart capabilities.
3674
3675         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
3676         being used uninitialized.
3677         (ftp_retrieve_list): Similar fix.
3678
3679         * host.c (add_hlist): Fixed a bug that could cause cmp being used
3680         uninitialized.
3681
3682         * url.c (construct_relative): New function.
3683
3684         * recur.c (recursive_retrieve): Use it.
3685
3686         * retr.c (convert_links): New function.
3687
3688 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
3689
3690         * url.c (free_urlpos): New function.
3691
3692         * recur.c (recursive_retrieve): Adapt.
3693
3694         * url.c (get_urls_html): Return a linked list instead of a vector.
3695
3696         * url.c (get_urls_file): Return a linked list instead of a vector.
3697
3698         * geturl.1: Update.
3699
3700         * http.c (gethttp): Implement it.
3701
3702         * init.c (setval): New option: SAVEHEADERS
3703
3704         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
3705         be retrieved. Lack of this test caused bugs when the connection
3706         was lost during listing.
3707
3708         * retr.c (retrieve_url): Fixed a bug that caused
3709         coredumps. *newloc is now reset by default.
3710         (retrieve_url): Lift the twenty-tries limit on proxies.
3711
3712         * version.c: Changed version to 1.4b20.
3713
3714 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
3715
3716         * version.c: "Released" 1.4b19.
3717
3718 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
3719
3720         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
3721         (getftp): Changed prototype to accept ccon *.
3722
3723 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
3724
3725         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
3726         incorrect values to files pointed to by symbolic links.
3727         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
3728
3729 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
3730
3731         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
3732
3733         * main.c (main): New option: --user-agent.
3734
3735         * geturl.1: Ditto.
3736
3737         * init.h: Ditto.
3738
3739         * init.c (setval): Ditto.
3740
3741         * main.c (main): Rename "server-headers" to "server-response".
3742
3743         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
3744         executables in 'ls -F' listings.
3745
3746 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
3747
3748         * url.c (parseurl): Remove realloc() and sprintf().
3749         (str_url): Get rid of sprintf().
3750
3751         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
3752         servers.
3753
3754         * url.h (URL_CLEANSE): Made it else-resistant.
3755         (USE_PROXY): New macro.
3756
3757 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3758
3759         * NEWS: Update.
3760
3761         * version.c: Changed version to 1.4b19.
3762
3763 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
3764
3765         * version.c: "Released" 1.4b18.
3766
3767         * url.c: Made it reallocate space exponentially.
3768
3769 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
3770
3771         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
3772         the list of stuff to fetch.
3773
3774 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
3775
3776         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
3777         -Fi.
3778
3779         * html.c (htmlfindurl): Rewrite.
3780
3781         * http.c (gethttp): Use opt.proxy_cache.
3782
3783         * main.c (main): Added --cache option.
3784
3785         * ftp.c (ftp_response): Print server response if opt.print_server
3786         response is set.
3787         (getftp): Print newlines after each request if the server response
3788         is to be printed.
3789         (ftp_response): Copy the last response line to last_respline.
3790
3791         * http.c (gethttp): Add Pragma: nocache for retried
3792         proxy-retrievals.
3793
3794         * ftp.c (getftp): Use it.
3795
3796         * retr.c (buf_discard): New function.
3797
3798         * ftp.c (ftp_response): Use buf_readchar().
3799         (getftp): Flush the control connection buffer before calling
3800         get_contents().
3801
3802         * retr.c (buf_readchar): New function.
3803         (buf_flush): New function.
3804         (get_contents): Use buf_readchar() instead of read(x, x, 1).
3805         (get_contents): Use buf_flush.
3806
3807 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3808
3809         * ftp.c: Incorporate changes to ftp_response.
3810
3811         * ftp.c (ftp_response): Allocate the server response dynamically,
3812         as in read_whole_line and fetch_next_header.
3813
3814         * utils.c (read_whole_line): Fixed a bug that prevented reading
3815         the last line if it is not \n-terminated. Also fixed a possible
3816         memory overflow.
3817
3818         * http.c (fetch_next_header): Return malloc-ed string as large as
3819         needed.
3820         (gethttp): Use new fetch_next_header.
3821
3822 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
3823
3824         * http.c (hgetlen): Compute the header length the first time only.
3825         (hgettype): Ditto.
3826         (hgetlocation): Ditto.
3827         (hgetmodified): Ditto.
3828
3829 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3830
3831         * sample.geturlrc: Update.
3832
3833 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3834
3835         * http.c (http_loop): Ditto.
3836
3837         * ftp.c (getftp): Open the output file as binary.
3838
3839         * version.c: Changed version to 1.4b18.
3840
3841 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3842
3843         * version.c: "Released" 1.4b17.
3844
3845         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
3846         instead of failed assertion.
3847
3848 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
3849
3850         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
3851         if a file of that name already exists.
3852
3853 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
3854
3855         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
3856
3857         * config.h.in: Define gethostbyname as Rgethostbyname when using
3858         Socks.
3859
3860         * configure.in: Check for -lresolv if using Socks.
3861
3862         * version.c: Changed version to 1.4b17.
3863
3864 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
3865
3866         * version.c: "Released" 1.4b16.
3867
3868         * http.c (gethttp): More intelligent check for first line of HTTP
3869         response.
3870         (gethttp): Would bug out on time-stamping.
3871
3872         * version.c: Changed version to 1.4b16.
3873
3874 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3875
3876         * version.c: Released 1.4b15.
3877
3878         * http.c (http_loop): Print \n after the loop entry, not before.
3879
3880         * url.c (url_filename): Use ISDOT.
3881
3882         * url.h (ISDOT): New macro.
3883
3884         * recur.c (recursive_retrieve): Change only opt.recursive for
3885         following FTP.
3886
3887 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
3888
3889         * socks/geturl.cgi: Fixed version No.
3890
3891         * socks/download-netscape.html: Ditto.
3892
3893         * socks/download.html: Changed socks.html to download.html.
3894
3895 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
3896
3897         * url.c (url_filename): Check for opt.dirstruct instead for
3898         opt.recursive && opt.dirstruct.
3899
3900         * init.c (defaults): Ditto.
3901         (defaults): Reset dirstruct by default.
3902         (setval): Set opt.dirstruct whenever setting recursive.
3903
3904         * init.h: Removed FORCEDIRHIER.
3905
3906         * INSTALL: Added -L to socks-description.
3907
3908         * version.c: Changed version to 1.4b15.
3909
3910 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
3911
3912         * version.c: "Released" 1.4b14.
3913
3914         * geturl.1: Update AUTHOR to include Rosella as contributor.
3915
3916         * NEWS: Update.
3917
3918         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
3919
3920         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
3921         (cal_time): Fix == to eq.
3922
3923         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
3924
3925         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
3926
3927         * Makefile.in: Use @VERSION@.
3928
3929         * configure.in: Check version from version.c.
3930
3931         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
3932
3933         * socks/download.html: Created from download-netscape.html, made
3934         HTML-2.0 compliant.
3935
3936         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
3937         following FTP links from recursions.
3938
3939 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3940
3941         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
3942         absolute directories correctly.
3943
3944         * version.c: Changed version to 1.4b14.
3945
3946 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
3947
3948         * version.c: "Released" 1.4b13.
3949
3950         * url.c (make_backup): New function.
3951
3952         * http.c (http_loop): Make a backup copy of the local file (using
3953         rename(2)) before opening it.
3954
3955         * main.c (main): Added --backups.
3956
3957         * host.c (ftp_getaddress): Bail out on failed mycuserid().
3958         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
3959         (ftp_getaddress): Check for empty, null or (null) domain.
3960
3961         * url.c (get_urls_html): If this_url is NULL, the base must have a
3962         protocol.
3963         (parseurl): Use has_proto.
3964
3965         * retr.c (retrieve_url): Warn when proxy is used with more than 20
3966         retries.
3967
3968         * url.c (mkstruct): Create the directory (calling mymkdir()) only
3969         if it is not already there.
3970         (has_proto): New function.
3971         (get_urls_html): Eliminate the remaining call to findurl -- use
3972         has_proto.
3973
3974         * geturl.1: Ditto.
3975
3976         * main.c: Change -X to -x.
3977
3978         * url.c (url_filename): Simplify creation of filename if
3979         prefix_files is set.
3980         (url_filename): Simplify everything. And I do mean *everything*.
3981         (mkstruct): Add dir_prefix before hostname.
3982         (path_simplify): Fixed a bug that caused writing outside the path
3983         string in case of "." and ".." path strings.
3984
3985 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
3986
3987         * init.c: Added --mirror.
3988
3989         * main.c (main): Added -X to force saving of directory hierarchy.
3990
3991         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
3992         (ftp_retrieve_list): Check whether quota is exceeded.
3993
3994         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
3995
3996         * http.c (gethttp): Use referer if present.
3997
3998         * recur.c (recursive_retrieve): Set u->referer before calling
3999         retrieve_url.
4000
4001         * url.c (newurl): Use memset to nullify the struct members.
4002         (freeurl): Free the referer field too.
4003
4004         * url.h: Added referer to urlinfo.
4005
4006         * geturl.1: Updated the manual to document some of the new features.
4007
4008         * utils.c (numdigit): Moved from url.c.
4009
4010         * README: Rewritten.
4011
4012         * config.h.in: Add the support for socks.
4013
4014         * configure.in: Add the support for socks.
4015
4016         * url.c (url_filename): If the dir_prefix is ".", work with just
4017         the file name.
4018         (url_filename): Do not look for .n extensions if timestamping if
4019         turned on.
4020
4021         * retr.c (show_progress): Skip the over-abundant restval data, and
4022         print the rest of it with ',' instead of '.'.
4023
4024 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
4025
4026         * retr.c (show_progress): Changed second arg. to long (as it
4027         should be).
4028         (show_progress): Moved to retr.c.
4029         (get_contents): Moved to retr.c.
4030
4031         * version.c: Change version to 1.4b13.
4032
4033 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
4034
4035         * url.c (in_acclist): Would return after the first suffix.
4036
4037 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
4038
4039         * version.c: "Released" 1.4b12.
4040
4041         * url.c (path_simplify): More kludgifications.
4042         (get_urls_html): Use new parameters for htmlfindurl.
4043
4044         * html.c: Removed memorizing "parser states", since the new
4045         organization does not require them.
4046
4047         * init.c (run_geturlrc): Use read_whole_line.
4048
4049         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
4050
4051         * recur.c (parse_robots): Use read_whole_line.
4052
4053         * utils.c (read_whole_line): New function.
4054
4055         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
4056
4057         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
4058         tested on OSF and Ultrix.
4059         (add_hlist): New function.
4060         (free_hlist): New function.
4061         (search_host): New function.
4062         (search_address): New function.
4063         (realhost): Use search_host, search_address and add_hlist.
4064         (same_host): Replaced realloc() with strdupdelim(), made
4065         case-insensitive, fixed a memory leak.
4066
4067         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
4068         tm_min, like intended.
4069
4070         * version.c: Change user agent information to
4071         Geturl/version.
4072
4073 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
4074
4075         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
4076
4077         * url.c (acceptable): Always accept directories.
4078
4079         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
4080         servers by stripping trailing @ from symlinks and trailing / from
4081         directories.
4082
4083         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
4084
4085         * url.c (skip_url): Use toupper instead of UCASE.
4086
4087         * host.c (sufmatch): Made it case-insensitive.
4088
4089         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
4090         (match_backwards): New function, instead of
4091         match_backwards_or_pattern.
4092
4093         * recur.c (recursive_retrieve): Increased performance by
4094         introducing inl, which reduces number of calls to in_slist to only
4095         one.
4096
4097         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
4098         routine to use.
4099
4100         * main.c (printhelp): Removed the warranty stuff.
4101
4102 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
4103
4104         * url.c (add_slist): Simplify.
4105         (match_backwards_or_pattern): New function.
4106         (in_acclist): Use match_backwards_or_pattern.
4107         (matches): Remove.
4108
4109 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
4110
4111         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
4112         recursive.
4113
4114         * html.c (ftp_index): Fixed to work. Beautified the output.
4115
4116         * ftp.c (ftp_retrieve_glob): Another argument to control whether
4117         globbing is to be used.
4118         (ftp_retrieve_list): Compare the time-stamps of local and remote
4119         files to determine whether to download.
4120
4121 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
4122
4123         * ftp.c (rel_constr): New function.
4124
4125         * retr.c (retrieve_from_file): Check for text/html before
4126         retrieving recursively.
4127
4128         * main.c (main): Check whether the file is HTML before going into
4129         recursive HTML retrieving.
4130
4131         * ftp.c (ftp_retrieve_list): Manage directories.
4132         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
4133         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
4134         initialized, causing bugchecks in getftp to fail.
4135
4136         * configure.in: Check for symlink.
4137
4138         * ftp.c (ftp_retrieve_list): Added support for symlinks.
4139
4140         * version.c: "Released" 1.4b10.
4141
4142         * atotm.c (atotm): Redeclared as time_t.
4143
4144         * init.c: New variable "timestamping".
4145
4146         * main.c (main): New option 'N'.
4147
4148         * http.c (hgetlocation): Case-insensitive match.
4149         (hgetmodified): New function.
4150         (http_loop): Implement time-stamping.
4151
4152 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
4153
4154         * version.c: Changed version to 1.4b10
4155
4156         * atotm.c: New file, from phttpd.
4157
4158         * options.h (struct options): New parameter timestamping.
4159
4160         * version.c: 1.4b9 "released".
4161
4162         * recur.c (recursive_retrieve): Used linked list (ulist) for
4163         faster storing of URLs.
4164
4165         * url.c (get_urls_html): Removed the old kludge with comparing the
4166         outputs of htmlfindurl and findurl.
4167         (get_urls_html): Added better protocol support here.
4168         (create_hash): Removed, as well as add_hash and in_hash.
4169         (addslist): New function.
4170         (in_slist): ditto
4171
4172         * version.c: Released 1.4b8, changed version to b9.
4173
4174 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4175
4176         * ftp.c (freefileinfo): New function.
4177         (delelement): New function.
4178
4179         * everywhere: GPL!
4180
4181         * ftp.c (ftp_loop): Use ccon.
4182         (ftp_retrieve_glob): Likewise.
4183
4184         * ftp.h: Define ccon, to define status of control connection.
4185
4186         * ftp.c (ftp_get_listing): New function.
4187         (ftp_retrieve_more): New function.
4188         (ftp_retrieve_glob): New function.
4189
4190 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
4191
4192         * configure.in: Removed the search for cuserid().
4193
4194         * init.c (getmode): Renamed to getperms.
4195
4196 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
4197
4198         * version.c: New version.
4199
4200         * main.c (hangup): New function, that handles hangup. Hangup
4201         signal now causes geturl to stop writing on stdout, and to write
4202         to a log file.
4203
4204         * ftp.c (getftp): "Released" 1.4b7.
4205
4206         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
4207         (ftp_index): Use fileinfo/urlinfo.
4208
4209         * ftp-unix.c (ftp_parse_ls): New function.
4210         (symperms): New function.
4211
4212         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
4213
4214         * retr.c (retrieve_url): Added FTP support.
4215
4216 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4217
4218         * geturl.h: Removed NOTFTP2HTML enum.
4219         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
4220
4221         * ftp.c (getftp): Resynched with urlinfo.
4222         (getftp): Removed HMTL-ization of index.html from getftp.
4223
4224         * version.c: 1.4b6 "released".
4225
4226         * options.h (options): New struct, to keep options in.
4227
4228         * http.c (http_loop,gethttp): Synched with proxy.
4229
4230         * retr.c (retrieve_url): Implemented proxy retrieval.
4231
4232         * main.c (main): Use retrieve_from_file.
4233
4234 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
4235
4236         * retr.c (retrieve_from_file): New function.
4237
4238         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
4239         can be found in u->proto.
4240
4241         * ftp.c (ftp_response): Fixed to accept multi-line responses as
4242         per RFC 959.
4243
4244         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
4245
4246         * url.c (mymkdir): Removed the file of the same name, if one
4247         exists.
4248         (isfile): New function.
4249         (mkstruct): Fixed the '/' glitches.
4250         (path_simplify): Hacked to treat something/.. correctly.
4251
4252 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4253
4254         * http.c (gethttp): Close the socket after error in headers.
4255         (http_loop): HEOF no longer a fatal header.
4256
4257         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
4258         simplifies the syntax of calling retrieve_url.
4259
4260         * recr.c (recursive_retrieve): Modified to use get_urls_html.
4261
4262         * url.c (get_urls_file): New function.
4263         (get_urls_html): New function.
4264
4265         * recr.c (recursive_retrieve): Patched up to conform to the
4266         standards.
4267
4268         * http.c (gethttp): Synched with the rest...
4269         (gethttp): Treat only CONREFUSED specially, with connection
4270         errors.
4271
4272         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
4273
4274 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
4275
4276         * http.c (http_loop): New function.
4277
4278         * loop.c: Removed *lots* of stuff from retrieve_url.
4279
4280         * url.c (parseurl): Changed to work with urlinfo. Integrated
4281         username finding and path parsing.
4282         (newurl): New function.
4283         (freeurl): New function.
4284         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
4285         (url_filename): Likewise.
4286         (path_simplify): Accept relative paths too.
4287         (opt_url): Made urlinfo-compliant, removed bogosities.
4288         (path_simplify): Expanded to accept relative paths.
4289         (str_url): A replacement for hide_url
4290         (decode_string): Fixed a bug that caused malfunctioning when
4291         encountering an illegal %.. combination.
4292         (opt_url): Removed the argument. Dot-optimizations are now default.
4293
4294         * nmalloc.c (strdupdelim): New function.
4295
4296         * url.h: Added the urlinfo structure
4297
4298 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
4299
4300         * url.c (hide_url): Thrown out the protocol assertion. Do not
4301         change the URL if the protocol if not recognized.
4302         (findurl): Put continue instead of break.
4303
4304 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
4305
4306         * sample.geturlrc: Changed the defaults to be commented out and
4307         harmless (previous defaults caused pains if copied to
4308         ~/.geturlrc).
4309
4310         * http.c (gethttp): Print the HTTP request in debug mode.
4311
4312         * connect.c (iread): Added EINTR check loop to select-ing
4313         too. EINTR is now correctly handled with select().
4314
4315         * TODO: new file
4316
4317 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
4318
4319         * host.c (same_host): Made the function a little bit more
4320         intelligent regarding diversified URL syntaxes.
4321
4322         * url.c (skip_url): Spaces are now skipped after URL:
4323
4324         * Released 1.3.1 with the patch to prevent crashing when sending
4325         NULL to robot* functions and the patch to compile "out of the box"
4326         on AIX.
4327
4328         * recr.c (recursive_retrieve): Added checking whether this_url is
4329         NULL when calling the robot functions.
4330
4331         * ChangeLog: New file.