]> sjero.net Git - wget/blob - src/ChangeLog
gnutls: fix build under mingw32.
[wget] / src / ChangeLog
1 2010-10-23  Giuseppe Scrivano  <gscrivano@gnu.org>
2
3         * Makefile.am (LIBS): Remove @LIBGNUTLS@ and use @W32LIBS@ as last
4         component.
5
6         * gnutls.c (wgnutls_peek): Block until data is available.
7
8 2010-10-21  Giuseppe Scrivano  <gscrivano@gnu.org>
9
10         * retr.c (retrieve_url): Do not register HTML files twice.
11         Reported by: Manfred Koizar <mkoi-pg@aon.at>.
12
13 2010-10-18  Manfred Koizar <mkoi-pg@aon.at> (tiny change)
14
15         * html-url.c (tag_handle_link): Do not assume external links type
16         to be always "text/html".
17
18 2010-10-16  Giuseppe Scrivano  <gscrivano@gnu.org>
19
20         * connect.c (socket_ip_address): Initialize `sockaddr' to zero.
21         * ftp-basic.c (ftp_epsv): Remove dead assignment to `s'.
22         * ftp-ls.c (ftp_parse_vms_ls): Remove dead assignment to `len'.
23         * http.c (skip_short_body): Remove dead assignment to `ret'.
24         * init.c (wgetrc_user_file_name): Remove dead assignment to `home'.
25         * main.c (main): Silent warning reported by clang.
26         (http_loop): Silent warning reported by clang.
27         * retr.c (retrieve_url): Likewise.
28         * url.c (init_seps): Remove dead assignment to `p'.
29
30 2010-10-11  Giuseppe Scrivano  <gscrivano@gnu.org>
31
32         * ftp.c (getftp): Fix indentation.
33
34 2010-10-11  Steven Schubiger <stsc@member.fsf.org>
35
36         * ftp.c (getftp): Initialize `targ'.
37
38 2010-10-08  Ivanov Anton <x86mail@gmail.com> (tiny change)
39
40     * src/html-url.c (check_style_attr): Skip quotes when they are present.
41
42 2010-10-06  Giuseppe Scrivano  <gscrivano@gnu.org>
43
44         * main.c (main): Remove unused variable `status'.
45
46 2010-09-25  Merinov Nikolay  <kim.roader@gmail.com>
47
48         * init.c: Add "unlink" command into command list.
49         * main.c: Add "unlink" option into option_data list.
50         * options.h: Adding unlink field into struct options.
51         * wget.h: Addind UNLINKERR error into uerr_t enum.
52         * exits.c (get_status_for_err): define status for UNLINKERR.
53         * ftp.c (getftp): unlink file if exists, instead clobbering.
54         (ftp_loop_internal): processing UNLINKERR.
55         * http.c (gethttp): unlink file if exists, instead clobbering.
56         (http_loop): processing UNLINKERR.
57
58 2010-09-24  Dennis, CHENG Renquan <crquan@fedoraproject.org>
59
60         Fix problem when content-disposition is used with recursive downloading.
61         * url.h (url_file_name): Add a new argument `replaced_filename'.
62         * url.c (url_file_name): Likewise.
63         * http.c (parse_content_disposition): Do not add a prefix to the return
64         value.
65         (test_parse_content_disposition): Adjust tests.
66         (gethttp): Pass additional parameter to `url_file_name'.
67         (http_loop): Likewise.
68         * ftp.c (ftp_loop_internal, ftp_get_listing, ftp_retrieve_list)
69         (ftp_loop): Likewise.
70
71 2010-09-14  Giuseppe Scrivano  <gscrivano@gnu.org>
72
73         * convert.c (local_quote_string): Accept new parameter `no_html_quote'.
74         Inhibit HTML quoting when `no_html_quote'.
75         (convert_links): Disable HTML quoting in CSS files.
76         Reported by: Manuel Reinhardt <reinhardt@syslab.com>.
77
78 2010-09-12  Giuseppe Scrivano  <gscrivano@gnu.org>
79
80         * main.c (print_help): Align --trust-server-names help text with
81         the rest of the text.
82         Suggested by: Mike Frysinger  <vapier@gentoo.org>.
83
84 2010-08-20  Giuseppe Scrivano  <gscrivano@gnu.org>
85
86         * convert.c: Include "iri.h".
87         (convert_links_in_hashtable): Parse the url, if
88         necessary, before check if it is present in the dowloaded url
89         map.
90         Reported by: <sk.random@gmail.com>.
91
92 2010-08-09  Giuseppe Scrivano  <gscrivano@gnu.org>
93
94         Fix a problem with HTTP/1.0 proxies.
95         * http.c (gethttp): Specify the connection header when keep alive
96         connections are not used.
97
98         Use persistent connections with proxies supporting them.
99         * http.c (gethttp): Specify Proxy-Connection to the HTTP proxy.
100
101 2010-08-06  Giuseppe Scrivano  <gscrivano@gnu.org>
102
103         * css-url.c (get_uri_string): Skip empty urls.
104
105 2010-07-25  John Trengrove  <jtrengrove@gmail.com> (tiny change)
106
107         * ftp.h: Added enum `parsetype'.  Modified struct to hold parsetype.
108
109         * ftp-ls.c (ftp_parse_unix_ls): Default to TT_DAY. Change to TT_HOUR_MIN
110         if hours/minutes parsed.
111         (ftp_parse_winnt_ls): Default to TT_HOUR_MIN.
112         (ftp_parse_vms_ls): Default to TT_HOUR_MIN.
113         (ftp_index): Print only if fileinfo struct value ttype set to TT_HOUR_MIN.
114
115 2010-07-30  Giuseppe Scrivano  <gscrivano@gnu.org>
116
117         * html-url.h (struct map_context): Remove member `tail'.
118
119         * html-url.c (append_url): Append the new url ordered by `position'.
120         (get_urls_html): Do not initialize `ctx.tail'.
121
122         * css-url.c (get_urls_css_file): Do not initialize `ctx.tail'.
123
124 2010-07-29  Giuseppe Scrivano  <gscrivano@gnu.org>
125
126         * gnutls.c (wgnutls_peek): Don't read more data if the buffered peek
127         data is sufficient.
128
129 2010-07-28  Giuseppe Scrivano  <gscrivano@gnu.org>
130
131         * http.h (http_loop): Add new argument `original_url'
132         * http.c (http_loop): Add new argument `original_url'.  Use
133         `original_url' to get a filename if `trustservernames' is false.
134
135         * init.c (commands): Add "trustservernames".
136
137         * options.h (library): Add variable `trustservernames'.
138
139         * main.c (option_data): Add trust-server-names.
140         (print_help): Describe --trust-server-names.
141
142         * retr.c (retrieve_url): Pass new argument to `http_loop'.
143
144 2010-07-20  Alan Jenkins <alan-jenkins@tuffmail.co.uk> (tiny change)
145
146         * http.c (gethttp): Check content-length was set before trying to
147         compare it with the already downloded filesize.
148
149 2010-07-20  Leonid Petrov <nouser@lpetrov.net>
150
151         * ftp.c (getftp): Don't attempt to retrieve the file if it is already
152         completely.
153         (ftp_loop_internal): Force the length to be zero for symlinks.
154
155 2010-07-18  Giuseppe Scrivano  <gscrivano@gnu.org>
156
157         * http.c (gethttp): If -N is used, don't exit immediately if the content
158         length is less or equal than the existing file size.  Specify "Range"
159         only if -N is not used.
160         Reported by: Caleb Cushing <xenoterracide@gmail.com>.
161
162 2010-07-14  Giuseppe Scrivano  <gscrivano@gnu.org>
163
164         * ftp.c (max): Remove definition.
165         (getftp): New variable `got_expected_bytes'.  Let `expected_bytes' be
166         the value SIZE returns, otherwise use the bytes count returned by RETR.
167         Suggested by Daniel Stenberg <daniel@haxx.se>.
168
169 2010-07-14  Giuseppe Scrivano  <gscrivano@gnu.org>
170
171         * ftp.c (max): Add definition.
172         (getftp): Consider for `expected_bytes' the greatest value between the
173         bytes count returned by SIZE and the bytes count returned by RETR.
174         Reported by: Jozua <jozua@sparky.za.net>.
175
176 2010-07-11  Giuseppe Scrivano  <gscrivano@gnu.org>
177
178         * http.c (http_loop): New variable `force_full_retrieve'.  If the remote
179         file is newer that the local one then inhibit -c.
180         Reported by: Caleb Cushing <xenoterracide@gmail.com>.
181
182 2010-07-09  Giuseppe Scrivano  <gscrivano@gnu.org>
183
184         * css-url.c (get_urls_css_file): Use `wget_read_file' instead of
185         `read_file'.  Use `wget_read_file_free' instead of `read_file_free'.
186         * convert.c (convert_links): Likewise.
187         * html-url.c (get_urls_html, get_urls_file): Likewise.
188         * res.c (res_parse_from_file): Likewise.
189
190         * utils.h: Rename `read_file' to `wget_read_file'.  Rename
191         `read_file_free' to `wget_read_file_free'.
192
193         * utils.c (wget_read_file): Renamed from `read_file'.
194         (wget_read_file_free): Renamed from `read_file_free'.
195
196 2010-07-05  Giuseppe Scrivano  <gscrivano@gnu.org>
197
198         * gnutls.c (ssl_init): New local variables `ca_directory' and `dir'.
199         Load default root certificates under the `ca_directory' directory.
200
201 2010-07-03  Giuseppe Scrivano  <gscrivano@gnu.org>
202
203         * gnutls.c (ssl_connect_wget): New local variable `allowed_protocols'.
204         Honor the --secure-protocol flag.
205
206 2010-06-20  Giuseppe Scrivano  <gscrivano@gnu.org>
207
208         * main.c (print_help): Fix help string for --random-wait.  Its range is
209         [0.5*wait, 1.5*wait) not [0, 2*wait).
210         Reported by: Tom Mizutani <gombei1970@gmail.com>.
211
212 2010-06-15  Giuseppe Scrivano  <gscrivano@gnu.org>
213
214         * gnutls.c [WIN32]: Include "w32sock.h".
215         (FD_TO_SOCKET): Add definition.
216         (ssl_connect_wget): Get the real socket handle by FD_TO_SOCKET.
217         Define FD_TO_SOCKET if it is not yet defined.
218
219 2010-06-14  Giuseppe Scrivano  <gscrivano@gnu.org>
220
221         * gnutls.c: Include <stdlib.h>.
222         (struct wgnutls_transport_context): Remove `peekstart'.
223         (ssl_connect_wget): Renamed from `ssl_connect'.
224         (wgnutls_poll): New variable `ctx'.
225         (wgnutls_read): Don't use `ctx->peekstart'.
226         (wgnutls_peek): Likewise.  Don't attempt to read if there is not
227         ready data.
228
229 2010-06-14  Giuseppe Scrivano  <gscrivano@gnu.org>
230         * http.c (http_loop): Always send a HEAD request when -N is used
231         together with --content-disposition.
232         Reported by: Jochen Roderburg <Roderburg@Uni-Koeln.DE>.
233
234 2010-06-10  Muthu Subramanian K <muthusuba@gmail.com> (tiny change)
235
236         * http.c (http_loop): Increase `total_downloaded_bytes' by
237         `hstat.rd_size', not `hstat.len'.
238
239 2010-06-10  Giuseppe Scrivano  <gscrivano@gnu.org>
240
241         * main.c (print_version): Drop the current maintainer line.
242
243 2010-06-10  Giuseppe Scrivano  <gscrivano@gnu.org>
244
245         * Makefile.am (build_info.c): Generate the `build_info.c' file under
246         the build directory.
247         Patch by: Daniel Stenberg <daniel@haxx.se>.
248
249 2010-06-03  Giuseppe Scrivano  <gscrivano@gnu.org>
250
251         * http.c (http_loop): Do not send a HEAD request before the GET request
252         when --content-disposition is used.
253         Reported by: alex_wh@mail.ru.
254
255 2010-05-31  Giuseppe Scrivano  <gscrivano@gnu.org>
256
257         * css.l: Use option "nounput".
258         (YY_NO_INPUT): Add macro definition.
259
260 2010-05-31  Giuseppe Scrivano  <gscrivano@gnu.org>
261
262         * html-parse.c (map_html_tags): Fix condition for closed tag.  Handle
263         the case '>' is not specified after '/'.
264
265 2010-05-31  Giuseppe Scrivano  <gscrivano@gnu.org>
266
267         * sysdep.h (_SVID_SOURCE): Remove definition.
268         (_BSD_SOURCE): Remove definition.
269
270 2010-05-31  Giuseppe Scrivano  <gscrivano@gnu.org>
271
272         * recur.c (retrieve_tree): Remove variable `up_error_code'.
273
274         * iri.c (open_locale_to_utf8): Remove function.
275
276 2010-05-30  Giuseppe Scrivano  <gscrivano@gnu.org>
277
278         * html-parse.c (NAME_CHAR_P): Consider '<' an invalid character.
279         (advance_declaration): Close the tag if '<' is found.
280         (map_html_tags): Likewise.
281
282 2010-05-27  Giuseppe Scrivano  <gscrivano@gnu.org>
283
284         * main.c (print_usage): Accept a new parameter `error'.
285         (main): Print diagnostic messages to stderr, not stdout.
286
287 2010-05-27  Giuseppe Scrivano  <gscrivano@gnu.org>
288
289         * Makefile.am (wget_SOURCES): Remove `snprintf.c'.
290
291         * snprintf.c: Remove file.
292
293 2010-05-27  Giuseppe Scrivano  <gscrivano@gnu.org>
294
295         * main.c (main): Exit with failure when -k is specified and -O is not
296         a regular file.
297
298 2010-05-27  Giuseppe Scrivano  <gscrivano@gnu.org>
299
300         * http.c (gethttp): Consider new cookies retrieved when the
301         authorization fails.
302
303 2010-05-25  Giuseppe Scrivano  <gscrivano@gnu.org>
304
305         * host.c (sufmatch): Do not consider zero length entries.
306
307         * http.c (H_10X): New macro.
308         (gethttp): Silently ignore 1xx responses.
309
310 2010-05-24  Giuseppe Scrivano  <gscrivano@gnu.org>
311
312         * iri.h (dummy_iri): Define static.
313
314         * css-tokens.h (css_tokens): Remove variable.
315
316 2010-05-23  Giuseppe Scrivano  <gscrivano@gnu.org>
317
318         * http.c (http_atotm): Count the NUL character when copying the locale
319         string.
320         Reported by: Florian Weimer <fw@deneb.enyo.de>
321
322 2010-05-16  Giuseppe Scrivano  <gscrivano@gnu.org>
323
324         * Makefile.am (LDADD): Remove MD5_LDADD.
325         (MD5_LDADD): Remove definition.
326         (AM_CPPFLAGS): Remove MD5_CPPFLAGS.
327         (version.c): Remove dependency from MD5_LDADD.
328         (../md5/libmd5.a): Remove rule.
329
330         * ftp-opie.c: Include "md5.h".  Do not include "gen-md5.h".
331         (skey_response): New variable ctx.  Use md5 functions from the gnulib
332         module instead of functions defined previously in the "gen-md5.h" file.
333
334         * gen-md5.h: Remove file.
335         * gen-md5.c: Likewise.
336
337         * http.c: Include "md5.h".  Do not include "gen-md5.h".
338         (digest_authentication_encode): New variable ctx.  Use md5 functions
339         from the gnulib module instead of functions defined previously in the
340         "gen-md5.h" file.
341
342 2010-05-15  Giuseppe Scrivano  <gscrivano@gnu.org>
343
344         * Makefile.am: Quote any path using $(top_srcdir) or $(top_builddir).
345         (version.c): Remove dependency from configure.ac and Makefile.am.
346
347         * css.l: Include "wget.h".
348
349 2010-05-08  Giuseppe Scrivano  <gscrivano@gnu.org>
350
351         * Makefile.am: Update copyright years.
352
353         * cmpt.c: Likewise.
354
355         * connect.h: Likewise.
356
357         * convert.c: Likewise.
358
359         * convert.h: Likewise.
360
361         * cookies.c: Likewise.
362
363         * cookies.h: Likewise.
364
365         * css-tokens.h: Likewise.
366
367         * css-url.c: Likewise.
368
369         * css-url.h: Likewise.
370
371         * css.l: Likewise.
372
373         * exits.c: Likewise.
374
375         * exits.h: Likewise.
376
377         * ftp-basic.c: Likewise.
378
379         * ftp-ls.c: Likewise.
380
381         * ftp-opie.c: Likewise.
382
383         * ftp.c: Likewise.
384
385         * ftp.h: Likewise.
386
387         * gen-md5.c: Likewise.
388
389         * gen-md5.h: Likewise.
390
391         * gettext.h: Likewise.
392
393         * gnutls.c: Likewise.
394
395         * hash.c: Likewise.
396
397         * hash.h: Likewise.
398
399         * host.c: Likewise.
400
401         * host.h: Likewise.
402         * html-parse.c: Likewise.
403
404         * html-parse.h: Likewise.
405
406         * html-url.c: Likewise.
407
408         * html-url.h: Likewise.
409
410         * http-ntlm.c: Likewise.
411
412         * http-ntlm.h: Likewise.
413
414         * http.c: Likewise.
415
416         * http.h: Likewise.
417
418         * init.c: Likewise.
419
420         * init.h: Likewise.
421
422         * iri.c: Likewise.
423
424         * iri.h: Likewise.
425
426         * log.c: Likewise.
427
428         * log.h: Likewise.
429
430         * main.c: Likewise.
431
432         * mswindows.c: Likewise.
433
434         * mswindows.h: Likewise.
435
436         * netrc.c: Likewise.
437
438         * netrc.h: Likewise.
439
440         * openssl.c: Likewise.
441
442         * options.h: Likewise.
443         * progress.c: Likewise.
444
445         * progress.h: Likewise.
446
447         * ptimer.c: Likewise.
448
449         * ptimer.h: Likewise.
450
451         * recur.c: Likewise.
452
453         * recur.h: Likewise.
454
455         * res.c: Likewise.
456
457         * res.h: Likewise.
458
459         * retr.c: Likewise.
460
461         * retr.h: Likewise.
462
463         * spider.c: Likewise.
464
465         * spider.h: Likewise.
466
467         * ssl.h: Likewise.
468
469         * sysdep.h: Likewise.
470
471         * test.c: Likewise.
472
473         * test.h: Likewise.
474
475         * url.c: Likewise.
476
477         * url.h: Likewise.
478
479         * utils.c: Likewise.
480
481         * utils.h: Likewise.
482
483         * wget.h: Likewise.
484
485 2010-05-07  Giuseppe Scrivano  <gscrivano@gnu.org>
486
487         * gnutls.c (wgnutls_close): Use always `close', not `closesocket'.
488
489         * openssl.c (openssl_close): Use always `close', not `closesocket'.
490         (ssl_connect_wget): Get the real socket handle by FD_TO_SOCKET.
491         Define FD_TO_SOCKET if it is not yet defined.
492
493         * Makefile.am (libunittest_a_CPPFLAGS): Add -I$(top_builddir)/lib.
494
495         * mswindows.h: Always include <winsock2.h> and <ws2tcpip.h>.  Do not
496         include <winsock.h>.
497         [! INHIBIT_WRAP]: Remove macro's socket, bind, connect, accept, recv,
498         send, select, getsockname, getpeername, setsockopt, closesocket.
499         Remove wrapped_socket, wrapped_bind, wrapped_connect, wrapped_listen,
500         wrapped_accept, wrapped_recv, wrapped_send, wrapped_select,
501         wrapped_getsockname, wrapped_getpeername, wrapped_setsockopt,
502         wrapped_closesocket prototypes.
503
504         * mswindows.c:  Remove wrapped_socket, wrapped_bind, wrapped_connect,
505         wrapped_listen, wrapped_accept, wrapped_recv, wrapped_send,
506         wrapped_select, wrapped_getsockname, wrapped_getpeername,
507         wrapped_setsockopt, wrapped_closesocket functions.  Remove WRAP macro.
508
509         * host.h [WINDOWS]: Include <winsock2.h> not <winsock.h>.
510
511         * connect.c: Include <sys/socket.h> and <sys/select.h> on any platform,
512         gnulib ensures they exist.  Remove `read', `write', `close' macros.
513
514         * Makefile.am: Copy build_info.c.in only if we are working in a VPATH.
515         (AM_CPPFLAGS): Add directory with generated gnulib files.
516
517 2010-05-06  Giuseppe Scrivano  <gscrivano@gnu.org>
518
519         * Makefile.am (build_info.c): Generate build_info.c in the builddir,
520         not srcdir.
521
522 2010-05-05  Giuseppe Scrivano  <gscrivano@gnu.org>
523
524         * http.c (gethttp): Give a nicer message on a malformed status line.
525
526 2010-05-04  Giuseppe Scrivano  <gscrivano@gnu.org>
527
528         * http.c (gethttp): Check `resp_status' return code and handle
529         errors.
530
531 2010-05-01  Giuseppe Scrivano <gscrivano@gnu.org>
532
533         * http.c (request_send): Specify 1.1 as HTTP version for requests.
534         (skip_short_body): Accept new parameter `chunked'.  New variable
535         `remaining_chunk_size'.  Handle the chunked transfer encoding.
536         (gethttp): New variable `chunked_transfer_encoding`.  Set `keepalive'
537         by default to true.  Check if the server is using the chunked transfer
538         encoding.
539
540         * retr.h: Define `rb_chunked_transfer_encoding'.
541
542         * retr.c (fd_read_body): New variable `chunked'.  New variable
543         `remaining_chunk_size'.  Handle the chunked transfer encoding.
544
545 2010-03-04  Steven Schubiger  <stsc@member.fsf.org>
546
547         * ftp.c (ftp_loop_internal): Omit input file from being
548         deleted after retrieval.
549
550         * retr.c (input_file_url): New function.
551
552         * retr.h: Add declaration for input_file_url.
553
554 2010-03-02  Steven Schubiger  <stsc@member.fsf.org>
555
556         * retr.c (retrieve_from_file): Improve checking for a URL
557         by invoking url_valid_scheme instead of url_has_scheme.
558
559         * url.c (url_valid_scheme): New function.
560
561         * url.h: Add declaration for url_valid_scheme.
562
563 2010-03-02  Steven Schubiger  <stsc@member.fsf.org>
564
565         * retr.c (retrieve_from_file): Free memory of input file.
566
567 2010-03-01  Steven Schubiger  <stsc@member.fsf.org>
568
569         * retr.c (retrieve_url): Retrieve the local filename from ftp_loop.
570         (retrieve_from_file): Return if there's no input file.
571
572         * ftp.c (ftp_loop_internal): Duplicate the local filename into
573         retrieve_url's scope when a valid reference is being passed.
574         (ftp_loop): Call ftp_loop_internal here with passing a
575         reference to the local filename, elsewhere with NULL.
576
577         * ftp.h: Adjust declaration of ftp_loop.
578
579 2010-01-27  Paul Townsend  <aab@purdue.edu>  (tiny change)
580
581         * retr.c (fd_read_body): Be sure to measure timer when time has
582         elapsed, too, not just when we've made progress.
583
584 2010-01-13  Micah Cowan  <micah@cowan.name>
585
586         * openssl.c: Fixed some mixed declarations-and-code.
587
588 2010-01-09  Micah Cowan  <micah@cowan.name>
589
590         * init.c, main.c, http.c, ftp.c, options.h: Renamed
591         --no-match-server-timestamps to --no-use-server-timestamps, and
592         add it to print_help.
593
594 2010-01-09  David Holman  <holman.david@gmail.com>  (tiny change)
595
596         * init.c, main.c, http.c, ftp.c, options.h: Added support for
597         --no-match-server-timestamps.
598
599 2009-12-03  Peter Rosin  <peda@lysator.liu.se>
600
601         * snprintf.c (dopr): Output %p as unsigned.
602
603 2010-01-09  Jeremy Olexa  <darkside@gentoo.org>  (tiny change)
604
605         * init.c: Deal with systems which provide PATH_MAX in
606         sys/param.h rather than limits.h.
607
608 2009-10-09  Steven Schweda  <sms@antinode.info>
609
610         * utils.c: Added characters " : \ | to the list of normal
611         caret-escaped (ODS5) characters in the char_prop[] table.
612
613 2009-09-22  Arvind Jamuna Dixit  <ardsrk@gmail.com>
614
615         * http.c (extract_param, parse_content_disposition): Support
616         RFC 2231 while parsing Content-Disposition header
617
618 2009-10-24  Petr Pisar  <petr.pisar@atlas.cz>
619
620         * openssl.c: Implement support for (multiple) subjectAltNames in
621         X509 certificates, not just the commonName.
622
623 2009-10-09  Micah Cowan  <micah@cowan.name>
624
625         * main.c: Fix declaration of compiled_features.
626
627         * build_info.c.in: Adapt to new input format. Added a check for
628         large-file support. Replaced the "openssl" and "gnutls"
629         advertisements with a single "ssl/foo" advertisement.
630
631 2009-09-30  Micah Cowan  <micah@cowan.name>
632
633         * sysdep.h: Unconditionally include stdbool.h (gnulib has it for
634         systems that don't supply it.)
635
636         * vms.c: Added functions vms_basename(), used to extract the
637         bare executable name from argv[0], and vms_getpass(), a
638         VMS-specific replacement for GNU getpass().
639
640          vms.c: Added global string constants: compilation_string
641         (NULL), link_string (NULL), and version_string (real).
642
643 2009-09-24  Micah Cowan  <micah@cowan.name>
644
645         * vms.c: Moved from vms/vms.c.
646
647         * sysdep.h: Use proper prototypes for snprintf, vsnprintf (thanks
648         to Steven Schweda).
649
650 2009-09-24  Steven Schweda  <sms@antinode.info>
651
652         * main.c (print_version): Remove VMS-conditional build info
653         string; the new VMS builders use OS_TYPE.
654
655         * ftp.c (getftp): Fix accidental use of target -> targ.
656
657 2009-09-24  Micah Cowan  <micah@cowan.name>
658
659         * host.c (host_errstr): host_errstr should return const char *.
660
661 2009-09-22  Micah Cowan  <micah@cowan.name>
662
663         * Makefile.am (version.c): Explicitly tell Mercurial where the
664         top-source repository should be, so it doesn't accidentally use
665         the repository for a containing directory (for instance, if the
666         user's home directory is managed by a Mercurial repo). Also
667         ensures we find the repository, even if the build directory is
668         outside the source directory.
669
670         * wget.h: define WINDOWS if _WIN32 or __WIN32__ is defined, but
671         not __CYGWIN__.
672
673         * mswindows.c (xsleep): Check for availability of the sleep
674         function, in addition to the usleep function.
675         (get_winsock_error, windows_strerror): Removed (gnulib already
676         supplies this functionality).
677
678         * mswindows.h [NEED_GAI_STRERROR]: define gai_strerror
679         to (gnulib's) strerror, rather than windows_strerror. Removed
680         error macro definitions provided by gnulib.
681         (windows_strerror): Removed (gnulib already supplies this
682         functionality).
683
684         * host.c: Don't declare h_errno when building on Windows.
685
686         * Makefile.am (LIBS): Added @W32LIBS@.
687         (EXTRA_wget_SOURCES): Removed (it's in LIBOBJ now).
688         (version.c): Removed dependency on $(LDADD), since it may include
689         dependencies that are not part of the Wget sources (-lwsock32, for
690         instance).
691
692         * openssl.c (ssl_check_certificate): Avoid reusing the same buffer
693         space for successive quoted arguments. Thanks to Steven Schweda
694         for pointing out the problem.
695
696 2009-09-21  Micah Cowan  <micah@cowan.name>
697
698         * progress.c (update_speed_ring): "the the" -> "the".
699
700         * css-url.c, iri.c, mswindows.c: Removed assert.h inclusion (not
701         using it).
702
703 2009-09-11  Steven Schweda  <sms@antinode.info>
704
705         * utils.c, utils.h (fopen_excl): Make second argument an int,
706         rather than a bool (so it can handle the appropriate VMS version
707         of the flag).
708
709         * main.c (print_version): Don't print LOCALEDIR unless NLS is
710         enabled.
711
712         * http.c (gethttp): Pass FOPEN_BIN_FLAG, instead of true.
713
714         * ftp.c (ftp_retrieve_glob): Cast strcmp to assign to cmp, for a
715         silly HP build environment.
716
717 2009-09-08  Steven Schubiger  <stsc@member.fsf.org>
718
719         * main.c, init.c: Mark the --preserve-permissions and
720         --html-extension option as deprecated.
721
722 2009-09-06  Micah Cowan  <micah@cowan.name>
723
724         * ftp.c (getftp, ftp_loop_internal): Separate "len" input/output
725         parameter (with different meanings for input and output), into two
726         separate parameters, one input (passed_expected_bytes) and one
727         output (qtyread). Fixes bug #26870.
728
729 2009-09-05  Steven Schubiger  <stsc@member.fsf.org>
730
731         * retr.h: Declare set_local_file() to avoid build warnings.
732
733 2009-09-05  Gisle Vanem  <gvanem@broadpark.no>
734
735         * connect.c, init.c, main.c, openssl.c, options.h:  Replace
736         "ifdef MSDOS" with "ifdef USE_WATT32" since DOS-targets in fact
737         use the Watt-32 tcp/ip stack.
738
739 2009-09-04  Micah Cowan  <micah@cowan.name>
740
741         * Makefile.am: Move build_info.c to wget_SOURCES from
742         nodist_wget_SOURCES, reduce dependencies, and invoke build_info.pl
743         in its new home, $(top_srcdir)/build-aux.
744
745 2009-09-03  Micah Cowan  <micah@cowan.name>
746
747         * ftp-ls.c (ftp_parse_vms_ls): Replace use of localtime_r with
748         localtime, as not all platforms have localtime_r.
749
750         * Makefile.am (wget_SOURCES): Rearranged some of the file order,
751         so .c files and .h files are apart. Added gettext.h, so that it
752         shows up in the dist.
753
754 2009-09-02  Micah Cowan  <micah@cowan.name>
755
756         * gettext.h: Refreshed from gettext 0.17.
757
758         * test.c: Added definition of program_name variable, required by
759         lib/error.c (libgnu.a). Doesn't cause problems until you try to
760         build on a non-GNU system...
761
762         * build_info.c.in: Removed useless "+gettext" feature ad.
763
764 2009-08-29  Steven Schubiger  <stsc@member.fsf.org>
765
766         * convert.c (local_quote_string): Percent-encode semicolons
767         in local file strings.
768
769 2009-08-27  Micah Cowan  <micah@cowan.name>
770
771         * wget.h (uerr_t): added new VERIFCERTERR code for SSL certificate
772         problems. Marked exit codes that are defined but never used (at
773         least, the ones I could find).
774
775         * retr.c, retr.h (retrieve_url): Added a new boolean argument to
776         determine whether an exit status should be recorded.
777         (retrieve_from_file): Adjust to new retrieve_url signature.
778
779         * res.c (res_retrieve_file): Don't have retrieve_url record an
780         exit status for robots.txt.
781
782         * recur.c (retrieve_tree): Adjust to new retrieve_url signature.
783
784         * main.c (main): Use the exit status stored by retrieve_url.
785
786         * http.c (gethttp): Distinguish certificate verification problems
787         from SSL connection issues.
788         (http_loop): Handle newly-created VERIFCERTERR error code.
789
790         * exits.c, exits.h: Newly added.
791
792         * Makefile.am (wget_SOURCES): Add exits.c and exits.h.
793
794 2009-08-27  Micah Cowan  <micah@cowan.name>
795
796         * http.c (gethttp): Make sure Wget heeds cookies when they
797         are sent with a 401 response; or any other sort of response for
798         that matter (#26775).
799
800 2009-08-19  Micah Cowan  <micah@cowan.name>
801
802         * openssl.c (ssl_check_certificate): Only warn about an attack if
803         the hostname would otherwise have matched. Also some formatting
804         cleanup.
805
806 2009-08-19  Joao Ferreira  <joao@joaoff.com>
807
808         * openssl.c (ssl_check_certificate): Detect embedded NUL
809         characters in the SSL certificate common name.
810
811 2009-08-17  Tony Lewis  <tlewis@exelana.com>
812
813         * http.c (gethttp): Ensure that we parse Content-Length before we
814         attempt to refer to its value. Without this fix, NTLM support was
815         completely buggered. #27192
816
817 2009-08-09  Michael Baeuerle  <michael.baeuerle@gmx.net>
818
819         * ftp.c: #include <strings.h> for strcasecmp.
820
821 2009-07-28  Micah Cowan  <micah@cowan.name>
822
823         * main.c (option_data): Rename --html-extension to
824         --adjust-extension.
825         (print_help): Ditto.
826
827         * options.h (struct option): Rename html_extension to
828         adjust_extension.
829         * http.c (gethttp): Ditto.
830         * convert.c (local_quote_string): Ditto.
831
832         * init.c (commands): Add "adjustextension", and reflect rename
833         change for opt.adjust_extension, for both "adjustextension" and
834         "htmlextension".
835
836 2009-07-27  Micah Cowan  <micah@cowan.name>
837
838         * options.h (struct options): Added restrict_files_nonascii
839         boolean field.
840
841         * url.c (FILE_CHAR_TEST): Add check for chars outside the ASCII
842         range.
843
844         * init.c (defaults): Add restrict_files_nonascii to initialization.
845         (cmd_spec_restrict_file_names): Allow parsing of "ascii" keyword.
846
847 2009-07-27  Marcel Telka  <marcel@telka.sk>
848
849         * iri.c (do_conversion): Typo: invalide -> invalid
850
851 2009-07-27  Petr Pisar  <petr.pisar@atlas.cz>
852
853         * main.c (print_help): Fixed a couple typos.
854
855 2009-07-26  Micah Cowan  <micah@cowan.name>
856
857         * main.c (option_data): Rename --locale option to --local-encoding
858         (print_help): Document --no-iri, --local-encoding, and
859         --remote-encoding, within usage message. Remove defunct
860         --preserve-permissions.
861
862 2009-07-23  Micah Cowan  <micah@cowan.name>
863
864         * progress.c (get_eta): Change "Translation note" in comment to
865         "TRANSLATORS", so it actually appears in wget.pot.
866
867 2009-07-06  Micah Cowan  <micah@cowan.name>
868
869         * main.c (print_help): Improve documentation of --base.
870
871 2009-07-05  Micah Cowan  <micah@cowan.name>
872
873         * html-url.c (tag_handle_meta): Handle meta name="robots"
874         properly: deal with whitespace, commas after...
875
876         * netrc.c (parse_netrc): Rename local-scope variable "quote" to
877         "qmark", to avoid conflict with the function name.
878
879 2009-07-05  Petr Pisar  <petr.pisar@atlas.cz>
880
881         * main.c (print_version): Mark initial line for translation, along
882         with (env), (user), and (system). Change copyright year to 2009.
883
884         * http.c (http_loop): Space after colon.
885
886         * gnutls.c (ssl_check_certificate): Use quote function, rather
887         than explicit quotes.
888
889 2009-07-05  Micah Cowan  <micah@cowan.name>
890
891         * Makefile.am (version.c): Add dependency on configure.ac.
892
893         * iri.c: Mark some strings for translation.
894
895 2009-07-04  Steven Schweda  <sms@antinode.info>
896
897         * wget.h (ORIG_SFX): Macro added, to supply an alternative "_orig"
898         suffix on VMS.
899
900         * connect.c, host.c, host.h, main.c: Include "vms_ip.h" rather
901         than <netdb.h> on VMS systems.
902
903         * convert.c (write_backup_file): Use "_orig" rather than ".orig"
904         on VMS.
905
906         * ftp-basic.c (ftp_list): Don't use LIST -a on VMS servers.
907
908         * ftp.c [__VMS]: Include "vms.h"
909         * ftp.c (getftp): Disable some unhelpful "for VMS" code. Pass the
910         OS type to ftp_list.
911         (getftp) [__VMS]: Alter the filename as required, and invoke fopen
912         with extra optional arguments.
913         (ftp_retrieve_list): Set permissions before setting the times.
914
915         * ftp-ls.c [__VMS]: Various improvements.
916
917         * http.c (SET_USER_AGENT): Added. Include operating-system info in
918         the User-Agent header.
919         (gethttp): Use ORIG_SFX macro.
920         (gethttp) [__VMS]: invoke fopen with extra arguments to
921         communicate file type.
922         (http_loop): Add cast to time_t.
923
924         * init.c (wgetrc_user_file_name) [__VMS]: Adjustments for where to
925         find the .wgetrc.
926
927         * log.c: Adjustments to improve handling of log files on VMS.
928
929         * main.c [__VMS]: Added --ftp-stmlf option (and associated
930         documentation). Adjust description of backup-suffixes, as they now
931         differ for VMS.
932         (print_help, print_version): Include OS type in version
933         information.
934         (main) [__VMS]: Invoke fopen with extra options, to specify file
935         type information.
936
937         * netrc.c (search_netrc) [__VMS]: Fix .netrc-finding.
938
939         * openssl.c, openssl.h (ssl_connect_wget): Renamed from ssl_connect.
940
941         * options.h (struct options): Add ftp_stmlf field.
942
943         * retr.c (write_data) [__VMS]: Avoid fflush.
944
945         * url.c [__VMS]: Include vms.h.
946         * url.c (url_file_name) [__VMS]: Handle naming as required for VMS.
947
948         * utils.c [__VMS]: Include vms.h. Various added facilities for VMS
949         needs.
950
951 2009-07-04  Micah Cowan  <micah@cowan.name>
952
953         * main.c (print_version): Allow localization of the version-info
954         labels, eschew attempts at alignment (which is complicated when
955         handling translated strings), and avoid using printf() with
956         variable-stored format strings that lack conversion
957         specifications.
958         (format_and_print_line): For similar reasons, don't calculate
959         line-continuation tabulation based on the number of bytes in a
960         string.
961
962 2009-07-04  Steven Schubiger  <stsc@member.fsf.org>
963
964         * url.c (url_parse): If an URL scheme is invalid, distinguish
965         between an unsupported or missing scheme.
966
967         * url.c: Add a "missing scheme" entry to parse_errors.
968
969 2009-07-03  Micah Cowan  <micah@cowan.name>
970
971         * iri.h (iri_dup): Provide macro definition for when IRIs are
972         disabled.
973
974         * Makefile.am (LIBS): Added @LIBICONV@.
975         (wget_SOURCES): Added iri.h.
976         (EXTRA_wget_SOURCES): Added iri.c, so it gets packaged even if IRI
977         support was disabled.
978
979 2009-07-02  Micah Cowan  <micah@cowan.name>
980
981         * recur.c (url_enqueue): Quote enqueue/dequeue debug messages.
982
983         * html-url.c (append_url): Change "merge()" quoting style from
984         locale_quoting_style to escape_quoting_style.
985
986 2009-07-01  Micah Cowan  <micah@cowan.name>
987
988         * retr.c (retrieve_url): Use the existing "redirect" label,
989         instead of superfluous "second_try". Removed no-longer-accurate
990         debug statement. Use the "newloc" parameter to store the fallback
991         URL, when IRI version was rejected.
992
993         * recur.c (retrieve_tree): Always use the parsed URL for tracking
994         the Referer, since that's the one we actually requested (if
995         there's a difference in terms of percent-encodings and such).
996
997 2009-07-01  Steven Schubiger  <stsc@member.fsf.org>
998
999         * Makefile.am: Add a rule to generate build_info.c and list
1000         the build_info.c.in file in EXTRA_DIST. Adjust elsewhere
1001         where needed.
1002
1003         * build_info.c: Remove this static source file.
1004
1005         * build_info.c.in: Data for generation of build_info.c.
1006
1007 2009-06-29  Micah Cowan  <micah@cowan.name>
1008
1009         * html-url.c (append_url): Quote some more arguments that might
1010         contain characters that are inappropriate to display for the
1011         current locale.
1012
1013         * retr.c (retrieve_from_file): Be sure to pass iri information
1014         when parsing an input-fle url, and be sure to hand a clean iri
1015         struct, off to retrieve_tree and retrieve_url.
1016
1017         * iri.c, iri.h (iri_dup): Added.
1018
1019         * retr.c (retrieve_url): Re-parse for IRI fallback.
1020
1021         * main.c (main): Set up iri before the url_parse invocation (so we
1022         can use it).
1023
1024 2009-06-20  Jay Krell  <jay.krell@cornell.edu>
1025
1026         * sysdep.h (_ALL_SOURCE): (small change) Define the _ALL_SOURCE
1027         macro on INTERIX systems. (I switched the location from ftp.c to
1028         sysdep.h --mjc)
1029
1030 2009-06-15  Micah Cowan  <micah@cowan.name>
1031
1032         * ftp.c (getftp): If we can't accept the connection, return
1033         CONERROR, not whatever the contents of err happens to be. Fixes
1034         bug #25015.
1035
1036         * retr.c (fd_read_body): Make both args to progress_create
1037         consistent, resulting in an accurate progress display. Fixes bug
1038         #24948.
1039
1040 2009-06-14  Micah Cowan  <micah@cowan.name>
1041
1042         * Makefile.am (wget_SOURCES): css-tokens.h needs to ship with
1043         dist, too.
1044
1045 2009-06-13  Micah Cowan  <micah@cowan.name>
1046
1047         * init.c: Rename setval_internal_wrapper to setval_internal_tilde,
1048         ensure we don't "replace" the tilde unless it's actually
1049         present. Clean up some minor GNU style issues.
1050
1051 2009-06-13  Julien Pichon  <julienpichon7@gmail.com>
1052
1053         * init.c: Handle tilde-expansion in wgetrc commands, without
1054         resorting to setting/unsetting globals to change behavior in one
1055         call location.
1056
1057 2009-06-12  Micah Cowan  <micah@cowan.name>
1058
1059         * host.c: Include <sys/types.h> before <sys/socket.h>. Not
1060         required by POSIX any more, but some older systems (such as
1061         FreeBSD 4.1) still need it, and it doesn't seem like it could
1062         hurt...
1063
1064         * build_info.c (library): Handle "https" as a feature in its own
1065         right, apart from "gnutls" and "openssl".
1066
1067         * host.c: Declare h_errno if no declaration is provided. Idea
1068         thanks to Maciej W. Rozycki.
1069
1070 2009-06-11  Xin Zou  <zouxin2008@gmail.com>
1071
1072         * http.c (gethttp): Fix some memory leaks.
1073
1074 2009-06-11  Micah Cowan  <micah@cowan.name>
1075
1076         * http.c (http_atotm): Handle potential for setlocale's return
1077         value to be static storage. Thanks to Benjamin Wolsey
1078         <bwy@benjaminwolsey.de>.
1079
1080         * sysdep.h: Need NAMESPACE_TWEAKS on non-Linux glibc-based
1081         systems, too. Thanks to Robert Millan.
1082
1083 2009-05-28  Steven Schubiger  <stsc@member.fsf.org>
1084
1085         * ftp.c (ftp_get_listing): Update the "listing file"
1086         string after calling ftp_loop_internal().
1087
1088 2009-05-27  Steven Schubiger  <stsc@member.fsf.org>
1089
1090         * ftp.c (ftp_get_listing): Duplicate the "listing file"
1091         string to avoid memory corruption when FOPEN_EXCL_ERR is
1092         encountered.
1093
1094 2009-05-17  Steven Schubiger  <stsc@member.fsf.org>
1095
1096         * progress.c (eta_to_human_short): Fix the remaining hours
1097         to be displayed. Spotted by Tadeu Martins (#26411).
1098
1099 2009-04-24  Micah Cowan  <micah@cowan.name>
1100
1101         * hash.c: Change stdint.h inclusion to use HAVE_STDINT_H, not C99
1102         check.
1103
1104         * connect.c: stdint.h inclusion added.
1105
1106         Thanks to Markus Duft <mduft@gentoo.org> for a similar patch.
1107
1108 2009-04-20  Micah Cowan  <micah@cowan.name>
1109
1110         * Makefile.am (version.c): Fix unportable use of "echo -n".
1111
1112 2009-04-13  Steven Schubiger  <stsc@member.fsf.org>
1113
1114         * ftp.c (ftp_retrieve_list): Move the duplicated code that
1115         determines the local file to a function.
1116
1117         * http.c (http_loop): Likewise.
1118
1119         * retr.c (set_local_file): New function.
1120
1121 2009-04-11  Steven Schubiger  <stsc@member.fsf.org>
1122
1123         * init.c (initialize): Run a custom SYSTEM_WGETRC when
1124         provided as an environment variable.
1125
1126 2009-02-27  Gisle Vanem  <gvanem@broadpark.no>
1127
1128         * main.c (main): "freopen (NULL,.." causes an assertion in MSVC
1129         debug-mode.  I.e. NULL isn't legal. But the "CONOUT$" device works
1130         fine.
1131
1132 2009-02-27  Steven Schubiger  <stsc@member.fsf.org>
1133
1134         * ftp.c (ftp_loop_internal): Don't claim for FTP retrievals
1135         when writing to standard output either that the document
1136         has been saved. Addresses bug #20520 again.
1137
1138 2009-02-21  Steven Schubiger  <stsc@member.fsf.org>
1139
1140         * http.c (http_loop): When a document is written to
1141         standard output, don't claim it has been saved to a file.
1142         Addresses bug #20520.
1143
1144 2009-02-18  Steven Schubiger  <stsc@members.fsf.org>
1145
1146         * recur.h: Remove the dangling declaration for recursive_cleanup().
1147
1148 2009-02-01  Gerardo E. Gidoni  <gerel@gnu.org>
1149
1150         * main.c, recur.c, recur.h, res.c, retr.c, retr.h: restructured code to
1151         avoid multiple 'url_parse' calls.
1152
1153 2008-11-13  Micah Cowan  <micah@cowan.name>
1154
1155         * http.c (gethttp): Don't do anything when content-length >= our
1156         requested range.
1157
1158 2008-11-27  Saint Xavier  <wget@sxav.eu>
1159
1160         * http.c (gethttp): Move authentication code before filename
1161         allocation avoiding fallbacking on default filename because
1162         "Content-Disposition" header wasn't present before authentcation
1163         has been completed. Fixes bug #24862.
1164
1165 2008-11-16  Steven Schubiger  <stsc@members.fsf.org>
1166
1167         * main.c: Declare and initialize the numurls counter.
1168
1169         * ftp.c, http.c: Make the counter visible here and use it.
1170
1171         * options.h: Remove old declaration from options struct.
1172
1173 2008-11-15  Steven Schubiger  <stsc@members.fsf.org>
1174
1175         * init.c (defaults): Set default waitretry value.
1176
1177 2008-11-14  Steven Schubiger  <stsc@members.fsf.org>
1178
1179         * main.c (format_and_print_line): Use a custom format
1180         string for printing leading spaces.
1181
1182 2008-11-12  Micah Cowan  <micah@cowan.name>
1183
1184         * ftp-ls.c (ftp_index): HTML-escape dir name in title, h1, a:href.
1185
1186 2008-11-12  Alexander Belopolsky  <alexander.belopolsky@gmail.com>
1187
1188         * url.c, url.h (url_escape_unsafe_and_reserved): Added.
1189
1190         * ftp-ls.c (ftp_index): URL-escape, rather than HTML-escape, the
1191         filename appearing in the link.
1192
1193 2008-11-12  Steven Schubiger  <stsc@members.fsf.org>
1194
1195         * main.c (print_version): Hand the relevant
1196         xstrdup/xfree calls back to format_and_print_line().
1197
1198 2008-11-11  Steven Schubiger  <stsc@members.fsf.org>
1199
1200         * main.c (format_and_print_line): Move both the memory
1201         allocating and freeing bits upwards to print_version().
1202
1203 2008-11-10  Saint Xavier  <wget@sxav.eu>
1204
1205         * http.c: Make --auth-no-challenge works with user:pass@ in URLs.
1206
1207 2008-11-05  Micah Cowan  <micah@cowan.name>
1208
1209         * ftp.c (print_length): Should print humanized "size remaining"
1210         only when it's at least 1k.
1211
1212 2008-10-31  Micah Cowan  <micah@cowan.name>
1213
1214         * main.c (print_version): Add information about the mailing list.
1215
1216 2008-10-31  Alexander Drozdov  <dzal_mail@mtu-net.ru>
1217
1218         * retr.c (fd_read_hunk): Make assert deal with maxsize == 0.
1219
1220         * ftp-ls.c (clean_line): Prevent underflow on empty lines.
1221
1222 2008-10-26  Gisle Vanem  <gvanem@broadpark.no>
1223
1224         * main.c (format_and_print_line): Put variables on top of
1225         blocks (not all compilers are C99). Add an extra '\n' if
1226         SYSTEM_WGETRC isn't defined and printed.
1227
1228 2008-09-09  Gisle Vanem  <gvanem@broadpark.no>
1229
1230         * url.c (url_error): Use aprintf, not asprintf.
1231
1232 2008-09-09  Micah Cowan  <micah@cowan.name>
1233
1234         * init.c (home_dir): Save the calculated value for home,
1235         to avoid duplicated work on repeated calls.
1236         (wgetrc_file_name) [WINDOWS]: Define and initialize home var.
1237
1238         * build_info.c, main.c: Remove unnecessary extern vars
1239         system_wgetrc and locale_dir.
1240
1241         * main.c: Define program_name for lib/error.c.
1242
1243 2008-09-02  Gisle Vanem  <gvanem@broadpark.no>
1244
1245         * mswindows.h: Must ensure <stdio.h> is included before
1246         we redefine ?vsnprintf().
1247
1248 2008-08-08  Steven Schubiger  <stsc@members.fsf.org>
1249
1250         * main.c, utils.h: Removed some dead conditional DEBUG_MALLOC code.
1251
1252 2008-08-03  Micah Cowan  <micah@cowan.name>
1253
1254         * main.c (print_help): Added --default-page.
1255
1256 2008-08-01  Joao Ferreira  <joao@joaoff.com>
1257
1258         * init.c, main.c, options.h, url.c: Added option --default-page
1259         to support alternative default names for index.html
1260
1261 2008-08-03  Micah Cowan  <micah@cowan.name>
1262
1263         * build_info.c, css-url.c: #include wget.h, not config.h.
1264
1265 2008-08-03  Steven Schubiger  <stsc@members.fsf.org>
1266
1267         * url.c, url.h (url_error): Better messages for unsupported
1268         schemes, especially https.
1269
1270         * html-url.c, recur.c, retr.c: Adjust to new url_error
1271         invocation, and free result.
1272
1273 2008-07-17  Steven Schubiger  <stsc@members.fsf.org>
1274
1275         * retr.c (retrieve_from_file): When given an URL as input file,
1276         use it as baseref if none was specified and treat the input file
1277         as HTML if its content type is text/html.
1278
1279         * init.c (cleanup): Free the memory associated with the base
1280         option (when DEBUG_MALLOC is defined).
1281
1282 2008-07-02  Xavier Saint  <wget@sxav.eu>
1283
1284         * iri.c, iri.h  : New function idn_decode() to decode ASCII
1285         encoded hostname to the locale.
1286
1287         * host.c : Show hostname to be resolved both in locale and
1288         ASCII encoded.
1289
1290 2008-06-28  Steven Schubiger  <stsc@members.fsf.org>
1291
1292         * retr.c (retrieve_from_file): Allow for reading the links from
1293         an external file (HTTP/FTP).
1294
1295 2008-06-26  Xavier Saint  <wget@sxav.eu>
1296
1297         * iri.c, iri.h : New functions locale_to_utf8() and
1298         idn_encode() adding basic capabilities of IRI/IDN.
1299
1300         * url.c : Convert URLs from locale to UTF-8 allowing a basic
1301         support of IRI/IDN
1302
1303 2008-06-25  Steven Schubiger  <stsc@members.fsf.org>
1304
1305         * ftp.c (getftp): When spidering a FTP URL, emit a diagnostic
1306         message if the remote file exists.
1307
1308 2008-06-24  Steven Schubiger  <stsc@members.fsf.org>
1309
1310         * http.c (http_loop): Replace escnonprint() occurence with
1311         a quotearg_style() call.
1312
1313 2008-06-24  Micah Cowan  <micah@cowan.name>
1314
1315         * ftp-ls.c (ftp_index): Don't assume time_t* is compatible with
1316         long*. Fixes crash on Windows, and probably other systems.
1317
1318 2008-06-22  Steven Schubiger  <stsc@members.fsf.org>
1319
1320         * http.c: Explicitly initialize and deallocate the message
1321         string used by the -nv --spider functionality.
1322
1323 2008-06-22  Steven Schubiger  <schubiger@gmail.com>
1324
1325         * http.c: Make -nv --spider include the file's name when it
1326         exists.
1327
1328 2008-06-22  Micah Cowan  <micah@cowan.name>
1329
1330         * Makefile.am (version.c): Fixed version string invocation so it
1331         once again can't result in unterminated strings, made all the
1332         string vars pointers-to-const, and moved line lengths
1333         below 80 (in Makefile.am, not in version.c).
1334
1335 2008-06-19  Xavier Saint  <wget@sxav.eu>
1336
1337         * iri.c, iri.h : New function check_encoding_name() as
1338         a preliminary encoding name check.
1339
1340         * main.c, iri.c : Make use of check_encoding_name().
1341
1342 2008-06-19  Xavier Saint  <wget@sxav.eu>
1343
1344         * iri.c : Include missing stringprep.h file and add a
1345         cast.
1346
1347         * init.c : set a default initial value for opt.enable_iri,
1348         opt.locale and opt.encoding_remote.
1349
1350 2008-06-19  Xavier Saint  <wget@sxav.eu>
1351
1352         * iri.c, iri.h : Add a new function find_locale() to find
1353         out the local system encoding.
1354
1355         * main.c : Make use of find_locale().
1356
1357 2008-06-19  Xavier Saint  <wget@sxav.eu>
1358
1359         * html-url.c : Add "content-type" meta tag parsing for
1360         retrieving page encoding.
1361
1362         * iri.h : Make no-op version of parse_charset() return
1363         NULL.
1364
1365 2008-06-16  Micah Cowan  <micah@cowan.name>
1366
1367         * http.c (http_loop): When hstat.len is higher than the
1368         successfully completed content's length, but it's because we
1369         _set_ it that way, don't abort.
1370
1371 2008-06-14  Xavier Saint  <wget@sxav.eu>
1372
1373         * iri.c, iri.h : New files.
1374
1375         * Makefile.am : Add files iri.h and conditional iri.c.
1376
1377         * build_info.c : Add compiled feature "iri".
1378
1379         * http.c : include iri.h and parse charset from Content-Type
1380         header.
1381
1382         * init.c, main.c, options.h : if an options isn't supported
1383         at compiled time, don't get rid off it and show a dummy
1384         message instead if they are used.
1385
1386 2008-06-13  Micah Cowan  <micah@cowan.name>
1387
1388         * build_info.c: ENABLE_NTLM, not HAVE_NTLM; distinguish OpenSSL
1389         from "ssl".
1390
1391 2008-06-13  Madhusudan Hosaagrahara <com.gmail.hrmadhu>
1392
1393         * Makefile.am, main.c, init.c, init.h, build_info.c: Adds build
1394         information to the --version command line option. Fixes bug
1395         #20636.
1396
1397 2008-06-01  Micah Cowan  <micah@cowan.name>
1398
1399         * main.c [WINDOWS]: Reopen stdout in binary mode, when -O - is
1400         given.
1401
1402 2008-05-31 Micah Cowan  <micah@cowan.name>
1403
1404         * html-url.c, http.c: Avoid casts in a couple spots.
1405
1406 2008-05-30 Henri Häkkinen  <henux@users.sourceforge.net>
1407
1408         * cookies.c, ftp-basic.c, hash.c, html-url.c, http-ntlm.c, http.c,
1409         init.c, log.c, main.c, progress.c, ptimer.c, spider.c, url.c,
1410         utils.c: Minor changes to silence warnings when using -Wall.
1411
1412 2008-05-26  Steven Schubiger  <schubiger@gmail.com>
1413
1414         * ftp.c (getftp): Replace last remaining invocation of escnonprint
1415         with gnulib quote.
1416
1417 2008-05-19  Micah Cowan  <micah@cowan.name>
1418
1419         * main.c (main): Password prompt should be done only once (not
1420         once per argument), and should be done prior to the background
1421         fork.
1422
1423 2008-05-17  Steven Schubiger  <schubiger@gmail.com>
1424
1425         * init.c (defaults): Set the preferred IP family to `none' by
1426         default.
1427
1428 2008-05-17  Kenny Parnell  <k.parnell@gmail.com>
1429
1430         (cmd_spec_prefer_family): Initialize prefer_family to prefer_none.
1431
1432 2008-05-17  Micah Cowan  <micah@cowan.name>
1433
1434         * main.c (main): Handle Ctrl-D on command-line.
1435
1436 2008-05-15  Steven Schubiger  <schubiger@gmail.com>
1437
1438         * ftp.c (getftp): Verify that the file actually exists in FTP, by
1439         checking it against the listing.
1440
1441 2008-05-15  Micah Cowan  <micah@cowan.name>
1442
1443         * main.c (prompt_for_password): Use the quote module.
1444
1445 2008-05-14  Micah Cowan  <micah@cowan.name>
1446
1447         * ftp.c (ftp_retrieve_list): Symlinks and other filenames
1448         should be fully quoted.
1449
1450 2008-05-12  Micah Cowan  <micah@cowan.name>
1451
1452         * main.c (main): Downgrade "-N with -O" to a warning, and switch
1453         it off to avoid confusing messages.
1454
1455 2008-04-30  Micah Cowan  <micah@cowan.name>
1456
1457         * progress.c (create_image): Fix glitch where too many spaces are
1458         printed on lines that don't display the ETA, in multibyte
1459         locales.
1460
1461 2008-04-30  Steven Schubiger  <stsc@members.fsf.org>
1462
1463         * main.c (main): New code that handles prompting for passwords
1464         when specified explicitly via command-line option (using gnulib's
1465         getpass-gnu module).
1466         (main): Include the getpass header.
1467
1468         * init.c: Add "ask-password" to the list of recognized commands.
1469
1470         * options.h: Add an according boolean member to the options
1471         struct.
1472
1473         * sysdep.h: Comment the defines __EXTENSIONS__ and _GNU_SOURCE
1474         out, because they're now defined independently by config.h.
1475
1476 2008-04-27  Rabin Vincent  <rabin@rab.in>
1477
1478         * http.c (http_loop): Fix return for the case where we don't
1479         download a file because of -nc.
1480
1481 2008-04-27  Micah Cowan  <micah@cowan.name>
1482
1483         * url.c (path_simplify): Go back to allowing leading ".." in
1484         paths, but only for FTP URLs.
1485         (test_path_simplify): Add scheme-specificness to tests, adapt for
1486         mu_run_test.
1487
1488         * test.c (all_tests): Add test_path_simplify.
1489
1490         * main.c (main): Downgrade -r, -p with -O to a warning rather than
1491         an error; elaborate just a bit more for other -O combination
1492         cases.
1493
1494 2008-04-26  Micah Cowan  <micah@cowan.name>
1495
1496         * http.c (gethttp): Move proxy CONNECT handling to below the
1497         retry_with_auth label, to deal with properly reconnecting to
1498         proxies when we need to authenticate.
1499
1500 2008-04-25  Micah Cowan  <micah@cowan.name>
1501
1502         * Makefile.am: -I foo -> -Ifoo.
1503
1504 2008-04-24  Micah Cowan  <micah@cowan.name>
1505
1506         * main.c: Revised usage description of --convert-links to apply
1507         to CSS as well as to HTML.
1508
1509 2008-04-23  Micah Cowan  <micah@cowan.name>
1510
1511         * utils.c (test_dir_matches_p): Added a test for the case
1512         described in issue #20518.
1513
1514 2008-04-22  Micah Cowan  <micah@cowan.name>
1515
1516         * Makefile.am, css.lex, css.l: Renamed css.lex to css.l.
1517         * recur.c (retrieve_tree): Fix typo to allow text/css files to
1518         be parsed.
1519
1520 2008-04-22  Ted Mielczarek  <ted.mielczarek@gmail.com>
1521
1522         * css.lex, css-url.c, css-url.h: Added to implement support for
1523         parsing CSS in Wget.
1524         * convert.c: Convert links in CSS files, too.
1525         * convert.h (convert_options): Added for options link_css_p,
1526         link_expect_css.
1527         * convert.h: Added prototype for new register_css function.
1528         * html-parse.c: Added support for parsing element content, in
1529         addition to tag starts and ends.
1530         * html-parse.h (taginfo): Added delimiter fields for element
1531         content.
1532         * html-url.h: Added.
1533         * html-url.c (append_url): No longer internal-linkage only. Now
1534         takes position and size as explicit parameters.
1535         * html-url.c: Use new html-url.h header, add support for
1536         handling of "style" HTML attributes. Mark URIs obtained from
1537         link tags with rel="stylesheet" with link_expect_css. Adapt
1538         uses of append_url to supply the newly-added parameters for
1539         position and size.
1540         * http.c: Add detection for when the content-type is text/css;
1541         and ensure that such files have the ".css" filename extension,
1542         when --convert-links is active.
1543         * recur.h: Remove declarations for functions found in
1544         html-url.c (moved to html-url.h).
1545         * recur.c: Add support for culling links from CSS files, too,
1546         and tracking for when we're expecting the file to be CSS (even
1547         when its content type isn't text/css).
1548         * retr.c (retrieve_url): Add registration of CSS files.
1549         * wget.h: Added TEXTCSS to dt flags enum.
1550         * Makefile.am: Added css.lex, css-url.c, css-url.h, html-url.h
1551         to wget_SOURCES.
1552
1553 2008-04-22  Jim Paris  <jim@jtan.com>
1554
1555         * openssl.c (ssl_init): Enable combined certificate/key in
1556         single file (apparent regression from ~1.9). Resolves issue
1557         #22767.
1558
1559 2008-04-22  Steven Schubiger  <schubiger@gmail.com>
1560
1561         * http.c (print_response_line): Changed to make responses always
1562         be logged, even in --quiet mode, if --server-response was
1563         specified. This is to bring http.c's handling of the situation
1564         in line with ftp.c's.
1565
1566 2008-04-22  Pranab Shenoy  <pranab.loosinit.shenoy@gmail.com>
1567
1568         * init.c: Added test_commands_sorted unit test to check is
1569         commands are sorted.  Fixes bug #21245.
1570
1571         * test.c: Added test_commands_sorted to the test suite.
1572
1573 2008-04-22  Rabin Vincent  <rabin@rab.in>
1574
1575         * ftp.c (ftp_get_listing): Only remove .listing if it has been
1576         created.
1577
1578 2008-04-22  Alain Guibert  <alguibert+bts@free.fr>
1579
1580         * test.h (mu_run_test): Move declaration before statements, for
1581         C90 conformance. Fixes bug #22789.
1582
1583 2008-04-22  Mike Frysinger  <vapier@gentoo.org>
1584
1585         * Makefile.am: Move @LIBS@ after other libraries, for better
1586         static-linking support. Fixes bug #22143.
1587
1588 2008-04-16  Steven Schubiger  <schubiger@gmail.com>
1589
1590         * ftp.c: Use Gnulib's quote function for printing filenames and
1591         such.
1592         * connect.c: Likewise.
1593         * convert.c: Likewise.
1594         * cookies.c: Likewise.
1595         * ftp-opie.c: Likewise.
1596         * gnutls.c: Likewise.
1597         * init.c: Likewise.
1598         * log.c: Likewise.
1599         * mswindows.c: Likewise.
1600         * openssl.c: Likewise.
1601         * progress.c: Likewise.
1602         * recur.c: Likewise.
1603         * res.c: Likewise.
1604         * utils.c: Likewise.
1605
1606 2008-04-16  Steven Schubiger  <schubiger@gmail.com>
1607
1608         * sysdep.h: Comment the defines __EXTENSIONS__ and _GNU_SOURCE
1609         out, because they're now defined independently by config.h.
1610
1611 2008-04-14  Steven Schubiger  <schubiger@gmail.com>
1612
1613         * http.c: Use Gnulib's quote function for printing filenames and
1614         such.
1615         * wget.h: #include "quote.h".
1616
1617 2008-04-12  Rabin Vincent  <rabin@rab.in>
1618
1619         * mswindows.c (fake_fork_child): Don't create a logfile for
1620         --background when --quiet is used, but not --server-response.
1621         Fixes bug #20917.
1622
1623         * utils.c (fork_to_background): Likewise.
1624
1625 2008-04-12  Micah Cowan  <micah@cowan.name>
1626
1627         * utils.c (aprintf): Minor formatting changes to Alex's code (80-
1628         column limit, concatenated string literals, avoiding nesting
1629         levels), and removed invocation of free (since we're aborting
1630         anyway).
1631
1632 2008-04-11  Alexander Dergachev  <cy6erbr4in@gmail.com>
1633
1634         * utils.c (aprintf): Now we are setting limits (1 Mb) for text
1635         buffer when we use non-C99 vsnprintf.
1636
1637 2008-04-11  Micah Cowan  <micah@cowan.name>
1638
1639         * ftp.c (getftp, ftp_loop_internal): Don't append to an existing
1640         .listing when --continue is used.  Fixes bug #22825. Thanks to
1641         Rabin Vincent <rabin@rab.in> for pointing the way with a
1642         suggested fix!
1643
1644 2008-04-10  Alexander Dergachev  <cy6erbr4in@gmail.com>
1645
1646         * xmalloc.c, xmalloc.h (memfatal): Now exported; accepts an
1647         "unknown" value for the attempted allocation size.
1648         * utils.c (aprintf): Now calls memfatal, instead of aborting.
1649
1650 2008-03-19  Micah Cowan  <micah@cowan.name>
1651
1652         * utils.c (test_dir_matches_p): More tests related for
1653         dir_matches_p.
1654
1655 2008-03-17  Micah Cowan  <micah@cowan.name>
1656
1657         * connect.c: Include sys/time.h to support use of the select
1658         function on older systems.
1659
1660 2008-02-11  Benno Schulenberg  <bensberg@justemail.net>
1661
1662         * http.c: More accurate and descriptive messages for when a file
1663         won't be retrieved during spider-mode.
1664
1665 2008-02-10  Micah Cowan  <micah@cowan.name>
1666
1667         * http.c: Added existence_checked member to the http_stat
1668         struct.
1669         (gethttp): Mark hs->existence_checked when we've checked whether
1670         a file-to-download exists; so we don't check it again if the
1671         connection gets lost (and potentially pick a new "unique" name).
1672         This fixes bug 22251.
1673         * progress.c (create_image): Add space for an extra column in
1674         the "eta" portion of the progress bar image; to deal with
1675         too-long Czech translation.
1676         * main.c, http.c, init.c: Added --auth-no-challenge option, to
1677         bring back 1.10.2 unsafe auth behavior when needed. This fixes
1678         bug #22242.
1679
1680 2008-02-07  Micah Cowan  <micah@cowan.name>
1681
1682         * progress.c (create_image): Remove assertion on exceeding
1683         screen width, which given the less-than-robust code there, can
1684         be broken by a number of factors (such as large file downloads).
1685
1686 2008-02-06  Micah Cowan  <micah@cowan.name>
1687
1688         * progress.c (countcols): Use strlen() when mbtowc or wcwidth
1689         not available (or not using NLS).
1690         * utils.c: Ensure we use single-byte separators when not doing
1691         NLS progress-bars.
1692         * wget.h: Determine whether to use NLS for progress-bars, based
1693         on whether wcwidth and mbtowc are available.
1694
1695 2008-02-03  Micah Cowan  <micah@cowan.name>
1696
1697         * progress.c (create_image): Use number of characters/columns
1698         consumed, rather than number of bytes, to determine how much of
1699         a line we've used. Fixes assertion errors and field alignment
1700         bugs (#22161, #20481)
1701         (get_eta, count_cols): Added to support the changes for
1702         create_image.
1703         * http.c (http_loop): Put no-clobber logic back into http_loop,
1704         before starting to fetch, for when we're not doing
1705         content-disposition.
1706
1707 2008-01-31  Micah Cowan  <micah@cowan.name>
1708
1709         * http.c (gethttp): Don't derive hs->contlen from possibly
1710         invalid/missing Content-Length; instead, get the appropriate
1711         value from the Content-Range header values.
1712         (parse_content_range): Handle '*' instance-length field.
1713
1714 2008-01-25  Micah Cowan  <micah@cowan.name>
1715
1716         * main.c: Added notes to translators regarding (C), diacritics
1717         in names.
1718         * Makefile.am, cmpt.c, connect.c, connect.h, convert.c,
1719         cookies.c, cookies.h, ftp-basic.c, ftp-ls.c, ftp-opie.c, ftp.c,
1720         ftp.h, gen-md5.c, gen-md5.h, gnutls.c, hash.c, hash.h, host.c,
1721         host.h, html-parse.c, html-parse.h, html-url.c, http-ntlm.c,
1722         http-ntlm.h, http.c, http.h, init.c, init.h, log.c, log.h,
1723         main.c, mswindows.c, mswindows.h, netrc.c, netrc.h, openssl.c,
1724         options.h, progress.c, progress.h, ptimer.c, ptimer.h, recur.c,
1725         recur.h, res.c, res.h, retr.c, retr.h, spider.c, spider.h,
1726         ssl.h, sysdep.h, test.c, test.h, url.c, url.h, utils.c,
1727         utils.h, wget.h, xmalloc.c, xmalloc.h: Updated copyright year.
1728
1729 2007-12-10  Micah Cowan  <micah@cowan.name>
1730
1731         * main.c: The option is --content-disposition, not
1732         --no-content-disposition (at the moment).
1733
1734 2007-12-08  Hrvoje Niksic  <hniksic@xemacs.org>
1735
1736         * ftp.c (ftp_retrieve_glob): Print both arguments of fnmatch in
1737         fnmatch error message.
1738         (ftp_retrieve_glob): Don't match with fnmatch if we're only
1739         supposed to get one file.
1740
1741 2007-12-07  Micah Cowan  <micah@cowan.name>
1742
1743         * Makefile.am: Plug in vars to include stuff from
1744         $(top_srcdir)/md5 when appropriate.
1745
1746 2007-12-05  Micah Cowan  <micah@cowan.name>
1747
1748         * utils.c (subdir_p): Handle the case where d1 is "".
1749         * convert.c (convert_all_links): Don't return without
1750         deallocating timer.
1751
1752 2007-11-28  Micah Cowan  <micah@cowan.name>
1753
1754         * Makefile.am, cmpt.c, connect.c, connect.h, convert.c,
1755         convert.h, cookies.c, cookies.h, ftp-basic.c, ftp-ls.c,
1756         ftp-opie.c, ftp.c, ftp.h, gen-md5.c, gen-md5.h, gnutls.c,
1757         hash.c, hash.h, host.c, host.h, html-parse.c, html-parse.h,
1758         html-url.c, http-ntlm.c, http-ntlm.h, http.c, http.h, init.c,
1759         init.h, log.c, log.h, main.c, mswindows.c, mswindows.h,
1760         netrc.c, netrc.h, openssl.c, options.h, progress.c, progress.h,
1761         ptimer.c, ptimer.h, recur.c, recur.h, res.c, res.h, retr.c,
1762         retr.h, safe-ctype.c, safe-ctype.h, spider.c, spider.h, ssl.h,
1763         sysdep.h, test.c, test.h, url.c, url.h, utils.c, utils.h,
1764         wget.h, xmalloc.c, xmalloc.h: Updated license exception for
1765         OpenSSL, per the SFLC.
1766
1767 2007-10-30  Micah Cowan  <micah@cowan.name>
1768
1769         * main.c (main): Declare argv parameter as char **argv, rather
1770         than char *const *argv. This fixes usage of getopt_long,
1771         regardless of whether getopt_long has a constified argv or not.
1772
1773 2007-10-22  Gisle Vanem  <gvanem@broadpark.no>
1774
1775         * mswindows.c: Move INHIBIT_WRAP macro definition up with wget.h
1776         inclusion.
1777
1778 2007-10-18  Steven Schweda  <sms@antinode.org>
1779
1780         * sysdep.h: #include <stdint.h> as well as <inttypes.h>, to work
1781         around a glitch on Tru64 systems.
1782
1783 2007-10-18  Micah Cowan  <micah@cowan.name>
1784
1785         * Makefile.am: version.c should not be distributed. Removed
1786         config-post.h. Add version.c dependency and gnulib include path
1787         for libunittest.a.
1788         * sysdep.h: Got contents of config-post.h
1789         * config-post.h: Removed.
1790         * wget.h: #include "config.h".
1791         * alloca.c, cmpt.c, connect.c, convert.c, cookies.c,
1792         ftp-basic.c, ftp-ls.c, ftp-opie.c, ftp.c, gen-md5.c, gnutls.c,
1793         hash.c, host.c, html-parse.c, html-url.c, http-ntlm.c, http.c,
1794         init.c, log.c, main.c, mswindows.c, netrc.c, openssl.c,
1795         progress.c, ptimer.c, recur.c, res.c, retr.c, spider.c, url.c,
1796         utils.c, xmalloc.c: Use wget.h at very top, and instead of
1797         config.h.
1798
1799 2007-10-15  Micah Cowan  <micah@cowan.name>
1800
1801         * Makefile.am: Remove intermediary hg-id file generation, make
1802         version.c-generation more portable.
1803
1804 2007-10-14  Micah Cowan  <micah@cowan.name>
1805
1806         * cmpt.c, cookies.c, ftp-basic.c, ftp-ls.c, ftp.c, hash.c,
1807         host.c, html-parse.c, html-url.c, http-ntlm.c, http.c, init.c,
1808         log.c, main.c, netrc.c, openssl.c, res.c, url.c, utils.c,
1809         wget.h: Replace uses of ISSPACE, etc with c_isspace, etc.
1810         * gnu-md5.c, gnu-md5.h: Removed, in deference to gnulib.
1811         * Makefile.am: Removed gnu-md5.h from wget_SOURCES.
1812         * gen-md5.c: Changed #inclusion of gnu-md5.h to md5.h (gnulib's).
1813         * recur.c (download_child_p): Print error if unlink of
1814         robots.txt fails.
1815         * main.c (main): --spider or --delete-after now implies
1816         --no-directories (thanks, Josh Williams).
1817
1818 2007-10-14  Joshua David Williams  <yurimxpxman@gmail.com>
1819
1820         * recur.c (download_child_p): Remove robots.txt if
1821         --delete-after or --spider is on.
1822
1823 2007-10-13  Micah Cowan  <micah@cowan.name>
1824
1825         * Makefile.am: Make version.c depend on Wget dependencies (source
1826         files, plus such things as LIBOBJS so we get things like
1827         http-ntlm.c). Removed getopt.[ch], as we're now using gnulib for
1828         these.
1829
1830 2007-10-10  Micah Cowan  <micah@cowan.name>
1831
1832         * http-ntlm.c: Include openssl/opensslv.h explicitly, instead of
1833         hoping it'll be included by accident in openssl/des.h.
1834
1835 2007-10-09  Gisle Vanem  <gvanem@broadpark.no>
1836
1837         * mswindows.c: 'argc' and 'argv' in 'windows_main()' are no longer
1838         needed.  Hence simply the prototype. Free 'exec_name' at exit.
1839
1840 2007-10-09  Micah Cowan  <micah@cowan.name>
1841
1842         * gettext.h: Imported from /usr/share/gettext, fuller handling
1843         of --disable-nls.
1844         * wget.h: Remove logic for handling lack of NLS (now in
1845         gettext.h).
1846         * main.c: Use gettext's ENABLE_NLS rather than HAVE_NLS.
1847         * Makefile.am: added @LIBINTL@ to LIBS (though it probably
1848         belongs in LDADD, along with everything else currently assigned
1849         to LIBS).
1850
1851 2007-10-08  Micah Cowan  <micah@cowan.name>
1852
1853         * http.c (http_loop): Add send_head_first conditional back
1854         around code that needs it, but not around the last-modified
1855         header-parsing stuff this time. Removed no-longer-useful (was it
1856         ever?) restart_loop boolean, continuing unconditionally at end
1857         of send_head_first conditional block (if we haven't jumped out).
1858
1859 2007-10-04  Micah Cowan  <micah@cowan.name>
1860
1861         * http.c (http_loop): We've got_name if content_disposition
1862         support isn't on; make sure we continue properly in that case,
1863         even though we're not sending HEAD.
1864         * Makefile.in: Removed, replaced by Makefile.am.
1865         * Makefile.am: Converted from Makefile.in.
1866
1867 2007-10-02  Gisle Vanem  <gvanem@broadpark.no>
1868
1869         * ftp.c: Use "_listing" for MSDOS (".listing" is illegal).
1870
1871         * url.c: Update comment for 'filechr_not_windows'.
1872
1873         * utils.c: Include <process.h> for 'getpid()' on Watcom.
1874
1875 2007-10-02  Micah Cowan  <micah@cowan.name>
1876
1877         * ftp.c (getftp, ftp_loop_internal), http.c (http_loop), main
1878         (main): Use datetime_str instead of time_str, for those who have
1879         potentially long-running sessions. Based on suggestions by Saso
1880         Tomat <miskox@hotmail.com> and Steven M. Schweda
1881         <sms@antinode.org>.
1882         * http.c (gethttp): Warn about host lookup failures. Adjusted
1883         from Stephen Gildea's patch.
1884
1885 2007-10-02  Stephen Gildea  <stepheng+wget@gildea.com>
1886
1887         * connect.c (connect_to_host): Warn about host lookup failures.
1888
1889 2007-09-25  Micah Cowan  <micah@cowan.name>
1890
1891         * Makefile.in: Use EXEEXT instead of exeext.
1892
1893 2007-09-24  Gisle Vanem  <giva@bgnett.no>
1894
1895         * connect.c, init.c, main.c, openssl.c, options.h, sysdep.h,
1896         url.c, utils.c: Added support for building on MS-DOS.
1897
1898 2007-09-24  Jochen Roderburg  <roderburg@uni-koeln.de>
1899
1900         * http.c (http_zero): Remove no-longer-used local_size variable.
1901         Fixes bug #21057.
1902
1903 2007-09-12  Micah Cowan  <micah@cowan.name>
1904
1905         * http.c (http_loop): Remove send_head_first from condition for
1906         parsing timestamp.
1907
1908 2007-08-29  Micah Cowan  <micah@cowan.name>
1909
1910         * openssl.c (ssl_init): Re un-const-ified the meth local
1911         variable, to match current versions of openssl.
1912         * spider.c: Removed visited_url function, as it may be very
1913         inefficient.
1914         (print_broken_links): Removed traversal of referrers, until such
1915         time as a more efficient implementation can be written.
1916         * spider.h: Replaced declaration of visited_url with an
1917         empty-bodied, function-like macro.
1918
1919 2007-08-27  Gisle Vanem  <giva@bgnett.no>
1920
1921         * mswindows.c (run_with_timeout): Ensure that the correct
1922         conversion specification is used for the return result of
1923         the GetLastError function.
1924         * getopt.c: Fix missing (but, accidentally, legal) comment
1925         delimiter after licensing text.
1926         * recur.c (retrieve_tree): Inserted missing cast for strip_auth.
1927         Includes adjustment by Ralf Wildenhues.
1928         * openssl.c (ssl_init): const-ified the meth local variable.
1929         * main.c: Include all the static function definitions in the
1930         "#ifndef TESTING" clause, leaving just the definitions for
1931         exec_name (not set), and opt.
1932         * utils.c (run_with_timeout): Now returns bool, to align with
1933         declaration in utils.h.
1934
1935 2007-08-27  Micah Cowan  <micah@cowan.name>
1936
1937         * wget.h: Added macro replacement for ngettext, for environs
1938         that lack NLS.
1939
1940 2007-08-26  Micah Cowan  <micah@cowan.name>
1941
1942         * spider.c (print_broken_links): Fixed incorrect plurals msgid
1943         usage, switched to use ngettext function.
1944
1945 2007-08-24  Micah Cowan  <micah@cowan.name>
1946
1947         * http.c (http_loop): Introduced time_came_from_head boolean
1948         flag, to help avoid parsing the same Last-Modified header twice.
1949         Replaced spidering returns of RETRUNNEEDED for some situations,
1950         to RETROK, as otherwise it will be interpreted as an error.
1951         RETRUNNEEDED appears never to be referenced outside of
1952         http.c (and wget.h), and, when returned by gethttp, is
1953         translated by http_loop to RETROK.
1954         * url.c (are_urls_equal): Don't call getchar_from_escaped_string
1955         if u2 is shorter than u1.
1956         (getchar_from_escaped_string): Don't decode reserved characters.
1957         Handle illegally appearing '%'s as literal '%'s. Ensure hex
1958         digits before attempting to decode.
1959         (test_are_urls_equal): Added tests to handle u2 shorter than u1,
1960         and %2f not treated the same as /.
1961         * spider.c (in_url_list_p): Don't call are_urls_equal if one of
1962         them is NULL.
1963
1964 2007-08-23  Joshua David Williams  <yurimxpxman@gmail.com>
1965
1966         * spider.c (in_url_list_p): Removed the bool verbose argument
1967
1968 2007-08-22  Mauro Tortonesi  <mauro@ferrara.linux.it>
1969
1970         * http.c (http_loop): Fall back to GET if HEAD fails with a 500 or 501
1971         error code.
1972
1973 2007-08-21  Mauro Tortonesi  <mauro@ferrara.linux.it>
1974
1975         * http.c (http_loop): Send preliminary HEAD request if -N is given and
1976         the destination file exists already.
1977
1978 2007-08-10  Mauro Tortonesi  <mauro@ferrara.linux.it>
1979
1980         * http.c (http_loop): Fixed HTTP HEAD requests logic when --spider is
1981         given.
1982
1983 2007-08-10  Ralf Wildenhues  <Ralf.Wildenhues@gmx.de>
1984
1985         * url.c (append_uri_pathel): Do not assume dest string to be
1986         zero-terminated.
1987         (test_append_uri_pathel): Terminate string to fix test failure.
1988
1989 2007-08-09  Ralf Wildenhues  <Ralf.Wildenhues@gmx.de>
1990
1991         * url.c (url_string): Use comparison, not assignment, in
1992         check for auth_mode == URL_AUTH_HIDE_PASSWD.
1993
1994 2007-08-09  Micah Cowan  <micah@cowan.name>
1995
1996         * http.c (http_loop): If we got a HEAD and then a GET, and the
1997         GET had a timestamp, use that one, not any we may have gotten
1998         from the HEAD.
1999
2000 2007-08-08  Micah Cowan  <micah@cowan.name>
2001
2002         * init.c (defaults): Content disposition will not be default,
2003         since it currently results in extra round-trips.
2004
2005 2007-07-31  Micah Cowan  <micah@cowan.name>
2006
2007         * http.c (gethttp): Set contlen = -1 when we encounter a
2008         negative-valued Content-Length header, so we don't consider it
2009         an internal error later on and call abort().
2010
2011 2007-07-29  Micah Cowan  <micah@cowan.name>
2012
2013         * url.h, url.c (url_string): Replaced bool arg of the url_string
2014         function with enum url_auth_mode, with added option to
2015         completely remove user/pass auth information.
2016         * http.c, ftp.c, url.c, recur.c: Adapted call to url_string
2017         function to fit new usage.
2018         * recur.c (retrieve_tree): Remove auth info from Referer header.
2019
2020 2007-07-28  Micah Cowan  <micah@cowan.name>
2021
2022         * options.h, init.c, retr.c, main.c: renamed opt maxredirect
2023         field to max_redirect, for improved consistency.
2024         * init.c: changed max_redirect parser from cmd_number_inf to
2025         cmd_number, as infinite redirects may not be appropriate.
2026         Alternatively, if cmd_number_inf should be used, then
2027         opt.max_redirect's value should be checked a bit differently in
2028         retr.c, to allow for the "infinite" meaning of zero.
2029
2030 2007-07-25  Micah Cowan  <micah@cowan.name>
2031
2032         * http.c (create_authorization_line)
2033         (basic_authentication_encode, known_authentication_scheme_p)
2034         (load_cookies): Moved declarations up.
2035         (basic_authed_hosts): Added. Tracks what hosts have issued Basic
2036         challenge and been given the global username, password.
2037         (maybe_send_basic_creds): Added. Sends Basic creds for hosts that
2038         have issued Basic challenges.
2039         (register_basic_auth_host): Added. Instantiates
2040         basic_authed_hosts if necessary, then registers the host that
2041         has issued a challenge.
2042         (gethttp) <auth>: Only send authentication credentials after
2043         we've received a challenge from that host. This is a stop-gap
2044         fix until a proper fix can be implemented; still isn't quite
2045         right, as we should only be sending credentials automatically
2046         for authenticated paths and below, and not for the entire host.
2047
2048 2007-07-16  Joshua David Williams  <yurimxpxman@gmail.com>
2049
2050         * options.h: added maxredirect to options struct
2051         * init.c: added maxredirect to list of variables
2052         * retr.c (retrieve_url): replaced MAX_REDIRECTIONS with opt.maxredirect
2053         * main.c: added option --max-redirect
2054
2055 2007-07-16  Joshua David Williams  <yurimxpxman@gmail.com>
2056
2057         * test.h: tests made more verbose; now displays the name
2058         of each test run.
2059
2060 2007-07-10  Mauro Tortonesi  <mauro@ferrara.linux.it>
2061
2062         * http.c (http_loop): Fixed the HTTP requests logic. Now it skips the
2063         preliminary HEAD request if either -O or --no-content-disposition are
2064         given, and neither --spider and -N are given.
2065
2066 2007-07-05  Micah Cowan  <micah@cowan.name>
2067
2068         * cmpt.c, connect.c, connect.h, convert.c, convert.h:
2069         * cookies.c, cookies.h, ftp-basic.c, ftp.c, ftp.h, ftp-ls.c:
2070         * ftp-opie.c, gen-md5.c, gen-md5.h, getopt.c, getopt.h, gnu-md5.c:
2071         * gnu-md5.h, gnutls.c, hash.c, hash.h, host.c, host.h:
2072         * html-parse.c, html-parse.h, html-url.c, http.c, http.h:
2073         * http-ntlm.c, http-ntlm.h, init.c, init.h, log.c, log.h, main.c:
2074         * Makefile.in, mswindows.c, mswindows.h, netrc.c, netrc.h:
2075         * openssl.c, options.h, progress.c, progress.h, ptimer.c:
2076         * ptimer.h, recur.c, recur.h, res.c, res.h, retr.c, retr.h:
2077         * safe-ctype.c, safe-ctype.h, spider.c, spider.h, ssl.h, sysdep.h:
2078         * test.c, test.h, url.c, url.h, utils.c, utils.h, wget.h:
2079         * xmalloc.c, xmalloc.h:
2080         Updated GPL reference to version 3 or later, removed FSF
2081         address.
2082
2083 2007-07-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
2084
2085         * http.c (http_loop): Skip HEAD request and start immediately with GET
2086         if -O is given.
2087
2088 2007-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
2089
2090         * http.c (print_server_response): Escape non-printable characters
2091         in server respone.
2092
2093 2007-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
2094
2095         * netrc.c: Don't make netrc_list static, as it prevents
2096         compilation with DEBUG_MALLOC.
2097
2098         * utils.c (aprintf): Don't use vasprintf when DEBUG_MALLOC is
2099         requested because, in that case, we want the calls to malloc to be
2100         coming from us.
2101
2102 2007-01-23  Hrvoje Niksic  <hniksic@xemacs.org>
2103
2104         * cookies.c (parse_set_cookie): Would erroneously discard cookies
2105         with unparsable expiry time.
2106
2107 2007-01-23  Hrvoje Niksic  <hniksic@xemacs.org>
2108
2109         * progress.c (create_image): Check for ETA overflow.
2110         (print_row_stats): Ditto.
2111
2112 2007-01-09  Mauro Tortonesi  <mauro@ferrara.linux.it>
2113
2114         * init.c (cmd_spec_prefer_family): Small fix to get rid of a gcc
2115         warning about strict-aliasing violation.
2116
2117 2007-01-09  Steven M. Schweda  <sms@antinode.org>
2118
2119         * ftp-basic.c (ftp_syst): Fixed segfault if response text is missing.
2120
2121 2006-12-29  Gisle Vanem  <giva@bgnett.no>
2122
2123         * mswindows.c: Avoid a warning if 'ws_hangup()' is unused.
2124
2125 2006-12-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
2126
2127         * http.c (parse_content_disposition): Consider directory prefix, if
2128         specified.
2129
2130 2006-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
2131
2132         * retr.c (retrieve_from_file): Ditto.
2133         (url_uses_proxy): New function.
2134
2135         * main.c (main): Don't check for opt.use_proxy when deciding
2136         whether to call retrieve_url or retrieve_tree; check whether the
2137         proxy would be used for *this* URL.
2138
2139 2006-10-17  Mike Grant  <mggr@pml.ac.uk>
2140
2141         * ftp.c (ftp_loop_internal): Would incorrectly skip changing
2142         working directory when retrying after a failed FTP attempt.
2143         Originally reported by Nate Eldredge.
2144
2145 2006-10-12  Mauro Tortonesi  <mauro@ferrara.linux.it>
2146
2147         * convert.c (downloaded_file): Fixed bug which used to break -E -k -K
2148         mode.
2149
2150 2006-08-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
2151
2152         * http.c: #include'd spider.h to get rid of compiler warnings.
2153
2154         * main.c: Ditto.
2155
2156         * recur.c: Ditto.
2157
2158 2006-08-24  Mauro Tortonesi  <mauro@ferrara.linux.it>
2159
2160         * Makefile.in: Added spider.c to the list of files to compile and
2161         spider.h to the list of header files. Updated copyright information.
2162
2163         * http.c: Major changes to recursive spider mode. Now for every
2164         resource we are supposed to check, we send a HEAD request to find out
2165         if it exists. If the resource is a HTML file, we retrieve it and parse
2166         it to discover links to other resources.
2167
2168         * recur.c: Ditto.
2169
2170         * res.c (res_retrieve_file): Disable opt.timestamping and opt.spider
2171         when retrieving robots.txt. Updated copyright information.
2172
2173         * convert.c: Moved code tracking broken links to spider.c.
2174
2175         * convert.h: Ditto.
2176
2177         * spider.c: Created new file to keep track of visited URLs in spider
2178         mode.
2179
2180         * spider.h: Ditto.
2181
2182 2006-08-21  Mauro Tortonesi  <mauro@ferrara.linux.it>
2183
2184         * http.c: Fixed timestamping-related bug.
2185
2186 2006-08-16  Mauro Tortonesi  <mauro@ferrara.linux.it>
2187
2188         * http.c: Fixed bug which broke --continue feature. Now if -c is
2189         given, http_loop sends a HEAD request to find out the destination
2190         filename before resuming download.
2191
2192 2006-08-08  Hrvoje Niksic  <hniksic@xemacs.org>
2193
2194         * utils.c (datetime_str): Avoid code repetition with time_str.
2195
2196 2006-07-21  Hrvoje Niksic  <hniksic@xemacs.org>
2197
2198         * init.c (commands): Correctly place "contentdisposition".
2199
2200 2006-07-14  Mauro Tortonesi  <mauro@ferrara.linux.it>
2201
2202         * sysdep.h: If intptr_t isn't defined, simply typedef it to long.
2203
2204         * http.c: Added explicit cast to int in logprintf call to remove
2205         compiler warnings on 64-bit platforms.
2206
2207         * connect.c: Added a few casts to intptr_t to remove compiler warnings
2208         on 64-bit platforms.
2209
2210         * main.c: Disable -r, -p and -N when -O is used. Disable -k when -O is
2211         used and multiple URLs are given. Update maintainer information.
2212
2213         * all: Update copyright information.
2214
2215 2006-07-10  KJKHyperion  <hackbunny@reactos.com>
2216
2217         * url.c (filechr_table): Mark DEL (0x7f) as a control character
2218         and | as a character Windows can't handle.
2219
2220 2006-06-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
2221
2222         * res.c: Implemented is_robots_txt_url function for detection of
2223         robots.txt URLs and related test routine.
2224
2225         * res.h: Ditto.
2226
2227         * url.c: Implemented are_urls_equal function for URL comparison and
2228         related testing routine.
2229
2230         * url.h: Ditto.
2231
2232         * convert.c: Fixes for recursive spider mode: don't consider
2233         non-existing robots.txt as a broken link, and use are_urls_equal
2234         instead of strcasecmp for referrer URLs comparison.
2235
2236         * test.c: Call tests routines for are_urls_equal and
2237         is_robots_txt_url.
2238
2239 2006-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2240
2241         * wget.h (wgint): Typedef to any 64-bit (or larger) type we can
2242         find, not necessarily off_t or long.
2243
2244 2006-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2245
2246         * cmpt.c (strtoll): Check for overflow and underflow without
2247         relying on (technically) undefined behavior.  Don't assume that
2248         strtoll_type is 64 bits wide.
2249
2250 2006-06-21  Hrvoje Niksic  <hniksic@xemacs.org>
2251
2252         * utils.c (base64_encode): Cast void pointer to char * before
2253         doing arithmetic.
2254
2255 2006-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
2256
2257         * utils.c (base64_encode): Made TBL const.
2258         (base64_decode): Made the base64_char_to_value table const.
2259
2260 2006-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
2261
2262         * utils.c (base64_encode): Made the DATA pointer void * so the
2263         callers can pass it any kind of pointer (including both signed and
2264         unsigned char pointers).
2265         (base64_decode): Ditto for DEST.
2266
2267 2006-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
2268
2269         * utils.c (base64_encode): Would read past end of STR.
2270         Reported by rick@eckle.org.
2271
2272 2006-06-13  Mauro Tortonesi  <mauro@ferrara.linux.it>
2273
2274         * options.h (struct options): Introduced member restrict_files_case to
2275         keep track of preferences on character case restrictions for
2276         filenames.
2277
2278         * init.c: Modified defaults and cmd_spec_restrict_file_names to
2279         support character case restrictions for filenames. Added
2280         test_cmd_spec_restrict_file_names unit test.
2281
2282         * url.c: Modified append_uri_pathel to support character case
2283         restrictions for filenames. Added test_append_uri_pathel unit test.
2284
2285         * test.c: Added test_cmd_spec_restrict_file_names and
2286         test_append_uri_pathel to the list of unit tests to run.
2287
2288 2006-06-12  Mauro Tortonesi  <mauro@ferrara.linux.it>
2289
2290         * retr.c (retrieve_from_file): Use retrieve_tree and automatically
2291         turn on opt.follow_ftp in case of recursive FTP retrieval through HTTP
2292         proxy.
2293
2294         * main.c: Automatically turn on opt.follow_ftp in case of recursive
2295         FTP retrieval through HTTP proxy.
2296
2297 2006-06-12  Tony Lewis  <tlewis@exelana.com>
2298
2299         * main.c: Improved CHEN Peng's patch by proposing a simpler logic.
2300
2301 2006-06-12  CHEN Peng  <chenpeng@alumni.nus.edu.sg>
2302
2303         * main.c: Use retrieve_tree in case of recursive FTP retrieval through
2304         HTTP proxy.
2305
2306 2006-05-25  Mauro Tortonesi  <mauro@ferrara.linux.it>
2307
2308         * convert.c: Added mechanisms to keep track broken links.
2309
2310         * convert.h: Ditto.
2311
2312         * wget.h: Reordered and enumerated uerr_t constants.
2313
2314         * recur.c: Fixes to support recursive spider mode.
2315
2316         * http.c: Ditto.
2317
2318         * main.c: Print broken links in case of recursive spider mode.
2319
2320         * retr.c: Changed interface of retrieve_url.
2321
2322         * retr.h: Ditto.
2323
2324         * ftp.c: Changed interface of ftp_loop.
2325
2326         * ftp.h: Ditto.
2327
2328         * res.c: Minor change to reflect changes in interface of retrieve_url.
2329
2330 2006-05-18  Lawrence Jones  <lawrence.jones@ugs.com>
2331
2332         * ftp-ls.c (ftp_parse_unix_ls): Correct size parsing, add size
2333         and filename debugging output.
2334
2335 2006-04-28  Mauro Tortonesi  <mauro@ferrara.linux.it>
2336
2337         * http.c: If Content-Disposition header is present, allow unique
2338         filename generation unless -nc is given. Permit to disable parsing of
2339         Content-Disposition header.
2340
2341         * options.h: Added option --no-content-disposition to disable parsing
2342         of HTTP Content-Disposition header.
2343
2344         * init.c: Ditto.
2345
2346         * main.c: Ditto.
2347
2348 2006-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
2349
2350         * hash.c (TOLOWER): Wrap macro arg in parentheses.
2351
2352 2006-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
2353
2354         * http.c (parse_content_disposition): Doc fix.
2355
2356 2006-03-15  Mauro Tortonesi  <mauro@ferrara.linux.it>
2357
2358         * utils.c: Restricted operational semantics of frontcmp and proclist
2359         from generic strings to directory names and them to subdir_p and
2360         dir_matches_p respectively.  Applied George Ogata's one line patch to
2361         restrict algorithm of subdir_p to full directory name matching.  Added
2362         testcases for subdir_p and dir_matches_p.
2363
2364         * utils.h: Changed all frontcmp occurrences to subdir_p.
2365
2366         * recur.c: Ditto.
2367
2368         * test.c: Changed type returned by test functions from char * to const
2369         char *.  Added test_subdir_p and test_dir_matches_p to the list of
2370         tests to run.
2371
2372         * http.c (test_parse_content_disposition): Changed return type from
2373         char * to const char *.
2374
2375 2006-03-14  Mauro Tortonesi  <mauro@ferrara.linux.it>
2376
2377         * recur.c (struct queue_element): Changed type of html_allowed member
2378         to bool.
2379
2380 2006-03-09  Mauro Tortonesi  <mauro@ferrara.linux.it>
2381
2382         * ftp.c (ftp_list): Try `LIST -a' command first and revert to `LIST'
2383         in case of failure.
2384
2385 2006-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
2386
2387         * hash.c (TOLOWER): Fix definition when STANDALONE.
2388         Reported by Beni Serfaty.
2389
2390 2006-03-02  Mauro Tortonesi  <mauro@ferrara.linux.it>
2391
2392         * http.c (http_loop): Fixed recursive HTTP retrieval.
2393
2394 2006-02-28  Hrvoje Niksic  <hniksic@xemacs.org>
2395
2396         * http.c (extract_param): Declare extern so it can be used from
2397         other files.
2398         (extract_param): Return error for empty name.
2399
2400 2006-02-28  Hrvoje Niksic  <hniksic@xemacs.org>
2401
2402         * url.c (find_last_char): Define in terms of memrchr.
2403
2404         * cmpt.c (memrchr): Define it on systems that don't have it.
2405
2406         * http.c (extract_param): New function for parsing header values
2407         with parameters.
2408         (parse_content_disposition): Use it.  Don't allow slashes and
2409         backslashes in the file name.
2410
2411 2006-02-27  Hrvoje Niksic  <hniksic@xemacs.org>
2412
2413         * url.c (path_simplify): Don't preserve ".." at beginning of path.
2414         Suggested by Frank McCown.
2415
2416 2006-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
2417
2418         * http.c (gethttp): Only use FILE.N.html if FILE.html exists.
2419
2420 2006-02-09  Hrvoje Niksic  <hniksic@xemacs.org>
2421
2422         * mswindows.c (run_with_timeout): Made thread_hnd non-static.
2423
2424 2006-02-05  Hrvoje Niksic  <hniksic@xemacs.org>
2425
2426         * retr.c (sleep_between_retrievals): Sleep at a minimum of 1/2 of
2427         the specified wait period.
2428
2429 2006-02-03  Hrvoje Niksic  <hniksic@xemacs.org>
2430
2431         * utils.c (number_to_string): Don't use sprintf for printing
2432         WGINT_MIN; simply divide n by 10 and defer printing the last
2433         digit.
2434         (number_to_string): Removed the SPRINTF_WGINT macro.
2435
2436 2006-02-03  Mauro Tortonesi  <mauro@ferrara.linux.it>
2437
2438         * http.c: Fixed support for Content-Disposition header.
2439
2440         * test.c: Added test_parse_content_disposition to the list of unit
2441         tests to run.
2442
2443 2006-02-02  Hrvoje Niksic  <hniksic@xemacs.org>
2444
2445         * hash.c: Don't define countof if it's already defined.
2446
2447         * hash.c: Obtain the definition of uintptr_t when standalone.
2448
2449 2006-01-30  Mauro Tortonesi  <mauro@ferrara.linux.it>
2450
2451         * http.c: Changed output format. Removed excessively verbose debugging
2452         output.
2453
2454 2005-12-07  Mauro Tortonesi  <mauro@ferrara.linux.it>
2455
2456         * http.c: Fixed pre-download verbose output which was broken by
2457         HTTP code refactoring.
2458
2459 2005-11-23  Mauro Tortonesi  <mauro@ferrara.linux.it>
2460
2461         * http.c: Refactored HTTP code.  If -O is not used, the new code
2462         delays the choice of the file name where the downloaded resource
2463         will be saved until the HTTP headers have been retrieved.
2464         Added support for Content-Disposition header.
2465
2466 2005-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
2467
2468         * hash.c (INVALID_PTR): Use uintptr_t instead of unsigned long.
2469         (hash_pointer): Don't assume a pointer fits in `unsigned long'.
2470
2471 2005-11-02  Mauro Tortonesi  <mauro@ferrara.linux.it>
2472
2473         * Makefile.in: Removed support for unit testing (now it is in
2474         tests/Makefile.in).
2475
2476 2005-10-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
2477
2478         * Makefile.in: Added basic support for unit testing.
2479
2480         * test.c: Ditto.
2481
2482         * test.h: Ditto.
2483
2484 2005-10-13  Daniel Stenberg  <daniel@haxx.se>
2485
2486         * http-ntlm.c (ntlm_output): Fixed buffer overflow vulnerability.
2487
2488 2005-10-09  Russ Allbery  <rra@stanford.edu>
2489
2490         * snprintf.c: Remove round to round_int and pow10 to pow10_int, to
2491         avoid warnings from GCC 4.0.
2492
2493 2005-10-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
2494
2495         * retr.c: Changed semantics of no_proxy_match.
2496
2497 2005-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
2498
2499         * main.c (main): Don't print the summary if nothing has been downloaded.
2500
2501 2005-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
2502
2503         * retr.c (retr_rate): Rename parameter from MSECS to SECS since it
2504         no longer holds milliseconds.
2505
2506 2005-09-01  Hrvoje Niksic  <hniksic@xemacs.org>
2507
2508         * progress.c: Introduce symbolic constants for "magic" values of
2509         0.2 and 0.9, REFRESH_INTERVAL and ETA_REFRESH_INTERVAL.
2510
2511 2005-08-27  Hrvoje Niksic  <hniksic@xemacs.org>
2512
2513         * cmpt.c (strtoll): Correctly handle strtoll("0x", ptr, 0) and
2514         strtoll("0x<nonhexchar>", ptr, 0) -- in both cases *ptr must be
2515         set to the position of 'x', not after it.
2516
2517 2005-08-27  Hrvoje Niksic  <hniksic@xemacs.org>
2518
2519         * hash.c (hash_table_map): Rename to hash_table_for_each and
2520         update callers.
2521         Document the meaning of the callback's return value.
2522         (hash_table_iterate): New function.
2523         (hash_table_iter_next): Likewise.
2524         Update most places that used hash_table_for_each to use the
2525         iteration, which doesn't require a temporary function with
2526         explicit state management.
2527
2528 2005-08-26  Albert Chin  <wget@mlists.thewrittenword.com>
2529
2530         * Makefile.in: Use @datadir@.  Define localedir as $(datadir)/locale.
2531
2532 2005-08-26  Jeremy Shapiro  <jnshapiro@gmail.com>
2533
2534         * openssl.c (ssl_init): Set SSL_MODE_AUTO_RETRY.
2535
2536 2005-08-23  Hrvoje Niksic  <hniksic@xemacs.org>
2537
2538         * host.c (address_list_from_ipv4_addresses): Use IP_INADDR_DATA.
2539
2540 2005-08-12  Hrvoje Niksic  <hniksic@xemacs.org>
2541
2542         * wget.h: Renamed strtoll_return to strtoll_type.
2543
2544 2005-08-11  Hrvoje Niksic  <hniksic@xemacs.org>
2545
2546         * progress.c (eta_to_human_short): Switch to days when printing
2547         more than 48h rather than 100h.  (It's not immediately apparent
2548         how many days there are in 83h.)
2549
2550 2005-08-11  Hrvoje Niksic  <hniksic@xemacs.org>
2551
2552         * cmpt.c (strtoll): Define it if missing on the system and if Wget
2553         needs it.
2554
2555         * mswindows.c (str_to_int64): Move to cmpt.c and rename to strtoll.
2556
2557 2005-08-10  Hrvoje Niksic  <hniksic@xemacs.org>
2558
2559         * host.c (print_address): Always use inet_ntop when IPv6 is
2560         enabled.
2561
2562         * host.h (ip_address): Simplify the data union.
2563
2564 2005-08-09  Hrvoje Niksic  <hniksic@xemacs.org>
2565
2566         * mswindows.c (inet_ntop): Also handle IPv4 addresses for
2567         completeness.
2568
2569 2005-08-09  Hrvoje Niksic  <hniksic@xemacs.org>
2570
2571         * http.c (gethttp): Don't read more than the amount of data
2572         specified by the content-length header.
2573
2574 2005-08-09  Vasil Dimov  <vd@datamax.bg>
2575
2576         * ftp.c (getftp): Don't free RESPLINE if ftp_response returns a
2577         status other than FTPOK.
2578
2579 2005-08-04  Giuseppe Bonacci  <g.bonacci@libero.it>
2580
2581         * ftp-ls.c (ftp_parse_unix_ls): Remember the position of the
2582         previous token instead of backtracking back to it.
2583
2584 2005-07-08  Gisle Vanem  <giva@bgnett.no>
2585
2586         * mswindows.h: Include process.h to get getpid() declaration.
2587
2588 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
2589
2590         * utils.c (aprintf): Use vasprintf where available.
2591
2592 2005-07-08  Hrvoje Niksic  <hniksic@xemacs.org>
2593
2594         * url.c (rewrite_shorthand_url): Simplify code using aprintf and
2595         strspn.
2596
2597 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
2598
2599         * gnutls.c (ssl_check_certificate): Check for the validity of the
2600         presented X509 certificate.
2601
2602 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
2603
2604         * openssl.c (ssl_check_certificate): Print custom error messages
2605         for frequent X509 certificate problems.
2606
2607 2005-07-07  Hrvoje Niksic  <hniksic@xemacs.org>
2608
2609         * mswindows.h: Define an alias for stat and fstat, as requested by
2610         config-compiler.h.
2611         (gai_strerror): Define to windows_strerror if NEED_GAI_STRERROR is
2612         defined.
2613
2614 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
2615
2616         * mswindows.h: Use strtoll where available.
2617
2618 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
2619
2620         * sysdep.h: Add a full declaration of fnmatch.h.
2621
2622 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
2623
2624         * utils.c: Unconditionally include <setjmp.h>.
2625
2626 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
2627
2628         * utils.c (fnmatch_nocase): New function.
2629         (proclist): Use it instead of fnmatch when opt.ignore_case is
2630         requested.
2631         (in_acclist): Respect opt.ignore_case.
2632         (frontcmp): Respect opt.ignore_case.
2633
2634         * options.h (struct options): New flag opt.ignore_case.
2635
2636 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
2637
2638         * ptimer.c: Measure time in seconds rather than milliseconds.
2639         Adjusted all callers.
2640
2641 2005-07-06  Hrvoje Niksic  <hniksic@xemacs.org>
2642
2643         * http.c (gethttp): When freeing MESSAGE, take into account that
2644         it can be NULL.
2645
2646 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
2647
2648         * cmpt.c (timegm): Handle years after 2099.
2649
2650 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
2651
2652         * cmpt.c (timegm): Remove unused variable.
2653
2654 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
2655
2656         * cmpt.c (timegm): Don't call mktime; simply count the seconds
2657         between 1970-01-01 and the specified date.
2658
2659 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
2660
2661         * wget.h (or): Define HAVE_SSL when either HAVE_OPENSSL or
2662         HAVE_GNUTLS are defined.
2663
2664         * gnutls.c: New file.
2665
2666 2005-07-05  Hrvoje Niksic  <hniksic@xemacs.org>
2667
2668         * http.c (gethttp): Don't print the request write error message
2669         twice.
2670
2671 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2672
2673         * openssl.c (openssl_errstr): Instead of always using a large
2674         static buffer, only allocate the error string when there is an
2675         actual error.
2676
2677 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2678
2679         * xmalloc.c (debugging_free): Prefix hex pointer value with "0x"
2680         when printing.
2681
2682 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2683
2684         * utils.c (NEXT_BASE64_CHAR): Rename to NEXT_CHAR and simplify to
2685         get the next non-whitespace character.
2686
2687 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2688
2689         * utils.c (base64_decode): Don't silently tolerate non-base64
2690         non-white-space characters in the base64 stream.
2691
2692 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2693
2694         * connect.c (LAZY_RETRIEVE_INFO): Make last_tick unsigned to match
2695         transport_map_modified_tick.
2696
2697 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2698
2699         * config-post.h (alloca): Updated declaration to not enumerate all
2700         Windows compilers.
2701
2702 2005-07-04  Hrvoje Niksic  <hniksic@xemacs.org>
2703
2704         * openssl.c (openssl_errstr): Separate error messages with "; ".
2705
2706 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
2707
2708         * ftp.c (getftp): Ditto.
2709
2710         * http.c (gethttp): Use fd_errstr.
2711
2712         * connect.c (fd_register_transport): Restructure parameters to
2713         include only a single structure that describes transport
2714         implementation.
2715
2716         * openssl.c (openssl_errstr): New function: dump SSL error strings
2717         into a static buffer and return a pointer to the buffer.
2718
2719         * connect.c (fd_errstr): New function; returns transport-specific
2720         error message, or strerror(errno) if transport doesn't supply one.
2721
2722 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
2723
2724         * mswindows.h: Also wrap accept() and listen().
2725
2726 2005-07-03  Hrvoje Niksic  <hniksic@xemacs.org>
2727
2728         * url.c (path_end): Skip separators appropriate for the scheme.
2729         (strpbrk_or_eos): Remove gcc-specific version, as the optimization
2730         it tried to perform no longer applies.
2731
2732 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2733
2734         * host.c: Don't include "connect.h" now that we no longer have
2735         socket_has_inet6.
2736
2737 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2738
2739         * host.c: Remove extraneous definition of netdb.h.
2740
2741 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2742
2743         * http.c (gethttp): Skip error message body in the keep-alive
2744         case.
2745
2746 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2747
2748         * url.c (url_parse): Would crash when parsing fragments.  Support
2749         fragments for FTP URLs too.
2750
2751 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2752
2753         * version.c: Don't use "cvs" in version name, since we're not
2754         using CVS anymore.
2755
2756 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2757
2758         * progress.c (create_image): Ditto.
2759
2760         * retr.c (retr_rate): Display smaller rate numbers with greater
2761         precision.
2762
2763 2005-07-02  Hrvoje Niksic  <hniksic@xemacs.org>
2764
2765         * http.c (response_head_terminator): Minor optimization.
2766
2767         * retr.c (fd_read_hunk): Call terminator with pointer to the start
2768         of the data and the pointer to the current data.  Changed all
2769         callers.
2770
2771 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
2772
2773         * url.c (url_parse): Make sure u->params is not initialized for
2774         http/https URLs.
2775         (url_parse): Don't crash on garbage following []-delimited IPv6
2776         addresses.
2777
2778 2005-07-01  Hrvoje Niksic  <hniksic@xemacs.org>
2779
2780         * main.c (print_help): Don't refer to the non-existent -nr in
2781         description of --mirror.
2782
2783 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
2784
2785         * host.c (pretty_print_address): Renamed to just print_address.
2786         Clarify documentation.
2787
2788 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
2789
2790         * http.c (gethttp): Explicitly document the different cases when
2791         generating the Host header.
2792
2793 2005-06-30  Hrvoje Niksic  <hniksic@xemacs.org>
2794
2795         * host.c (pretty_print_address): Handle error result from
2796         inet_ntop.
2797
2798 2005-06-30  Gisle Vanem  <giva@bgnett.no>
2799
2800         * mswindows.c (inet_ntop): New function.  Print IPv6 addresses
2801         using WSAAddressToString.
2802
2803 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2804
2805         * progress.c (dot_update): Remove unused variable row_qty.
2806
2807 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2808
2809         * main.c: Check for both SIGHUP and SIGUSR1 before using them.
2810
2811 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2812
2813         * utils.c: Unconditionally include locale.h.
2814
2815 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2816
2817         * ptimer.c: Include sys/time.h to get struct timeval.
2818
2819 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2820
2821         * wget.h: Remove obsolete definition of with_thousand_seps_sum.
2822
2823 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2824
2825         * gnu-md5.h: Unconditionally include limits.h.
2826
2827 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2828
2829         * utils.c (random_number): Use lrand48 if available.
2830         (random_float): Use drand48 if available.
2831
2832 2005-06-29  Hrvoje Niksic  <hniksic@xemacs.org>
2833
2834         * main.c (secs_to_human_time): Use print_decimal when printing
2835         total download time in seconds.
2836
2837         * progress.c (print_row_stats): Use it to print total download
2838         time at the end of the download.
2839         (create_image): Ditto.
2840
2841         * utils.c (print_decimal): New function; print small decimal
2842         numbers with more precision than large ones.
2843
2844         * progress.c (print_row_stats): New function.  Print ETA after the
2845         download rate at the end of each row.
2846
2847 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
2848
2849         * init.c (parse_line): Check for alphanumerics.
2850
2851 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
2852
2853         * (dot_create): Remove unnecessary casts.
2854
2855 2005-06-28  Hrvoje Niksic  <hniksic@xemacs.org>
2856
2857         * ftp.c (getftp): Delete trailing newlines from LIST output so
2858         lines don't come out with trailing \015\012 with -S.
2859
2860 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2861
2862         * mswindows.h: Remove superfluous includes.
2863
2864 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2865
2866         * config-post.h (alloca): Amend alloca declaration to take care of
2867         all Win32 compilers, not just MSVC and MinGW.
2868
2869 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2870
2871         * utils.c (get_grouping_data): Force separator to "." rather than
2872         " " when "," is taken.
2873
2874 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2875
2876         * wget.h (PTR_FORMAT): Cast the result of sizeof to int before
2877         passing it to printf's %*.
2878
2879         * retr.h: Declare output_stream and output_stream_regular.
2880
2881         * ftp.h: Declare ftp_last_respline.
2882
2883         * convert.h: Declare dl_url_file_map.
2884
2885         * http.h: New file.
2886
2887 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2888
2889         * cookies.c: Make cookies_now static.
2890
2891 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2892
2893         * utils.c (human_readable): Remove intermediary cast to long; MSVC
2894         has problems casting *unsigned* __int64 to double.
2895
2896 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2897
2898         * sysdep.h: Use the system-provided fnmatch by default.
2899
2900 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2901
2902         * http.c (mktime_from_utc): Renamed to timegm and moved to cmpt.c.
2903         Don't compile it if GNU timegm is available.
2904         (http_atotm): Use timegm.
2905
2906 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2907
2908         * http.c (http_atotm): Correctly query the old locale value.
2909
2910 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2911
2912         * config-post.h (alloca): Don't #define alloca under MinGW32,
2913         which defines it in malloc.h, included from mswindows.h.
2914
2915 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2916
2917         * utils.c (get_grouping_data): Force the use of separators in C
2918         locale.
2919
2920 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2921
2922         * main.c (i18n_initialize): Set all locale categories.
2923
2924         * http.c (http_atotm): Temporarily set locale to "C".
2925
2926 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2927
2928         * http.c (gethttp): Improve "POST data file missing" error
2929         message.
2930
2931 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2932
2933         * progress.c (set_progress_implementation): Type COLON as const
2934         char *.
2935
2936 2005-06-27  Hrvoje Niksic  <hniksic@xemacs.org>
2937
2938         * utils.c (with_thousand_seps): Handle negative numbers.
2939
2940 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2941
2942         * progress.c (create_image): Mark the "eta" string for translation.
2943
2944 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2945
2946         * html-url.c (get_urls_file): Don't explicitly set entry->next to
2947         NULL since entry is already zeroed out.
2948
2949 2005-06-26  Gisle Vanem  <giva@bgnett.no>
2950
2951         * mswindows.h: Define gai_strerror under MinGW.
2952
2953 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2954
2955         * utils.c (with_thousand_seps): Correctly implement thousand seps
2956         consisting of more than one character.
2957
2958 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2959
2960         * main.c (secs_to_human_time): Ditto.
2961
2962         * progress.c (create_image): Print more exact duration of very
2963         short downloads.
2964
2965         * main.c (secs_to_human_time): Don't translate time suffixes "h",
2966         "m", and "s", which are not strictly SI, but are "accepted for use
2967         with SI".
2968         (secs_to_human_time): Print really small intervals as 0s, not
2969         0.00s.
2970
2971 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2972
2973         * config-post.h: Replace the alloca declaration with the one from
2974         the latest Autoconf manual.  This should remove a warning with GCC
2975         on AIX.
2976
2977 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2978
2979         * ftp.c (getftp): Always invoke SIZE, not only when continuing a
2980         download.
2981
2982         * main.c (main): Ditto here.
2983
2984         * progress.c (create_image): When the download is finished, print
2985         how long it took.
2986
2987 2005-06-26  Hrvoje Niksic  <hniksic@xemacs.org>
2988
2989         * main.c (main): Print the downloaded and quota amounts with the
2990         "human_readable" function.
2991
2992         * ftp.c (print_length): Ditto.
2993
2994         * http.c (gethttp): Don't display thousand separators.
2995
2996         * utils.c (with_thousand_seps): Rewritten to respect locale
2997         settings and to be type size agnostic.
2998
2999 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3000
3001         * utils.c (human_readable): Divide with 1024 instead of shifting
3002         so the operation can work with non-integer N.
3003
3004 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3005
3006         * progress.c (eta_to_human): New logic for more human-readable
3007         ETA.
3008
3009 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3010
3011         * utils.c (with_thousand_seps_sum): Decrease buffer size so it
3012         cannot overrun add_thousand_seps's buffer.
3013
3014 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3015
3016         * utils.c (SPRINTF_WGINT): The correct format is %I64d, not just
3017         %I64.
3018
3019 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3020
3021         * http.c (http_loop): Don't warn about wildcards in HTTP URLs if
3022         globbing isn't requested in the first place.
3023
3024         * retr.c (retrieve_url): Temporarily turn off globbing when
3025         processing HTTP->FTP redirects.
3026
3027 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3028
3029         * utils.c (with_thousand_seps_sum): Now defined only if
3030         SUM_SIZE_INT is double.
3031
3032         * wget.h (SUM_SIZE_INT): Instead of bothering with long, long
3033         long, __int64, and friends, simply either use wgint or double, end
3034         of story.  Since we know how to print either, we no longer need
3035         LARGE_INT_FMT.
3036
3037         * sysdeps.h (LARGE_INT): Renamed to SUM_SIZE_INT to better reflect
3038         its intent, and moved to wget.h.
3039
3040 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3041
3042         * Makefile.in: No need to clean .libs.
3043
3044 2005-06-25  Hrvoje Niksic  <hniksic@xemacs.org>
3045
3046         * cookies.c (parse_set_cookies): Cast pointer subtraction to int
3047         before using it with %d; AIX compiler warns on this.
3048         Reported by Jens Schleusener.
3049
3050 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
3051
3052         * http.c (gethttp): Don't prepend / here.
3053
3054         * cookies.c (cookie_handle_set_cookie): Prepend / to PATH.
3055         (cookie_header): Ditto.
3056
3057 2005-06-24  Hrvoje Niksic  <hniksic@xemacs.org>
3058
3059         * init.c: opt.verbose must be declared as int.
3060
3061 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
3062
3063         * cmpt.c (strpbrk): Removed.
3064         (mktime): Removed.
3065         Include <time.h>.
3066
3067 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
3068
3069         * utils.c (read_file): Ditto.
3070
3071         * main.c (main): Use struct_fstat.
3072
3073         * mswindows.h (struct_fstat): Define a struct_fstat to deal with
3074         the fact that Borland 5.5 has 64-bit stat, but not 64-bit fstat!
3075
3076 2005-06-23  Hrvoje Niksic  <hniksic@xemacs.org>
3077
3078         * sysdep.h: Remove code that deals with Watcom.
3079
3080 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3081
3082         * all: Use bool instead of int and false/true instead of 0/non-0
3083         for boolean variables and values.
3084
3085 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3086
3087         * sysdep.h: Include the stdbool.h/_Bool/bool blurb from Autoconf.
3088
3089 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3090
3091         * init.c (cmd_lockable_boolean): Removed.
3092
3093 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3094
3095         * cookies.c (struct cookie): Use 1-bit bitfields for booleans
3096         which makes the structure takes less space at no cost in
3097         complexity.
3098
3099 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3100
3101         * Makefile.in ($(OBJ)): Add the config.h dependency.
3102
3103 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3104
3105         * openssl.c, connect.c, host.c: Replace instances of #ifdef
3106         ENABLE_DEBUG if (opt.debug) {...} #endif with IF_DEBUG {...}.
3107
3108         * main.c: Rename the IF_DEBUG defined here to WHEN_DEBUG.
3109
3110         * wget.h (IF_DEBUG): New macro.
3111         (DEBUGP): Define in terms of IF_DEBUG.
3112
3113 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3114
3115         * http.c (gethttp): Only handle --set-cookies (and assert that
3116         cookie jar exists) if opt.cookies is true.  Failure to do so
3117         triggered the assert when --no-cookies was used and the server
3118         sent a Set-Cookie header.  Ouch!
3119
3120 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3121
3122         * connect.c (select_fd): Expect select() to exist.
3123
3124         * utils.c (xsleep): Always use select() as sleep fallback on
3125         non-Windows platforms.
3126
3127         * ptimer.c: Delete the implementation of PTIMER_TIME.
3128
3129         * main.c: Assume existence of signal(), test for different signal
3130         names instead.
3131
3132         * cmpt.c: Better document reasons why certain functions are
3133         included.
3134
3135 2005-06-22  Hrvoje Niksic  <hniksic@xemacs.org>
3136
3137         * Makefile.in: Remove the manually maintained dependency list;
3138         make all object files depend on every header.
3139
3140 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
3141
3142         * hash.c: Rename "mapping" to "cell" to avoid confusion with the
3143         term "mapping" (or "map") sometimes being used for the entire hash
3144         table.  Also rename "non-empty" to "occupied" for easier reading
3145         of if (!NON_EMPTY (...)) ... .
3146
3147 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
3148
3149         * main.c, ptimer.c, sysdep.h, utils.c: Use #elif to simplify reading of
3150         chained if-else-else-else-... statements.
3151
3152 2005-06-20  Hrvoje Niksic  <hniksic@xemacs.org>
3153
3154         * all: Return type of signal handlers is `void'.  Include signal.h
3155         unconditionally.
3156
3157         * all: Don't explicitly cast values returned by malloc.  We no
3158         longer support ancient compilers that don't declare malloc, and we
3159         never supported C++ builds.
3160
3161 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
3162
3163         * all: Don't declare errno.  Include both time.h and sys/time.h,
3164         as long as sys/time.h exists.  Don't dereference function pointers
3165         when invoking the functions they point to.
3166
3167         * cmpt.c (memmove): Remove function mandated by C89.
3168         (strerror): Ditto.
3169         (strstr): Ditto.
3170
3171         * all: Undo the K&R-ization changes from 2005-05-03.
3172
3173         * all: Remove support for K&R compilers: use C89 function
3174         declarations, remove definition of PARAMS, remove support for
3175         varargs, and remove ansi2knr.  Assume the presence of time.h,
3176         string.h, and other headers mandated by C89.
3177
3178 2005-06-19  Hrvoje Niksic  <hniksic@xemacs.org>
3179
3180         * init.c (cmd_lockable_boolean): Don't recognize literal "2" and
3181         "-1" values; unlike 0 and 1, those should never be exposed to the
3182         user.  Update the error message to be more self-consistent, as
3183         proposed by Benno Schulenberg.
3184
3185 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
3186
3187         * http.c (gethttp): Don't free "head" before using it to save
3188         headers.
3189
3190 2005-06-18  Hrvoje Niksic  <hniksic@xemacs.org>
3191
3192         * http.c (gethttp): When -E is in use, check for file existence
3193         after appending ".html" to the name and modify the file name if
3194         necessary.
3195
3196 2005-06-17  Hrvoje Niksic  <hniksic@xemacs.org>
3197
3198         * connect.c (socket_has_inet6): Removed.
3199
3200         * host.c (lookup_host): Don't use the AI_ADDRCONFIG getaddrinfo
3201         hint.
3202
3203 2005-06-16  Hrvoje Niksic  <hniksic@xemacs.org>
3204
3205         * init.c (cmd_lockable_boolean): Improve the error message so it
3206         lists the more useful values first.
3207
3208 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
3209
3210         * http.c (gethttp): Also report the system error when the POST
3211         data file is missing.
3212
3213 2005-06-15  Benno Schulenberg  <benno@nietvergeten.nl>
3214
3215         * ftp.c, http.c, connect.c, cookies.c, html-url.c, init.c, res.c:
3216         Gettext-ize messages that were previously missed.
3217
3218 2005-06-15  Hrvoje Niksic  <hniksic@xemacs.org>
3219
3220         * host.h (ip_address): Remove the trailing comma from the type
3221         enum in the no-IPv6 case.
3222
3223         * main.c (struct cmdline_option): Remove the trailing comma from
3224         the enum.
3225
3226         Reported by Jens Schleusener.
3227
3228 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
3229
3230         * url.c (strpbrk_or_eos): Check for a recent GCC version before
3231         using the statement-as-expression extension.
3232
3233 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
3234
3235         * http.c (gethttp): Don't attempt to "skip short body" if we're
3236         issuing a HEAD request (in which case the response head is not
3237         followed by a body).
3238
3239 2005-05-30  Hrvoje Niksic  <hniksic@xemacs.org>
3240
3241         * init.c (cmd_spec_header): Don't split the string along the
3242         commas using cmd_vector; just append the new value using
3243         vec_append instead.
3244
3245         * utils.c (vec_append): New function.
3246
3247 2005-05-27  Andreas Beckmann  <debian@abeckmann.de>
3248
3249         * html-url.c (tag_handle_link): Mark the content from the <link
3250         src="..."> tag as expecting HTML.
3251
3252 2005-05-24  Hrvoje Niksic  <hniksic@xemacs.org>
3253
3254         * http.c (http_atotm): Document the origin of the "cookie date"
3255         format.
3256
3257 2005-05-21  Hrvoje Niksic  <hniksic@xemacs.org>
3258
3259         * init.c (setval_internal): Report exact command name alongside
3260         the "display name".
3261
3262 2005-05-18  Hrvoje Niksic  <hniksic@xemacs.org>
3263
3264         * cookies.c (update_cookie_field): Explicitly cast -1 to time_t to
3265         cope with systems where time_t is unsigned.
3266
3267         * cookies.c: Remove unnecessary casts to time_t from values
3268         already of that type.
3269
3270 2005-05-17  Hrvoje Niksic  <hniksic@xemacs.org>
3271
3272         * ftp.c (ftp_loop_internal): Same here.
3273
3274         * http.c (http_loop): Don't clobber the file when -c is specified
3275         and the first attempt to retrieve the file fails.
3276
3277 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
3278
3279         * openssl.c (ssl_check_certificate): Print all issues with a
3280         certificate.
3281
3282 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
3283
3284         * ftp-basic.c: Don't xfree() the line returned by ftp_response if
3285         the returned code is not FTPOK.
3286
3287 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
3288
3289         * init.c (cleanup): Don't free the non-existent opt.ftp_acc.  Free
3290         the SSL-related stuff.
3291
3292 2005-05-16  Hrvoje Niksic  <hniksic@xemacs.org>
3293
3294         * ftp.c (print_length): Consistently print \n at end of the
3295         "Length" line.
3296
3297 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
3298
3299         * openssl.c (ssl_connect): Announce the beginning and the end of
3300         the SSL handshake when in debug mode.
3301
3302         * wget.h (PTR_FORMAT): New macro for easier printing of pointer
3303         values.  Use %0*lx along with PTR_FORMAT instead of %p.
3304
3305 2005-05-14  Hrvoje Niksic  <hniksic@xemacs.org>
3306
3307         * http.c (gethttp): Would forget to close the connection when
3308         keep_alive was not used.
3309
3310 2005-05-13  Hrvoje Niksic  <hniksic@xemacs.org>
3311
3312         * openssl.c (pattern_match): Document the code that decides
3313         whether "*" matches ".".
3314
3315 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
3316
3317         * ftp-ls.c (ftp_index): Use %d to print the port number, which is
3318         now int.
3319         From Steven M. Schweda's VMS patches.
3320
3321 2005-05-12  Hrvoje Niksic  <hniksic@xemacs.org>
3322
3323         * url.c (rewrite_shorthand_url): Don't rewrite "https://host" to
3324         "ftp://https//host" when SSL is not used.
3325
3326 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
3327
3328         * openssl.c (ssl_check_server_identity): Renamed to
3329         ssl_check_certificate because it does more than just checking the
3330         server's identity.
3331         (ssl_check_certificate): Tell the user about
3332         --no-check-certificate.
3333
3334 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
3335
3336         * openssl.c (ssl_init): Always use SSL_VERIFY_NONE, so that the
3337         handshake finishes even if the certificate is invalid.  That way
3338         ssl_check_server_identity can provide better diagnostics on why
3339         the verification failed.
3340
3341 2005-05-11  Hrvoje Niksic  <hniksic@xemacs.org>
3342
3343         * openssl.c (pattern_match): New function.
3344         (ssl_check_server_identity): Treat peer certificate common name as
3345         wildcard.
3346
3347 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
3348
3349         * openssl.c (ssl_check_server_identity): Print certificate subject
3350         and issuer.
3351
3352 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
3353
3354         * res.c (res_register_specs): Correctly pass pointers to
3355         hash_table_get_pair.
3356
3357 2005-05-10  Hrvoje Niksic  <hniksic@xemacs.org>
3358
3359         * http.c (gethttp): Call ssl_check_server_identity.
3360
3361         * openssl.c (ssl_check_server_identity): New function, verifies
3362         that the host name in the certificate matches the actual host
3363         name.
3364         (verify_cert_callback): Removed, since it didn't do anything
3365         except returning the preverify_ok argument.
3366
3367         * connect.c (fd_transport_context): Allow retrieval of the context
3368         pointer registered with fd_register_transport.
3369
3370 2005-05-09  Hrvoje Niksic  <hniksic@xemacs.org>
3371
3372         * openssl.c (verify_cert_callback): Renamed from verify_callback.
3373         Always return the received "ok" value.  Print the X509 name in
3374         debug mode.
3375         (ssl_init): Enable partial writes in SSL context.
3376
3377 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
3378
3379         * http.c (http_loop): Check for wildcards in the URL path
3380         component, not in the whole URL.
3381
3382         * ftp.c (ftp_loop): Check for wildcards in URL path before
3383         unescaping, so the users can escape globbing metacharacters with %
3384         escapes.
3385
3386 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
3387
3388         * init.c (run_command): Correctly interpret the return value of
3389         parse_line.
3390         (commands): Re-alphabetize.
3391
3392 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
3393
3394         * netrc.c (parse_netrc): Explicitly check for assignment != NULL
3395         to silence warning from Borland C.
3396
3397         * url.c (sync_path): Don't unnecessarily increment p.
3398         (url_parse): Don't unnecessarily set url_encode to NULL just
3399         prior to return from the function.
3400
3401 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
3402
3403         * log.c (escnonprint_internal): Place variable declarations
3404         before other statements.
3405
3406 2005-05-08  Hrvoje Niksic  <hniksic@xemacs.org>
3407
3408         * html-url.c: Include recur.h.
3409
3410         * http.c (request_new): Define as accepting no args.
3411
3412 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
3413
3414         * url.c (strpbrk_or_eos): Made inline.  Use strchr(s, '\0') for
3415         finding the NUL char position.
3416
3417 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
3418
3419         * url.c (decide_copy_method): Renamed to char_needs_escaping.
3420         Since it now returns only two possible values, change it to return
3421         boolean (int).
3422
3423 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
3424
3425         * ftp-basic.c (ftp_request): Prevent newlines in VALUE causing
3426         inadvertent sending of multiple FTP commands.
3427
3428 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
3429
3430         * url.c (decide_copy_method): Never cause reencode_escapes to
3431         decode % escapes; it is too intrusive and breaks some servers.
3432
3433 2005-05-07  Hrvoje Niksic  <hniksic@xemacs.org>
3434
3435         * http.c (gethttp): When tunnelling SSL traffic over proxy with
3436         CONNECT, we're really talking to the remote server directly.
3437         Because of this, the request-line argument must be the URL path
3438         rather than the whole URL, as it would be when using regular
3439         proxies.
3440         Reported by Charles Lane.
3441
3442 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
3443
3444         * init.c (cmd_spec_useragent): Allow empty User-Agent.
3445
3446         * http.c (gethttp): Don't print "unknown authentication scheme"
3447         for failed Basic authentication.
3448         (SET_USER_AGENT): Don't set user-agent if opt.useragent is empty.
3449         (gethttp): Use alloca for allocation of www_authenticate.
3450
3451 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
3452
3453         * main.c (print_help): Fix wording of --secure-protocol help text.
3454
3455 2005-05-06  Hrvoje Niksic  <hniksic@xemacs.org>
3456
3457         * cmpt.c (strstr): Updated from glibc 2.3.5.
3458
3459 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3460
3461         * http.c (http_atotm): Zero out the whole struct tm being passed
3462         to strptime.
3463
3464 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3465
3466         * main.c (main): Propagate option name to setoptval.
3467
3468         * init.c (setoptval): Accept another argument, OPTNAME.  Propagate
3469         that argument as the option name independently of the actual
3470         command, determined by command_by_name(com).
3471
3472 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3473
3474         * init.c (parse_line): Make the return value indicate whether
3475         there was a syntax error or a setter failed.
3476         (run_wgetrc): Return an indication on whether an error has been
3477         encountered.
3478         (initialize): Abort if there have been errors running either
3479         .wgetrc file.
3480
3481 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3482
3483         * log.c (copy_and_escape): Slightly reduce code repetition between
3484         the two loops.
3485
3486 2005-05-05  Charles C.Fu  <ccwf@bacchus.com>
3487
3488         * utils.c (proclist): Strip leading slash when calling fnmatch
3489         too, otherwise wildcard comparisons always fail.
3490
3491 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3492
3493         * utils.c (touch): Set access time to current time.
3494
3495 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3496
3497         * url.c (url_unescape): Don't unescape %00, it effectively
3498         truncates the string.
3499
3500 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3501
3502         * log.c (copy_and_escape): Replace the FOR_URI argument with a
3503         slightly more general mechanism for specifying different kinds of
3504         escape.
3505
3506 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3507
3508         * ftp-basic.c (ftp_response): Fix printing FTP server response.
3509
3510 2005-05-05  Hrvoje Niksic  <hniksic@xemacs.org>
3511
3512         * retr.c (limit_bandwidth_reset): Reset sleep_adjust.
3513         (limit_bandwidth): Don't allow huge "adjustment" values that
3514         result from being suspended for a while.
3515
3516 2005-05-04  Hrvoje Niksic  <hniksic@xemacs.org>
3517
3518         * wget.h: If gettext was found but libtintl.h wasn't, declare
3519         gettext's return type to avoid type mismatches.
3520
3521 2005-05-03  Hrvoje Niksic  <hniksic@xemacs.org>
3522
3523         * url.c (url_parse): Rename label `error' to avoid conflict with
3524         identifier.
3525
3526         * retr.c (fd_read_body): Rename label `out' to avoid conflict with
3527         identifier.
3528         (fd_read_hunk): Use explicit double constant.
3529         (retrieve_from_file): Don't use string concatenation.
3530         (sleep_between_retrievals): Make sure xsleep is called with a
3531         `double' argument.
3532         (no_proxy_match): Define as static, like it is declared.
3533
3534         * progress.c (bar_create): Use 0.0 instead of 0 because K&R
3535         compilers can't automatically promote it.
3536
3537         * http-ntlm.c (ntlm_output): Replace \xHH sequences with \OOO for
3538         the sake of old compilers.
3539
3540         * ftp.c (ftp_loop_internal): Don't use string concatenation.
3541
3542         * http.c (request_send): Use explicit double constants when
3543         calling fd_read and fd_write.
3544         (post_file): Ditto.
3545         (gethttp): Ditto.
3546         (skip_short_body): Ditto.
3547
3548         * ftp-basic.c: When calling fd_write, specify the last argument as
3549         a `double' constant for the sake of K&R compilers which don't see
3550         the prototype and therefore can't promote it to double
3551         automatically.
3552
3553         * cookies.c (cookie_jar_load): Rename abort label to abort_cookie
3554         to avoid name conflict in K&R compilers.
3555
3556 2005-04-29  Hrvoje Niksic  <hniksic@xemacs.org>
3557
3558         * ptimer.c (posix_init): Since we allow _POSIX_MONOTONIC_CLOCK==0,
3559         it is not enough to check for _POSIX_MONOTONIC_CLOCK-0, we must
3560         also check for defined(_POSIX_MONOTONIC_CLOCK).
3561
3562 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
3563
3564         * ftp.c, hash.c, connect.c, host.c, http.c: Remove unreached code,
3565         such as "break" following return or abort.
3566
3567 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
3568
3569         * init.c (commands): Wrap the use of opt.random_file in #ifdef
3570         HAVE_SSL.
3571
3572 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
3573
3574         * http.c (gethttp): Correctly set the user agent.
3575
3576 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
3577
3578         * init.c (cmd_spec_useragent): Free the old value of
3579         opt.useragent before setting the new one.
3580
3581 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
3582
3583         * main.c: Map --ftp-password, --http-password and --proxy-password to
3584         the new ftppassword, httppassword and proxypassword commands
3585         respectively.  Document the --user and --password options in the help
3586         string.
3587
3588 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
3589
3590         * ftp.c: Add support for --user and --password.
3591
3592         * http.c: Add support for --user and --password.
3593
3594         * init.c: Deprecated ftppasswd, httppasswd, login, passwd and
3595         proxypasswd commands.  Added ftppassword, ftpuser, httppassword,
3596         password, proxypassword and user commands.
3597
3598         * main.c: Renamed --ftp-passwd to --ftp-password.  Added --ftp-user,
3599         --http-password, --password, --proxy-password and --user.  Deprecated
3600         --http-passwd and --proxy-passwd.  Added documentation for new options
3601         and removed documentation for deprecated options in the help string.
3602
3603         * options.h (struct options): Added user and passwd members to handle
3604         --user and --password respectively.  Renamed ftp_acc and ftp_pass
3605         members to ftp_user and ftp_passwd for consistency.
3606
3607 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
3608
3609         * main.c (print_help): Advertise "DER", not "ASN1".
3610
3611 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
3612
3613         * openssl.c (init_prng): Disable the weak random seed by default.
3614
3615         * http.c (gethttp): Simplify SSL initialization; disable SSL when
3616         anything goes wrong with the initialization.
3617
3618         * options.h (struct options): New option opt.random_file.
3619
3620 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
3621
3622         * init.c: Wrap private key commands in IF_SSL.
3623
3624 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
3625
3626         * openssl.c (ssl_init): Ditto.
3627
3628         * options.h (struct options): Allow separate specification of key
3629         type and certificate type.
3630
3631         * init.c (cmd_spec_cert_type): Provide a "der" synonym for "asn1"
3632         certificate encoding.
3633
3634 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
3635
3636         * openssl.c: Renamed "gen_sslfunc.c" to "openssl.c" and
3637         "gen_sslfunc.h" to "openssl.h".  This reflects the intent of
3638         openssl.c encapsulating the OpenSSL-specific code.
3639
3640 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
3641
3642         * init.c: Renamed "closure" (a synonym for context in some
3643         cultures) to "place", which more accurately reflects the usage.
3644
3645 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
3646
3647         * gen_sslfunc.c (ssl_init): Use default locations for loading the
3648         certificate bundles.
3649         (ssl_init_prng): Disable the cryptographically weak PRNG
3650         initialization fallback.
3651
3652         * init.c: Renamed SSL command-line arguments and wgetrc commands.
3653         (defaults): Check the server certificate by default.
3654
3655 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
3656
3657         * cookies.c (cookie_handle_set_cookie): Delete the part of the
3658         path after the trailing slash.
3659
3660         * http.c (gethttp): Call cookie_handle_set_cookie with path that
3661         begins with '/'.
3662
3663 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
3664
3665         * http.c (gethttp): Call skip_short_body only if keep_alive is in
3666         use.
3667         (gethttp): Send the User-Agent header with the CONNECT request as
3668         well.
3669
3670 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
3671
3672         * main.c (option_data): Removed support for the undocumented flag
3673         --use-proxy.
3674
3675 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
3676
3677         * main.c (option_data): Don't treat -Y as a boolean switch; treat
3678         it as a value switch instead, so "-Y off" continues to work.
3679
3680 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
3681
3682         * utils.c (aprintf): Delete unreachable statement.
3683
3684 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
3685
3686         * host.c (cmp_prefer_ipv4): New function.
3687         (cmp_prefer_ipv6): New function.
3688         (lookup_host): Use the appropriate comparator according to
3689         opt.prefer_family.
3690
3691         * init.c: New option prefer_family.
3692
3693         * host.c (is_valid_ipv6_address): Spell NS_* constants in lower
3694         case to avoid clash with system headers.
3695         (lookup_host): Reorder the addresses so that IPv4 ones come first.
3696
3697         * utils.c (stable_sort): New function.
3698
3699 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
3700
3701         * connect.c (retryable_socket_connect_error): Return 0 for
3702         ENETUNREACH and EHOSTUNREACH.
3703
3704 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
3705
3706         * cmpt.c: Reenable the memmove implementation for systems that
3707         lack it.
3708
3709         * http.c (gethttp): Store the "authorized" state of the persistent
3710         connection.
3711         (request_remove_header): New function.
3712         (gethttp): Don't send the "Basic" authentication if the connection
3713         is already authorized.
3714
3715 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
3716
3717         * utils.c (base64_encode): Treat input as unsigned chars.
3718         Required for correct encoding of binary stuff.
3719
3720 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
3721
3722         * http-ntlm.c: Format the function definitions in an
3723         ansi2knr-friendly fashion.
3724
3725 2005-04-22  Hrvoje Niksic  <hniksic@xemacs.org>
3726
3727         * http.c (gethttp): Handle multiple WWW-Authentication headers,
3728         only one of which is recognized.  Those are sent by IIS with NTLM
3729         authorization.
3730         (create_authorization_line): Propagate information whether
3731         authorization is finished.
3732         (gethttp): Only stop authorization when it's really finished, not
3733         after fixed two steps.
3734
3735 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
3736
3737         * gen_sslfunc.c (ssl_init): Fix warning message text; mark the
3738         message as translatable.
3739
3740 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
3741
3742         * main.c (print_help): Print the EGD option outside the cluster of
3743         SSL options.
3744
3745 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
3746
3747         * http-ntlm.c (ntlm_output): Fix setting the domain.
3748         Suggested by Sami Krank.
3749
3750 2005-04-20  Mauro Tortonesi  <mauro@ferrara.linux.it>
3751
3752         * connect.c: Set IPV6_V6ONLY socket option when -6 switch is used.
3753
3754 2005-04-20  FUJISHIMA Satsuki  <sf@FreeBSD.org>
3755
3756         * http.c (request_set_header): Fix the check whether a new header
3757         needs to be allocated.
3758
3759 2005-04-18  Hrvoje Niksic  <hniksic@xemacs.org>
3760
3761         * utils.c (base64_encode): Use the parameter order that makes more
3762         sense.  Return the length of the base64 written.  Updated all
3763         callers.
3764
3765 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
3766
3767         * http.c (request_set_header): Free NAME when VALUE is NULL and
3768         freeing the header name is requested.
3769
3770 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
3771
3772         * snprintf.c (fmtstr): Declare VALUE as const char *.
3773         Based on patch by Russ Allbery.
3774
3775 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
3776
3777         * snprintf.c (fmtfp): More correct handling of significant digit
3778         count with %g -- 0.002 has one significant digit, not three.
3779
3780 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
3781
3782         * retr.c (fd_read_body): Respect read timeout with non-interactive
3783         or no progress gauge -- treat ETIMEDOUT specially only when
3784         progress_interactive.
3785         Reported by FUJISHIMA Satsuki.
3786
3787 2005-04-16  FUJISHIMA Satsuki  <sf@FreeBSD.org>
3788
3789         * http.c (gethttp): Don't use HTTP/1.0 persistent connections over
3790         proxy.
3791
3792 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
3793
3794         * snprintf.c: Use the PARAMS macro to handle prototypes.  Write
3795         function definitions in the ansi2knr-friendly way.
3796         (fmtstr): If string precision is specified, don't read VALUE past
3797         it.
3798         (dopr): Actually print %g and %e formats.
3799         (fmtfp): Fix a bug that caused 0.01 to be printed as 0.1.
3800         (fmtfp): Use LLONG in floating point conversions to be able to
3801         convert more digits.
3802         (fmtfp): Interpret precision as number of significant digits with
3803         %g.
3804         (fmtfp): Omit trailing decimal zeros with %g.
3805
3806         * snprintf.c: Don't include <ctype.h> because none of it is used.
3807         Include strings.h/string.h, as per Autoconf.
3808
3809 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
3810
3811         * ptimer.c: Use _POSIX_TIMERS - 0 > 0, which handles the case when
3812         _POSIX_TIMERS is defined but empty, as well as the case when it is
3813         undefined.  Do the same with the check for _POSIX_MONOTONIC_CLOCK.
3814         Suggested by Larry Jones.
3815
3816 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
3817
3818         * ptimer.c: Check that _POSIX_TIMERS is defined as well as > 0.
3819         Problem reported by Steven M. Schweda.
3820
3821 2005-04-14  Hrvoje Niksic  <hniksic@xemacs.org>
3822
3823         * http.c (skip_short_body): Print the skipped body data in debug
3824         mode.
3825         (skip_short_body): Don't skip more than 4k of body data.
3826         (skip_short_body): Return whether the skipping was successful.
3827         (gethttp): If skip_short_body failed, invalidate the connection.
3828
3829 2005-04-12  Gisle Vanem  <giva@bgnett.no>
3830
3831         * ftp.c (getftp): Ditto.
3832
3833         * http.c (gethttp): Open the output file in binary mode.
3834
3835 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
3836
3837         * hash.c: Conditionalize including config.h on HAVE_CONFIG_H
3838         instead of on STANDALONE.
3839
3840 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
3841
3842         * gen_sslfunc.c (ssl_print_errors): Made static.
3843         (ssl_print_errors): Eliminate potentially dangerous fixed-size
3844         error buffer.  Passing NULL to ERR_error_string causes it to use
3845         its own static buffer, which is fine for our purposes.
3846
3847         * gen_sslfunc.c: Include gen_sslfunc.h.  Make the declarations of
3848         ssl_init and ssl_conect match the actual definitions.
3849         (ssl_connect): Simply return a boolean, the SSL context is no
3850         longer useful as a return value.
3851
3852         * retr.c: Don't include SSL headers; we don't need them.
3853
3854 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
3855
3856         * config-post.h: Don't define _VA_LIST under Solaris; it breaks
3857         compilation with GCC 3.4 under Solaris 10.  (It was defined to
3858         avoid a warning with previous versions of GCC.)
3859
3860 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
3861
3862         * xmalloc.c (register_ptr): Warn the user to increase SZ prior to
3863         aborting.
3864
3865 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
3866
3867         * convert.c (convert_cleanup): Free converted_files.
3868
3869 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
3870
3871         * wget.h (DEBUGP): Use __builtin_expect to give a hint to GCC that
3872         opt.debug is false in the vast majority of cases.
3873
3874 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
3875
3876         * config-post.h: Declare alloca as void *, not char *.
3877
3878 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
3879
3880         * recur.c (download_child_p): When -p is used, (temporarily)
3881         ignore accept/reject rules for HTMLs, even when they are at the
3882         maximum recursion depth.  That is because with -p we are, if
3883         necessary, overstepping the max. depth to get the requisites.
3884
3885 2004-06-12  Larry Jones <lawrence.jones@ugsplm.com>
3886
3887         * recur.c (download_child_p): Correct the logic in check number 6:
3888         test opt.reclevel (not DEPTH) against INFINITE_RECURSION.
3889
3890 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
3891
3892         * url.c: Use "static const" in preference to "const static".
3893         Sun's cc warns that "storage class after type is obsolescent".
3894
3895         * url.c (urlchr_table): Don't mark ~ as unsafe, too many broken
3896         web sites are confused when ~ is changed to %7E.  Their servers
3897         redirect /%7Efoo/ to /~foo/, which Wget again accesses using %7E,
3898         causing further redirections, therefore looping infinitely.  See
3899         Debian bug #301624 for an example.
3900
3901 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
3902
3903         * alloca.c: Include wget.h to be able to use xmalloc.  In addition
3904         to defining malloc to xmalloc, also define free to xfree.
3905
3906 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
3907
3908         * http-ntlm.c (ntlm_output): Use "char", not "unsigned char" for
3909         ntlmbuf.  Our base64 functions accept char anyway.
3910         (ntlm_output): Join up the format string, since we nominally
3911         support K&R compilers.
3912         (ntlm_output): Ditto.
3913
3914 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3915
3916         * ptimer.c: Use Windows timers under Cygwin, whose POSIX timer
3917         implementation is incomplete.
3918
3919 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3920
3921         * ptimer.c (struct ptimer): Remove the unused initialized field.
3922
3923         * ptimer.c: Renamed function parameters from WT (which used to
3924         stand for wget_timer or wtimer) to PT.
3925
3926 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3927
3928         * ptimer.c (posix_init): Be smarter about choosing clocks.  In
3929         decreasing order of preference, use CLOCK_MONOTONIC,
3930         CLOCK_HIGHRES, and CLOCK_REALTIME.
3931         (ptimer_allocate): Removed.
3932
3933         * ptimer.c: Refactor the code by cleanly separating the
3934         architecture-dependent code from the architecture-independent
3935         code.
3936
3937 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3938
3939         * ptimer.c (ptimer_init): Explicitly check that
3940         _POSIX_MONOTONIC_CLOCK is *both* defined and >=0.  (Undefined
3941         symbols are >=0.)
3942
3943 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3944
3945         * ptimer.c (ptimer_diff): Fix typo affecting Windows build.
3946
3947 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3948
3949         * ptimer.c (ptimer_init): In fact, _POSIX_MONOTONIC_CLOCK needs to
3950         be >= 0.
3951
3952         * ptimer.c (ptimer_init): Check whether _POSIX_MONOTONIC_CLOCK is
3953         defined instead of whether it's greater than 0.  glibc defines it
3954         to 0, but still makes it available via sysconf.
3955
3956 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
3957
3958         * mswindows.c (str_to_int64): Rename OVERFLOW and UNDERFLOW to
3959         INT64_OVERFLOW and INT64_UNDERFLOW, since those names are used.
3960
3961 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
3962
3963         * ptimer.c: New file.  Move the "wtimer" functions from utils.c to
3964         this file and rename them to ptimer_.
3965
3966 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
3967
3968         * host.c (NO_ADDRESS): Define NO_ADDRESS only after the system
3969         headers have been included.
3970
3971 2005-04-06  Hrvoje Niksic  <hniksic@xemacs.org>
3972
3973         * http.c (pconn): Include NTLM data, which is per-connection.
3974         (known_authentication_scheme_p): Recognize NTLM authorization.
3975         (create_authorization_line): Call ntlm_input and ntlm_output.
3976
3977         * http-ntlm.c: New file, donated by Daniel Stenberg and originally
3978         written for curl, heavily modified for Wget.
3979
3980         * utils.c (base64_encode): Relocated from http.c, since it is now
3981         used by http-ntlm.c, and will possibly be used elsewhere.
3982         (base64_decode): New function, originally based on code from GNU
3983         recode.
3984
3985 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
3986
3987         * ftp.c (ftp_loop): Ditto.
3988
3989         * ftp-basic.c (ftp_pasv): Use the xzero shorthand for memset(0).
3990         (ftp_lpsv): Ditto.
3991
3992 2005-04-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
3993
3994         * Makefile.in: removed string_t.c from list of source files.
3995
3996 2005-04-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
3997
3998         * string_t.c: Removed.
3999
4000         * string_t.h: Removed.
4001
4002 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
4003
4004         * url.c (rewrite_shorthand_url): Only accept recognized schemes.
4005         That way "foo:80" will correctly be rewritten to "http://foo:80"
4006         instead of left unchanged and ultimately rejected because of
4007         "unsupported scheme foo".
4008
4009 2005-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
4010
4011         * utils.c (number_to_string): Avoid explicit 64-bit constants;
4012         construct them by multiplication at compile-time.
4013
4014         * utils.c, elsewhere: Don't append "L" to 32-bit integer
4015         constants; we aren't really compilable on 16-bit systems anyway.
4016
4017         * hash.c (prime_size): Remove primes larger than 2^31, but include
4018         2^31-1, which is prime.
4019
4020 2005-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
4021
4022         * utils.c (string_set_to_array): New function.
4023
4024         * convert.c: Replace the use of "slists" with sets/hash-tables,
4025         which in fact suit the intended purpose much better.
4026         downloaded_html_list is removed altogether.
4027
4028 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
4029
4030         * ftp.h (enum): Rename GLOBALL, GETALL, and GETONE to
4031         GLOB_GLOBALL, GLOB_GETALL, and GLOB_GETONE to avoid conflict with
4032         Linux headers.
4033
4034 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
4035
4036         * utils.c (numdigit): More correct handling of negative numbers.
4037
4038 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
4039
4040         * http.c (gethttp): Print the human-readable size.
4041
4042         * ftp.c (getftp): Print the human-readable size of the file to be
4043         downloaded.
4044
4045         * utils.c (human_readable): New function.
4046
4047         * utils.c: Renamed "legible" to "with_thousand_seps",
4048         "legible_large_int" to "with_thousand_seps_large", and "legible_1"
4049         to "add_thousand_seps".
4050
4051 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
4052
4053         * http.c (gethttp): Inhibit persistent connections when talking to
4054         proxies, as mandated by RFC 2068.
4055
4056 2005-03-20  Hrvoje Niksic  <hniksic@xemacs.org>
4057
4058         * url.c (unescape_single_char): New function.
4059         (url_escape_dir): Use it to unescape slashes in directory
4060         components.
4061         (url_string): Escape unsafe chars in host name, except for the ':'
4062         charaters, which can appear in IPv6 addresses.
4063
4064         * main.c (main): Don't access the cookie jar directly.
4065
4066         * log.c (escnonprint_internal): Correctly calculate the needed
4067         string size.  Don't forget the buffer's new size after having
4068         reallocated it.
4069         (log_cleanup): New function.  Free the escnonprint ring data.
4070
4071         * init.c (cleanup): Don't free the cookie jar explicitly, it is
4072         now done by http_cleanup.
4073         (cleanup): opt.user_headers is now a vector, free it with
4074         free_vec.
4075
4076         * http.c (gethttp): Make sure to free the request data, the status
4077         message, and the response data before returning from the function.
4078         (save_cookies): New function.
4079         (http_cleanup): Free the cookie jar here.
4080
4081         * hash.c: Renamed string_hash to hash_string and ptrhash to
4082         hash_pointer.  Exported hash_pointer.
4083
4084         * xmalloc.c: Organized malloc_table (previously malloc_debug) as a
4085         simple EQ hash table.  register_ptr and unregister_ptr are now of
4086         O(1) complexity.
4087
4088         * xmalloc.c: Renamed "*_debug" to debugging_* and "*_real" to
4089         checking_*.
4090
4091 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
4092
4093         * utils.c (debug_test_md5): Moved to gen-md5.c.
4094
4095         * mswindows.h: Don't declare inet_ntop, since we don't use it.
4096
4097         * mswindows.h: For consistency, also wrap closesocket, it being
4098         a Winsock call.
4099
4100         * mswindows.h: Don't declare sleep and usleep; we're defining
4101         xsleep now.
4102
4103         * mswindows.h (mkdir): Don't special-case Borland C, _mkdir
4104         works there as well.
4105
4106         * host.c: Don't include winsock header files; the correct ones
4107         are already included by mswindows.h.
4108
4109         * mswindows.c (xsleep): Round toward the nearest millisecond
4110         in an attempt to avoid average short sleeps.
4111
4112         * utils.c (wtimer_granularity): Report correct values for
4113         Windows timers and for high-resolution timers.
4114
4115         * utils.c (wtimer_initialize_once): New function, called to
4116         initialize the timer frequency.
4117
4118         * utils.c: Replace the use of GetSystemTime with high-resolution
4119         counters under Windows.  When high-resolution counters are
4120         unavailable, use GetTickCount().
4121
4122 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
4123
4124         * retr.c (fd_read_body): Undo the 2004-11-18 change.  Instead,
4125         always be "exact".
4126
4127 2005-03-17  Hrvoje Niksic  <hniksic@xemacs.org>
4128
4129         * ftp-basic.c (ftp_login): Don't free the string if ftp_response
4130         returned an error status because the line didn't get allocated in
4131         the first place.
4132
4133 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
4134
4135         * http.c (read_http_response_head): Limit the response size to 64k
4136         bytes.
4137
4138         * retr.c (fd_read_hunk): Accept a MAXSIZE argument that limits the
4139         number of bytes the function is allowed to allocate.
4140         (fd_read_line): Limit the line to 4096 bytes.
4141
4142 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
4143
4144         * wget.h: Include options.h after wgint has been defined.
4145
4146         * options.h (struct options): Declare options processed with
4147         cmd_bytes as wgint, not long.
4148
4149 2005-03-18  Hrvoje Niksic  <hniksic@xemacs.org>
4150
4151         * init.c (cmd_file): Use concat_strings.
4152
4153         * http.c (basic_authentication_encode): Use concat_strings.
4154
4155         * ftp-ls.c (ftp_index): Use concat_strings.
4156
4157         * ftp-basic.c (ftp_request): Use concat_strings.
4158
4159         * utils.c (concat_strings): New function.
4160
4161 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
4162
4163         * init.c (simple_atof): Handle negative numbers; skip whitespace
4164         before the number.
4165         (simple_atoi): Ditto.  Also, check for overflow and underflow.
4166         (cmd_number): Bail out on negative numbers.
4167         (parse_bytes_helper): Ditto.
4168
4169 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
4170
4171         * http.c (gethttp): Handle multiple Set-Cookie headers sent by
4172         remote server.
4173
4174 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
4175
4176         * init.c (defaults): Use passive FTP by default.
4177
4178 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
4179
4180         * mswindows.c: Provide wrappers to Winsock functions that set
4181         errno to WSAGetLastError() in case of failure.  Also provide a
4182         Windows-specific version of strerror.
4183
4184         * mswindows.h: Wrap calls to socket, bind, connect, recv, send,
4185         select, getsockname, getpeername, and setsockopt.
4186
4187 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
4188
4189         * url.c (url_parse): Reject port numbers larger than 65535.  We
4190         also check for overflow while parsing port numbers.
4191
4192 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
4193
4194         * utils.c (read_file): Don't use wgint for file size; LFS won't
4195         work since the file is mmap'ed as a whole.
4196
4197         * options.h: Don't include stdio.h.
4198
4199         * log.c: Ditto.
4200
4201         * init.c: Disambiguate assignment from non-zero test to avoid
4202         Borland C warning.
4203
4204         * http.c (response_new): Don't needlessly post-increment count.
4205
4206         * hash.c: Include stdio.h.
4207
4208         * gnu-md5.h: Don't include stdio.h.
4209
4210         * getopt.h (struct option): Always use const.
4211
4212         * ftp.c (getftp): Avoid unnecessary assignment to RES to avoid
4213         Borland C warning.
4214
4215         * ftp-ls.c: Disambiguate assignment from non-zero test to avoid
4216         Borland C warning.
4217
4218         * cmpt.c (strptime_internal): Don't initialize rp_backup when
4219         !_NL_CURRENT to avoid Borland C warning.
4220
4221 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
4222
4223         * utils.c (fopen_excl): Fix parse error when O_BINARY is
4224         available.
4225
4226 2005-03-05  Hrvoje Niksic  <hniksic@xemacs.org>
4227
4228         * url.c (url_file_name): Don't allow hosts named ".." to be
4229         appended as path elements.
4230
4231 2005-03-03  Hrvoje Niksic  <hniksic@xemacs.org>
4232
4233         * retr.c (retrieve_url): Escape location header.
4234
4235         * http.c (print_server_response_1): Escape server response when
4236         printing it.
4237         (gethttp): Escape host name, status message, location header, and
4238         content type.
4239         (http_loop): Escape error message from server.
4240
4241         * host.c (lookup_host): Escape host name when printing it.
4242
4243         * ftp.c (getftp): Escape user name when printing it.
4244         (getftp): Escape remote file and directory for printing.
4245         (getftp): Escape server listing when printing it.
4246         (ftp_retrieve_list): Escape link name and file name.
4247         (ftp_retrieve_glob): Escape file name.
4248
4249         * ftp-basic.c (ftp_response): Escape server response when printing
4250         it.
4251
4252         * cookies.c (parse_set_cookies): Escape the cookie field when
4253         printing it.
4254         (parse_set_cookies): Escape contents of remote header.
4255         (cookie_handle_set_cookie): Escape host name and cookie domain.
4256
4257         * connect.c (connect_to_ip): Escape the host name.
4258
4259         * log.c (escnonprint): New function, used for printing strings
4260         coming from the server that possibly contain non-ASCII characters.
4261         (escnonprint_uri): Ditto.
4262
4263 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
4264
4265         * ftp.c (getftp): Ditto.
4266
4267         * http.c (gethttp): When we're not supposed to overwrite files,
4268         use fopen_excl to open the file and recompute the file name.
4269
4270         * log.c (redirect_output): Use unique_create to avoid a race
4271         condition.
4272
4273         * mswindows.c (fake_fork_child): Use unique_create.
4274
4275         * utils.c (fopen_excl): New function that opens a stdio stream
4276         with the O_EXCL flag (where available).
4277         (unique_create): New function, like unique_name, but also creating
4278         the file and returning a file pointer.
4279         (fork_to_background): Use unique_create to create the file
4280         immediately to avoid race condition with multiple instances of
4281         wget -b.
4282
4283 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
4284
4285         * host.c (lookup_host): Test for AI_ADDRCONFIG directly, instead
4286         of checking for HAVE_GETADDRINFO_AI_ADDRCONFIG.
4287
4288 2005-02-23  Hrvoje Niksic  <hniksic@xemacs.org>
4289
4290         * host.c (is_valid_ipv6_address): Move here from url.c.
4291         (lookup_host): If the address is numeric, don't print the
4292         "resolving..." line, don't set up DNS timeouts, and set the
4293         AI_NUMERICHOST hint, where available.
4294
4295 2005-02-26  Gisle Vanem  <giva@bgnett.no>
4296
4297         * utils.c: Use the nnnLL syntax under GCC.  Define struct_stat to
4298         struct _stati64 under __MINGW32__ as well as under MS VC.
4299
4300 2005-02-26  Hrvoje Niksic  <hniksic@xemacs.org>
4301
4302         * utils.c: Use the nnnI64 syntax for __int64 constants under all
4303         Windows compilers.
4304         (SPRINTF_WGINT): Use "%I64" under all Windows compilers.
4305
4306         * mswindows.h (WGINT_MAX): Use the nnnI64 syntax for
4307         __int64 constants under all Windows compilers.
4308         (struct_stat): Use `struct stati64' under Borland C.
4309         (fstat): Don't redefine to _fstati64 under Borland.
4310
4311         * mswindows.c: Define str_to_int64 under Borland C as well as
4312         under (older) Visual C.
4313
4314 2005-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
4315
4316         * ftp.c (getftp): Initialize err to suppress compiler warning.
4317
4318 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
4319
4320         * ftp.c (ftp_expected_bytes): Fix bug that caused infloop because
4321         of not correctly skipping the '(' character.
4322
4323 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
4324
4325         * mswindows.c (wget_ftello): Removed.
4326
4327         * mswindows.h: Remove bogus definition of stat.
4328         (wget_ftello): Remove the leftover ftello replacement.
4329
4330 2005-02-20  Hrvoje Niksic  <hniksic@xemacs.org>
4331
4332         * mswindows.c (wget_ftello): Wget's replacement for ftello.
4333
4334         * utils.c (file_size): Use ftello where available.
4335
4336         * ftp-ls.c (ftp_parse_unix_ls): Use str_to_wgint to parse the file
4337         size.
4338         (ftp_parse_winnt_ls): Ditto.
4339
4340         * ftp-basic.c (ftp_size): Use str_to_wgint to convert number to
4341         wgint; pass 10 instead of 0 as the BASE argument.
4342
4343         * ftp.c (ftp_expected_bytes): Use str_to_wgint to parse the file
4344         size.
4345
4346         * sysdep.h (LARGE_INT_FMT): Use __int64 as LARGE_INT on
4347         MSVC/Windows; print it with "%I64".
4348
4349         * wget.h: Define a `wgint' type, normally aliased to (the possibly
4350         64-bit variant of) off_t.
4351
4352         * all: Use `wgint' instead of `long' for numeric variables that
4353         can hold file sizes.
4354
4355         * utils.c (number_to_string): Support printing of `wgint'
4356         argument.
4357         (number_to_static_string): New function.
4358
4359         * all: Replace printf("%ld", long_value) with printf("%s",
4360         number_to_static_string(wgint_value)).
4361
4362 2005-02-18  Mauro Tortonesi <mauro@ferrara.linux.it>
4363
4364         * main.c: Added the --ftp-passwd command line option.
4365
4366         * init.c: Renamed command passwd to ftppasswd.
4367
4368 2005-02-11  Mauro Tortonesi <mauro@ferrara.linux.it>
4369
4370         * string_t.c: Fixed a bug in do_escape and triggered escape of
4371         backslashes in string_escape to avoid ambiguities in the result
4372         string.
4373
4374 2005-02-10  Mauro Tortonesi <mauro@ferrara.linux.it>
4375
4376         * string.h: Renamed to string_t.h to fix a compilation conflict
4377         with the string.h header in the standard C library.
4378
4379         * string.c: Renamed to string_t.c for consistency with string.h.
4380
4381         * string_t.c: Ditto.
4382
4383         * string_t.h: Ditto.
4384
4385 2004-12-31  Mauro Tortonesi <mauro@ferrara.linux.it>
4386
4387         * string.c: New file.
4388
4389         * string.h: New file.
4390
4391         * Makefile.in: Added string.c to the list of modules to compile.
4392
4393         * main.c: Updated copyright.
4394
4395 2004-11-18  Ulf Harnhammar <ulf.harnhammar.9485@student.uu.se>
4396
4397         * ftp-ls.c: Fixed a problem in ftp_parse_winnt_ls that could allow a
4398         malicious remote FTP server to crash wget.
4399
4400 2004-11-18  Hans-Andreas Engel <engel@node.ch>
4401
4402         * http.c: Enable --convert-links (-k) when a single page is downloaded
4403         via --output-document (-O).
4404
4405 2004-11-18  Mauro Tortonesi <mauro@deepspace6.net>
4406
4407         * connect.c: Minor correction to the comment in front of fd_peek.
4408
4409 2004-11-18  Leonid Petrov <nouser@lpetrov.net>
4410
4411         * retr.c: Fix a timeout problem in fd_read_body when using http_proxy.
4412
4413 2004-11-15  YAMAZAKI Makoto <Yamazaki.Makoto@fujixerox.co.jp>
4414
4415         * netrc.c: Fix termination by assertion bug in netrc parsing.
4416
4417 2004-05-09  David Fritz  <zeroxdf@att.net>
4418
4419         * mswindows.c (fake_fork): Pass entire command line to the child
4420         process.
4421
4422 2004-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
4423
4424         * http.c (gethttp): Fix typo: SCHEME_SSL -> SCHEME_HTTPS.
4425
4426 2004-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
4427
4428         * http.c (gethttp): Send the Proxy-Authorization header over
4429         non-SSL connections too.
4430
4431 2004-03-25  David Fritz  <zeroxdf@att.net>
4432
4433         * mswindows.c (fake_fork_child): Ignore error code when
4434         OpenFileMapping() fails; assume it failed because the object does
4435         not exist.
4436
4437 2004-03-24  David Fritz  <zeroxdf@att.net>
4438
4439         * mswindows.c (fake_fork): New function.
4440
4441         * mswindows.c (fork_to_background): Use it.
4442
4443 2004-03-19  David Fritz  <zeroxdf@att.net>
4444
4445         * mswindows.c (ws_hangup): Incorporate old fork_to_background()
4446         code.  Add event name argument.
4447         (fork_to_backgorund): Now a simple wrapper around ws_hangup().
4448         (ws_handler): Correctly handle the case when neither CTRLC_BACKGND
4449         nor CTRLBREAK_BACKGND are defined.  Don't bother handling close,
4450         logoff, or shutdown events.  Call ws_hangup() with the correct
4451         event name; don't assume it was CTRL+Break.
4452
4453 2004-03-19  Hrvoje Niksic  <hniksic@xemacs.org>
4454
4455         * url.c (url_parse): Decode %HH sequences in host name.
4456
4457 2004-03-04  Hrvoje Niksic  <hniksic@xemacs.org>
4458
4459         * convert.c (local_quote_string): Quote "#" as "%23" and "%" as
4460         "%25" when creating links to local files.
4461
4462 2004-03-02  David Fritz  <zeroxdf@att.net>
4463
4464         * mswindows.c (ws_percenttitle): Guard against future changes by
4465         doing nothing if the proper variables have not been initialized.
4466         Clamp percentage value.
4467
4468 2004-03-04  Gisle Vanem  <giva@bgnett.no>
4469
4470         * retr.c (fd_read_body): Don't change console title if quiet.
4471
4472 2004-02-25  David Fritz  <zeroxdf@att.net>
4473
4474         * mswindows.c (set_sleep_mode): Remove argument and return value.
4475         Call GetModuleHandle() instead of LoadLibrary()/FreeLibrary() for
4476         kernel32.dll.  Use typedef for function-pointer.  Don't cast
4477         l-value.  Don't use dereference operator when calling through
4478         function-pointer.
4479         (ws_startup): Update call to set_sleep_mode().
4480         (ws_cleanup): Remove call to set_sleep_mode().
4481
4482 2004-02-23  David Fritz  <zeroxdf@att.net>
4483
4484         * http.c (http_loop): Ditto.
4485
4486         * ftp.c (ftp_loop_internal): Update call to ws_changetitle().
4487
4488         * main.c (main): Don't bother calling ws_changetitle().
4489
4490         * mswindows.h (ws_changetitle): Update prototype.
4491
4492         * mswindows.c (ws_changetitle): Remove second argument.  Use
4493         xfree_null().
4494         (ws_percenttitle): Only update title when percentage has changed.
4495
4496 2004-02-23  David Fritz  <zeroxdf@att.net>
4497
4498         * mswindows.h: Ditto.
4499
4500         * mswindows.c: Misc. formatting/comment tweaks throughout.
4501
4502 2004-02-20  David Fritz  <zeroxdf@att.net>
4503
4504         * main.c (print_help): Remove call to ws_help().
4505
4506         * mswindows.c (ws_help): Remove.
4507
4508         * mswindows.h (ws_help): Remove.
4509
4510 2004-02-16  David Fritz  <zeroxdf@att.net>
4511
4512         * init.c (home_dir): Use aprintf() instead of xmalloc()/sprintf().
4513         Under Windows, if $HOME is not defined, use the directory that
4514         contains the Wget binary instead of hard-coded `C:\'.
4515         (wgetrc_file_name): Under Windows, look for $HOME/.wgetrc then, if
4516         not found, look for wget.ini in the directory of the Wget binary.
4517
4518         * mswindows.c (ws_mypath): Employ slightly more robust methodology.
4519         Strip trailing path separator.
4520
4521 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
4522
4523         * http.c (gethttp): Respect --ignore-length.
4524         (gethttp): Inhibit keep-alive if --ignore-length is specified.
4525
4526 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
4527
4528         * connect.c (sockaddr_set_data): Zero out
4529         sockaddr_in/sockaddr_in6.  Apparently BSD-derived stacks need this
4530         when binding a socket to local address.
4531
4532 2004-02-04  Hrvoje Niksic  <hniksic@xemacs.org>
4533
4534         * hash.c: Make the file compilable outside Wget source tree when
4535         -DSTANDALONE is used.
4536
4537 2004-01-29  Hrvoje Niksic  <hniksic@xemacs.org>
4538
4539         * utils.c (determine_screen_width): Return 0 if not running on
4540         Windows or on a TIOCGWINSZ-capable system.
4541
4542 2004-01-28  David Fritz  <zeroxdf@att.net>
4543
4544         * utils.c (determine_screen_width): Correctly determine console
4545         width under Windows.
4546
4547 2004-01-28  Christian Biere  <christianbiere@gmx.de>
4548
4549         * progress.c (bar_set_params): Fixed syntax error when HAVE_ISATTY
4550         was undefined.
4551
4552         * ftp.c (ftp_loop_internal): Allocate a larger buffer in case
4553         "try" gets translated to something large.  Ditto in http_loop in
4554         http.c.
4555
4556         * http.c (response_header_copy): Don't write to buf[BUFSIZE].
4557
4558         * ftp-opie.c (skey_response): Eliminate unnecessary string
4559         concatenation; just call gen_md5_update twice.
4560
4561 2004-01-25  Hrvoje Niksic  <hniksic@xemacs.org>
4562
4563         * utils.c (xsleep): Don't call usleep with values larger than
4564         1,000,000.
4565
4566 2003-12-16  Hrvoje Niksic  <hniksic@xemacs.org>
4567
4568         * http.c (gethttp): Fix generation of `Content-Length'.
4569
4570 2003-12-15  Gisle Vanem  <giva@bgnett.no>
4571
4572         * url.c (url_skip_credentials): Fixed return value; 'url' if no
4573         credentials.
4574
4575 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
4576
4577         * url.c (url_skip_credentials): Return a pointer directly.
4578
4579 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
4580
4581         * url.c (url_file_name): Ditto.
4582         (parse_errors): Ditto.
4583
4584         * retr.c (retr_rate): Ditto.
4585
4586         * progress.c (create_image): Ditto.
4587
4588         * netrc.c (parse_netrc): Ditto.
4589
4590         * main.c (struct cmdline_option): Ditto.
4591         (redirect_output_signal): Ditto.
4592
4593         * init.c (commands): Ditto.
4594
4595         * ftp-ls.c (ftp_index): Ditto.
4596
4597         * cookies.c (check_domain_match): Declare the pointer to a literal
4598         string as `const'.
4599
4600 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
4601
4602         * retr.c (fd_read_body): Pass total size to progress_create, not
4603         the remaining amount.
4604
4605 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
4606
4607         * retr.c (fd_read_body): Don't fiddle with "interactive timeout"
4608         if read timeout is unset.
4609
4610 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
4611
4612         * connect.c (bind_local): Don't set the IPV6_V6ONLY option on the
4613         socket.
4614
4615 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
4616
4617         * url.c (url_file_name): Respect the setting of
4618         opt.protocol_directories.
4619
4620         * main.c (main): Only check for ret=='?' when longindex is unset.
4621         (option_data): New option --protocol-directories.
4622
4623 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
4624
4625         * ftp.c (getftp): Ditto.
4626
4627         * http.c (gethttp): Correctly calculate bandwidth as total data
4628         read divided with download time.
4629
4630         * retr.c (fd_read_body): Separate the return values for data
4631         written and read.
4632
4633 2003-12-05  Hrvoje Niksic  <hniksic@xemacs.org>
4634
4635         * http.c (H_REDIRECTED): Respect the HTTP/1.1 "303 See Other"
4636         response code.
4637         Suggested by Dan Razzell.
4638
4639 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
4640
4641         * retr.c (fd_read_body): Report the amount of data *written* as
4642         amount_read.  This is not entirely logical, but that's what the
4643         callers expect, and it's not easy to change.
4644
4645         * ftp.c (ftp_loop_internal): Ditto.
4646
4647         * http.c (http_loop): Be smarter about assigning restval; if we're
4648         in the nth pass of a download, simply use the information we have
4649         about how much data has been retrieved as restval.
4650
4651         * ftp.c (getftp): Ditto for FTP "REST" command.
4652
4653         * http.c (gethttp): When the server doesn't respect range, skip
4654         the first RESTVAL bytes of the read body.  Never truncate the
4655         output file.
4656
4657         * retr.c (fd_read_body): Support skipping initial STARTPOS octets.
4658
4659 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
4660
4661         * http.c (skip_short_body): Renamed skip_body to skip_short_body;
4662         don't bother calling fd_read_body.
4663
4664 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
4665
4666         * retr.c (fd_read_body): Sanitize arguments and document them
4667         better.  Make sure the timer is created and updated only if
4668         necessary.  Updated callers.
4669
4670 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
4671
4672         * http.c (skip_body): New function.
4673         (gethttp): Use it to skip the body of the responses we don't care
4674         to download.  That allows us to reuse the connection.
4675         (gethttp): Trust that the HEAD requests will not generate body
4676         data.
4677
4678         * retr.c (fd_read_body): Don't write to OUT if it's NULL.
4679
4680 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
4681
4682         * http.c (gethttp): Initialize SSL only the first time when SSL
4683         URL is downloaded.
4684
4685 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
4686
4687         * cookies.c (cookie_header): Only generate the contents of the
4688         header, not the leading "Cookie: " or the trailing "\r\n".
4689
4690         * http.c (gethttp): When adding headers specified with `--header',
4691         allow them to override the headers generated by Wget.
4692
4693         * init.c (cmd_spec_header): Made opt.user_headers a vector.
4694
4695         * http.c (request_new): New function.  Returns a request structure
4696         which can be modified in various ways, most notably by adding HTTP
4697         headers to the request.
4698         (request_set_header): New function for adding the header to the
4699         request.  If the header is already available, it gets replaced.
4700         (request_send): Construct and send the request.
4701         (gethttp): Use the request_* functions to generate the request.
4702
4703 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
4704
4705         * http.c (gethttp): Don't include the Proxy-Authorization header
4706         in the request tunneled through proxy.
4707
4708 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
4709
4710         * http.c (gethttp): Use the CONNECT handle to establish SSL
4711         passthrough through non-SSL proxies.
4712
4713 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
4714
4715         * init.c: Don't #include netinet/Winsock stuff.
4716
4717 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
4718
4719         * http.c: Deleted the old functions header_process,
4720         header_extract_number, header_exists, header_strdup,
4721         http_process_range, http_process_none, http_process_type, and
4722         http_process_connection.
4723
4724         * http.c (response_new): New function.
4725         (response_header_bounds): Ditto.
4726         (response_header_copy): Ditto.
4727         (response_header_strdup): Ditto.
4728         (response_status): Ditto.
4729         (gethttp): Use the new response_* functions to parse the response.
4730         Support HTTP/0.9 responses.
4731
4732 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
4733
4734         * progress.c (create_image): Don't calculate ETA if nothing has
4735         been downloaded yet, because it causes division by zero.
4736
4737 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
4738
4739         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
4740         headers define sa_len as a macro.
4741
4742 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
4743
4744         * html-parse.c (convert_and_copy): Remove embedded newlines when
4745         AP_TRIM_BLANKS is specified.
4746
4747 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
4748
4749         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
4750         previously used.
4751
4752 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
4753
4754         * Makefile.in (http$o): Added the trailing backslash that was
4755         missing.
4756
4757 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
4758
4759         * headers.c: Removed.  The file is no longer relevant, now that no
4760         special handling of headers is done by the rbuf code.  Moved
4761         portions to http.c.
4762
4763 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
4764
4765         * rbuf.c: Removed.
4766
4767         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
4768         struct rbuf.  Updated all callers.
4769
4770         * http.c (gethttp): Use fd_read_head to read all the headers in
4771         one go.
4772         (next_header): New function.
4773
4774         * retr.c (fd_read_line): New function: reads a line from FD,
4775         leaving the rest of the data unread.
4776         (fd_read_head): New function.
4777
4778         * connect.c (fd_peek): New function, implements peeking.
4779         (poll_internal): New function.
4780         (fd_read): Use it.
4781         (fd_write): Ditto.
4782         (fd_peek): Ditto.
4783         (fd_register_transport): Allow registering a "peeker" callback.
4784
4785 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
4786
4787         * connect.c: Renamed xread/xwrite/xclose to
4788         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
4789         because the semantics have diverged from read/write/close too
4790         significantly.  Updated all callers.
4791
4792 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
4793
4794         * connect.c (sock_write): It's not necessary to initialize RES.
4795
4796 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
4797
4798         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
4799         if IPv6 is disabled.
4800
4801 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
4802
4803         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
4804         and AI_ADDRCONFIG is missing.
4805
4806 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
4807
4808         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
4809         random seed.
4810
4811 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
4812
4813         * host.c (address_list_contains): Renamed address_list_find to
4814         address_list_contains because its result is boolean.
4815
4816 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
4817
4818         * connect.c (select_fd): Return 1 if select is not available.
4819
4820 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
4821
4822         * connect.c (connect_to_host): Don't reference address list after
4823         releasing it.
4824
4825 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
4826
4827         * main.c (print_help): Fix alignment of FTP options output.
4828
4829 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
4830
4831         * host.c (lookup_host): Check for the ability to create IPv6
4832         sockets here.
4833
4834         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
4835         systems.
4836
4837 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
4838
4839         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
4840         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
4841         of --convert-links.  Fix docs of SSL options.
4842
4843 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
4844
4845         * ftp-basic.c: Don't include <arpa/inet.h> and others because
4846         they're no longer needed.
4847
4848 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
4849
4850         * main.c (main): Don't allow setting of both opt.ipv4_only and
4851         opt.ipv6_only.
4852
4853         * init.c (defaults): Mark opt.ipv4_only specially when set
4854         automatically.
4855
4856 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
4857
4858         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
4859         unspecified.  This ensures that specifying `--no-inet4' on systems
4860         where IPv6 resolves, but doesn't work behaves the same regardless
4861         of the availability of AI_ADDRCONFIG.
4862
4863 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
4864
4865         * host.c: Don't refer to the now-removed function
4866         forget_host_lookup in the documentation of lookup_host.
4867
4868 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
4869
4870         * http.c (persistent_available_p): Correctly specify the endpoint
4871         argument to socket_ip_address.
4872         (gethttp): When printing the "reusing connection to..." message,
4873         specify the host name of the reused connection, not the current
4874         host name.  That makes more sense because it provides a useful
4875         piece of information -- we know to which host we're supposed to
4876         connect anyway!
4877
4878 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
4879
4880         * init.c: Make sure the options are in alphabetic order!
4881
4882         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
4883         after all -- having both would result in some code duplication.
4884         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
4885         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
4886         AI_ADDRCONFIG where available.
4887         (lookup_host): New flag LH_REFRESH that specifies that a cached
4888         entry for HOST should be refreshed.
4889         (cache_query): New function.
4890         (cache_store): Ditto.
4891         (cache_remove): Ditto.
4892         (forget_host_lookup): No longer necessary, replaced with static
4893         function cache_remove.
4894
4895 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
4896
4897         * main.c: Enable -4 and -6 only if IPv6 is enabled.
4898
4899 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
4900
4901         * connect.c (register_transport): Renamed from register_extended.
4902         Explain the intended usage.
4903
4904 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
4905
4906         * url.c (uri_merge): Merging "foo" and "bar" should result in
4907         "bar", not in "foo/bar".
4908         (path_simplify): Don't remove empty path elements; don't
4909         special-case leading slash.
4910         (path_simplify): Don't swallow ".."'s at the beginning of string.
4911         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
4912         (append_uri_pathel): Defang ".." path element upon encountering
4913         it.
4914
4915 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
4916
4917         * http.c (persistent_available_p): Don't attempt to talk to two
4918         different SSL sites over the same secure connection.
4919
4920 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
4921
4922         * http.c (gethttp): Ditto.
4923
4924         * ftp.c (getftp): Use retryable_socket_connect_error instead of
4925         CONNECT_ERROR.
4926
4927         * wget.h (CONNECT_ERROR): Removed.
4928
4929         * connect.c (retryable_socket_connect_error): New function instead
4930         of unsupported_socket_family_error.
4931
4932 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
4933
4934         * wget.h (CONNECT_ERROR): Use it.
4935
4936         * connect.c (unsupported_socket_family_error): New function.
4937
4938 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
4939
4940         * connect.c (bind_local): Renamed bindport to bind_local; return
4941         the socket directly.  Updated callers.
4942         (accept_connection): Renamed acceptport to accept_connection;
4943         return the created socket directly.  Updated callers.
4944
4945 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
4946
4947         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
4948         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
4949         be created.
4950
4951 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
4952
4953         * host.c (lookup_host): Document the fact that the addresses are
4954         returned in order.
4955
4956 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
4957
4958         * utils.c: Use limits.h only where available.
4959
4960         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
4961
4962 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
4963
4964         * main.c: Added options --inet4-only and --inet6-only.
4965
4966 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
4967
4968         * host.c (host_errstr): Use the more standard message "Unknown
4969         host".
4970
4971 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
4972
4973         * connect.c (connect_to_host): Use that flag to decide whether to
4974         re-resolve the host name.
4975
4976         * host.c (struct address_list): Added a flag that maintains
4977         whether the connection worked at some point.
4978
4979 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
4980
4981         * host.c (lookup_host): Special-case the numeric addresses only in
4982         the non-IPv6 case.
4983
4984 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
4985
4986         * connect.c (resolve_bind_address): Call lookup_host_passive.
4987         Make sure that opt.bind_address is resolved only once.
4988
4989         * host.c (lookup_host_passive): New function, handles "passive"
4990         lookups.
4991         (lookup_host): Remove the passive flags.  Remove the
4992         family-related flags -- use ip_default_family instead.
4993
4994 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
4995
4996         * html-url.c: Get URLs from <object data="...">.
4997
4998 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
4999
5000         * main.c (option_data): Specify the command to use for --mirror.
5001
5002 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5003
5004         * cookies.c (cookie_handle_set_cookie): Specify exact match for
5005         unspecified domains.
5006
5007 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5008
5009         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
5010         `-s'.
5011
5012 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5013
5014         * main.c (main): Add --dont-remove-listing for backward
5015         compatibility with previous versions.
5016         (print_help): Fix typo, spotted by Dennis Smit.
5017
5018 2003-11-08  Gisle Vanem  <giva@bgnett.no>
5019
5020         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
5021         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
5022
5023 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5024
5025         * progress.c (update_speed_ring): Clear the speed ring when the
5026         download stalls.
5027
5028         * retr.c (get_contents): Specify 0.95s read timeout, so that the
5029         progress gauge can be updated even when data arrives very slowly
5030         or stalls.
5031
5032 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5033
5034         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
5035         timer that has merely been allocated because get_contents() does
5036         that.
5037         (wtimer_update): Abort if the timer is not initialized.
5038
5039 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5040
5041         * retr.c (get_contents): Pass the timer to limit_bandwidth().
5042
5043         * utils.c (wtimer_update): New function instead of wget_elapsed;
5044         just update the timer, but don't return anything.
5045         (wtimer_read): Read and return the last known value of the timer.
5046
5047 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5048
5049         * http.c (persistent_available_p): Instead of matching all the
5050         addresses of HOST and last host, determine the peer's IP address
5051         with socket_ip_address and see if that address is one of those
5052         HOST resolves to.
5053
5054         * host.c (address_list_match_all): Removed.
5055         (address_list_find): New function, finds an IP address in the
5056         address list.
5057
5058         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
5059         ftp_epsv so it doesn't need to call getpeername.
5060
5061         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
5062         getpeername.
5063         (ftp_lprt): Ditto.
5064
5065         * connect.c (socket_ip_address): Replaces conaddr, generalized to
5066         either get peer's or local address.
5067         (sockaddr_get_data): Made local to this file.
5068
5069 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5070
5071         * hash.c (HASH_POSITION): Explicitly accept the hash function.
5072         (grow_hash_table): Extract ht->hash_function outside the loop.
5073         (hash_table_remove): Ditto.
5074         (hash_table_clear): Fill entries with 0xff to clear them.
5075         (hash_table_remove): Mark entries as deleted with the correct
5076         marker.
5077
5078 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5079
5080         * http.c (persistent_available_p): No reason for the host lookup
5081         to be silent -- it's a lookup like any other.
5082
5083 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
5084
5085         * connect.c (register_extended): Check that fd >= 0.
5086
5087 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
5088
5089         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
5090
5091 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
5092
5093         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
5094         the field is empty.  This allows NULL pointer and 0 value to be
5095         used as keys, which is necessary for the connect.c code to work
5096         when fd==0.
5097         (hash_table_new): Fill mappings with 0xff.
5098         (grow_hash_table): Ditto.
5099
5100 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
5101
5102         * url.c (url_parse): Allow empty ports.
5103
5104 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
5105
5106         * main.c (print_help): Break the help string into multiple chunks.
5107         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
5108         HANDLE_CMD to generic DATA.
5109         (option_data): Use the new OPT_FUNCALL feature.
5110
5111 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
5112
5113         * log.h: Declare log_init, log_close, and
5114         log_request_redirect_output here.
5115
5116 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
5117
5118         * main.c: (main): added --preserve-permissions option.
5119
5120         * ftp.c (ftp_retrieve_list): added support for
5121         --preserve-permissions option.
5122
5123         * init.c: added support for --preserve-permission option.
5124
5125         * option.h: added support for --preserve-permission option.
5126
5127 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
5128
5129         * main.c (init_switches): New function.  Convert option_data to
5130         long_options and short_options, which can be fed to getopt_long.
5131         (main): Execute command-line options by consulting option_data.
5132
5133 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
5134
5135         * gen_sslfunc.c (ssl_read): Implement a more correct check for
5136         EINTR.
5137         (ssl_write): Ditto.
5138         (init_ssl): Use a global SSL context.
5139
5140 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
5141
5142         * connect.c (xclose): Free INFO even if it doesn't provide a
5143         closer.
5144
5145 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
5146
5147         * connect.c: Updated all callers of
5148         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
5149
5150         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
5151         handled automatically by xread.
5152
5153         * hash.c (ptrhash): Made private.
5154         (ptrcmp): Ditto.
5155         (inthash): Removed.
5156
5157         * connect.c (select_fd): Don't set errno, leave it to the caller.
5158
5159         * gen_sslfunc.c (connect_ssl): Use register_extended to register
5160         SSL callbacks for communication with SSL-enabled endpoints.
5161         (ssl_read): New function.
5162         (ssl_write): Ditto.
5163         (ssl_poll): Ditto.
5164         (ssl_close): Ditto.
5165
5166         * connect.c (register_extended): New function -- register
5167         callbacks for basic socket operations.
5168         (xread): Ditto.
5169         (xwrite): Ditto.
5170         (xclose): Ditto.
5171         (sock_read): New function, default implementation for reading.
5172         (sock_write): Ditto for writing.
5173         (sock_poll): Ditto for polling.
5174         (sock_close): Ditto for closing.
5175
5176 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
5177
5178         * connect.c (bindport): Fix compilation under pre-C99 compilers.
5179
5180 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
5181
5182         * connect.c (connect_to_ip): More compact error checking.
5183         (bindport): Don't treat failed setsockopt as a fatal error.
5184
5185 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
5186
5187         * connect.c (resolve_bind_address): Use a more accurate error
5188         message -- we're not binding to ANY, we're disabling bind
5189         altogether.
5190
5191 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
5192
5193         * cookies.c (save_cookies_mapper): Respect the setting of
5194         keep-session-cookies.
5195         (cookie_jar_load): Import session cookies.
5196         Based on code submitted by Nicolas Schodet.
5197
5198         * utils.c (datetime_str): Use information in TM when it's
5199         non-NULL.
5200
5201         * main.c (main): New option `--keep-session-cookies'.
5202
5203 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
5204
5205         * Makefile.in (realclean): Delete config.h.in.
5206
5207 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
5208
5209         * config-post.h: New file, included from now autogenerated
5210         config.h.in.
5211
5212 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
5213
5214         * progress.c (progress_handle_sigwinch): Don't call
5215         determine_screen_width() from the signal handler.  Instead, just
5216         set a volatile variable.
5217         (bar_create): Check whether SIGWINCH was received.
5218         (bar_update): Ditto.
5219
5220         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
5221
5222 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
5223
5224         * utils.c (xsleep): New function.  Uses nanosleep where available,
5225         resuming sleeps interrupted by signals.  Updated callers of sleep
5226         and usleep to use xsleep.
5227
5228 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
5229
5230         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
5231         declaration of SEED.
5232
5233 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
5234
5235         * log.c (logvprintf): Documented better.  Renamed to
5236         log_vprintf_internal to avoid confusion with the public API
5237         functions logprintf and logputs.
5238
5239 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
5240
5241         * wget.h (N_): Don't parenthesize argument.
5242
5243 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
5244
5245         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
5246         because that doesn't work on machines that define it as bitfield.
5247
5248 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
5249
5250         * connect.c (select_fd): Generalize the third argument into WAIT,
5251         so that the caller can request waiting for both read and write.
5252         Updated callers.
5253
5254 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
5255
5256         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
5257         just call free on them.
5258         (init_interesting): Use hash_table_put instead of string_set_add
5259         because we don't need the strdup that the latter function
5260         performs.
5261
5262         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
5263
5264         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
5265         (xfree_debug): Print at the file and line of the offending call to
5266         free.
5267
5268 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
5269
5270         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
5271         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
5272
5273         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
5274         definition from wget.h to xmalloc.h.
5275
5276 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
5277
5278         * html-parse.c (decode_entity): New function; split the decoding
5279         of entities here.
5280         (convert_and_copy): Use it to decode entities.
5281         (decode_entity): Handle the &apos entity.
5282         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
5283         decode &#0.
5284
5285 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
5286
5287         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
5288         `unsigned long' for the cheksum array.  Document the function.
5289
5290 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
5291
5292         * connect.c (acceptport): Don't call select_fd when timeout is not
5293         requested.
5294
5295 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
5296
5297         * host.c: Removed the ip_default_family global variable.
5298
5299         * host.c (lookup_host): Document the function.  Fixed declaration
5300         of VEC.
5301
5302 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
5303
5304         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
5305         in various places.
5306
5307 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
5308
5309         * wget.h: Move declarations of malloc and logging code to
5310         xmalloc.h and log.h respectively to unclutter this file.
5311         (STRDUP_ALLOCA): Made it side-effect free.
5312
5313         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
5314         and xnew0_array.
5315
5316         * xmalloc.c: New file.  Move the xmalloc routines here.
5317
5318 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
5319
5320         * connect.c (sockaddr_set_data): Remove the broken code that
5321         checked for NULL address.
5322
5323 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
5324
5325         * host.c (address_list_from_single): Removed.
5326         (address_list_from_ipv4_addresses): Renamed from
5327         address_list_from_vector.
5328
5329 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
5330
5331         * sysdep.h (CLOSE): Don't call close on file descriptors less than
5332         0, i.e. on uncreated sockets.
5333
5334         * connect.c (resolve_bind_address): Work on struct sockaddr
5335         directly.
5336         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
5337         and connect to any of its addresses.  If we can't connect and the
5338         host name lookup was cached, try to resolve it again.  This should
5339         fix problems with hosts behind dynamic DNS.  Updated all callers.
5340         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
5341         added the argument PRINT instead.  Updated all callers.
5342         (set_connection_host_name): Removed.
5343
5344         * host.c (address_list_address_at): New function instead of
5345         address_list_copy_one. It returns a pointer to ip_address *, so
5346         it's not necessary to copy the data.
5347         (address_list_cached_p): New function.
5348         (forget_host_lookup): Ditto.
5349
5350         * connect.c: Got rid of the MSOCK global variable.  Made bindport
5351         return the local socket it creates.  Added a new argument to
5352         acceptport, the socket to call accept on.  Updated callers.
5353         (closeport): Removed.
5354
5355         * connect.c: Moved the sockaddr code from host.c to this file,
5356         because most of that stuff is used for connecting, and has nothing
5357         to do with host names anyway.
5358         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
5359         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
5360         and sockaddr_get_port.
5361
5362 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
5363
5364         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
5365         large integers.
5366
5367 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
5368
5369         * url.c (append_uri_pathel): New argument ESCAPED_P that says
5370         whether [B, E) is to be treated as URL-escaped or not.  If
5371         ESCAPED_P is false, don't unescape the region.
5372         (url_file_name): u->file is not URL-escaped.
5373
5374 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
5375
5376         * retr.c (retrieve_from_file): Use retrieve_tree for
5377         page-requisites.
5378
5379         * main.c (main): Don't define opt.recursive when -p is used.
5380         Instead, make sure that recursion is used for HTTP in that case.
5381
5382 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
5383
5384         * host.h: Defined accessors for elements of ip_address.  Updated
5385         all callers.
5386         (address_list_match_all): Use memcmp in the non-IPv6 case.
5387
5388         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
5389         returned EAFNOSUPPORT.
5390
5391 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
5392
5393         * connect.h: changed bindport prototype and added the related
5394         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
5395
5396         * connect.c: changed bindport and resolve_bind_address to allow
5397         protocol-version specific DNS resolution. modified conaddr,
5398         acceptport and connect_to_one to make use of struct
5399         sockaddr_storage and of the new ip_address structure.
5400
5401         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
5402         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
5403
5404         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
5405         handle FTP over IPv6.
5406
5407         * ftp.h: changed prototype of ftp_epsv and added prototypes for
5408         ftp_lpsv, ftp_lprt and ftp_eprt.
5409
5410         * host.c: renamed the
5411         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
5412         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
5413         sockaddr_{g,s}et_port respectively.  changed
5414         address_list_match_all, address_list_from_addrinfo sockaddr_len,
5415         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
5416         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
5417         of the new ip_address structure.  removed map_ipv4_to_ip and
5418         map_ip_to_ipv4.
5419
5420         * host.h: redefined structure ip_address and removed structure
5421         wget_sockaddr.
5422
5423 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
5424
5425         * sysdep.h: Include inttypes.h where available.
5426
5427         * host.c: Switch from u_int32_t to uint32_t.
5428
5429 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
5430
5431         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
5432         quote.
5433
5434 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
5435
5436         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
5437         Use enums for NS_IN* constants.  Use ISXDIGIT.
5438
5439         * convert.c (construct_relative): Document better how the function
5440         works.
5441
5442 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
5443
5444         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
5445         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
5446         Reported by Bernhard Simon.
5447
5448 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
5449
5450         * version.c: Bump version.
5451
5452 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
5453
5454         * url.c: Ditto.
5455
5456         * html-parse.c (advance_declaration): Don't use trailing comma in
5457         enum because older compilers don't support it.
5458
5459         * utils.c: Don't redefine HAVE_SIGSETJMP.
5460
5461 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
5462
5463         * convert.c (construct_relative): Don't handle absolute files
5464         specially -- for example, -P/tmp/foo shouldn't imply that
5465         converted files must refer to "/tmp/foo/..."!
5466
5467 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
5468
5469         * http.c: Consider status 307 a valid redirect.
5470
5471 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
5472
5473         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
5474         elements might have been deleted.
5475
5476 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
5477
5478         * html-url.c (tag_handle_meta): Set the Refresh link to expect
5479         HTML.
5480         (append_one_url): Renamed to append_url.
5481
5482 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
5483
5484         * sysdep.h: Only define u_int32_t.
5485
5486 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
5487
5488         * utils.c (large_int_to_string): Use snprintf() to print the
5489         number.  This will work even on systems where libc doesn't
5490         understand %lld, but the compiler does, because it will use our
5491         snprintf replacement.
5492
5493         * init.c (parse_bytes_helper): New function.
5494         (cmd_bytes): Use it to parse bytes, but cast the result to long.
5495         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
5496         for --quota so that --quota=10G works even on machines without
5497         long long.
5498
5499         * options.h (struct options): Declare quota as LARGE_INT.
5500
5501         * retr.c (downloaded_exceeds_quota): Removed.
5502         (downloaded_increase): Ditto.
5503         (total_downloaded_bytes): New variable, replaces opt.downloaded,
5504         which was the wrong place for it anyway.  Updated callers of
5505         downloaded_exceeds_quota and downloaded_increase to check this
5506         variable directly.
5507
5508         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
5509         purpose, defined as `long', `long long' or `double', depending on
5510         size of long and whether long long is available.
5511
5512 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
5513
5514         * sysdep.h: Also check size of short for int32_t.
5515
5516 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
5517
5518         * host.c (lookup_host): Use u_int32_t to store the result of
5519         inet_addr().  That removes the need for offset fiddling, caring
5520         about endian-ness, etc.
5521
5522         * sysdep.h: Define int32_t and u_int32_t if not available.
5523
5524 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
5525
5526         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
5527         getpeername.
5528
5529         * config.h.in: Define socklen_t stub.
5530
5531         * host.c (sockaddr_len): Return socklen_t.
5532
5533         * connect.c (conaddr): Use socklen_t as the third argument to
5534         accept, getsockname, and connect.
5535
5536 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
5537
5538         * recur.c (retrieve_tree): Don't descend into documents that are
5539         not expected to contain HTML, regardless of their content-type.
5540
5541         * html-url.c (tag_url_attributes): Record which attributes are
5542         supposed to yield HTML links that can be followed.
5543         (tag_find_urls): Propagate that information to the caller through
5544         struct urlpos.
5545
5546 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
5547
5548         * hash.c (find_mapping): Return the next available mapping when
5549         the key is not found, not NULL.
5550         (hash_table_put): Use find_mapping to find the storage for the new
5551         data.
5552         (hash_table_put): Grow the table before exceeding maximum
5553         fullness, not afterwards.
5554
5555 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
5556
5557         * hash.c (hash_table_new): Slightly change the meaning of the
5558         first parameter.  Instead of being the minimum initial size, it is
5559         now the minimum number of items that the hash table can take
5560         without needing to resize.
5561
5562 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
5563
5564         * html-url.c (init_interesting): Initialize interesting_tags and
5565         interesting_attributes as hash tables.  This simplifies the code
5566         immensely because hash tables handle allocation and remove
5567         duplicates automatically.
5568         (find_tag): Removed.
5569         (collect_tags_mapper): Instead of calling find_tag, simply get the
5570         entry from interesting_tags hash table, which is both simpler and
5571         faster.
5572
5573 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
5574
5575         * hash.c (hash_table_get): Declare hash-table argument as const.
5576         (find_mapping): Ditto.
5577         (hash_table_get_pair): Ditto.
5578         (hash_table_contains): Ditto.
5579         (hash_table_count): Ditto.
5580
5581 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5582
5583         * html-url.c (get_urls_html): Parse the appropriate flags to
5584         html-parse.c.
5585
5586         * html-parse.c (map_html_tags): Accept FLAGS from the caller
5587         instead of examining OPT.
5588
5589 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5590
5591         * html-url.c (find_tag): Switch to binary search.
5592
5593 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5594
5595         * main.c (print_help): Fix typo; stured -> stored.
5596
5597 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5598
5599         * getopt.c: Add definitions of getopt_long and getopt_long_only.
5600
5601 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5602
5603         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
5604         think, a better name, because it implies that debugging output is
5605         merely possible, not "on by default", as might be construed from
5606         just DEBUG.
5607
5608 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5609
5610         * ftp.c (has_insecure_name_p): Define it here.
5611
5612         * utils.c (has_wildcards_p): Define it here.
5613
5614         * sysdep.h: Declare fnmatch-related macros here, if not using
5615         system fnmatch().  Update .c files to not declare fnmatch.h
5616         directly.
5617
5618         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
5619
5620 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
5621
5622         * getopt.c: Newer version, imported from Free libit.
5623
5624 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
5625
5626         * cookies.c (struct cookie): Remove unused backpointer to cookie
5627         jar.
5628
5629 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
5630
5631         * cmpt.c (memmove): Comment out, since it's no longer used.
5632
5633         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
5634         chains in one pass.
5635         (find_chains_of_host): Assume that the caller has allocated DEST
5636         to be sufficiently large to take all the data.
5637         (eliminate_dups): Run through the array and eliminate dups on the
5638         fly instead of using memmove.
5639         (cookie_jar_process_set_cookie): Free cookie->domain before
5640         re-setting it.
5641
5642 2003-10-05  Gisle Vanem  <giva@bgnett.no>
5643
5644         * mswindows.c (set_sleep_mode): Fix type of
5645         _SetThreadExecutionState.
5646
5647 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
5648
5649         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
5650         to this patch, wget --post-file=nosuchfile dumped core.
5651
5652 2003-10-04  Gisle Vanem  <giva@bgnett.no>
5653
5654         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
5655         for thread termination.
5656
5657 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
5658
5659         * log.c: Use `...' in function definitions; ansi2knr will convert
5660         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
5661         VA_START_2 macros.
5662
5663 2003-10-03  Gisle Vanem  <giva@bgnett.no>
5664
5665         * connect.c: And don't include them here.
5666
5667         * mswindows.h: Include winsock headers here.
5668
5669 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
5670
5671         * html-parse.c (convert_and_copy): Move variable declarations
5672         before statements.
5673
5674 2003-10-02  Gisle Vanem  <giva@bgnett.no>
5675
5676         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
5677         thread via a helper function. Continually query the thread's
5678         exit-code until finished or timed out.
5679
5680 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
5681
5682         * wget.h (XMALLOC_ARRAY): Removed.
5683         (ALLOCA_ARRAY): Ditto.
5684
5685         * html-parse.c: Renamed alloca_p to resized.
5686         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
5687         returned it to html-parse.c, since nothing else was using it.
5688
5689 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
5690
5691         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
5692         by valgrind.
5693
5694 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
5695
5696         * html-parse.c (convert_and_copy): Handle numeric entities in
5697         hexadecimal, &#xHH.
5698         (convert_and_copy): Copy the contents directly to the pool without
5699         a stack-allocated intermediary.
5700
5701 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
5702
5703         * utils.c (alarm_set): New function; use either setitimer or alarm
5704         to set up the alarm.
5705         (alarm_cancel): New function; cancel the alarm set up by
5706         alarm_set.
5707         (run_with_timeout): Use them.
5708
5709 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
5710
5711         * url.c (url_parse): Don't leak memory when a reencoded URL turns
5712         out to be invalid.
5713
5714         * url.c (parse_errors): Mark error messages for translation.
5715         (url_error): Translate error messages returned to the caller.
5716
5717 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
5718
5719         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
5720         the compiler.
5721
5722 2003-09-26  Gisle Vanem  <giva@bgnett.no>
5723
5724         * src/mswindows.c: Added ws_percenttitle() showing progress in the
5725         window titlebar. Called from retr.c. Secured ws_mypath().
5726
5727         * windows/config.h.ms: alloca() prototype not needed.  Removed
5728         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
5729         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
5730         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
5731
5732 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
5733
5734         * ftp.c (getftp): --spider option should now work with FTP
5735         downloads.
5736         (ftp_loop_internal): quiet reports and calculations of downloads
5737         when --spider option set, nor try deleting when --delete-after
5738         also set.
5739         (ftp_loop): --spider will skip HTML-ification of .listing file.
5740
5741 2003-09-26  Gisle Vanem  <giva@bgnett.no>
5742
5743         * mswindows.c (read_registry): Removed.
5744         (set_sleep_mode): New function.
5745         (windows_main_junk): Call it.
5746
5747 2003-09-26  Gisle Vanem  <giva@bgnett.no>
5748
5749         * mswindows.c (read_registry): Fix invocation of registry
5750         functions.
5751
5752         * mswindows.c (read_registry): Condition definitions of sleep and
5753         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
5754         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
5755
5756 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
5757
5758         * url.c (url_escape_1): Revert unintentional change to lowercase
5759         xdigit escapes.
5760         (url_escape_dir): Document that this function depends on the
5761         output of url_escape_1.
5762
5763 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
5764
5765         * progress.c (create_image): Print the current ETA if we're done
5766         with the download.
5767         (create_image): Change '-' display char to '+' in the progress bar.
5768
5769         * Makefile.in (clean): Remove .libs.
5770
5771 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
5772
5773         * cookies.c (struct cookie): New flag domain_exact.
5774         (update_cookie_field): Skip leading dot in domain.
5775         (find_matching_chains): Match numeric addresses exactly; don't
5776         needlessly copy HOST to the stack.
5777         (matching_cookie): Added argument HOST.  If cookie->domain_exact
5778         is set, check that HOST is equal to cookie->domain.
5779         (cookie_jar_load): Only use TAB as delimiter.  Document the
5780         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
5781         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
5782         domain_exact to true if DOMAIN-FLAG is false.
5783         (save_cookies_mapper): If domain_exact is false, prepend the
5784         domain with dot, like Mozilla does.
5785
5786 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
5787
5788         * progress.c (create_image): Print the initial part of the
5789         download with '-' characters, analogous to how dot progress prints
5790         the initial part with ','.
5791
5792         * hash.c (ptrhash): New function.
5793         (ptrcmp): Ditto.
5794         (hash_table_new): Default to identity hash table.
5795
5796 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
5797
5798         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
5799         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
5800         to unsigned short instead.
5801
5802 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
5803
5804         * url.c (path_simplify): Instead of calls to memmove, handle "./"
5805         and "../" by advancing pointers.
5806
5807 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
5808
5809         * retr.c (getproxy): Moved from url.c.
5810
5811         * convert.c: Split off link conversion from url.c into separate
5812         file.  Also included the book-keeping stuff from recur.c.
5813
5814 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
5815
5816         * init.c: Improved documentation of functions.
5817         (cmd_boolean): Attempt to make code that tries to avoid calling
5818         strcmp for "speed" a bit more readable.
5819
5820         * init.c (simple_atof): Report error on encountering non-digit,
5821         non-"." character.
5822         (simple_atoi): Replacement for myatoi(), calling interface
5823         compatible with simple_atof.  Updated myatoi's callers.
5824
5825 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
5826
5827         * url.c (path_simplify): Would read two bytes past the end of the
5828         string in the "./" case.
5829
5830 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
5831
5832         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
5833         as what Wget considers "text/html".
5834
5835 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
5836
5837         * connect.c (connect_with_timeout): Made timeout type double.
5838
5839         * options.h (struct options): New members read_timeout,
5840         dns_timeout, and connect_timeout.
5841         Use them.
5842
5843 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
5844
5845         * init.c (simple_atof): New function.
5846         (cmd_time): Use it.
5847         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
5848         to parse decimals.
5849
5850         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
5851         previous one.
5852
5853 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
5854
5855         * main.c (main): Use setoptval() for setting the options.  Use
5856         run_command for `-e'.
5857
5858         * init.c (parse_line): Rewritten to return COMIND right away.
5859         Changed linkage to static.
5860         (run_wgetrc): Use the available comind when calling setval, so it
5861         doesn't have to be computed twice.
5862         (setval_internal): New function, runs the command's action without
5863         any error checking.
5864         (setoptval): New function, does what setval used to do, but exits
5865         in case of error.
5866         (run_command): New function.
5867
5868 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
5869
5870         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
5871         its decimal part.
5872
5873         * retr.c (sleep_between_retrievals): In the random-wait case, use
5874         random_float() to wait between 0 and 2*opt.wait seconds.
5875
5876         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
5877         handle timeout values in (0, 1) range.
5878         (random_float): New function.
5879
5880         * options.h (struct options): Change the types of wait, waitretry,
5881         and timeout to double.
5882
5883         * init.c (cmd_time): Accept floating point time.
5884
5885 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
5886
5887         * retr.c (get_contents): Cosmetic fixes.
5888
5889 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
5890
5891         * url.c (uri_merge): Get rid of uri_merge_1.
5892         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
5893         i.e. don't add an extra slash merely because BASE ends with two
5894         slashes.
5895         (parse_credentials): Renamed from parse_uname.  Rewrittern in
5896         standard [beg, end) calling style.
5897         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
5898         (url_skip_credentials): Include # and ; as terminators.  Old code
5899         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
5900         contain a username.
5901         (url_skip_scheme): Removed because it was unused.
5902         (url_has_scheme): Require "scheme" to be at least one char long.
5903
5904 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
5905
5906         * url.c (url_file_name): Expect NULL dir_prefix.
5907
5908         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
5909         WINDOWS.
5910         (defaults): Set dir_prefix to NULL by default.
5911
5912 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
5913
5914         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
5915         gcc does.
5916
5917 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
5918
5919         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
5920         (ARRAY_SIZE): Renamed to countof.  All callers updated.
5921
5922 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
5923
5924         * main.c (main): New option --strict-comments.
5925
5926         * html-parse.c (find_comment_end): New function: simple BM search
5927         for "-->".
5928         (map_html_tags): Use it if looking at a comment and not in strict
5929         comments mode.
5930
5931 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
5932
5933         * ftp.h: Added OS400 system in enum
5934         * ftp-basic.c: recognize OS400 systems
5935         * ftp.c: don't prepend the CWD if talking to OS400, since it
5936         breaks the change in library
5937
5938 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
5939
5940         * retr.c (get_contents): Pass the correct argument to ssl_iread.
5941
5942 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
5943
5944         * safe-ctype.h: Don't #define ctype.h macros to errors because
5945         that loses when someone #include's ctype.h after safe-ctype.h.
5946
5947 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
5948
5949         * url.c: Undef U, W, C after use.
5950
5951 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
5952
5953         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
5954         be augmented by ",nocontrol" which means don't escape the control
5955         characters, but otherwise keep OS settings.
5956
5957         * url.c (file_unsafe_char): Deleted.
5958         (append_uri_pathel): Query filechr_table directly.
5959         (filechr_table): Separated Unix, Windows, and control-unsafe
5960         characters.
5961
5962 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
5963
5964         * url.c (url_escape_1): New function.
5965         (url_escape): Use it.
5966         (sync_path): Handle pathological cases where u->file and u->dir
5967         contain really strange characters.
5968         (ENCODE): Deleted.
5969         (REENCODE): Deleted.
5970
5971 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
5972
5973         * url.c (url_file_name): Don't reallocate FNAME if the file
5974         doesn't exist, as is usually the case.
5975
5976         * utils.c (unique_name): New flag allow_passthrough.
5977
5978 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
5979
5980         * utils.c (wtimer_sys_diff): Convert the time difference to signed
5981         __int64, then to double.  This works around MS VC++ 6 which can't
5982         convert unsigned __int64 to double directly.
5983
5984 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
5985
5986         * Makefile.in (clean): Also remove the core.<number> files
5987         produced by recent Linux systems.
5988
5989 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
5990
5991         * http.c (post_file): Don't pad the file if it's not large
5992         enough.  Bail out instead.
5993
5994 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
5995
5996         * retr.c (get_contents): Reduce the buffer size to the amount of
5997         data that may pass through for one second.  This prevents long
5998         sleeps when limiting bandwidth.
5999
6000         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
6001         bandwidth limitation to small values is requested.
6002
6003 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
6004
6005         * progress.c (update_speed_ring): Moved the speed ring update to a
6006         separate function and documented it better.
6007
6008         * progress.c: Use `double' for most timers to support granularity
6009         smaller than 1ms.
6010
6011 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
6012
6013         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
6014         string.
6015         (XDIGIT_TO_xchar): Ditto.
6016
6017 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
6018
6019         * utils.c: Change the type of timer-related functions from long to
6020         double, for better precision.  On machines supporting gettimeofday
6021         the timers now work with granularity of less than one millisecond.
6022
6023 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
6024
6025         * cookies.c (parse_set_cookies): Fixed the parser to handle more
6026         edge conditions.
6027         (test_cookies): New function, contains a test suite for
6028         parse_set_cookies.
6029
6030 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
6031
6032         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
6033
6034 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
6035
6036         * cookies.c (parse_set_cookies): Allow trailing space in
6037         set-cookies header.  Also, allow any amount of whitespace, not
6038         only one character.  Allow empty set-cookies header without
6039         spewing an error.
6040
6041 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
6042
6043         * url.c (append_uri_pathel): Use opt.restrict_file_names when
6044         calling file_unsafe_char.
6045
6046         * init.c: New command restrict_file_names.
6047
6048         * main.c (main): New option --restrict-file-names[=windows,unix].
6049
6050         * url.c (url_file_name): Renamed from url_filename.
6051         (url_file_name): Add directory and hostdir prefix here, not in
6052         mkstruct.
6053         (append_dir_structure): New function, does part of the work that
6054         used to be in mkstruct.  Iterates over path elements in u->path,
6055         calling append_uri_pathel on each one to append it to the file
6056         name.
6057         (append_uri_pathel): URL-unescape a path element and reencode it
6058         with a different set of rules, more appropriate for handling of
6059         files.
6060         (file_unsafe_char): New function, uses a lookup table to decide
6061         whether a character should be escaped for use in file name.
6062         (append_string): New utility function.
6063         (append_char): Ditto.
6064         (file_unsafe_char): New argument restrict_for_windows, decide
6065         whether Windows file names should be escaped in run-time.
6066
6067         * connect.c: Include <stdlib.h> to get prototype for abort().
6068
6069 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
6070
6071         * utils.c (wtimer_sys_set): Extracted the code that sets the
6072         current time here.
6073         (wtimer_reset): Call it.
6074         (wtimer_sys_diff): Extracted the code that calculates the
6075         difference between two system times here.
6076         (wtimer_elapsed): Call it.
6077         (wtimer_elapsed): Don't return a value smaller than the previous
6078         one, which could previously happen when system time is set back.
6079         Instead, reset start time to current time and note the elapsed
6080         offset for future calculations.  The returned times are now
6081         guaranteed to be monotonically nondecreasing.
6082
6083 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
6084
6085         * host.c (lookup_host): Print the result of the DNS lookup.
6086
6087 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
6088
6089         * init.c (cmd_boolean): Accept yes/no along with on/off.
6090         (cmd_lockable_boolean): Ditto.
6091
6092 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
6093
6094         * init.c: New command dns_cache.
6095
6096         * main.c (main): New option --dns-cache[=off].
6097
6098 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
6099
6100         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
6101
6102         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
6103         HAVE_GETADDRINFO for getaddrinfo-related stuff.
6104
6105 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
6106
6107         * url.c (url_parse): Return an error if the URL contains a [...]
6108         IPv6 numeric address and we don't support IPv6.
6109
6110 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
6111
6112         * url.c (is_valid_ipv6_address): Modified to not require
6113         zero-terminated strings.
6114         (is_valid_ipv4_address): Ditto.
6115
6116 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
6117
6118         src/url.c: added RFC 2732 compliance for URL parsing. The
6119         functions is_*_address valid are a modified version of
6120         glibc 2.3.2 inet_pton's code.
6121
6122 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
6123
6124         * main.c init.c options.h: Added --retry-connrefused option so
6125         that Connection Refused failures are treated as non-fatal (when
6126         trying to retrieve from busy servers).
6127
6128         * wget.h: New CONNECT_ERROR macro for encapsulating this
6129         modification.
6130
6131         * ftp.c http.c : Use CONNECT_ERROR macro in places where
6132         ECONNREFUSED was checked.
6133
6134 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
6135
6136         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
6137         by calling new function has_insecure_name_p.  This is based on a
6138         patch by Red Hat.
6139
6140         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
6141         if filename starts with `/' or contains `../' and is therefore
6142         considered insecure.
6143
6144         * fnmatch.h: Declare has_insecure_name_p().
6145
6146 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
6147
6148         * init.c (cmd_file): Allocate RESULT correctly.
6149
6150 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
6151
6152         * recur.c (retrieve_tree): Check whether downloaded_html_set is
6153         non-NULL before using it.
6154
6155 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
6156
6157         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
6158
6159 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6160
6161         * progress.c (bar_set_params): Fall back to dot progress if the
6162         terminal type is "emacs".
6163
6164 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6165
6166         * log.c: Don't #undef WGET_USE_STDARG.
6167
6168 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
6169
6170         * hash.c (prime_size): Store the offset of the prime number in the
6171         prime table.  When searching, start with the given offset.
6172         (hash_table_new): Pass the pointer to ht->prime_offset to
6173         prime_size.
6174         (grow_hash_table): Ditto.
6175         (prime_size): Make 13 the first prime to make empty hash tables
6176         slightly smaller.
6177
6178 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
6179
6180         * recur.c (download_child_p): Minor optimization to avoid an
6181         unnecessary additional call to schemes_are_similar_p function.
6182
6183 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
6184
6185         * url.c (schemes_are_similar_p): New function to test enumerated
6186         scheme codes for similarity.
6187
6188         * url.h: Declare it.
6189
6190         * recur.c (download_child_p): Use it to compare schemes.  This
6191         also fixes a bug that allows hosts to be spanned (without the
6192         -H option) when the parent scheme is https and the child's is
6193         http or vice versa.
6194
6195 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
6196
6197         * ftp.c (getftp): Don't ftruncate stdout.
6198
6199         * http.c (gethttp): Don't ftruncate stdout.
6200
6201 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
6202
6203         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
6204         (get_number): Ditto.
6205         (get_alt_number): Ditto.
6206         (__isleap): New function-like macro used by strptime.
6207         (day_of_the_week): New function used by strptime.
6208         (day_of_the_year): Ditto.
6209         (__mon_yday): Now shared by mktime and strptime implementations.
6210
6211 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6212
6213         * cookies.c (check_domain_match): Use match_tail in case
6214         insensitive mode.
6215
6216         * utils.c (match_tail): Allow the caller to specify case
6217         insensitive mode.
6218
6219         * cookies.c (store_cookie): When expiry_time is 0, print it as
6220         undefined, not indefinite.
6221
6222 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
6223
6224         * cookies.c (cookie_jar_process_set_cookie): Do not store
6225         discarded cookie.
6226
6227 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6228
6229         * cookies.c (check_domain_match): Allow cookies to be set for
6230         subdomains of unknown top-level domains under some circumstances.
6231
6232 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
6233
6234         * gen_ssl.c:
6235         - allow checking of server cert
6236         - allow defining client cert type
6237         - allow limit of ssl protocol
6238         - check more return values
6239         - added debug message on break
6240
6241 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
6242
6243         * recur.c (download_child_p): Revert order of items in check
6244         number 6 for clarity.
6245
6246 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6247
6248         * init.c: Ditto.
6249
6250         * main.c: Ditto.
6251
6252         * http.c: Use the new interface.
6253
6254         * cookies.c: Provide an OO-style "cookie jar" interface to enable
6255         separate cookie jars.
6256
6257         * http.c (http_atotm): Declare argument as const.
6258
6259 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
6260
6261         * cookies.c (cookie_new): Default to PORT_ANY.
6262         (find_cookie_chain_exact): Only search by DOMAIN.
6263         (find_matching_cookie): Also check that PORT matches.
6264         (store_cookie): Only match the domain.
6265         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
6266         is valid for that host rather than discarding it completely.
6267         (find_matching_chains): Don't search by PORT.
6268         (matching_cookie): Also match PORT.
6269         (load_cookies): Set the port if specified, otherwise leave it as
6270         ANY.
6271         (save_cookies_mapper): Save the port if specified, otherwise leave
6272         it empty.
6273
6274 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
6275
6276         * init.c: The option `egdfile' was not in sort order.
6277
6278 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
6279
6280         * ftp.c (getftp): Treat directories that begin with <letter>: as
6281         absolute.
6282         (getftp): Strip trailing slashes from con->id before merging it
6283         with TARGET.
6284
6285 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
6286
6287         * http.c (gethttp): If Content-Type is not given, assume
6288         text/html.
6289
6290 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6291
6292         * recur.c (download_child_p): Don't ignore rejection of HTML
6293         documents that are themselves leaves of recursion.
6294
6295 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
6296
6297         Makefile.in: Updated several dependencies for object files to take
6298         account of nested include files.
6299
6300 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
6301
6302         Makefile.in: The target `connect$o' (connect.o) now depends on
6303         `utils.h'
6304
6305 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
6306
6307         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
6308         (gethostbyname_with_timeout): Use it.
6309
6310         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
6311         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
6312
6313 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6314
6315         * host.c (getaddrinfo_with_timeout): New function.
6316         (gethostbyname_with_timeout): Ditto.
6317         (lookup_host): Use them.
6318
6319 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6320
6321         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
6322
6323 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6324
6325         * init.c (comind): Use a marginally faster implementation of
6326         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
6327         nanosecond earned."
6328
6329 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6330
6331         * main.c (print_help): Document `--post-data' and `--post-file'.
6332
6333 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6334
6335         * http.c (gethttp): Ditto.
6336
6337         * retr.c (retrieve_url): Initialize variables to appease the
6338         compiler.
6339
6340         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
6341         select_fd.
6342         (ssl_iwrite): Ditto.
6343
6344         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
6345         ETIMEDOUT in case of timeout.
6346         (iread): No need to handle EINTR when calling select_fd.
6347         (iwrite): Ditto.
6348
6349 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6350
6351         * retr.c (retrieve_url): Make sure that POST is not honored for
6352         redirections.
6353
6354         * http.c (gethttp): Send the POST data when requested.
6355         (post_file): New function.
6356         (gethttp): Use it.
6357
6358         * main.c (main): Ditto.
6359
6360         * init.c: Add new options.
6361
6362         * options.h (struct options): New options post_data and
6363         post_file_name.
6364
6365 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6366
6367         * connect.c (connect_with_timeout): Firing SIGALRM can result in
6368         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
6369
6370 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6371
6372         * connect.c (connect_with_timeout): Use it.
6373
6374         * utils.c (run_with_timeout): New function.
6375
6376 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6377
6378         * url.c (getproxy): Accept a struct url argument.  This obviates
6379         the need for USE_PROXY_P.
6380
6381         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
6382
6383         * ftp.c (getftp): Recognize FWTK-style proxy.
6384
6385 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6386
6387         * config.h.in: Only define _VA_LIST when compiled with gcc.
6388
6389 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
6390
6391         * http.c (http_loop): Compensate for MS Windows two-second
6392         granularity of file modification time when comparing timestamps.
6393
6394         * ftp.c (ftp_retrieve_list): Ditto.
6395
6396 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
6397
6398         * utils.c (has_html_suffix_p): New function to test filename for
6399         common html extensions.
6400
6401         * utils.h: Declare it.
6402
6403         * http.c (http_loop): Use it instead of previous test.
6404
6405         * retr.c (retrieve_url): Ditto.
6406
6407         * recur.c (download_child_p): Ditto.
6408
6409 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6410
6411         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
6412         declaring va_list.
6413         From Kevin Rodgers <kevinr@ihs.com>.
6414
6415 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
6416
6417         * Makefile.in: Specify libtool mode explicitly when linking.
6418
6419 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6420
6421         * connect.c (connect_with_timeout): New function.
6422         (connect_to_one): Use it.
6423
6424         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
6425         HAVE_SETJMP_H.
6426
6427 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6428
6429         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
6430         is present.
6431
6432 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6433
6434         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
6435         TOTAL.
6436         (bar_finish): Likewise.
6437
6438 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6439
6440         * html-url.c (tag_handle_form): New function.  Pick up form
6441         actions and mark them for conversion only.
6442
6443 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6444
6445         * progress.c (struct progress_implementation): Use PARAMS when
6446         declaring the parameters of *create, *update, *finish, and
6447         *set_params.
6448
6449         * netrc.c: Ditto.
6450
6451         * http.c: Reformat some function definitions so that ansi2knr can
6452         read them.
6453
6454         * hash.c (struct hash_table): Use the PARAMS macro around
6455         parameters in the declaration of hash_function and test_function.
6456         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
6457         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
6458         that pre-ANSI compilers can read them.
6459         (find_mapping): Use PARAMS when declaring EQUALS.
6460         (hash_table_put): Ditto.
6461
6462         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
6463
6464         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
6465         which was unsupported by pre-ANSI compilers.
6466
6467         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
6468
6469 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6470
6471         * url.c (url_filename): Use compose_file_name regardless of
6472         whether opt.dirstruct is set.
6473         (mkstruct): Don't handle the query and the reencoding of DIR; that
6474         is done in compose_file_name.
6475
6476 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6477
6478         * wget.h: Ditto for extern char *exec_name.
6479
6480         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
6481         perfectly legal to follow an `extern' with a non-`extern' ones,
6482         provided the types match.
6483
6484         * main.c: Don't define OPTIONS_DEFINED_HERE.
6485
6486 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6487
6488         * progress.c (create_image): Revert to calculating ETA based on
6489         average download speed.
6490         (create_image): Don't print ETA until the download has been active
6491         for at least 3 seconds.
6492         (create_image): When ETA is not available, don't print anything.
6493         The previous version would print --:--.
6494
6495 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6496
6497         * progress.c (bar_update): Keep updating a subinterval until it
6498         reaches or exceeds a watermark.  That way the measurement will be
6499         guaranteed to span a configurable minimum of time.  The current
6500         default is 3s in 30 100ms intervals.
6501
6502 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6503
6504         * progress.c (bar_update): Maintain an array of the time it took
6505         to perform previous 30 network reads.
6506         (create_image): Calculate the download speed and ETA based on the
6507         last 30 reads, not the entire download.
6508         (create_image): Make sure that the ETA is not changed more than
6509         once per second.
6510
6511 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
6512
6513         * mswindows.c (borland_utime): New function conditionally defined
6514         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
6515         `utime()' as Borland's `utime()' function is broken on Windows 9x
6516         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
6517
6518 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6519
6520         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
6521
6522 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
6523
6524         * Makefile.in: Updated several dependencies for object files.
6525
6526 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
6527
6528         * mswindows.c: Include "utils.h".
6529
6530 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
6531
6532         * host.h: Don't include netdb.h on windows.
6533
6534 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6535
6536         * recur.c (retrieve_tree): Handle the case when start_url doesn't
6537         parse.
6538
6539 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
6540
6541         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
6542         calling xmalloc and memcpy.
6543
6544 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6545
6546         * host.h: Include Unix-specific includes #ifndef WINDOWS.
6547         Patch originally provided by Christian Lackas.
6548
6549 2002-02-11  Christian Lackas  <delta@lackas.net>
6550
6551         * recur.c: recurive downloading for https fixed.
6552
6553 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
6554
6555         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
6556
6557         * ftp-basic.c: Also include <netinet/in.h>.
6558
6559 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
6560
6561         * http.c (gethttp): when -c used, mark already fully retrieved
6562         file as successfully retrieved.
6563
6564 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6565
6566         * url.c (url_parse): Don't treat '?' as query string separator
6567         when parsing FTP URLs.
6568
6569 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
6570
6571         * html-url.c (tag_handle_meta): Don't crash on <meta
6572         http-equiv=refresh> where content is missing.
6573
6574 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
6575
6576         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
6577         netdb.h on windows.
6578
6579 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
6580
6581         * retr.c (retrieve_url): Remove redirection cycle detection.  This
6582         is because some sites legitimately redirect the user back to the
6583         same location, e.g. after an authorization check performed by
6584         another page.  MAX_REDIRECTIONS is still used to prevent infinite
6585         redirection loops.
6586
6587 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6588
6589         * http.c (gethttp): Wrap host name in square brackets if it
6590         contains a colon.
6591
6592 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6593
6594         * url.c (url_parse): Allow all hex digits, not only decimal ones,
6595         to form an IP address.
6596
6597 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
6598
6599         * url.c (urlchr_table): Make square braces reserved, so we can
6600         parse http://[::1]/.
6601         (url_parse): Handle host in braces.
6602         (url_string): If url->host contains colons, wrap it in braces.
6603
6604 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6605
6606         * connect.c (resolve_bind_address): New function.
6607         (connect_to_one): Use it.
6608         (bindport): Ditto.
6609
6610         * init.c: Don't resolve bind-address here.
6611
6612         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
6613
6614 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6615
6616         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
6617         offset.
6618         (address_list_new): Use map_ipv4_to_ip.
6619         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
6620         in IPv4 context.
6621
6622 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6623
6624         * source: Integrated IPv6 support.
6625         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
6626
6627 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
6628
6629         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
6630         (cmd_directory): New function. Like cmd_file(), but strips
6631         trailing directory separators.
6632         (commands): Change action for "dirprefix" from `cmd_file' to
6633         `cmd_directory'.
6634
6635         * utils.c (make_directory): Allow intermediate `mkdir' calls to
6636         fail, as not all path components that do not exist should be
6637         directory components, especially under Windows.
6638
6639 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6640
6641         * netrc.c (parse_netrc): Skip leading whitespace before testing
6642         whether the line is empty.  Empty lines still contain the line
6643         terminator.
6644
6645 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
6646
6647         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
6648         only if no data is pending in SSL buffers.
6649         From tony@bluetail.com.
6650
6651 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6652
6653         * headers.c (header_get): Strip trailing whitespace from the
6654         header.
6655
6656 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6657
6658         * url.c (parse_uname): URL-decode *USER and *PASSWD.
6659
6660 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
6661
6662         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
6663         starts with "//").
6664
6665 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6666
6667         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
6668         error.
6669
6670 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
6671
6672         * version.c: Wget 1.8.1 is released.
6673
6674 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6675
6676         * version.c: Wget 1.8.1-pre3 is released.
6677
6678 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6679
6680         * recur.c (retrieve_tree): Enqueue the canonical representation of
6681         start_url, so that the test against dl_url_file_map works.
6682
6683 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6684
6685         * log.c (logputs): Check for requested verbosity before printing
6686         anything.
6687
6688 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
6689
6690         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
6691         inline.
6692
6693 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6694
6695         * recur.c (retrieve_tree): Make a copy of file obtained from
6696         dl_url_file_map because the code calls xfree(file) later.
6697
6698 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
6699
6700         * recur.c (register_html): Maintain a hash table of HTML files
6701         along with the list.  Disallow duplicates.
6702         (retrieve_tree): Use downloaded_html_set to check whether the file
6703         found in dl_url_file_map is an HTML file, and descend into it if
6704         so.
6705         (convert_all_links): Don't guard against duplicates in
6706         downloaded_html_list, since they are no longer possible.
6707
6708 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
6709
6710         * recur.c (retrieve_tree): Pass on referring URL when retrieving
6711         recursed URL.
6712
6713 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6714
6715         * version.c: Wget 1.8.1-pre2 is released.
6716
6717 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6718
6719         * retr.c (sleep_between_retrievals): Simplify indentation.
6720
6721 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
6722
6723         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
6724         of "randomness" at a time.
6725         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
6726
6727         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
6728         random amount averages in opt.wait.
6729         (sleep_between_retrievals): Don't seed the PRNG; random_number
6730         will do that.
6731
6732         * utils.c (random_number): New function.
6733
6734 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
6735
6736         * url.c (path_simplify): Move here from utils.c, and make static.
6737
6738 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6739
6740         * init.c (wgetrc_file_name): Print correct message when loading
6741         getenv("WGETRC") fails.
6742
6743 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6744
6745         * recur.c (register_download): Don't abort when one URL references
6746         two different files.
6747
6748 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6749
6750         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
6751         calling ssl_iwrite.
6752
6753 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6754
6755         * version.c: Wget 1.8.1-pre1 is released.
6756
6757 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6758
6759         * res.c (matches): Fix broken URL in the docstring.
6760
6761 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
6762
6763         * html-url.c (tag_url_attributes): Mark <embed href=...> as
6764         external.
6765
6766 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6767
6768         * url.c (get_urls_file): Cosmetic changes.
6769
6770 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6771
6772         * html-url.c (append_one_url): Resurrect warning when unable to
6773         resolve a relative link.
6774
6775 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
6776
6777         * html-url.c (collect_tags_mapper): Break into several functions.
6778         (tag_url_attributes): Collect <embed href=...>.
6779
6780 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6781
6782         * host.c: New type ipv4_address.  Use it consistently instead of
6783         `unsigned char[4]' and `unsigned char *'.
6784         (pretty_print_address): Accept a `const void *', to require even
6785         less casting.
6786
6787 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
6788
6789         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
6790
6791 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6792
6793         * main.c (main): Initialize progress after fork_to_background, so
6794         that it knows when to use dots.
6795
6796         * mswindows.c (ws_hangup): Call log_request_redirect_output.
6797
6798         * utils.c (fork_to_background): Print the PID of the child
6799         process.
6800
6801         * log.c (log_request_redirect_output): Set a flag that output
6802         redirection has been requested.  Doing anything else in a signal
6803         handler is unsafe.
6804         (check_redirect_output): New function: check whether redirection
6805         has been requested and, if so, call redirect_output().
6806         (logputs): Call check_redirect_output.
6807         (logprintf): Ditto.
6808         (debug_logprintf): Ditto.
6809         (redirect_output): Print clearer messages.
6810
6811         * main.c (redirect_output_signal): Don't call
6812         redirect_output_signal directly.  Instead, call
6813         log_request_redirect_output.
6814
6815         * utils.c (memfatal): Ditto.
6816
6817         * progress.c (display_image): Use it.
6818
6819         * log.c (log_set_save_context): New function: allow the caller to
6820         turn off saving log context lines.
6821
6822 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6823
6824         * host.c (address_list_set_faulty): Uncomment a sanity check.
6825
6826 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6827
6828         * utils.c (long_to_string): Return a pointer after where the
6829         number ends.
6830         (long_to_string): Rename to number_to_string.
6831
6832 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6833
6834         * utils.c (path_simplify): Correctly handle the unlikely case that
6835         b starts out as path + 1.
6836
6837 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
6838
6839         * utils.c (path_simplify): Rewrite, with better comments, and
6840         without the use of strcpy to move overlapping blocks.
6841
6842 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6843
6844         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
6845         valid progress type before setting it.
6846
6847 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6848
6849         * main.c (main): Remove stray debugging message.
6850
6851 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6852
6853         * progress.c (create_image): Fix ETA padding when hours are prined.
6854
6855 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6856
6857         * version.c: Wget 1.8 is released.
6858
6859 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
6860
6861         * url.c (reencode_string): Declare static.
6862
6863         * res.c (registered_specs): Declare static.
6864
6865         * progress.c (current_impl_locked): Declare static.
6866
6867         * log.c (flush_log_p): Declare static.
6868         (needs_flushing): Ditto.
6869
6870         * http.c (digest_authentication_encode): Declare static.
6871
6872         * html-url.c (init_interesting): Declare static.
6873
6874         * host.c (host_name_addresses_map): Declare static.
6875
6876         * cookies.c (find_matching_chains): Declare static.
6877
6878         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
6879         indicated by lint.
6880
6881         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
6882
6883         * host.c (address_list_set_faulty): Document that INDEX is
6884         currently unused.
6885
6886         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
6887
6888 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
6889
6890         * version.c: Wget 1.8-pre2 is released.
6891
6892 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6893
6894         * progress.c (progress_handle_sigwinch): Set up the signal again.
6895
6896         * utils.c: Include <sys/termios.h>, where Solaris defines
6897         TIOCGWINSZ.
6898
6899         * progress.c (bar_create): Don't use the last column on the screen.
6900         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
6901         only until it exceeded them.
6902
6903 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6904
6905         * version.c: Wget 1.8-pre1 is released.
6906
6907 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6908
6909         * progress.c (progress_create): Make sure that, when the output is
6910         redirected, the progress implementation gets changed to the
6911         fallback one.
6912         (bar_set_params): Set current_impl_locked to 1 when "force" is
6913         specified.
6914         (progress_create): Don't change the progress implementation if
6915         current_impl_locked is non-zero.
6916
6917         * main.c (redirect_output_signal): Call
6918         progress_schedule_redirect.
6919
6920         * progress.c (progress_schedule_redirect): New function.
6921
6922 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6923
6924         * log.c (logvprintf): Restructure to allow being called multiple
6925         times.
6926         (logprintf): Call logvprintf in a loop.
6927         (debug_logprintf): Ditto.
6928
6929 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6930
6931         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
6932         setting egd_file it to empty string.
6933
6934         * main.c (main): Change the option name from --sslegdsock to
6935         --egd-file.
6936
6937 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6938
6939         * gen_sslfunc.c (ssl_init_prng): Make the printed message
6940         translatable.
6941
6942 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6943
6944         * url.c (scheme_disable): New function.
6945
6946         * main.c (main): Call ssl_init_prng from here rather than from
6947         init_ssl, so that it has a chance to disable support for https
6948         before a URL has been resolved.
6949
6950         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
6951         failed.
6952         (ssl_init_prng): Disable support for https if seeding the PRNG
6953         fails.
6954
6955 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
6956
6957         * utils.c (read_whole_line): Handle lines beginning with \0.
6958
6959 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6960
6961         * recur.c (convert_all_links): Guard against duplicates in
6962         downloaded_html_files.
6963         (register_download): Don't invalidate similar-looking URLs.
6964         (match_except_index): New function.
6965
6966 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
6967
6968         * utils.c (path_simplify): Document with test cases.
6969
6970 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6971
6972         * gen_sslfunc.c: Ditto.
6973
6974         * rbuf.c: Include <string.h>.
6975
6976 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
6977
6978         * recur.c (retrieve_tree): Check whether the URL was already
6979         downloaded before downloading it again.
6980         (descend_child_p): Renamed to download_child_p.
6981         (register_download): When one URL is downloaded to a file already
6982         "owned" by another URL, delete all references that map any URL to
6983         that file.
6984         (register_delete_file): New function.
6985         (retrieve_tree): Use it after deleting a file.
6986
6987         * url.c (url_parse): Re-canonicalize the URL also if the path is
6988         empty, so that e.g. "http://www.server.com" ->
6989         "http://www.server.com/".
6990         (lowercase_str): Use ISUPPER instead of !ISLOWER.
6991
6992         * retr.c (retrieve_url): Use the canonical URL form when calling
6993         register_download().
6994
6995 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
6996
6997         * snprintf.c (dopr): Use `unsigned int' as the second argument to
6998         va_arg when casting to `unsigned short' is intended.
6999
7000 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
7001
7002         * gen_sslfunc.c: on windows provide ssl crypto random
7003           initialization through RAND_screen(); could possibly
7004           be not enough for strong ssl communication (see the
7005           relevant manual page from the openssl package).
7006
7007 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
7008
7009         * url.c (local_quote_string): Reenable quoting of question marks,
7010         but only when `--html-extension' is used.
7011
7012 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7013
7014         * version.c: Wget 1.8-beta3 is released.
7015
7016 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7017
7018         * snprintf.c (dopr): Cast the result of va_arg to short int and
7019         short unsigned int where these types are expected to be used.
7020
7021 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7022
7023         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
7024         with `int' when using it as the second argument to `va_arg'.
7025
7026 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7027
7028         * host.c (address_list_new_one): New function.
7029         (lookup_host): Use it.
7030
7031 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
7032
7033         * host.c (lookup_host): Don't initialize TMPSTORE directly because
7034         it's not legal C.
7035
7036 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
7037
7038         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
7039         the socket data.
7040
7041         * ftp.c: Ditto.
7042
7043         * http.c: No need to declare h_errno.
7044
7045         * host.c: Declare h_errno.
7046
7047 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7048
7049         * utils.c (file_merge): If BASE doesn't contain a slash, just
7050         return a copy of FILE.
7051
7052 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
7053
7054         * version.c: Wget 1.8-beta2 is released.
7055
7056 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7057
7058         * ftp.c (getftp): When PWD fails, assume "/".
7059
7060         * ftp-basic.c (ftp_syst): Fix indentation.
7061
7062 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7063
7064         * url.c (get_urls_file): If opt.base_href is specified, merge each
7065         URL with the base.
7066
7067 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7068
7069         * main.c (print_help): Don't document the removed `-nh'.
7070
7071 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7072
7073         * url.c (url_full_path): Document better.
7074
7075         * http.c (gethttp): Use the full path when creating digest
7076         authorization.
7077
7078 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7079
7080         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
7081         '/'.
7082
7083 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7084
7085         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
7086         PREFIX does.
7087
7088 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7089
7090         * cookies.c (check_domain_match): Reimplement to match Netscape's
7091         "preliminary specification" for cookies.
7092
7093 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7094
7095         * url.c (replace_attr_refresh_hack): New function.
7096         (convert_links): Call replace_attr_refresh_hack for Refresh
7097         links.  It will add the "TMOUT; URL=" junk before the link.
7098
7099         * html-url.c (collect_tags_mapper): Set ID to the ID of the
7100         "content" attribute, not "http-equiv".
7101         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
7102         instead, store the information that this entry belongs to a
7103         "refresh" link.
7104
7105 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7106
7107         * version.c: Wget 1.8-beta1 is released.
7108
7109 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
7110
7111         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
7112         depth by more than one.
7113
7114 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
7115
7116         * retr.c (retrieve_url): Don't allow more than 20 redirections.
7117
7118 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
7119
7120         * recur.c (retrieve_tree): Skip the non-inline entries when
7121         enqueuing the children of a leaf HTML node in -p mode.
7122         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
7123         "inline".
7124
7125         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
7126         (collect_tags_mapper): When an entry is "inline", mark it as such.
7127
7128         * recur.c (descend_url_p): Fix test when checking for
7129         acceptance/rejection rules.
7130
7131 2001-10-31 Daniel BODEA <dali@dali-designs.com>
7132
7133         * netrc.c (search_netrc): When slack_default is 0, still look for
7134         an account with matching password, just not the "default account".
7135         HTTP Authorization using .netrc should now work as expected.
7136
7137 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
7138
7139         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
7140         test_socket_open fails.
7141
7142 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
7143
7144         * progress.c (display_image): Just print one CR to reset the
7145         cursor position.
7146
7147 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
7148
7149         * init.c: New command `ssl_egd_sock'.
7150
7151         * main.c (main): New option `--sslegdsock'.
7152
7153         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
7154
7155 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7156
7157         * cmpt.c (memmove): Include a simple memmove implementation.
7158
7159 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7160
7161         * headers: Guard against header files being included twice.
7162
7163 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7164
7165         * gen-md5.c: Use unsigned char * as the buffer argument to
7166         gen_md5_update.
7167
7168 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7169
7170         * connect.h: Declare select_fd.
7171
7172 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7173
7174         * recur.c (descend_url_p): When resolving no_parent, compare with
7175         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
7176         wouldn't be followed, although the download started from /a/.
7177
7178 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
7179
7180         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
7181         MS VC; somebody with Borland compiler please check and provide
7182         patch if possible;
7183
7184         * cmpt.c: provided a usleep emulation.
7185
7186 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7187
7188         * host.c (address_list_new): Initialize al->faulty.
7189
7190 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7191
7192         * http.c (http_process_range): Accept the broken output of
7193         "JavaWebServer/1.1.1".
7194
7195 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
7196
7197         * progress.c (dot_set_params): If PARAMS is unspecified, use
7198         dot_style, if available.
7199
7200         * init.c: Ditto.
7201
7202         * main.c (main): Resurect --dot-style.
7203
7204         * progress.c (dot_finish): Print the quantity if we're left at the
7205         beginning of a row.
7206
7207 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7208
7209         * cmpt.c (random): Removed.
7210
7211         * retr.c (sleep_between_retrievals): Use the more portable rand()
7212         instead of random().
7213
7214 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
7215
7216         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
7217         prevent seg fault.
7218
7219 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7220
7221         * connect.c (connect_to_many): Use address_list_set_faulty to
7222         prevent the faulty address from being reused.
7223
7224         * host.c (address_list_set_faulty): New function.
7225         (address_list_get_bounds): New function, instead of
7226         address_list_count.
7227
7228 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7229
7230         * url.c (convert_links): Don't translate %d-%d.
7231
7232         * main.c (print_help): Remove stray HAVE_RANDOM code.
7233
7234 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7235
7236         * ftp.c (getftp): Improve output after sending PASV.  Don't
7237         attempt to "look up" the IP address we already know; call
7238         connect_to_one directly.
7239
7240 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7241
7242         * progress.c: Change the default progress implementation to "bar".
7243
7244 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7245
7246         * progress.c (bar_create): Print two newlines.
7247
7248 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7249
7250         * cmpt.c (random): New function, a simple-minded replacement for
7251         random() on systems that don't have it.
7252
7253 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7254
7255         * config.h.in: Put a HAVE_USLEEP stub.
7256
7257         * cmpt.c (usleep): Replacement implementation of usleep using
7258         select.
7259
7260         * init.c: New option init_rate.
7261
7262         * main.c (main): New option --limit-rate.
7263
7264         * retr.c (limit_bandwidth): New function.
7265         (get_contents): Call it to limit the bandwidth used when
7266         downloading.
7267
7268         * progress.c (dot_update): Would print the wrong download speed on
7269         rows other than the first one when the download was continued.
7270         (dot_finish): Ditto.
7271
7272 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
7273
7274         * http.c (gethttp): fix undeclared variable 'err' when compiled
7275         with HAVE_SSL.
7276
7277 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7278
7279         * progress.c: Don't allocate new timers; use the timing data
7280         propagated from the caller.
7281
7282         * retr.c (get_contents): Allocate and use a timer.
7283
7284 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7285
7286         * http.c (last_host_ip): Made into an address_list.
7287         (invalidate_persistent): Release pc_last_host_ip.
7288         (register_persistent): Use lookup_host.
7289         (persistent_available_p): Check for equality of hosts using
7290         address_list_match_all.  Call address_list_release.
7291         (http_cleanup): New function.
7292
7293         * ftp.c (getftp): Use lookup_host and connect_to_many.
7294
7295         * http.c (gethttp): Use lookup_host and connect_to_many.
7296
7297         * connect.c (make_connection): Removed.
7298         (connect_to_one): New function.
7299         (connect_to_many): Ditto.
7300         (set_connection_host_name): Ditto.
7301
7302         * host.c (lookup_host): New function; new return type.
7303         (address_list_new): New function.
7304         (address_list_count): Ditto.
7305         (address_list_copy_one): Ditto.
7306         (address_list_delete): Ditto.
7307         (address_list_release): Ditto.
7308         (pretty_print_address): Ditto.
7309
7310 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7311
7312         * recur.c (retrieve_tree): In case of followed redirection,
7313         blacklist the pre-redirection URL.
7314
7315 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7316
7317         * recur.c (descend_redirect_p): New function.
7318         (retrieve_tree): Make sure redirections are not blindly followed.
7319
7320 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
7321
7322         * config.h.in: added HAVE_RANDOM.
7323
7324         * options.h: added random_wait to struct options.
7325
7326         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
7327         for --random-wait.
7328
7329         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
7330         implementation of random wait times.
7331
7332         * init.c (commands): added "randomwait" keyword.
7333
7334 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7335
7336         * recur.c (descend_url_p): Be more conservative with blacklisting
7337         URLs.
7338         (convert_all_links): Print how many files have been converted, and
7339         how long it took.
7340
7341         * progress.c (create_image): Place the number of downloaded bytes
7342         right after the progress bar.
7343
7344         * utils.c (suffix): Return a pointer into the string.
7345
7346 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7347
7348         * url.c (convert_links): Handle CO_NULLIFY_BASE.
7349
7350         * recur.c (retrieve_tree): Ignore download-ignorable children.
7351         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
7352
7353         * html-url.c (handle_link): Return the newly created urlpos.
7354         (collect_tags_mapper): When dealing with BASE, store the base
7355         reference and mark it as download-ignorable.
7356
7357 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7358
7359         * url.c (convert_links): Attempt to quote '?' as "%3F" when
7360         linking to local files.  Given up on the attempt, as it breaks
7361         local browsing.
7362
7363 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7364
7365         * main.c (private_initialize): Removed.
7366         (main): Don't call private_initialize.
7367
7368         * http.c: Call lookup_host.
7369
7370         * host.c (host_init): Removed.
7371         (add_host_to_cache): Initialize host_name_address_map here, on
7372         demand.
7373         (ngethostbyname): Commented out.
7374
7375         * connect.c (make_connection): Remove dead code; use lookup_host.
7376
7377         * host.c (store_hostaddress): Renamed to lookup_host and reversed
7378         the args.
7379         Removed host_address_name_map and host_slave_master_map.
7380
7381 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7382
7383         * progress.c (dot_create): Align the "[ skipping ... ]" string
7384         with the dots.
7385
7386         * retr.c (rate): Split into two functions: calc_rate and
7387         retr_rate.
7388
7389         * progress.c (create_image): Draw a dummy progress bar even when
7390         total size is unknown.
7391         (display_image): Place the text cursor at the end of the "image".
7392
7393 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7394
7395         * url.c (reencode_string): Use unsigned char, not char --
7396         otherwise the hex digits come out wrong for 8-bit chars such as
7397         nbsp.
7398         (lowercase_str): New function.
7399         (url_parse): Canonicalize u->url if needed.
7400         (get_urls_file): Parse each URL, and return only the valid ones.
7401         (free_urlpos): Call url_free.
7402         (mkstruct): Add :port if the port is non-standard.
7403         (mkstruct): Append the query string to the file name, if any.
7404         (urlpath_length): Use strpbrk_or_eos.
7405         (uri_merge_1): Handle the cases where LINK is an empty string,
7406         where LINK consists only of query, and where LINK consists only of
7407         fragment.
7408         (convert_links): Count and report both kinds of conversion.
7409         (downloaded_file): Use a hash table, not a list.
7410         (downloaded_files_free): Free the hash table.
7411
7412         * retr.c (retrieve_from_file): Ditto.
7413
7414         * main.c (main): Call either retrieve_url or retrieve_tree
7415         for each URL, not both.
7416
7417         * retr.c (register_all_redirections): New function.
7418         (register_redirections_mapper): Ditto.
7419         (retrieve_url): Register the redirections.
7420         (retrieve_url): Make the string "Error parsing proxy ..."
7421         translatable.
7422
7423         * res.c (add_path): Strip leading slash from robots.txt paths so
7424         that the path representations are "compatible".
7425         (free_specs): Free each individual path, too.
7426         (res_cleanup): New function.
7427         (cleanup_hash_table_mapper): Ditto.
7428
7429         * recur.c (url_queue_new): New function.
7430         (url_queue_delete): Ditto.
7431         (url_enqueue): Ditto.
7432         (url_dequeue): Ditto.
7433         (retrieve_tree): New function, replacement for recursive_retrieve.
7434         (descend_url_p): New function.
7435         (register_redirection): New function.
7436
7437         * progress.c (create_image): Cosmetic changes.
7438
7439         * init.c (cleanup): Do all those complex cleanups only if
7440         DEBUG_MALLOC is defined.
7441
7442         * main.c: Removed --simple-check and the corresponding
7443         simple_host_check in init.c.
7444
7445         * html-url.c (handle_link): Parse the URL here, and propagate the
7446         parsed URL to the caller, who would otherwise have to parse it
7447         again.
7448
7449         * host.c (xstrdup_lower): Moved to utils.c.
7450         (realhost): Removed.
7451         (same_host): Ditto.
7452
7453 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7454
7455         * utils.c (path_simplify): Preserver the (non-)existence of
7456         leading slash.  Return non-zero if changes were made.
7457
7458 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7459
7460         * progress.c (bar_update): Don't modify bp->total_length if it is
7461         zero.
7462
7463 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7464
7465         * retr.c (retrieve_url): When the redirection URL doesn't parse,
7466         print the correct error message rather than "UNKNOWN".
7467
7468 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7469
7470         * progress.c (bar_finish): If the timer didn't record any time
7471         since the download beginning, fake 1ms.
7472
7473 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7474
7475         * recur.c (recursive_retrieve): Fix typo.
7476
7477 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7478
7479         * progress.c (create_image): Don't translate "%ld ".
7480
7481 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7482
7483         * progress.c (bar_set_params): Allow the user to force the use of
7484         the bar.
7485
7486 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
7487
7488         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
7489
7490 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7491
7492         * progress.c: Renamed dp_* functions to dot_* for greater clarity
7493         and consistency with bar_*.
7494         (print_download_speed): Get rid of the unneeded '@' character.
7495         (create_image): Fix download rate geometry.
7496
7497         * progress.c (print_elapsed): Remove spurious space.
7498         (print_elapsed): Renamed to print_download_speed, since that's
7499         what it does.
7500
7501 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7502
7503         * progress.c (bar_update): If the downloaded amount becomes larger
7504         than the expected amount, adjust the expected amount accordingly.
7505
7506 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7507
7508         * utils.c (determine_screen_width): New function.
7509
7510         * main.c (main): New option `--progress=TYPE'.
7511         (main): Implement compatibility with the old option `--dot-style'.
7512
7513         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
7514         dp_set_params.
7515         (cmd_spec_progress): New function.
7516
7517         * retr.c (get_contents): Use the progress_* functions instead of
7518         the old show_progress().
7519         (show_progress): Removed.
7520         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
7521         etc.
7522
7523         * progress.c (set_progress_implementation): New function.
7524         (valid_progress_implementation_p): Ditto.
7525         (progress_create): Ditto.
7526         (progress_update): Ditto.
7527         (progress_finish): Ditto.
7528         (dp_create): Ditto.
7529         (dp_update): Ditto.
7530         (dp_finish): Ditto.
7531         (dp_set_params): Ditto.
7532         (print_elapsed): Ditto.
7533
7534 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
7535
7536         * retr.c (show_progress): Use it.
7537
7538         * log.c (log_set_flush): New function.
7539
7540 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
7541
7542         * utils.c (path_simplify): Don't remove trailing slashes.
7543
7544         * ftp.c (ftp_get_listing): Use it.
7545
7546         * utils.c (file_merge): New function.
7547
7548         * url.c (opt_url): Removed.
7549
7550         * recur.c (recursive_retrieve): Inline "opt_url" logic.
7551
7552         * main.c (main): Use xfree(), not free().
7553
7554         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
7555
7556         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
7557         internally.
7558
7559         * config.h.in: Include a stub for HAVE_STRPBRK.
7560
7561         * cmpt.c (strpbrk): Include a replacement for systems without
7562         strpbrk().
7563
7564         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
7565
7566         * url.c (url_set_dir): New function.
7567         (url_set_file): Ditto.
7568
7569         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
7570         parser makes the URL "params" available, so we can do that in this
7571         function.
7572
7573         * retr.c: Ditto.
7574
7575         * ftp.c: Ditto; pass the local file information in `ccon'.
7576
7577         * http.c: Get rid of the ugly kludge that had URL being replaced
7578         with the proxy URL when proxy retrieval was requested.  Use a
7579         separate parameter to http_loop and gethttp for the proxy URL.
7580
7581         * http.c: Changed to reflect the fact that local file, proxy, and
7582         referer information are no longer stored in struct url.  The local
7583         file information is passed in `struct hstat' now.
7584
7585         * url.c: Reworked URL parsing to be more regular.  Reencode the
7586         URL using reencode_string.
7587         Removed non-URL-related information from struct url.  This
7588         includes fields `proxy', `local', and `referer'.
7589
7590 2001-11-22  Jochen Hein  <jochen@jochen.org>
7591
7592         * main.c (main): Split the copyright notice for easier
7593         translation.
7594
7595 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
7596
7597         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
7598           command to server to request file size.
7599         * ftp.h (ftp_size): Export it.
7600         * ftp.c (getftp): Use new ftp_size function if restoring
7601           transfer of a file with unknown size.
7602
7603 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
7604
7605         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
7606
7607 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7608
7609         * url.c (getproxy): Handle URL shorthands.
7610
7611 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7612
7613         * main.c: Remove --wait / --waitretry backwards compatibility
7614         code.
7615
7616 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7617
7618         * main.c (main): Use it.
7619
7620         * url.c (rewrite_url_maybe): New function.
7621
7622 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
7623
7624         * url.c: Clean up handling of URL schemes.
7625
7626 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
7627
7628         * url.c: Get rid of `protostrings'.
7629         (skip_proto): Don't use protostrings.
7630         (has_proto): Ditto.
7631
7632 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7633
7634         * Makefile.in: Conditionally compile getopt.o.
7635
7636 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7637
7638         * md5.h: Renamed to gnu-md5.h.
7639
7640         * md5.c: Renamed to gnu-md5.c.
7641
7642         * http.c: Ditto.
7643
7644         * ftp-opie.c: Use the new macros.
7645
7646         * sysdep.h: Define md5-related macros.
7647
7648         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
7649         depending on which md5 implementation is used.
7650
7651 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7652
7653         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
7654         the compiler.
7655
7656 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7657
7658         * http.c (gethttp): Print the whole response line when printing
7659         headers is requested.
7660
7661 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
7662
7663         * res.c: New file.  Implement all RES-related code here.
7664
7665 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7666
7667         * version.c: Wget 1.7.1 is released.
7668
7669 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
7670
7671         * headers.c (header_extract_number): Ignore trailing whitespace.
7672
7673 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
7674
7675         * html-url.c (collect_tags_mapper): Fix bug converting links
7676         with -k option for tags with multiple link attributes by
7677         handling links in the order they appear.
7678
7679 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
7680
7681         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
7682           the call to the 'rate' function by moving it past the error
7683           checking for the 'getftp' function return value.
7684
7685 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
7686
7687         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
7688         '\"'.  Different compilers' assert macros are broken in different
7689         ways.
7690
7691 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
7692
7693         * http.c (gethttp): print debug output for errors occuring during
7694         the ssl handshake.
7695
7696 2001-11-16  Chris Seawood  <cls@seawood.org>
7697
7698         * init.c: Ditto.
7699
7700         * host.c: Ditto.
7701
7702         * connect.c: Ditto.
7703
7704         * sysdep.h: Support compilation under BEOS.
7705
7706 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
7707
7708         * url.c (url_equal): Fix a memory leak when parseurl returns an
7709         error on the second URL. Also, since url_equal is not used at the
7710         moment, do not compile it.
7711
7712         * url.h: Ditto for the prototype of url_equal.
7713
7714 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
7715
7716         * html-parse.c (map_html_tags): Support XML-style empty tags.
7717
7718 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7719
7720         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
7721         loop condition because we're no longer setting SIZEVAR here.
7722
7723 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7724
7725         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
7726         call because it needs the old value.
7727
7728 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7729
7730         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
7731         an attribute name.
7732
7733 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
7734
7735         * url.c (url_filename): Make sure that slashes that sneak in to
7736         u->file via query string get protected.
7737         (file_name_protect_query_string): New function.
7738
7739 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
7740
7741         * recur.c (recursive_retrieve): Also check undesirable_urls with
7742         canonicalized URL.
7743
7744 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
7745
7746         * http.c (gethttp): Search `.netrc' with real host, not the proxy
7747         one.
7748
7749 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
7750
7751         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
7752         define it.
7753
7754 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
7755
7756         * ftp.h: Provide correct prototype for ftp_parse_ls().
7757
7758 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
7759
7760         * version.c: Wget 1.7 is released.
7761
7762 2001-06-03  Karl Eichwalder  <ke@suse.de>
7763
7764         * ftp-ls.c (ftp_parse_ls): Fix typo.
7765
7766 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7767
7768         * all: Update copyright information.
7769
7770 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7771
7772         * http.c (gethttp): Indicate that the continued download failed
7773         for *this* file.
7774
7775 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7776
7777         * version.c: Wget 1.7-pre1 is released.
7778
7779 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7780
7781         * version.c: Updated version to 1.7-pre1.
7782
7783 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
7784
7785         * gen_sslfunc.c: Don't include <sys/time.h> directly.
7786
7787 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
7788
7789         * http.c (gethttp): Use real URL data for cookies, not the proxy
7790         stuff.
7791
7792 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
7793
7794         * main.c (print_help): Document `--no-http-keep-alive'.
7795
7796         * utils.c (numdigit): Handle negative numbers *correctly*.
7797
7798         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
7799         than the confusing "unsigned".
7800
7801         * utils.c (string_set_contains): Renamed from string_set_exists.
7802
7803         * hash.c (hash_table_contains): Renamed from hash_table_exists.
7804
7805         * cookies.c: Move case-insensitive hash tables to hash.c.
7806
7807 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
7808
7809         * http.c (gethttp): Before concluding that the file is already
7810         fully retrieved, make sure that the file existed and `Range' was
7811         actually requested.
7812
7813 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
7814
7815         * cookies.c (eliminate_dups): New function.
7816         (build_cookies_request): Use it.
7817         (build_cookies_request): Set chain_store_size after reallocating
7818         all_chains.
7819         (check_domain_match): Annotated for easier future debugging.
7820         (store_cookie): In the debug message, print whether the cookie is
7821         permanent.
7822
7823 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
7824
7825         * http.c (http_loop): Reset no_truncate before deciding whether to
7826         set it.
7827         (gethttp): Further clarify "-c conflicts with existing file" error
7828         message, based on input from Herold Heiko.
7829
7830 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
7831
7832         * http.c (http_loop): If restval is set, set no_truncate to 1
7833         unconditionally.
7834
7835 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
7836
7837         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
7838         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
7839         (ftp_parse_vms_ls): Ditto.
7840
7841 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
7842
7843         * init.c (cmd_address): Zero SIN before using it; apparently
7844         needed on *BSD.
7845
7846 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7847
7848         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
7849         empty.
7850
7851 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
7852
7853         * main.c (main): Make `--cookies' respect its argument.
7854
7855 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
7856
7857         * main.c (main): Removed undocumented option `--email-address'.
7858
7859         * netrc.c: Use the latest read_whole_line.
7860
7861         * init.c (defaults): Set opt.ftp_pass to "-wget@".
7862
7863         * mswindows.c (pwd_cuserid): Ditto.
7864
7865         * utils.c (pwd_cuserid): Removed.
7866
7867         * host.c (ftp_getaddress): Removed.
7868
7869 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
7870
7871         (http_loop): Allocate space for filename_plus_orig_suffix with
7872         alloca; this is more efficient and removes the need to free it
7873         before each and every return.
7874
7875 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
7876
7877         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
7878         unneeded because the file is already there and fully downloaded,
7879         and -c is specified.
7880         (http_loop): Handle RETRUNNEEDED.
7881
7882         * wget.h (uerr_t): New value RETRUNNEEDED.
7883
7884         * http.c (http_loop): Set no_truncate for files that both exist
7885         and are non-empty.
7886         (gethttp): Consider the download finished when restval >= contlen,
7887         not only when restval==contlen.
7888         (gethttp): Handle redirection before giving up due to -c.
7889         (gethttp): Clarify error message which explains that -c will not
7890         truncate the file.
7891         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
7892         the stuff that needs freeing and release the socket.
7893
7894 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7895
7896         * main.c (print_help): Wget booleans accept "off", not "no".
7897
7898 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7899
7900         * http.c (http_loop): If allow_cache is zero, always disable
7901         caching, not only when retrieving through proxy.
7902
7903         * init.c: Ditto.
7904
7905         * options.h (struct options): Rename proxy_cache to allow_cache.
7906
7907 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7908
7909         * http.c (mktime_from_utc): Improve documentation.
7910         (http_atotm): Put format strings into a separate array.
7911
7912 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
7913
7914         * safe-ctype.h: Instead of throwing #error when isalpha is
7915         defined, redefine it to something that will throw a compile-time
7916         error if actually *used*.  Do the same for the rest of the
7917         standard C macros.
7918
7919 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
7920
7921         * url.c (getproxy): Ignore empty proxy vars.
7922
7923 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7924
7925         * http.c (http_loop): Would load cookies every time.
7926
7927         * cookies.c (load_cookies): Handle cookies whose values contain
7928         embedded spaces.
7929
7930 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7931
7932         * utils.c: Define each DIGITS_* in one line.
7933
7934 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
7935
7936         * http.c (http_atotm): Initialize t.tm_isdst to 0.
7937         (mktime_from_utc): Prevent mktime() from having discontinuities at
7938         DST transition points.
7939
7940 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7941
7942         * html-url.c (get_urls_html): Fix documentation.
7943
7944 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7945
7946         * url.c (UNSAFE_CHAR): Reimplement using a static table.
7947         (url_init): Removed.
7948         (init_unsafe_char_table): Removed.
7949
7950 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7951
7952         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
7953
7954 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
7955
7956         * utils.c: Document timer functions.
7957
7958         * retr.c (rate): Use it.
7959         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
7960
7961         * utils.c (wtimer_granularity): New function.
7962
7963 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7964
7965         * retr.c (show_progress): Ditto.
7966
7967         * ftp.c (getftp): Ditto.
7968
7969         * http.c (gethttp): Use new timer functions.
7970
7971         * utils.c (wtimer_allocate): New function.
7972         (wtimer_new): Ditto.
7973         (wtimer_delete): Ditto.
7974         (wtimer_reset): Ditto.
7975         (wtimer_elapsed): Ditto.
7976
7977 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7978
7979         * utils.c (long_to_string): New, faster version.  Favors smaller
7980         numbers; much of the calculation is now done at compile-time.
7981
7982 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
7983
7984         * utils.c (numdigit): Handle negative numbers.
7985
7986 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
7987
7988         * retr.c (show_progress): Print the download rate even when the
7989         percentages are not available.
7990
7991 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
7992
7993         * ftp.c (getftp): Adjust expected_bytes if the length is
7994         authoritative.
7995
7996 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
7997
7998         * url.c: Don't declare `construct'.
7999
8000         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
8001         mappings to new locations.
8002         (hash_table_new): Make resize_threshold a field in the hash table,
8003         so we don't have to recalculate it in each hash_table_put.
8004         (grow_hash_table): Update resize_threshold.
8005         (MAX): Remove unused macro.
8006         (prime_size): Made static.
8007
8008 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
8009
8010         * retr.c (retrieve_url): Call uri_merge, not url_concat.
8011
8012         * html-url.c (collect_tags_mapper): Call uri_merge, not
8013         url_concat.
8014
8015         * url.c (mkstruct): Use encode_string instead of xstrdup followed
8016         by URL_CLEANSE.
8017         (path_simplify_with_kludge): Deleted.
8018         (contains_unsafe): Deleted.
8019         (construct): Renamed to uri_merge_1.
8020         (url_concat): Renamed to uri_merge.
8021
8022 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
8023
8024         * url.c (str_url): Use encode_string instead of the unnecessary
8025         CLEANDUP.
8026         (encode_string_maybe): New function, returns input string if no
8027         encoding is needed.
8028         (encode_string): Call encode_string_maybe to do the dirty work,
8029         xstrdup if no work needed.
8030
8031 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
8032
8033         * wget.h (XDIGIT_TO_xchar): Define here.
8034
8035         * url.c (decode_string): Use new name.
8036         (encode_string): Ditto.
8037
8038         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
8039         (dump_hash): Use new name.
8040
8041         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
8042         XDIGIT_TO_XCHAR respectively.
8043
8044 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
8045
8046         * init.c: Include cookies.h.
8047
8048         * cookies.h: Declare cookies_cleanup.
8049
8050         * cookies.c (check_domain_match): Remove unused variable.
8051         (save_cookies): Remove extraneous argument from debug statement.
8052
8053         * host.c (same_host): Don't call skip_url.
8054
8055         * url.c (skip_url): Removed.  Removed its calls from various
8056         functions in url.c.
8057
8058 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
8059
8060         * cookies.c (unsigned_string_hash): Use the new code in
8061         string_hash as reference.
8062
8063         * hash.c (hash_table_map): Allow deletion and change of the
8064         element processed by MAPFUN.
8065         (string_hash): Use the function from glib.
8066
8067 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
8068
8069         * config.h.in: Include #undef stub.
8070
8071         * hash.c (hash_table_remove): Rewrite to actually clear deleted
8072         entries instead of just marking them as deleted.
8073
8074 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
8075
8076         * hash.h: Declare hash_table_get_pair and hash_table_count.
8077
8078 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
8079
8080         * cookies.c: Declare http_atotm.
8081
8082 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
8083
8084         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
8085         permissions.  A compiler that doesn't accept octal constants is
8086         seriously broken and shouldn't be used -- octal constants were
8087         present in K&R C!
8088
8089 2001-01-20  Karl Eichwalder  <ke@suse.de>
8090
8091         * Makefile.in: Provide and use DESTDIR according to the Coding
8092         Standards.
8093
8094 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
8095
8096         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
8097         specification.
8098
8099 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
8100
8101         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
8102         because that strips the *leading* slash, thus forcing relative
8103         FTP retrieval.
8104
8105 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8106
8107         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
8108         notation for VMS servers.
8109         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
8110         odir is an empty string.
8111
8112 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8113
8114         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
8115         effective. Suggested by Edward J. Sabol.
8116
8117 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
8118
8119         * cookies.c (build_cookies_request): Use and sort cookies from all
8120         matching domains.
8121         (build_cookies_request): Check for duplicates before generating
8122         the `Cookies' header.
8123
8124         * main.c (main): Don't load cookies here.
8125         (main): Make loadcookies and savecookies call the correct command.
8126
8127         * http.c (http_loop): Load cookies on-demand.
8128
8129 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
8130
8131         * http.c (gethttp): Fix indentation of SSL ifdef.
8132
8133 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
8134
8135         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
8136         that hack is no longer necessary.
8137         (getftp): Prepend initial directory to *non*-absolute u->dir's.
8138
8139 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
8140
8141         * init.c (cmd_file): New function.
8142         (enable_tilde_expansion): New variable.
8143         (run_wgetrc): Use it.
8144         (cmd_file): Use it.
8145
8146 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
8147
8148         * init.c: Include cookie-related options.
8149
8150         * main.c (main): Include cookie-specific options.
8151         (main): Load cookies before download is finished.
8152         (main): Save cookies when done.
8153
8154         * http.c (gethttp): Process the `Set-Cookie' header.
8155         (gethttp): Include cookies in the response.
8156
8157         * cookies.c: New file.
8158
8159 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
8160
8161         * utils.c (datetime_str): New function.
8162
8163 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8164
8165         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
8166         12:01PM == 00:01, which was obviously wrong. Taken care of this
8167         anomaly.
8168
8169         * ChangeLog: Removed an excess conflict marker. Reformatted the
8170         entry by Philipp Thomas from 2001-03-09.
8171
8172         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
8173         between 0 and 23. Elminate unused variable `sec'.
8174
8175 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
8176
8177         * hash.c (hash_table_count): New function.
8178
8179 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8180
8181         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
8182         Digital Unix cc.
8183
8184 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8185
8186         * config.h.in: Oops, do the namespace tweaks only on systems we
8187         know about.
8188
8189 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8190
8191         * hash.c: Include <string.h>.
8192
8193 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8194
8195         * config.h.in: Define "compilation environment" options that work
8196         under Linux and Solaris.  To be reviewed on other OS'es.
8197
8198 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8199
8200         * http.c (gethttp): Prepend literal newline with `\n\'.
8201
8202 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8203
8204         * sysdep.h: Don't define VERY_LONG_FORMAT.
8205
8206         * utils.c (very_long_to_string): New function.
8207         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
8208
8209 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
8210
8211         * url.c (parse_uname): Would run past the end of the string if the
8212         username was present, but the URL did not contain a slash, e.g.
8213         http://foo:bar@myhost.
8214
8215 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
8216
8217         * http.c (http_atotm): Use %A instead of %a to match full
8218         weekday.  (On most systems there is no difference.)
8219
8220 2001-04-03  Paul Bludov  <paul@ozero.net>
8221
8222         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
8223         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
8224         leak.
8225         (ws_mypath): Use GetModuleFileName instead of argv[0].
8226         (ws_startup): Use data.wVersion for comparison.
8227
8228 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
8229
8230         * http.c (http_loop): Ditto.
8231
8232         * ftp.c (ftp_loop_internal): Made the check whether to continue
8233         retrieval `-O'-friendly.
8234
8235 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
8236
8237         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
8238         they will be handled as whitespace.
8239         (parse_netrc): Correctly handle lines that end with whitespace.
8240
8241 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
8242
8243         * retr.c (retrieve_url): New variable global_download_count used
8244         to identify first retrieval.
8245
8246         * ftp.c (getftp): Ditto.
8247
8248         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
8249
8250 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
8251
8252         * init.c (cmd_address): Heap-allocate the address that gets stored
8253         to CLOSURE.  Old code would simply assign an address on the stack.
8254
8255 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
8256
8257         * ftp.c (ftp_get_listing): Propagate error status.
8258         (ftp_retrieve_glob): Use it.
8259         (ftp_loop): Ditto.
8260
8261 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
8262
8263         * main.c (main): Add -C to the string that is the third arg to
8264         getopt_long().
8265
8266 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
8267
8268         * ftp.c (getftp): Don't start the download from scratch if `-c'
8269         was specified, but the file is already fully downloaded.
8270
8271         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
8272         specified and the server doesn't support continued download.
8273         (gethttp): Don't start the download from scratch if `-c' was
8274         specified, but the file is already fully downloaded.
8275
8276 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
8277
8278         (recursive_retrieve): Don't clear the hash tables at this point at
8279         all; it interferes with the normal operation of register_download.
8280
8281 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
8282
8283         * recur.c (recursive_retrieve): Clear the hash tables only when
8284         they are defined.
8285
8286 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
8287
8288         * http.c (gethttp): Make sure the socket is closed with
8289         CLOSE_INVALIDATE before we have drained the body.
8290
8291 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
8292
8293         * retr.c (retrieve_url): Call register_download() for downloaded
8294         files and register_html() for downloaded HTML files.
8295
8296         * recur.c (register_download): New function; register here that a
8297         file has been downloaded, rather than in recursive_retrieve().
8298         (register_html): New function; enqueue the location of HTML files
8299         here rather than in recursive_retrieve().
8300
8301 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
8302
8303         * main.c (print_help): Use multiple fputs instead of a single ugly
8304         printf().
8305         (main): Consistently assign numbers >128 to options without a
8306         corresponding character.
8307
8308 2001-03-09  Philipp Thomas  <pthomas@suse.de>
8309
8310         * safe-ctype.h: New file. Locale independent ctype.h replacement
8311         taken from libiberty.
8312
8313         * safe-ctype.c: New file. Tables for above.
8314
8315         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
8316         safe-ctype$o.
8317
8318         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
8319         isspace.
8320
8321         * ftp-basic.c: Don't include ctype.h.
8322
8323         * ftp-ls.c: Likewise.
8324
8325         * ftp.c: Likewise.
8326
8327         * headers.c: Likewise.
8328
8329         * host.c: Likewise.
8330
8331         * html-parse.c: Likewise.
8332
8333         * html-url.c: Likewise.
8334
8335         * http.c: Likewise.
8336
8337         * init.c: Likewise.
8338
8339         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
8340
8341         * netrc.c: Likewise.
8342
8343         * recur.c: Likewise.
8344
8345         * retr.c: Likewise.
8346
8347         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
8348         instead of isdigit.
8349
8350         * sysdep.h: Remove defines of ctype macros as they aren't needed
8351         for safe-ctype-h.
8352
8353         * url.c: Don't include ctype.h.
8354
8355         * utils.c: Likewise.
8356
8357         * wget.h: Include safe-ctype.h.
8358
8359 2001-03-27  Dan Harkless  <wget@harkless.org>
8360
8361         * Makefile.in: Moved top_builddir out of "User configuration
8362         section" of top Makefile and analogous spot in this one.
8363
8364 2001-03-17  Dan Harkless  <wget@harkless.org>
8365
8366         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
8367         Define top_builddir.  Link wget with libtool so the user doesn't
8368         have to supply a bunch of custom environment variables to
8369         correctly link with the OpenSSL shared libraries.
8370
8371 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
8372
8373         * http.c (gethttp): skip :port in host header if it is the
8374         DEFAULT_HTTPS_PORT when using SSL.
8375
8376         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
8377         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
8378         rest of the code.
8379         * url.h: Ditto
8380
8381 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
8382
8383         * retr.c (show_progress): Correctly calculate the number of bytes
8384         in the first line of the download that have been actually
8385         downloaded in this run.
8386
8387 2001-02-23  Dan Harkless  <wget@harkless.org>
8388
8389         * main.c (print_help): --help documentation for -N said it would
8390         re-download files if they had the _same_ timestamp on server.
8391         (print_help): -nr belongs in "FTP options" section of --help
8392         output, not "Recursive retrieval" section.  Alphabetized FTP
8393         options by long option name.
8394
8395 2001-02-16  Dan Harkless  <wget@harkless.org>
8396
8397         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
8398         that "httpsproxy" had been inserted into commands[] out of
8399         alphabetical order, causing "BUG: unknown command `httpuser'".
8400
8401 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8402
8403         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
8404         listing without correct permissons).
8405
8406         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
8407         FTP server.
8408
8409         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
8410         shall be donwloaded only when it's newer than the local copy or
8411         when it has the same timeestamp but its size is different. ST_VMS
8412         and ST_MACOS as special cases that lie about file size.
8413
8414         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
8415
8416         * Makefile.in: Removed dependency on ftpparse library due to unclear
8417         copyright issues and absence of any feedback to our queries.
8418
8419         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
8420         copyright issues and absence of any feedback to our queries.
8421         (ftp_parse_ls): Added a warning message when remote server system
8422         does not seem to be suported by wget.
8423         (ftp_parse_vms_ls): New function for parsing VMS ftp
8424         server listing output.
8425         (clean_line): New function responsible for removing
8426         end-of-line characters from FTP listing texts.
8427
8428         * ftp.c (getftp): Global variables pwd and host_type are now
8429         member of the ccon structure under names ccon.id and ccon.rs.
8430
8431         * ftp.h (struct ccon): Added formed global variables from ftp.c,
8432         enum stype rs (remote system identification) and char *id (initial
8433         working directory), as suggested by Hrvoje.
8434
8435         * url.c (parse_uname): Added support for passwords containing '@'
8436         characters.
8437         (skip_uname): Ditto.
8438
8439 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
8440
8441         * ftp.c (ftp_loop): Reset con.
8442
8443 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8444
8445         * url.c (parse_uname): Added support for passwords containing '@'
8446         characters.
8447         (skip_uname): Ditto.
8448
8449 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
8450
8451         * url.c (parseurl): Debug-print u->ftp_type.
8452
8453 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
8454
8455         * ftp.c (ftp_loop_internal): Disable padding.
8456         (getftp): Ditto.
8457
8458         * http.c (http_loop): Disable padding.
8459
8460         * retr.c (show_progress): Use it to enable padding.
8461
8462         * retr.c (rate): Optional parameter PAD for padding the rate.
8463
8464 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
8465
8466         * retr.c (show_progress): Make sure that the last output line
8467         includes progress.
8468
8469 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
8470
8471         * retr.c (show_progress): Print the download rate along with the
8472         percentages.
8473         Along with Anders Thorsby <anders@thorsby.dk>.
8474
8475 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
8476
8477         * ftp.h: Rename enums `command' to `wget_ftp_command' and
8478         `fstatus' to `wget_ftp_status' because old names clash with Tru64
8479         net/if.h.
8480
8481 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
8482
8483         * gen_sslfunc.c: verify_callback is now static
8484
8485         * gen_sslfunc.c (init_ssl): load certificate if specified
8486
8487         * gen_sslfunc.c (ssl_printerr): new function
8488
8489         * init.c: added new --sslcertfile and --sslcertkey switches
8490
8491         * main.c: ditto
8492
8493         * options.h: ditto
8494
8495         * http.c (gethttp): abort when init_ssl fails
8496
8497 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
8498
8499         * mswindows.h: Include <malloc.h>; it's needed for alloca().
8500
8501 2001-01-10  Dan Harkless  <wget@harkless.org>
8502
8503         * url.c (str_url): Clarified this function's comment header after
8504         Hrvoje answered my question on the list as to when hide != 1.
8505         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
8506
8507 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8508
8509         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
8510         Drazen Kacar <dave@arsdigita.com>.
8511         (conaddr): Ditto.
8512
8513 2001-01-09  Dan Harkless  <wget@harkless.org>
8514
8515         * html-url.c: A bunch of fixup of `--page-requisites'-related
8516         comments to reflect Hrvoje's changes to my code when transplanting
8517         it into this new file, to fix spelling mistakes, to clarify, etc.
8518
8519         * url.c (write_backup_file): Clarified a comment.
8520         (str_url): Henrik van Ginhoven pointed out on the list that we
8521         shouldn't give away the number of characters in the password by
8522         replacing each character with a 'x'.  Use "<password>" instead.
8523
8524         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
8525         directories didn't work if logging in put you in a directory other
8526         than "/" is fixed now.  Removed the comment here warning of the bug.
8527
8528         * main.c (print_help): --continue's description was misleading.
8529         We don't "restart", we "resume".  Also, better to say
8530         "partially-downloaded file" rather than just "existing file".
8531
8532 2001-01-06  Dan Harkless  <wget@harkless.org>
8533
8534         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
8535         the best way to go about my aim.  Removed them in favor of:
8536
8537         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
8538
8539 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
8540
8541         * url.c (replace_attr): New function, to be used by both
8542         TO_COMPLETE and TO_RELATIVE case in convert_links.
8543         (find_fragment): New function for finding URL fragments.
8544         (replace_attr): Better handle the case where the original string
8545         is not quoted.  Use find_fragment.
8546         (convert_links): Use replace_attr().
8547
8548 2000-12-31  Dan Harkless  <wget@harkless.org>
8549
8550         * ChangeLog: Since this flat file doesn't have multiple branches,
8551         looking at the dates would make you think that things went into
8552         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
8553         in 1.6 branch.]" where appropriate to clarify.
8554
8555 2000-12-30  Dan Harkless  <wget@harkless.org>
8556
8557         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
8558         patch to deal with h_errno not being defined in netdb.h under Cygwin.
8559
8560 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
8561
8562         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
8563
8564 2000-12-17  Igor Khristophorov  <igor@atdot.org>
8565
8566         * http.c (check_end): Fix test for '+' or '-'.
8567
8568 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
8569
8570         * url.c (parseurl): Rename inner loop var from i to ind to avoid
8571         clash with the function top-level-declared variable i.
8572         (str_url): Likewise, rename inner-loop i to j.
8573
8574         * recur.c (parse_robots): Don't declare LEN at top of function.
8575         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
8576         global variable.
8577
8578         * main.c (main): Change erroneous use of bitwise and to logical.
8579
8580         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
8581         the stack because it will be copied to closure.
8582
8583         Thanks to Csaba Raduly's run of PC-LINT over the sources.
8584
8585 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
8586
8587         * http.c (basic_authentication_encode): Use xmalloc(), not
8588         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
8589         sources.
8590
8591 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
8592
8593         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
8594         compilation.
8595
8596 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
8597
8598         * mswindows.c: Include <errno.h>.
8599
8600         * gen_sslfunc.c: Include <errno.h>.
8601
8602         * ftp-basic.c: Don't attempt to declare errno or h_errno because
8603         they're not used.
8604
8605         * main.c: Include <errno.h> because errno is used.
8606
8607         * ftp.c: Ditto.
8608
8609         * http.c: Include <netdb.h> for h_errno.
8610
8611 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
8612
8613         * html-parse.c (advance_declaration): MSVC assert() chokes on
8614         '\"'.  Use '"' instead.
8615
8616 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
8617
8618         * utils.c (xfree_real): Removed.
8619         (xfree_debug): Just call free().
8620
8621         * wget.h (xfree): Make it an alias for free.
8622
8623 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
8624
8625         * http.c (http_loop): Furthermore, touch output_document only if
8626         it is known to be an existing regular file.
8627
8628 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
8629
8630         * ftp.c (ftp_retrieve_list): Ditto.
8631
8632         * http.c (http_loop): Touch output_document if that is used for
8633         output.
8634
8635 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8636
8637         * http.c: Include gen_sslfunc.h after including Wget's headers.
8638         (persistent_available_p): Needed coma before `int ssl'.
8639
8640 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8641
8642         * ftp.c (ftp_loop_internal): Ditto.
8643
8644         * http.c (http_loop): Use it.
8645
8646         * retr.c (sleep_between_retrievals): New function that handles the
8647         logic of opt.wait and opt.waitretry.
8648
8649 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8650
8651         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
8652         rbuf_read_bufferful when the buffer is depleted.
8653
8654         * rbuf.c (rbuf_read_bufferful): New function.
8655
8656 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
8657
8658         * gen_sslfunc.h: Use ansi2knr style function declarations.
8659
8660         * gen_sslfunc.c: Reformat according to the GNU coding standards.
8661         More should be done.
8662
8663         * http.c (persistent_available_p): Place the cheap SSL test nearer
8664         the top of the function.
8665         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
8666
8667 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
8668
8669         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
8670         char.
8671
8672 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
8673
8674         * Makefile.in: added gen_sslfunc object
8675         * config.h.in: added HAVE_SSL define
8676         * connect.c: changed select_fd from static int to int
8677         * connect.h: ditto
8678         * gen_sslfunc.h: New file
8679         * gen_sslfunc.c: ditto
8680         * http.c: added HTTPS fuctionality
8681         * retrc.c: ditto
8682         * url.c: ditto
8683         * init.c: added opt.httpsproxy
8684         * options.h: ditto
8685         * rbuf.h: added alternate rbuf struct
8686         * wget.h: added CONSSLERR
8687         * rbuf.c: ditto
8688
8689         * http.c: Added HTTPS fuctionality.
8690
8691         * retrc.c: Ditto.
8692
8693         * url.c: Ditto.
8694
8695         * init.c: Added opt.httpsproxy.
8696
8697         * options.h: Ditto.
8698
8699         * rbuf.h: Added alternate rbuf struct.
8700
8701         * wget.h: Added CONSSLERR.
8702
8703         * rbuf.c: Ditto.
8704
8705 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8706
8707         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
8708         "ignore_perms" to ignore file and directory permissions for
8709         Windows NT FTP server listings.
8710         (ftp_parse_winnt_ls): New function.
8711         (ftp_parse_ls): Parses UNIX and Windows NT listings
8712         separately. Simple heuristics for distinguishing between UNIX and
8713         MS-DOS-like FTP listing provided by Windows NT FTP service.
8714
8715 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8716
8717         * ftpparse.c, ftpparse.h: New files.
8718
8719         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
8720         only. Use ftp_parse_nonunix_ls otherwise.
8721         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
8722         exotic FTP servers.
8723
8724         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
8725         FTP servers.
8726
8727         * ftp.c: New static wariables host_type, pwd, and pwd_len.
8728         (getftp): Support for VMS. Support for FTP servers that do not
8729         place you in the root directory after login.
8730         (ftp_retrieve_list): VMS is silent about the real file size, issue
8731         a more appropriate message.
8732         (ftp_get_listing): Pass host_type to ftp_parse_ls.
8733
8734         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
8735
8736 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8737
8738         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
8739         "ignore_perms" to ignore file and directory permissions for
8740         Windows NT FTP server listings.
8741         (ftp_parse_winnt_ls): New function.
8742         (ftp_parse_ls): Parses UNIX and Windows NT listings
8743         separately. Simple heuristics for distinguishing between UNIX
8744         and MS-DOS-like FTP listing provided by Windows NT FTP service.
8745
8746 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
8747
8748         * netrc.c (parse_netrc): Get rid of line ending.
8749
8750 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
8751
8752         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
8753         Dan.
8754
8755 2000-11-24  Karl Eichwalder  <ke@suse.de>
8756
8757         * main.c (print_help): Untabify.
8758
8759 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
8760
8761         * utils.c (xrealloc_debug): Do the unregister/register thing only
8762         if the pointer has actually changed.
8763         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
8764         (xfree_real): Ditto.
8765         (xrealloc_real): Ditto.
8766         (xstrdup_real): Ditto.
8767
8768 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
8769
8770         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
8771         string; no need to strdup() it.
8772         (getftp): Make pwd_len a local variable.
8773         (ftp_loop): Free PWD before returning.
8774
8775         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
8776
8777 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
8778
8779         * all: Use xfree() instead of free.
8780
8781         * utils.c (xfree): New function.
8782
8783 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
8784
8785         * url.c (convert_links): HTML-quote the converted string.
8786
8787         * utils.c (html_quote_string): Move here from ftp-ls.c
8788         (html_quote_string): Make non-static; declare in utils.h.
8789         (html_quote_string): Convert SP to &#32;.
8790
8791 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
8792
8793         * ftp.c (getftp): Reformat Jan's code according to GNU coding
8794         standards; remove (debugging?) printf's; use '\0' for the ASCII
8795         zero character.  Use alloca() instead of malloc() for
8796         inter-function temporary allocations.
8797
8798 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
8799
8800         * ftpparse.c, ftpparse.h: New files.
8801
8802         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
8803         only. Use ftp_parse_nonunix_ls otherwise.
8804         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
8805         exotic FTP servers.
8806
8807         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
8808         FTP servers.
8809
8810         * ftp.c: New static wariables host_type, pwd, and pwd_len.
8811         (getftp): Support for VMS. Support for FTP servers that do not
8812         place you in the root directory after login.
8813         (ftp_retrieve_list): VMS is silent about the real file size, issue
8814         a more appropriate message.
8815         (ftp_get_listing): Pass host_type to ftp_parse_ls.
8816
8817         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
8818
8819 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
8820
8821         * hash.c (hash_table_put): Don't overwrite deleted mappings.
8822
8823 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
8824
8825         * hash.c (find_mapping): New function.
8826         (hash_table_get): Use it.
8827         (hash_table_get_pair): Ditto.
8828         (hash_table_exists): Ditto.
8829         (hash_table_remove): Ditto.
8830         (hash_table_remove): Really delete the entry if the mapping
8831         following LOCATION is empty.
8832
8833         * utils.c (string_set_add): Check whether the element has existed
8834         before.
8835
8836         * hash.c (hash_table_get_pair): New function.
8837
8838 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
8839
8840         * http.c (http_process_type): Ignore trailing whitespace; use
8841         strdupdelim().
8842
8843         * recur.c (recursive_retrieve): Use the new `convert' field.
8844         (convert_all_links): Ditto.
8845         (convert_all_links): Don't respect meta_disallow_follow.
8846
8847         * html-url.c (handle_link): Fill out link_relative_p and
8848         link_complete_p.
8849
8850         * url.h (struct _urlpos): Make elements more readable.
8851
8852         * recur.c (recursive_retrieve): Call slist_prepend instead of
8853         slist_append.
8854         (convert_all_links): Call slist_nreverse before iterating through
8855         urls_html.
8856
8857         * utils.c (slist_prepend): New function.
8858         (slist_nreverse): Ditto.
8859
8860 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
8861
8862         * http.c (check_end): Constify.
8863
8864 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
8865
8866         * http.c (http_loop): If username and password are known, try the
8867         `Basic' authentication scheme by default.
8868
8869         * connect.h: Declare test_socket_open.
8870
8871 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
8872
8873         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
8874
8875 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
8876
8877         * http.c (gethttp): Don't use the return value of sprintf().
8878         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
8879
8880 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
8881
8882         * recur.c (recursive_retrieve): Print the "so we don't load"
8883         debugging message only if we really don't load.
8884
8885         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
8886         (gethttp): Don't request keep-alive if keep-alive is inhibited.
8887
8888 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
8889
8890         * http.c (gethttp): Make the HTTP persistent connections more
8891         robust.
8892
8893 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
8894
8895         * retr.c (get_contents): If use_expected, make sure that the
8896         appropriate amount of data is being read.
8897
8898         * http.c (gethttp): Check for both `Keep-Alive: ...' and
8899         `Connection: Keep-Alive'.
8900
8901         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
8902         turned on.
8903
8904 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
8905
8906         * http.c (connection_available_p): Use it.
8907
8908         * connect.c (test_socket_open): New function.
8909
8910         * http.c (gethttp): Support persistent connections.  Based on the
8911         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
8912         (register_persistent): New function.
8913         (connection_available_p): Ditto.
8914         (invalidate_connection): Ditto.
8915
8916 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
8917
8918         * url.c (convert_links): Handle UREL2ABS case.
8919
8920         * recur.c (recursive_retrieve): Instead of the list
8921         urls_downloaded, use hash tables dl_file_url_map and
8922         dl_url_file_map.
8923         (convert_all_links): Use them to retrieve data.
8924
8925         * host.c (clean_hosts): Free the hash tables.
8926
8927         * main.c (private_initialize): Call host_init().
8928
8929         * host.c (store_hostaddress): Use a saner, hash table-based data
8930         model.
8931         (realhost): Ditto.
8932         (host_init): Initialize the hash tables.
8933
8934 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
8935
8936         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
8937         used for what the sorted slists used to be used for.
8938         (slist_contains): Don't rely on the list being sorted.
8939         (slist_append): Simplify the code.
8940
8941         * recur.c (recursive_cleanup): Use free_string_set.
8942
8943         * utils.c (string_set_add, string_set_exists, string_set_free):
8944         New functions for easier freeing of hash tables whose keys are
8945         strdup'ed strings.
8946
8947         * recur.c (recursive_retrieve): Use the hash table functions for
8948         storing undesirable URLs.
8949
8950         * hash.c: New file.
8951
8952 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
8953
8954         * main.c (private_initialize): Call url_init.
8955         (main): Call private_initialize.
8956
8957         * url.c (unsafe_char_table): New table.
8958         (UNSAFE_CHAR): Use it.
8959         (init_unsafe_char_table): New function.
8960         (url_init): New function; call init_unsafe_char_table.
8961
8962 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
8963
8964         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
8965         _vsnprintf respectively.
8966
8967 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
8968
8969         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
8970         on Linux.
8971
8972 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
8973
8974         * html-url.c (handle_link): Handle HTML fragment identifiers.
8975
8976         * recur.c (recursive_retrieve): If norobot info is respected and
8977         the file is specified not to be followed by robots, respect that.
8978
8979         * html-url.c (collect_tags_mapper): Handle <meta name=robots
8980         content=X>.  For us the important cases are where X is NONE or
8981         where X contains NOFOLLOW.
8982         (get_urls_html): Propagate that information to the caller.
8983
8984 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
8985
8986         * url.c (convert_links): Unlink the file we might be reading from
8987         before writing to it.
8988         (convert_links): Use alloca instead of malloc for
8989         filename_plus_orig_suffix.
8990
8991 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
8992
8993         * host.c (realhost): Add HOST to the list with quality==0 only if
8994         it wasn't already there.
8995         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
8996
8997 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
8998
8999         * url.c (get_urls_file): Ditto.
9000         (convert_links): Ditto.
9001
9002         * html-url.c (get_urls_html): Use read_file() instead of
9003         load_file().
9004
9005         * utils.c (read_file): New function, instead of the old
9006         load_file().
9007         (read_file_free): Ditto.
9008
9009         * url.c (findurl): Search only for the supported protocols.
9010         (convert_links): Use fwrite() when writing out a region of
9011         characters.
9012
9013 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
9014
9015         * ftp-ls.c: Move html_quote_string and ftp_index here.
9016
9017         * url.c: Remove get_urls_html, since that's now in html-url.c.
9018
9019         * html-url.c: New file.
9020
9021         * html-parse.c: New file.
9022
9023 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
9024
9025         * init.c (run_wgetrc): Don't bother killing off '\r' since
9026         pars_line() skips whitespace at end of line anyway.
9027         (parse_line): Oops, it didn't.  Now it does.
9028
9029         * recur.c (parse_robots): Ditto here.
9030
9031         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
9032         manually because read_whole_line no longer does.
9033
9034         * utils.c (read_whole_line): Rewrite to: a) use less memory
9035         (reallocates to needed size after work), b) work faster -->
9036         fgets() instead of getc, c) be more correct --> doesn't kill the
9037         newline character at the end of line.
9038
9039 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
9040
9041         * init.c (comind): Initialize MAX to array size - 1.
9042
9043 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
9044
9045         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
9046         Suggested by Edward J. Sabol.
9047
9048 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
9049
9050         * url.c (construct): Handle the case where host name is not
9051         followed by a slash.
9052
9053 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
9054
9055         * init.c: commands[] need to be sorted!  ("base" wasn't.)
9056
9057 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
9058
9059         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
9060         `if'.
9061
9062 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
9063
9064         * url.c (construct): Insert unneeded initialization for the
9065         compiler to shut up.
9066
9067         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
9068         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
9069         otherwise gets lost when you define _XOPEN_SOURCE.
9070
9071         * utils.c (touch): Include the file name in the error message.
9072         From Debian.
9073
9074 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
9075
9076         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
9077         resize the buffer to fit the formated message.  That way, messages
9078         of arbitrary size may be printed.
9079         (logvprintf): Use saved_append() to optionally log the last
9080         several lines of output.
9081         (logputs): Ditto.
9082         (log_close): Adapt to new data structures.
9083         (log_dump): Ditto.
9084         (redirect_output): Print messages to stderr, not to stdout.
9085
9086         * log.c (saved_append_1): New function.  Replaces the old logging
9087         system ("log all output until 10M characters") with a new, much
9088         more reasonable one ("log last screenful of text").
9089         (saved_append): New function; call saved_append_1.
9090         (free_log_line): New function.
9091
9092 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
9093
9094         * url.c (construct): Fix comment.
9095         (find_last_char): Document.
9096
9097 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
9098
9099         * snprintf.c: New file.
9100
9101 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
9102
9103         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
9104         types to logprintf() and debug_logprintf().
9105
9106 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
9107
9108         * ftp.c (ftp_loop_internal): Hide the password from the URL when
9109         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
9110         <darekm@bydg.lomac.com.pl>.
9111
9112 2000-11-02  Junio Hamano  <junio@twinsun.com>
9113
9114         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
9115
9116 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
9117
9118         * http.c (known_authentication_scheme_p): Recognize NTML
9119         authentication.
9120         (create_authorization_line): Treat NTML the same as `Basic'.
9121
9122 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
9123
9124         * retr.c (retrieve_url): Free url before returning.
9125         (retrieve_url): Free mynewloc before returning.
9126         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
9127
9128 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
9129
9130         * url.c (parseurl): Remove possible reading past the end of
9131         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
9132
9133 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9134
9135         * main.c (main): In case of opt.downloaded overflowing, print
9136         <overflow> instead of a totally bogus random value.
9137
9138         * retr.c (retrieve_from_file): Ditto.
9139
9140         * recur.c (recursive_retrieve): Ditto.
9141
9142         * main.c (main): Ditto.
9143
9144         * http.c (http_loop): Ditto.
9145
9146         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
9147         `+=', and downloaded_exceeds_quota() instead of the simple-minded
9148         check.
9149         (ftp_retrieve_list): Ditto.
9150         (ftp_retrieve_dirs): Ditto.
9151         (ftp_retrieve_glob): Ditto.
9152
9153         * retr.c (downloaded_increase): New function.  Notice overflows of
9154         opt.downloaded.
9155         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
9156         used if it overflowed.
9157
9158         * options.h (struct options): New member downloaded_overflow.
9159
9160 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9161
9162         * wget.h (enum): Remove extra space after last enumeration.
9163
9164 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9165
9166         * main.c (main): Use legible_very_long() for printing
9167         opt.downloaded.
9168
9169         * utils.c (legible_1): New function that operates on strings and
9170         does the brunt of legible()'s work.
9171         (legible): Use legible_1().
9172         (legible_very_long): New function; dump the argument with
9173         sprintf(), and call legible_1().
9174
9175         * options.h (struct options): Use VERY_LONG_TYPE for
9176         opt.downloaded.
9177
9178         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
9179         type.
9180
9181         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
9182         defined.  Define HAVE_LONG_LONG if long long is available.
9183
9184 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9185
9186         * utils.c (long_to_string): Update with a later, better version.
9187
9188 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9189
9190         * url.c (path_simplify_with_kludge): New function.
9191         (path_simplify_with_kludge): Disable it.  Instead...
9192         (parse_dir): ...make sure that at this point the right thing is
9193         done, i.e. that "query" part of the URL (?...) is always assigned
9194         to the file, never to the directory portion of the path.
9195
9196 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9197
9198         * retr.c (retrieve_url): Detect redirection cycles.
9199
9200 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9201
9202         * url.c (get_urls_html): Decode HTML entities using
9203         html_decode_entities.
9204
9205         * html.c (htmlfindurl): Don't count the `#' in numeric entities
9206         (&#NNN;) as an HTML fragemnt.
9207         (html_decode_entities): New function.
9208
9209 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9210
9211         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
9212
9213 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
9214
9215         * url.c (construct): Rewritten for clarity.  Avoids the
9216         unnecessary copying and stack-allocation the old version
9217         performed.
9218
9219 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
9220
9221         * ftp.c (getftp): Ditto.
9222
9223         * http.c (gethttp): Rewind the stream when retrying from scratch.
9224
9225 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
9226
9227         * retr.c (retrieve_url): Use url_concat() to handle relative
9228         redirections instead of /ad hoc/ code.
9229
9230         * url.c (url_concat): New function encapsulating weird
9231         construct().
9232         (urllen_http_hack): New function.
9233         (construct): When constructing new URLs, recognize that `?' does
9234         not form part of the file name in HTTP.
9235
9236 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
9237
9238         * retr.c: Add msec timing support for WINDOWS.
9239         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
9240         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
9241
9242 2000-10-27  Dan Harkless  <wget@harkless.org>
9243
9244         * retr.c (retrieve_url): Manually applied T. Bharath
9245         <TBharath@responsenetworks.com>'s patch to get wget to grok
9246         illegal relative URL redirects.  Reformatted and re-commented it.
9247
9248 2000-10-23  Dan Harkless  <wget@harkless.org>
9249
9250         * connect.c (make_connection and bindport): Manually applied Rob
9251         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
9252         changing coding style to GNU's.
9253
9254         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
9255         files downloaded via FTP.  Per a comment, .listing files were not
9256         counted towards number of bytes and files downloaded because they're
9257         deleted anyway.  Well, they aren't under -nr, so count them then.
9258
9259         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
9260         --bind-address, alphabetizing, changing coding style to GNU's,
9261         commenting, and renaming cmd_ip_address() to cmd_address() to
9262         imply hostnames also okay.
9263
9264         * main.c (main): --delete-after didn't delete the root of the
9265         tree.  Ignore --convert-links if --delete-after was specified.
9266         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
9267         fixing duplicate use of added-since-1.5.3 case value.
9268         (print_help): Clarified that --delete-after deletes local files.
9269         Rob forgot to add a line for his new --bind-address option.
9270
9271         * options.h (struct options): Manually applied Rob Mayoff's patch
9272         to add --bind-address (bind_address structure member).
9273
9274         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
9275         Ignore --convert-links if --delete-after was specified.
9276
9277         * retr.c (retrieve_from_file): Just added a DEBUGP().
9278
9279 2000-10-19  Dan Harkless  <wget@harkless.org>
9280
9281         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
9282         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
9283         patch to work around FTP servers that incorrectly respond to the
9284         "REST" command with the remaining size rather than the total file size.
9285
9286         * http.c (gethttp): Improved a comment and added code to tack on
9287         ".html" to text/html files without that extension when -E specified.
9288         (http_loop): Use new downloaded_file() enumerators and deal with
9289         the case of gethttp() called xrealloc() on u->local.
9290
9291         * init.c (commands): Added new "htmlextension" command.
9292         Also renamed John Daily's cmd_quad() to the more descriptive
9293         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
9294         removed duplicate cmd_boolean() declaration.
9295
9296         * main.c (print_help): Added my new -E / --html-extension option.
9297         (main): Undocumented --email-address option previously used -E synonym.
9298         Stole it away for the much more deserving --html-extension's use.
9299
9300         * options.h (struct options): Added html_extension field.
9301
9302         * url.c (convert_links): URL X that we saved as X.html locally due
9303         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
9304         (downloaded_file): Now remembers if we added .html extension to a file.
9305
9306         * url.h (downloaded_file_t): Added extra enumerators to support above.
9307         (downloaded_file): Now takes and returns a downloaded_file_t.
9308
9309         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
9310
9311 2000-10-09  Dan Harkless  <wget@harkless.org>
9312
9313         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
9314
9315         * main.c (print_help): Clarified what --retr-symlinks does.
9316
9317 2000-09-15  John Daily  <jdaily@cyberdude.com>
9318
9319         * init.c: Add support for "always" and "never" values to allow
9320         .wgetrc to override commandline (useful e.g. with .pm files
9321         calling `wget --passive-ftp' when your firewall doesn't allow that).
9322
9323         * ftp.c (getftp): passive_ftp is first option to support always/never.
9324
9325 2000-08-30  Dan Harkless  <wget@harkless.org>
9326
9327         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
9328
9329         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
9330         Wrapped some > 80-column lines.  When -p is specified and we're at a
9331         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than
9332         <LINK REL="stylesheet">.
9333
9334         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
9335
9336         * init.c: Added new -p / --page-requisites / page_requisites option.
9337
9338         * main.c (print_help): Clarified that -l inf and -l 0 both allow
9339         infinite recursion.  Changed the unhelpful --mirrior description
9340         to simply give the options it's equivalent to.  Added new -p option.
9341         (main): Added some comments; handle new -p / --page-requisites.
9342
9343         * options.h (struct options): Added new page_requisites field.
9344
9345         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
9346         Calculate and pass down new `dash_p_leaf_HTML' parameter to
9347         get_urls_html().  Use new INFINITE_RECURSION #define.
9348
9349         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
9350         final `dash_p_leaf_HTML' parameter.
9351
9352         * url.c: get_urls_html() and htmlfindurl() now take final
9353         `dash_p_leaf_HTML' parameter.
9354
9355         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
9356
9357         * wget.h: Added some comments and new INFINITE_RECURSION #define.
9358
9359 2000-08-23  Dan Harkless  <wget@harkless.org>
9360
9361         * main.c (print_help): -B / --base was not mentioned.
9362
9363 2000-08-22  Dan Harkless  <wget@harkless.org>
9364
9365         * main.c (print_help): Modified -nc description to mention that it
9366         also prevents the creation of multiple versions of the same file
9367         with ".<number>" suffixes.
9368
9369 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
9370
9371         * retr.c (retrieve_url): Consistently strdup opt.referer when
9372         setting u->referer.
9373
9374 2000-06-09  Dan Harkless  <wget@harkless.org>
9375
9376         * main.c (print_help): --help output for --waitretry was over 80 cols.
9377
9378 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
9379
9380         * url.c (encode_string): Fix comment.
9381         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
9382
9383 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
9384
9385         * ftp.c (ftp_retrieve_list): Change permissions only on plain
9386         files.
9387
9388 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
9389
9390         * url.c (str_url): Print the port number only if it's different
9391         from the default port number for that protocol.
9392
9393 2000-05-22  Dan Harkless  <wget@harkless.org>
9394
9395         * main.c (print_help): Added --help line for Damir Dzeko
9396         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
9397         Removed comments that --referer and --waitretry were undocumented.
9398         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
9399         line for --execute.
9400
9401 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
9402
9403         * ftp.c (getftp): Ditto.
9404
9405         * http.c (gethttp): Check for return value of fclose/fflush.
9406
9407 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
9408
9409         * host.c (store_hostaddress): Instead of shifting ADDR, start
9410         copying from the correct address.
9411
9412 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
9413
9414         * http.c (gethttp): Don't free REQUEST -- it was allocated with
9415         alloca().
9416         Pointed out by Gisle Vanem <gvanem@eunet.no>.
9417
9418 2000-04-04  Dan Harkless  <wget@harkless.org>
9419
9420         * host.c (store_hostaddress): R. K. Owen's patch introduces a
9421         "left shift count >= width of type" warning on 32-bit
9422         architectures.  Got rid of it by tricking the compiler w/ a variable.
9423
9424         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
9425         characters per RFC1738, namely everything above '~'.  It also
9426         generated a warning on OSes where char =~ unsigned char.  Fixed.
9427
9428 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
9429
9430         * http.c (http_process_type): Removed needless strdup(), a memory
9431         leak.
9432
9433 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
9434
9435         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
9436
9437 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
9438
9439         * init.c (wgetrc_file_name): Don't free HOME under Windows.
9440
9441 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
9442
9443         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
9444
9445 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
9446
9447         * url.c (UNSAFE_CHAR): New macro.
9448         (contains_unsafe): Use it.
9449         (encode_string): Ditto.
9450
9451 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
9452
9453         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
9454
9455 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
9456
9457         * Use TOUPPER/TOLOWER.
9458
9459 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
9460
9461         * ftp-opie.c (btoe): Zero-terminate OSTORE.
9462
9463 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
9464
9465         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
9466
9467         * sysdep.h (ISALNUM): New macro.
9468         (TOLOWER): Ditto.
9469         (TOUPPER): Ditto.
9470
9471 2000-03-10  Dan Harkless  <wget@harkless.org>
9472
9473         * html.c (idmatch): Implemented checking of my new --follow-tags
9474         and --ignore-tags options.
9475
9476         * init.c (commands): Added comment reminding people adding new
9477         entries doing allocation to add corresponding freeing in cleanup().
9478         (commands): Added new followtags and ignoretags commands.
9479         (cleanup): Free storage for new followtags and ignoretags.
9480
9481         * main.c: Use of "comma-separated list" was random -- normalized
9482         it.  Did some alphabetization.  Added comments pointing out
9483         "Options without arguments" and "Options accepting an argument"
9484         sections of long_options[].  Added new options --follow-tags and
9485         -G / --ignore-tags.  Added comment that Damir's --referer is
9486         currently undocumented.  Added comment that Heiko's --waitretry is
9487         partially undocumented (mentioned in --help but not in
9488         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
9489
9490         * options.h (struct options): Added new fields follow_tags and
9491         ignore_tags.
9492
9493         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
9494
9495 2000-03-02  Dan Harkless  <wget@harkless.org>
9496
9497         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
9498         braces to avoid ambiguous `else'" warnings.  Eliminated them.
9499
9500         * http.c (gethttp): Dan Berger's query string patch is totally
9501         bogus.  If you have two different URLs, gen_page.cgi?page1 and
9502         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
9503         second will overwrite the first.  Also, parameters to implicit
9504         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
9505         be printed with trailing garbage characters, and could seg fault.
9506         Backing out the patch, which Dan B. informed me by email was just
9507         a kludge to download StarOffice from Sun made necessary due to
9508         wget's unconditional escaping of certain characters (room for an
9509         option there?).
9510         (http_loop): Heiko introduced "suggest explicit braces to avoid
9511         ambiguous `else'" warnings.  Eliminated them.
9512
9513         * main.c: Heiko's --wait / --waitretry backwards compatibility
9514         code looks to have been totally untested -- automatic variable
9515         'wr' was used without being initialized, and a long int was passed
9516         into setval()'s char* val parameter.
9517
9518         * recur.c (parse_robots): Applied Edward J. Sabol
9519         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
9520         problem with "User-agent:<space>*<space>" lines in robots.txt.
9521
9522         * url.c (parseurl, str_url): Removing Dan Berger's code (see
9523         http.c above for explanation).
9524
9525 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
9526
9527         * ftp.c: Respect new option waitretry.
9528
9529 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
9530
9531         * http.c (gethttp): Send custom Referer, if required.
9532
9533 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
9534
9535         * netrc.c (parse_netrc): Allow passwords to contain spaces.
9536
9537         * netrc.c (parse_netrc): New function.
9538
9539 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
9540
9541         * http.c (gethttp): Send it.
9542
9543         * url.c (parseurl): Detect query string in HTTP URL-s.
9544         (str_url): Print it.
9545
9546 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
9547
9548         * html.c (html_allow): Add <link href=...> and <script src=...>.
9549
9550 1999-05-02  andrew deryabin  <djsf@softhome.net>
9551
9552         * http.c (gethttp): Specify port in `Host' header only if it's
9553         different from 80.
9554
9555 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
9556
9557         * recur.c (recursive_retrieve): If a finite maximum depth is
9558         specified, and we're are already at that depth, don't download the
9559         HTML file for parsing.
9560
9561 2000-03-01  Dan Harkless  <wget@harkless.org>
9562
9563         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
9564         even though we don't do conversion on HTML files retrieved via
9565         FTP, so _current_ usage of downloaded_file() makes this call unneeded.
9566         (ftp_retrieve_list): Added a comment saying where we need to
9567         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
9568         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
9569         a lie -- reworded as "Server file no newer than local file '%s' --".
9570
9571         * http.c (http_loop): Fixed a typo and clarified a comment.
9572         (http_loop): When -K and -N are specified together, compare size
9573         and timestamp of server file X against local file X.orig (if
9574         extant) rather than converted local file X.
9575         (http_loop): "Local file '%s' is more recent," is sometimes a lie
9576         -- reworded as "Server file no newer than local file '%s' --".
9577         (http_loop): Call new downloaded_file() function to prevent
9578         wrongful overwriting of .orig file when -N is specified.
9579
9580         * url.c (convert_links): When -K specified, only rename X to
9581         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
9582         file X due to -N, we clobber an X.orig from a previous invocation.
9583         (convert_links): Call the failsafe xstrdup(), not the real strdup().
9584         (convert_links): Added a note asking anyone who understands how
9585         multiple URLs can correspond to a single file to comment it.
9586         (downloaded_file): Added this new function.
9587
9588         * url.h (downloaded_file): Added prototype for this new function
9589         as well as its downloaded_file_t enum type.
9590
9591         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
9592
9593 2000-02-29  Dan Harkless  <wget@harkless.org>
9594
9595         * version.c: Upped version to developer-only "1.5.3+dev".
9596
9597 2000-02-18  Dan Harkless  <wget@harkless.org>
9598
9599         * init.c (backup_converted): Added this new option.
9600
9601         * main.c (-K / --backup-converted): Added this new option.
9602
9603         * options.h (backup_converted): Added this new option.
9604
9605         * url.c (convert_links): When backup_converted is specified, save
9606         file X as X.orig before converting.
9607
9608         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
9609
9610 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
9611
9612         * version.c: Wget 1.5.3 is released.
9613
9614 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
9615
9616         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local
9617         address doesn't yield FQDN.
9618
9619 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
9620
9621         * cmpt.c (strerror): Fix declaration of sys_errlist.
9622
9623 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
9624
9625         * main.c (main): Don't use an array subscript as the first
9626         argument to STRDUP_ALLOCA.
9627         From Kaveh R. Ghazi.
9628
9629 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
9630
9631         * html.c (htmlfindurl): Download table background.
9632
9633 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
9634
9635         * init.c (parse_line): Would free *com before allocating it.
9636         (parse_line): Would free com instead of *com.
9637
9638 1998-09-10  Howard Gayle  <howard@fjst.com>
9639
9640         * url.c (get_urls_html): Would drop the last character of the
9641         link.
9642
9643 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
9644
9645         * http.c (http_loop): Don't print status code if quiet.
9646
9647 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
9648
9649         * log.c: Use <stdarg.h> only when __STDC__.
9650
9651 1998-09-10  Adam D. Moss  <adam@foxbox.org>
9652
9653         * html.c (htmlfindurl): Download <layer src=...>.
9654
9655 1998-09-10  Howard Gayle  <howard@fjst.com>
9656
9657         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file
9658         not retrieved.
9659
9660 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
9661
9662         * utils.c: Include <libc.h> on NeXT.
9663
9664 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
9665
9666         * url.c (get_urls_html): Fix calculation of URL position.
9667
9668 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
9669
9670         * version.c: Wget 1.5.2 is released.
9671
9672 1998-06-23  Dave Love  <d.love@dl.ac.uk>
9673
9674         * ftp.c, init.c, netrc.c: Include errno.h.
9675
9676         * http.c: Include errno.h and time header.
9677
9678         * Makefile.in (exext): Define.
9679         (install.bin, uninstall.bin): Use it.
9680
9681 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
9682
9683         * http.c (http_loop): Don't attempt to compare local and remote
9684         sizes if the remote size is unknown.
9685
9686 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
9687
9688         * url.c (get_urls_html): Use malloc() instead of alloca in the
9689         loop.
9690
9691 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
9692
9693         * version.c: Wget 1.5.2-b4 is released.
9694
9695 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
9696
9697         * url.c (get_urls_html): Ignore spaces before and after the URI.
9698
9699 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
9700
9701         * ftp.c (getftp): Translate `done'.
9702
9703 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
9704
9705         * version.c: Wget 1.5.2-b3 is released.
9706
9707 1998-06-06  Alexander Kourakos  <awk@bnt.com>
9708
9709         * init.c (cleanup): Close dfp, don't free it.
9710
9711 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
9712
9713         * utils.c (make_directory): Twiddle.
9714
9715         * config.h.in: Added template for access().
9716
9717 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
9718
9719         * html.c (htmlfindurl): Download <input src=...>
9720
9721 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
9722
9723         * utils.c (file_exists_p): Use access() with two arguments.
9724
9725 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
9726
9727         * netrc.c (parse_netrc): Correct logic.
9728
9729 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
9730
9731         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
9732         <ljm@ljm.wownet.net>.
9733
9734 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
9735
9736         * version.c: Wget 1.5.2-b2 is released.
9737
9738 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
9739
9740         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
9741
9742 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
9743
9744         * retr.c (elapsed_time): Return correct value when
9745         HAVE_GETTIMEOFDAY is undefined.
9746
9747 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
9748
9749         * version.c: Wget 1.5.2-b1 is released.
9750
9751 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
9752
9753         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
9754         (_getopt_internal): Don't translate `#if 0'-ed strings.
9755
9756 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
9757
9758         * mswindows.c (ws_handler): Use fork_to_background().
9759
9760 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
9761
9762         * version.c: Wget 1.5.1 is released.
9763
9764 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
9765
9766         * http.c (parse_http_status_line): Avoid `minor' and `major'
9767         names.
9768
9769 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
9770
9771         * utils.c (mkdirhier): Renamed to make_directory.
9772
9773 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
9774
9775         * mswindows.c (fork_to_background): Define under Windows.
9776
9777         * utils.c (fork_to_background): New function.
9778
9779         * html.c (htmlfindurl): Removed rerdundant casts.
9780
9781 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
9782
9783         * mswindows.c (ws_mypath): Cache the path.
9784
9785 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
9786
9787         * ftp.h: Prefix enum ftype members with FT_.
9788
9789         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
9790
9791         * mswindows.h: Use stat under Borland, _stat under MSVC.
9792
9793 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
9794
9795         * http.c (known_authentication_scheme_p): New function.
9796         (gethttp): Handle authorization more correctly.
9797
9798         * ftp-basic.h: Removed.
9799
9800         * cmpt.h: Removed.
9801
9802         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
9803         with gcc 2.8.
9804         (numdigit): Use `while' loop.
9805
9806         * http.c (create_authorization_line): Detect authentication
9807         schemes case-insensitively.
9808
9809         * http.c (extract_header_attr): Use strdupdelim().
9810         (digest_authentication_encode): Move declaration of local
9811         variables to smaller scope.
9812         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
9813         (create_authorization_line): Detect authentication schemes
9814         case-insensitively.
9815
9816         * utils.c (touch): Constify.
9817
9818         * http.c (gethttp): Report a nicer error when no data is received.
9819
9820         * rbuf.h (RBUF_READCHAR): Ditto.
9821
9822         * ftp-basic.c (ftp_response): Use sizeof.
9823
9824 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
9825
9826         * retr.c (print_percentage): EXPECTED is long, not int.
9827         (print_percentage): Use floating-point arithmetic to avoid
9828         overflow with large files' sizes multiplied with 100.
9829
9830 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
9831
9832         * config.h.in: Added pid_t stub.
9833
9834         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
9835         define it).
9836
9837 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
9838
9839         * version.c: Wget 1.5.0 is released.
9840
9841 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
9842
9843         * url.c (str_url): Ditto.
9844
9845         * ftp-basic.c (ftp_rest): Use new name.
9846
9847         * utils.c (long_to_string): Renamed from prnum().
9848
9849 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
9850
9851         * version.c: Wget 1.5-b17 is released.
9852
9853 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
9854
9855         * headers.c (header_get): New argument FLAGS.
9856
9857         * http.c (gethttp): If request is malformed, bail out of the
9858         header loop.
9859         (gethttp): Check for empty header *after* the status line checks.
9860         (gethttp): Disallow continuations for status line.
9861
9862 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
9863
9864         * version.c: Wget 1.5-b16 is released.
9865
9866 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
9867
9868         * init.c (commands): Renamed `always_rest' to `continue'.
9869
9870 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
9871
9872         * all: Use it.
9873
9874         * log.c (logputs): New argument.
9875         (logvprintf): Ditto.
9876         (logprintf): Ditto.
9877
9878 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
9879
9880         * http.c (http_atotm): Update comment.
9881
9882         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
9883
9884         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
9885
9886         * main.c (i18n_initialize): New function.
9887         (main): Use it.
9888
9889         * log.c: Include <unistd.h>.
9890
9891         * retr.c (show_progress): Cast alloca to char *.
9892
9893 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
9894
9895         * version.c: Wget 1.5-b15 is released.
9896
9897 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
9898
9899         * utils.h: Declare file_non_directory_p().
9900
9901 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
9902
9903         * main.c (main): It's `tries', not `numtries' now.
9904
9905 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
9906
9907         * init.c (getperms): Removed.
9908
9909 1998-04-01  Tim Charron  <tcharron@interlog.com>
9910
9911         * log.c (logvprintf): Don't use ARGS twice.
9912
9913 1998-04-01  John  <john@futuresguide.com>
9914
9915         * mswindows.c: Cleaned up.
9916
9917 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
9918
9919         * version.c: Wget 1.5-b14 is released.
9920
9921 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
9922
9923         * ftp-opie.c (STRLEN4): New macro.
9924         (btoe): Use it.
9925
9926 1998-04-01  Junio Hamano  <junio@twinsun.com>
9927
9928         * http.c: Document all the Digest functions.
9929
9930 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
9931
9932         * utils.c (file_non_directory_p): Renamed from isfile().
9933
9934         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
9935
9936 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
9937
9938         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
9939
9940         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
9941         style.
9942         (cmd_permissions): Removed.
9943
9944         * config.h.in: Add template for WORDS_BIGENDIAN.
9945
9946 1998-03-31  Junio Hamano  <junio@twinsun.com>
9947
9948         * http.c (HEXD2asc): New macro.
9949         (dump_hash): Use it.
9950
9951 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
9952
9953         * version.c: Wget 1.5-b13 is released.
9954
9955 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
9956
9957         * main.c (main): Don't try to use `com'.
9958
9959 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
9960
9961         * init.c (cmd_permissions): New function.
9962
9963 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
9964
9965         * version.c: Wget 1.5-b12 is released.
9966
9967 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
9968
9969         * init.c (commands): Renamed `numtries' to `tries'.
9970         (cmd_spec_debug): Removed.
9971         (home_dir): Under Windows, return `C:\' if HOME is undefined.
9972
9973 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
9974
9975         * config.h.in: Define _XOPEN_SOURCE.
9976
9977         * init.c (check_user_specified_header): New function.
9978         (cmd_spec_header): Use it.
9979         (cmd_spec_useragent): New function.
9980
9981 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
9982
9983         * version.c: Wget 1.5-b11 is released.
9984
9985 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
9986
9987         * wget.h: Include <libintl.h> only if NLS is enabled.
9988
9989 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
9990
9991         * options.h (struct options): Made `wait' a long.
9992         (struct options): Ditto for `timeout'.
9993
9994 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
9995
9996         * utils.c (exists): Renamed to file_exists_p.
9997         (file_exists_p): Use access() if available.
9998
9999 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
10000
10001         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
10002         infloop.
10003
10004         * log.c: do_logging -> save_log_p.
10005
10006         * config.h.in: Added template for HAVE_VSNPRINTF.
10007
10008 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
10009
10010         * init.c: Ditto.
10011
10012         * http.c: Protect declaration against non-ANSI compiler.
10013
10014         * log.c (logvprintf): Use vsnprintf() if available.
10015
10016         * getopt.c (main): Don't translate test stuff.
10017
10018 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
10019
10020         * version.c: Wget 1.5-b10 is released.
10021
10022 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
10023
10024         * ftp.c (getftp): Don't translate "CWD %s".
10025
10026         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
10027
10028 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
10029
10030         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
10031
10032         * log.c (logputs): New function.
10033         (logvprintf): Renamed from vlogmsg; use logputs().
10034
10035         * retr.c (show_progress): Print `[100%]' when the retrieval is
10036         finished.
10037
10038         * init.c (run_wgetrc): Use FILE, not PATH.
10039         (wgetrc_file_name): Ditto.
10040
10041 1998-03-07  Tim Adam  <tma@osa.com.au>
10042
10043         * recur.c (parse_robots): Correctly reset `entries' on empty
10044         disallow.
10045
10046 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
10047
10048         * init.c (cmd_spec_debug): Use cmd_boolean().
10049
10050 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
10051
10052         * http.c (gethttp): Create proxy-authorization correctly.
10053
10054 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
10055
10056         * md5.c: Ditto.
10057
10058         * getopt.c: Use ANSI function definitions.
10059
10060         * ftp-opie.c: New file.
10061
10062         * options.h: Don't redefine EXTERN.
10063
10064         * init.c: Sort it correctly.
10065
10066 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
10067
10068         * version.c: Wget 1.5-b9 is released.
10069
10070 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
10071
10072         * recur.c (recursive_retrieve): Reset `first_time'.
10073
10074         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
10075
10076         * rbuf.c (rbuf_peek): Simplified.
10077         (rbuf_flush): Use MINVAL.
10078
10079         * wget.h (MINVAL): Moved from url.h.
10080
10081         * rbuf.h (RBUF_FD): New macro.
10082
10083         * url.c (add_url): Add to the head of the list.
10084
10085         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
10086         file.
10087         (getftp): Set the default permissions to 0600.
10088
10089 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
10090
10091         * url.c (get_urls_html): Ditto.
10092         (convert_links): Ditto.
10093
10094         * recur.c (parse_robots): Ditto.
10095
10096         * html.c (ftp_index): Ditto.
10097
10098         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
10099
10100         * init.c (defaults): Initialize `opt' to zero via memset.
10101
10102         * http.c (digest_authentication_encode): goto considered harmful.
10103
10104 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
10105
10106         * ftp.c (delelement): Simplify and fix leak.
10107
10108 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
10109
10110         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
10111
10112         * url.h (HEXD2ASC): Removed warning.
10113
10114         * init.c (comind): Use binary search.
10115         (commands): Reorganized.
10116         (setval): Ditto.
10117         (cmd_boolean): New function.
10118         (cmd_number): Ditto.
10119         (cmd_number_inf): Ditto.
10120         (cmd_string): Ditto.
10121         (cmd_vector): Ditto.
10122         (cmd_directory_vector): Ditto.
10123         (cmd_bytes): Ditto.
10124         (cmd_time): Ditto.
10125         (cmd_spec_debug): Ditto.
10126         (cmd_spec_dirmode): Ditto.
10127         (cmd_spec_dirstruct): Ditto.
10128         (cmd_spec_dotstyle): Ditto.
10129         (cmd_spec_header): Ditto.
10130         (cmd_spec_htmlify): Ditto.
10131         (cmd_spec_mirror): Ditto.
10132         (cmd_spec_outputdocument): Ditto.
10133         (cmd_spec_recursive): Ditto.
10134         (settime): Merged with cmd_time().
10135         (setbytes): Merged with cmd_bytes().
10136         (setonoff): Merged with cmd_boolean().
10137         (onoff): Ditto.
10138
10139 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
10140
10141         * Makefile.in (distclean): Remove `config.h'.
10142
10143 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
10144
10145         * version.c: Wget 1.5-b8 is released.
10146
10147 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
10148
10149         * http.c (digest_authentication_encode): New function.
10150         (create_authorization_line): Use it.
10151         (dump_hash): New function.
10152         (digest_authentication_encode): Use it.
10153
10154         * fnmatch.c: Renamed from `mtch.c'.
10155
10156 1998-02-15  Karl Eichwalder  <ke@suse.de>
10157
10158         * main.c (main): Tag "Written by..." string as translatable.
10159
10160 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
10161
10162         * wget.h (FREE_MAYBE): New macro.
10163
10164         * http.c (create_authorization_line): Don't use ANSI C string
10165         concatenation feature.
10166         (basic_authentication_encode): Use alloca() for temporary
10167         variables.
10168
10169         * recur.h: Ditto.
10170
10171         * http.c: Ditto.
10172
10173         * headers.h: Ditto.
10174
10175         * ftp-basic.c: Protect declaration against non-ANSI compiler.
10176
10177         * http.c (create_authorization_line): Cast `unsigned char *' to
10178         `char *' for sprintf, to shut up the noisy Digital Unix cc.
10179
10180 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
10181
10182         * version.c: Wget 1.5-b7 is released.
10183
10184 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
10185
10186         * cmpt.c (strstr): Synched with glibc-2.0.6.
10187
10188         * ftp-basic.c (calculate_skey_response): Ditto.
10189         (calculate_skey_response): Use alloca().
10190
10191         * http.c (create_authorization_line): Work with FSF's version of
10192         md5.c.
10193
10194         * md5.c: New file, from GNU libc.
10195
10196 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
10197
10198         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
10199
10200 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
10201
10202         * http.c (basic_authentication_encode): New function, instead of
10203         the macro.
10204
10205 1998-02-13  Junio Hamano  <junio@twinsun.com>
10206
10207         * http.c: Add HTTP-DA support.
10208         * ftp-basic.c: Add Opie/S-key support.
10209         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
10210         * md5.c, md5.h: New files.
10211
10212 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
10213
10214         * http.c (http_process_range): Renamed from hprocrange().
10215         (http_process_range): Parse the whole header.
10216
10217         * headers.c: New file.
10218         (header_process): New function.
10219         (header_get): Renamed from fetch_next_header.
10220
10221         * all: Include utils.h only where necessary.
10222
10223         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
10224
10225         * wget.h: Add provisions for dmalloc.
10226
10227 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
10228
10229         * version.c: Wget 1.5-b6 is released.
10230
10231 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
10232
10233         * ftp.c (ftp_loop): Determine `filename' more precisely.
10234
10235         * init.c (setval): Don't set `opt.quiet' if output-document is
10236         `-'.
10237
10238         * log.c (log_init): Print to STDERR instead of STDOUT.
10239         (vlogmsg): Use STDERR by default.
10240         (logflush): Ditto.
10241
10242 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
10243
10244         * host.c: Use addr_in again.
10245
10246 1998-02-08  Karl Eichwalder  <karl@suse.de>
10247
10248         * http.c (gethttp): Fixed typo.
10249
10250 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
10251
10252         * version.c: Wget 1.5-b5 is released.
10253
10254 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
10255
10256         * retr.c (show_progress): Use it.
10257
10258         * log.c (logflush): New function.
10259
10260         * wget.h: Utilize __attribute__ if on gcc.
10261
10262 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
10263
10264         * http.c (base64_encode_line): New argument LENGTH.
10265         (BASIC_AUTHENTICATION_ENCODE): Use it.
10266         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
10267
10268         * main.c (main): Fixed fprintf() format mismatch.
10269
10270 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
10271
10272         * version.c: Wget 1.5-b4 is released.
10273
10274 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
10275
10276         * host.c: use sockaddr_in instead of addr_in.
10277
10278 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
10279
10280         * init.c (cleanup): Use it.
10281
10282         * recur.c (recursive_cleanup): New function.
10283
10284         * retr.c (retrieve_from_file): Ditto.
10285
10286         * main.c (main): Use it.
10287
10288         * recur.c (recursive_reset): New function.
10289
10290         * retr.c (retrieve_from_file): Ditto.
10291
10292         * main.c (main): Simplify call to recursive_retrieve().
10293
10294         * recur.c (recursive_retrieve): Removed FLAGS argument.
10295
10296         * http.c (gethttp): Changed call to iwrite().
10297
10298 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
10299
10300         * url.c (get_urls_html): Ditto.
10301         (free_urlpos): Ditto.
10302         (mkstruct): Ditto.
10303         (construct): Ditto.
10304
10305         * retr.c (retrieve_url): Move declaration of local variables to
10306         smaller scope.
10307
10308         * url.c (urlproto): Use it.
10309         (parseurl): Ditto.
10310         (str_url): Ditto.
10311         (get_urls_html): Ditto.
10312
10313         * utils.h (ARRAY_SIZE): New macro.
10314
10315         * url.c (proto): Moved from url.h.
10316
10317         * url.h (URL_CLEANSE): Reformatted.
10318         (USE_PROXY_P): Renamed from USE_PROXY.
10319
10320         * ftp-basic.c: Adjust to the new interface of iwrite().
10321
10322         * ftp-basic.c (ftp_port): Use alloca().
10323
10324 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
10325
10326         * version.c: Wget 1.5-b3 is released.
10327
10328         * host.c (ftp_getaddress): Don't print to stderr directly.
10329
10330         * init.c (setbytes): Support `g' for gigabytes.
10331         (cmdtype): New specification CTIME.
10332         (setval): Use it with settime().
10333         (commands): Use it for WAIT and TIMEOUT.
10334
10335 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
10336
10337         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
10338         (gethttp): Use it.
10339
10340         * utils.c (unique_name_1): Moved from url.c.
10341         (unique_name): Ditto.
10342
10343         * url.c (url_filename): Ditto.
10344
10345         * log.c (redirect_output): Changed call to unique_name().
10346
10347         * url.c (unique_name_1): Renamed from unique_name().
10348         (unique_name): Changed interface.
10349
10350         * init.c (enum cmdid): Moved from init.h.
10351         (cmdtype): Ditto.
10352         (struct cmd): Ditto.
10353
10354         * main.c (main): Use it.
10355         (main): Moved `--backups' to not have a short option.
10356
10357         * options.h (struct options): New member BACKGROUND.
10358
10359         * main.c (print_help): Rearranged.
10360         (main): New long options for -n* short options: --no-directories,
10361         --no-host-directories, --non-verbose, --no-host-lookup and
10362         --dont-remove-listing.
10363
10364 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
10365
10366         * main.c (main): Use log_close().
10367
10368         * log.c: New variable LOGFP.
10369         (vlogmsg): Use it.
10370         (redirect_output): Don't open /dev/null; set LOGFP to stdin
10371         instead.
10372         (log_close): New function.
10373
10374         * options.h (struct options): Removed LFILE.
10375
10376         * log.c (log_enable): Removed.
10377
10378         * main.c (main): Use it.
10379
10380         * log.c (log_init): New function.
10381
10382         * url.c (get_urls_html): Removed needless assignment to BASE.
10383
10384         * host.c (add_hlist): Don't set CMP needlessly.
10385
10386         * utils.c (match_backwards): Ditto.
10387         (in_acclist): Ditto.
10388
10389         * url.c (findurl): Ditto.
10390
10391         * netrc.c (parse_netrc): Ditto.
10392
10393         * log.c (log_dump): Ditto.
10394
10395         * html.c (html_quote_string): Ditto.
10396
10397         * ftp-basic.c (ftp_request): Made static.
10398
10399         * connect.c: Made global variables static.
10400
10401         * url.c (construct): Ditto.
10402
10403         * init.c (init_path): Avoid assignment inside `if'-condition.
10404
10405         * ftp.c: Don't include in.h or winsock.h.
10406
10407         * ftp.c (ftp_loop): Use SZ.
10408
10409         * connect.c (bindport): Cast &addrlen to int *.
10410         (conaddr): Ditto.
10411
10412         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
10413
10414 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
10415
10416         * ftp.c (getftp): Initialize opt.ftp_pass here.
10417         (ftp_retrieve_dirs): Use alloca().
10418
10419         * init.c (defaults): Don't initialize opt.ftp_pass.
10420
10421         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
10422         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
10423
10424 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
10425
10426         * recur.c (parse_robots): Check for comments more correctly.
10427
10428         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
10429         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
10430         hostname.
10431
10432 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
10433
10434         * version.c: Wget 1.5-b2 is released.
10435
10436         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
10437
10438         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
10439
10440         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
10441         char.
10442
10443         * log.c: Don't attempt to hide arguments from ansi2knr.
10444
10445         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
10446
10447         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
10448
10449         * ftp.c (getftp): Ditto.
10450
10451         * http.c (gethttp): Use it.
10452
10453         * retr.c (get_contents): New argument EXPECTED; pass it to
10454         show_progress().
10455         (show_progress): New argument EXPECTED; use it to display
10456         percentages.
10457
10458         * init.c (setval): Ditto.
10459
10460         * http.c (gethttp): Ditto.
10461         (http_loop): Ditto.
10462
10463         * ftp.c (getftp): Ditto.
10464         (ftp_loop_internal): Ditto.
10465
10466         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
10467
10468         * sysdep.h (CLOSE): Simplify; use DEBUGP.
10469
10470         * netrc.c (search_netrc): Use alloca().
10471
10472         * init.c (defaults): Initialize no_flush.
10473
10474         * log.c (vlogmsg): Don't flush if no_flush.
10475
10476         * options.h (struct options): New variable no_flush.
10477
10478         * main.c (main): Don't play games with buffering.
10479
10480         * log.c (vlogmsg): Flush the output after every message.
10481
10482 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
10483
10484         * init.c (parse_line): Ditto.
10485
10486         * url.c (get_urls_html): Ditto.
10487
10488         * main.c (main): Don't cast to unsigned char.
10489
10490         * init.c (run_wgetrc): Don't cast to unsigned char.
10491         (parse_line): Accept char instead of unsigned char.
10492
10493         * html.c (htmlfindurl): Use char instead of unsigned char.
10494
10495         * all: Use them.
10496
10497         * sysdep.h: Add wrappers to ctype macros to make them
10498         eight-bit-clean:
10499
10500 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
10501
10502         * html.c (htmlfindurl): Download <img lowsrc=...>
10503
10504         * main.c (main): Ignore SIGPIPE.
10505
10506         * connect.c (select_fd): New argument WRITEP.
10507         (iwrite): Call select_fd().
10508
10509 1997-02-27  Fila Kolodny <fila@ibi.com>
10510
10511         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
10512         one already exists, just skip it.
10513
10514 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
10515
10516         * http.c (gethttp): Cosmetic changes.
10517
10518         * http.c (check_end): Allow `+D...' instead of `GMT'.
10519         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
10520
10521         * url.c (process_ftp_type): New function.
10522         (parseurl): Use it.
10523
10524         * connect.c (iwrite): Allow writing in a few chunks.
10525         (bindport): Made SRV static, so addr can point to it.
10526         (select_fd): Removed HPUX kludge.
10527
10528         * host.c (free_hlist): Incorporated into clean_hosts().
10529
10530 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
10531
10532         * host.c (hlist): Made static.
10533         (search_address): Cosmetic change.
10534
10535 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
10536
10537         * version.c: Wget v1.5-b1 is released.
10538
10539         * http.c (hgetlen): Use sizeof() to get the header length.
10540         (hgetrange): Ditto.
10541         (hgettype): Ditto.
10542         (hgetlocation): Ditto.
10543         (hgetmodified): Ditto.
10544         (haccepts_none): Ditto.
10545
10546         * main.c (main): Updated `--version' and `--help' output, as per
10547         Francois Pinard's suggestions.
10548
10549         * main.c: Include locale.h; call setlocale(), bindtextdomain() and
10550         textdomain().
10551
10552         * config.h.in: Define stubs for I18N3.
10553
10554         * wget.h: Include libintl.h.
10555
10556 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
10557
10558         * url.c (mkstruct): Check for opt.cut_dirs.
10559         (mkstruct): alloca()-te more, xmalloc() less.
10560
10561         * utils.c (load_file): Check for ferror().
10562
10563         * url.c (get_urls_file): Close only the files we opened.
10564         (get_urls_html): Ditto.
10565         (count_slashes): New function.
10566
10567         * http.h: Removed.
10568
10569         * http.c (gethttp): Respect username and password provided by
10570         proxy URL.
10571         (base64_encode_line): Write into an existing buffer instead of
10572         malloc-ing a new one.
10573         (struct http_stat): Moved from http.h
10574
10575         * retr.c (retrieve_url): Free SUF.
10576
10577         * all: Removed lots of unnecessary .h dependencies.
10578
10579         * html.c (global_state): Made static.
10580
10581         * utils.h (ALLOCA_ARRAY): New macro.
10582
10583         * main.c (main): New option `--cut-dirs'.
10584
10585         * url.c (construct): Use alloca() for T.
10586
10587         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
10588
10589         * host.c (_host_t): Moved from host.h.
10590         (struct host): Renamed from _host_t.
10591         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
10592         (realhost): Ditto.
10593
10594         * host.h: Don't include url.h.
10595
10596         * ftp.c (LIST_FILENAME): Moved from ftp.h.
10597
10598         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
10599
10600         * main.c (main): Enable log if the output goes to a TTY.
10601
10602         * connect.h: Removed unused constant `BACKLOG'.
10603
10604         * config.h.in: Check for isatty().
10605
10606         * Makefile.in (LINK): Use CFLAGS when linking.
10607
10608 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
10609
10610         * mswindows.c (ws_hangup): Use redirect_output().
10611
10612         * main.c (redirect_output_signal): New function; use
10613         redirect_output().
10614
10615         * log.c (redirect_output): New function, based on hangup(), which
10616         is deleted.
10617
10618         * log.c (vlogmsg): New function.
10619
10620         * wget.h (DEBUGP): Use debug_logmsg().
10621
10622         * main.c (hangup): Use it.
10623
10624         * log.c (log_dump): New function.
10625
10626         * utils.h (DO_REALLOC): Use `long' for various sizes.
10627
10628         * http.c (hskip_lws): Use `while', for clarity.
10629         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
10630         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
10631
10632         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
10633         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
10634
10635         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
10636         (LEGIBLE_SEPARATOR): Ditto.
10637         (FILE_BUFFER_SIZE): Ditto.
10638
10639         * retr.c (BUFFER_SIZE): Moved from retr.h.
10640
10641         * log.c: New file.
10642         (logmsg): Moved from utils.c.
10643         (debug_logmsg): New function.
10644
10645         * mswindows.h: Include it here.
10646
10647         * init.c: Ditto.
10648
10649         * utils.c: Don't include <windows.h>.
10650
10651 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
10652
10653         * host.c (ftp_getaddress): Ditto.
10654
10655         * main.c (main): Use it.
10656
10657         * utils.h (STRDUP_ALLOCA): New macro.
10658
10659         * init.c: Prepend `wget: ' to error messages printed on stderr.
10660
10661         * utils.c (mkdirhier): Renamed from mymkdir.
10662         (touch): Renamed from my_touch.
10663         (pwd_cuserid): Renamed from my_cuserid().
10664
10665 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
10666
10667         * utils.c (accdir): Process wildcards.
10668         (proclist): New function.
10669         (accdir): Use it to avoid code repetition.
10670
10671 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
10672
10673         * recur.c (parse_robots): Respect opt.useragent; use alloca().
10674
10675         * http.c (gethttp): Construct useragent accordingly.
10676
10677         * version.c: Changed version string to numbers-only.
10678
10679         * main.c (print_help): List all the options.
10680
10681         * mswindows.c (windows_main_junk): Initialize argv0 here.
10682
10683 1998-01-24  Karl Heuer  <kwzh@gnu.org>
10684
10685         * netrc.c (search_netrc): Initialize `l' only after processing
10686         netrc.
10687
10688         * main.c (main): Don't trap SIGHUP if it's being ignored.
10689
10690 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
10691
10692         * all: Use logmsg().
10693
10694         * utils.c (time_str): Moved from retr.c.
10695         (logmsg): New function.
10696         (logmsg_noflush): Ditto.
10697
10698         * rbuf.c: New file, moved buf_* functions here.
10699
10700         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
10701
10702         * ftp-basic.c (ftp_rest): Use prnum().
10703
10704         * ftp-basic.c: Ditto.
10705
10706         * ftp.c: Use the new reading functions and macros.
10707
10708         * retr.c (buf_initialize): New function.
10709         (buf_initialized_p): Ditto.
10710         (buf_uninitialize): Ditto.
10711         (buf_fd): Ditto.
10712
10713         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
10714         efficiency.
10715         (gethttp): Use alloca() where appropriate.
10716
10717         * retr.c (buf_readchar): Use it.
10718         (buf_peek): Use rstreams.
10719
10720         * retr.h (BUF_READCHAR): New macro.
10721
10722         * init.c (home_dir): Rewritten for clarity.
10723         (init_path): Ditto.
10724
10725         * mswindows.c (ws_backgnd): Made static.
10726         (read_registry): Ditto.
10727         (ws_cleanup): Ditto.
10728         (ws_handler): Ditto.
10729
10730 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
10731
10732         * alloca.c: New file.
10733
10734         * Makefile.in (ALLOCA): Define.
10735
10736         * mswindows.c (ws_help): Constify.
10737         (ws_help): Use alloca.
10738
10739         * mswindows.c: Reformat.
10740
10741         * all: Added _(...) annotations for I18N snarfing and translation.
10742
10743         * host.c (ftp_getaddress): Nuke SYSINFO.
10744         (ftp_getaddress): Don't use getdomainname().
10745         (ftp_getaddress): Use uname(), where available.
10746
10747         * http.c (gethttp): Protect a stray fprintf().
10748
10749         * init.c (settime): New function.
10750         (setval): Treat WAIT specially, allowing suffixes like `m' for
10751         minutes, etc.
10752
10753 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
10754
10755         * url.c (get_urls_html): Use alloca() for TEMP.
10756
10757 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
10758
10759         * url.c (rotate_backups): New function.
10760
10761         * http.c (gethttp): Ditto.
10762
10763         * ftp.c (getftp): Rotate backups.
10764
10765 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
10766
10767         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
10768         xrealloc() and xstrdup().  Use the new functions.
10769
10770         * url.c (decode_string): Made static.
10771         (has_proto): Ditto.
10772         (parse_dir): Ditto.
10773         (parse_uname): Ditto.
10774         (mkstruct): Ditto.
10775         (construct): Ditto.
10776         (construct_relative): Ditto.
10777
10778         * retr.c (show_progress): Made static.
10779
10780         * recur.c (robots_url): Made static.
10781         (retrieve_robots): Ditto.
10782         (parse_robots): Ditto.
10783         (robots_match): Ditto.
10784
10785         * main.h: Removed.
10786
10787         * main.c (printhelp): Made static.
10788         (hangup): Ditto.
10789
10790         * init.c (comind): Made static.
10791         (defaults): Ditto.
10792         (init_path): Ditto.
10793         (run_wgetrc): Ditto.
10794         (onoff): Ditto.
10795         (setonoff): Ditto.
10796         (setnum): Ditto.
10797         (myatoi): Ditto.
10798         (getperms): Ditto.
10799         (setbytes): Ditto.
10800
10801         * http.c (fetch_next_header): Made static.
10802         (hparsestatline): Ditto.
10803         (hskip_lws): Ditto.
10804         (hgetlen): Ditto.
10805         (hgetrange): Ditto.
10806         (hgettype): Ditto.
10807         (hgetlocation): Ditto.
10808         (hgetmodified): Ditto.
10809         (haccepts_none): Ditto.
10810         (gethttp): Ditto.
10811         (base64_encode_line): Ditto.
10812         (mktime_from_utc): Ditto.
10813         (http_atotm): Ditto.
10814
10815         * html.c (idmatch): Made static.
10816
10817         * host.c (search_host): Made static.
10818         (search_address): Ditto.
10819         (free_hlist): Ditto.
10820
10821         * ftp.c (getftp): Made static.
10822         (ftp_loop_internal): Ditto.
10823         (ftp_get_listing): Ditto.
10824         (ftp_retrieve_list): Ditto.
10825         (ftp_retrieve_dirs): Ditto.
10826         (ftp_retrieve_glob): Ditto.
10827         (freefileinfo): Ditto.
10828         (delelement): Ditto.
10829
10830         * ftp-ls.c (symperms): Made static.
10831         (ftp_parse_unix_ls): Ditto.
10832
10833         * connect.c (select_fd): Made static.
10834
10835         * utils.c (xmalloc): Renamed from nmalloc.
10836         (xrealloc): Renamed from nrealloc.
10837         (xstrdup): Renamed from nstrdup.
10838
10839         * getopt.c (exchange): Use alloca.
10840
10841         * mswindows.c (mycuserid): Use strncpy.
10842
10843         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
10844         systhings.h, windecl.h and winjunk.h removed.
10845
10846         * mswindows.c (sleep): New function.
10847
10848         * utils.c: Include <windows.h> under Windows.
10849
10850 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
10851
10852         * url.h (URL_UNSAFE): Change default under Windows.
10853
10854         * retr.c (retrieve_from_file): Respect opt.delete_after.
10855
10856         * main.c (main): Call ws_help on Windows.
10857
10858         * winjunk.c (windows_main_junk): New function.
10859
10860         * main.c (main): Junk-process argv[0].
10861
10862         * http.c (mktime_from_utc): Return -1 if mktime failed.
10863
10864         * http.c (http_loop): Ditto.
10865
10866         * ftp.c (ftp_loop_internal): Change title on Windows when using a
10867         new URL.
10868
10869         * winjunk.c (getdomainname): Lots of functions.
10870
10871 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
10872
10873         * cmpt.c (strptime_internal): Handle years more correctly for
10874         `%y'.
10875
10876 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
10877
10878         * http.c (gethttp): Allocate enough space for
10879         `Proxy-Authorization' header.
10880
10881 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
10882
10883         * version.c: Wget/1.4.5 is released.
10884
10885 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
10886
10887         * retr.c (get_contents): Check return value of fwrite more
10888         carefully.
10889
10890 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
10891
10892         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
10893         year, regardless of century.
10894
10895 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
10896
10897         * utils.c (isfile): Use `lstat' instead of `stat'.
10898
10899 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
10900
10901         * utils.c (numdigit): Use explicit test.
10902
10903 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
10904
10905         * http.c (http_loop): Always use `url_filename' to get u->local.
10906
10907 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
10908
10909         * url.c: Recognize https.
10910
10911 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
10912
10913         * recur.c (recursive_retrieve): Lowercase just the host name.
10914
10915 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
10916
10917         * url.c (get_urls_file): Use the correct test.
10918         (get_urls_html): Ditto.
10919
10920 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
10921
10922         * connect.c: Reverted addrlen to int.
10923
10924         * init.c (parse_line): Check for -1 instead of NONE.
10925
10926         * version.c: Changed version to 1.4.5.
10927
10928 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
10929
10930         * init.c: New option netrc.
10931         (initialize): Don't parse .netrc.
10932
10933         * cmpt.c (recursive): Return rp.
10934         (strptime_internal): Match the long strings first, the abbreviated
10935         second.
10936
10937 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
10938
10939         * http.c (check_end): New function.
10940         (http_atotm): Use it.
10941
10942 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
10943
10944         * http.c (gethttp): Use them.
10945
10946         * init.c: New options proxy_user and proxy_passwd.
10947
10948 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
10949
10950         * ftp.c (ftp_retrieve_list): Create links even if not relative.
10951
10952 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
10953
10954         * recur.c (recursive_retrieve): Lowercase the host name, if the
10955         URL is not "optimized".
10956
10957         * host.c (realhost): Return l->hostname, even if it matches with
10958         host.
10959
10960 1997-02-10  Marin Purgar  <pmc@asgard.hr>
10961
10962         * connect.c: Make addrlen size_t instead of int.
10963         (conaddr): Ditto.
10964
10965 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
10966
10967         * systhings.h: Define S_ISLNK on NeXT too.
10968
10969 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
10970
10971         * version.c: Released 1.4.3.
10972
10973         * url.c: Futher update to list of protostrings.
10974         (skip_proto): Skip `//' correctly for FTP and HTTP.
10975
10976         * url.c (get_urls_html): Handle bogus `http:' things a little
10977         different.
10978
10979         * main.c (main): Removed `follow-ftp' from `f'.
10980         (main): Dumped the `prefix-files' and `file-prefix' options and
10981         features; old and bogus.
10982         (main): Exit on failed setval() in `-e'.
10983
10984         * http.c (fetch_next_header): Use it to detect header continuation
10985         correctly.
10986
10987         * retr.c (buf_peek): New function.
10988
10989 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
10990
10991         * wget.h: Include time.h and stuff.
10992
10993 1997-02-08  Roger Beeman  <beeman@cisco.com>
10994
10995         * ftp.c: Include <time.h>
10996
10997 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
10998
10999         * url.c (findurl): Would read over buffer limits.
11000
11001 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
11002
11003         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
11004
11005 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
11006
11007         * http.c (http_atotm): Initialize tm.is_dst.
11008
11009 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
11010
11011         * http.c (gethttp): Don't print the number of retrieved headers.
11012
11013         * main.c (main): New option `--no-clobber', alias for `-nc'.
11014
11015         * url.c: Recognize `https://'.
11016
11017 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
11018
11019         * host.c (herrmsg): Don't use h_errno.
11020
11021 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
11022
11023         * host.c (accept_domain): Use it.
11024
11025         * main.c (main): New option `--exclude-domains'.
11026
11027         * retr.c (retrieve_url): Use it.
11028         (retrieve_url): Bail out when an URL is redirecting to itself.
11029
11030         * url.c (url_equal): New function.
11031
11032 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
11033
11034         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
11035
11036         * http.c (mk_utc_time): New function.
11037         (http_atotm): Use it; handle time zones correctly.
11038
11039 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
11040
11041         * http.c: Ditto.
11042
11043         * ftp-basic.c: Use it instead of WRITE.
11044
11045         * connect.c (iwrite): New function.
11046
11047 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
11048
11049         * cmpt.c (mktime): New function.
11050
11051         * netrc.c: Include <sys/types.h>.
11052
11053         * main.c (main): Wouldn't recognize --spider.
11054
11055         * retr.c (rate): Use `B', `KB' and `MB'.
11056         (reset_timer,elapsed_time): Moved from utils.c.
11057
11058         * ftp.c (ftp_retrieve_list): Ditto.
11059
11060         * http.c (http_loop): Don't touch the file if opt.dfp.
11061
11062 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
11063
11064         * cmpt.c: New file.
11065
11066         * ftp.c (ftp_retrieve_glob): New argument semantics.
11067         (ftp_retrieve_dirs): Use it.
11068         (ftp_loop): Ditto.
11069
11070         * html.c (htmlfindurl): Recognize `'' as the quote char.
11071
11072 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
11073
11074         * ftp.c (ftp_loop_internal): Use it.
11075
11076         * utils.c (remove_link): New function.
11077
11078 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
11079
11080         * retr.c (retrieve_url): Require STRICT redirection URL.
11081
11082         * url.c (parseurl): New argument STRICT.
11083
11084         * http.c (hparsestatline): Be a little-bit less strict about
11085         status line format.
11086
11087 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
11088
11089         * http.c (gethttp): Use it.
11090
11091         * main.c (main): Don't use '<digit>' as options.
11092
11093         * init.c: New option ignore_length.
11094
11095         * http.c (gethttp): Ditto.
11096         (http_loop): Check for redirection without Location:.
11097         (gethttp): Don't print Length unless RETROKF.
11098
11099         * ftp.c (getftp): Use it.
11100
11101         * url.c (mkalldirs): New function.
11102
11103         * utils.c (mymkdir): Don't check for existing non-directory.
11104
11105         * url.c (mkstruct): Don't create the directory.
11106
11107 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
11108
11109         * init.c (setval): Removed NO_RECURSION checks.
11110
11111 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
11112
11113         * version.c: "Released" 1.4.3-pre2.
11114
11115         * recur.c (recursive_retrieve): Bypass host checking only if URL
11116         is ftp AND parent URL is not ftp.
11117
11118         * ftp-basic.c (ftp_request): Print out Turtle Power.
11119
11120         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
11121         wildcard.
11122         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
11123         not glob.
11124
11125         * http.c (gethttp): Be a little bit smarter about status codes.
11126
11127         * recur.c (recursive_retrieve): Always reset opt.recursive when
11128         dealing with FTP.
11129
11130 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
11131
11132         * retr.c (retrieve_url): New variable location_changed; use it for
11133         tests instead of mynewloc.
11134         (retrieve_url): Allow heuristic adding of html.
11135
11136         * url.c (url_filename): Don't use the `%' in Windows file names.
11137
11138         * http.c (http_loop): Always time-stamp the local file.
11139
11140         * http.c (http_loop): Ditto.
11141
11142         * ftp.c (ftp_retrieve_list): Use it.
11143
11144         * utils.c (my_touch): New function.
11145
11146         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
11147         instead of #ifndef NeXT.
11148
11149         * utils.c (strptime): New version, by Ulrich Drepper.
11150
11151 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
11152
11153         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
11154         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
11155         (http_loop): Would remove ACCEPTRANGES.
11156
11157         * ftp.c (getftp): Call ftp_list with NULL.
11158
11159 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
11160
11161         * html.c (ftp_index): Don't print minutes and seconds if we don't
11162         know them; beautify the output.
11163
11164         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
11165
11166 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
11167
11168         * utils.c (strptime): New function.
11169         (strptime): Don't use get_alt_number.
11170         (strptime): Don't use locale.
11171         (match_string): Made it a function.
11172
11173 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
11174
11175         * http.c (http_atotm): New function.
11176         (http_loop): Use it.
11177
11178         * atotm.c: Removed from the distribution.
11179
11180         * http.c (base64_encode_line): Rewrite.
11181
11182 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
11183
11184         * ftp.c (getftp): Use ftp_expected_bytes; print size.
11185
11186         * ftp-basic.c (ftp_response): Use ftp_last_respline.
11187         (ftp_expected_bytes): New function.
11188
11189         * ftp.c (getftp): Print the unauthoritative file length.
11190
11191         * ftp-ls.c: Renamed from ftp-unix.c.
11192         (ftp_parse_ls): Moved from ftp.c.
11193         (ftp_parse_unix_ls): Recognize seconds in time spec.
11194         (ftp_parse_unix_ls): Recognize year-less dates of the previous
11195         year.
11196
11197 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
11198
11199         * ftp-basic.c: Don't declare errno if #defined.
11200
11201         * host.c (ftp_getaddress): Check for sysinfo legally.
11202
11203 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
11204
11205         * connect.c (iread): Use READ.
11206
11207 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
11208
11209         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
11210         schemes.
11211
11212 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
11213
11214         * host.c (ftp_getaddress): Allow `.' in hostname.
11215
11216 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
11217
11218         * wget.h: READ and WRITE macros for use instead of read and write
11219         on sockets, grep READ *.c, grep WRITE *.c
11220
11221         * wsstartup.c: new file - startup for winsock
11222
11223         * wsstartup.h: new file
11224
11225         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
11226
11227         * configure.bat: Configure utility for MSVC
11228
11229         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
11230
11231 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
11232
11233         * version.c: Released 1.4.3-pre.
11234
11235         * utils.c (prnum): Accept long.
11236         (legible): Use prnum().
11237
11238         * connect.c (make_connection): Accept port as short.
11239         (bindport): Ditto.
11240
11241         * http.c (gethttp): Use search_netrc.
11242
11243 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
11244
11245         * ftp.c (getftp): Use search_netrc.
11246
11247         * netrc.c (free_netrc): New function.
11248
11249         * init.c (home_dir): New function.
11250
11251         * url.c (convert_links): Allow REL2ABS changes.
11252
11253 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
11254
11255         * netrc.c: New file.
11256         (parse_netrc, maybe_add_to_list): New functions.
11257
11258 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
11259
11260         * retr.c (retrieve_url): Reset opt.recursion before calling
11261         ftp_loop if it is reached through newloc.
11262
11263         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
11264         error; don't use "Syntax error", since we don't know if it is
11265         really a syntax error.
11266
11267 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
11268
11269         * utils.c (acceptable): Extract the filename part of the path.
11270
11271         * recur.c (recursive_retrieve): Call acceptable() with the right
11272         argument; would bug out on wildcards.
11273
11274         * init.c (parse_line): Likewise.
11275
11276         * html.c (htmlfindurl): Cast to char * when calling stuff.
11277
11278 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
11279
11280         * ftp.c (getftp): Use ftp_pasv.
11281
11282         * ftp-basic.c (ftp_request): Accept NULL value.
11283         (ftp_pasv): New function.
11284
11285         * options.h (struct options): Add passive FTP option.
11286
11287 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
11288
11289         * url.c (parseurl): Debug output.
11290
11291         * utils.c (path_simplify): New one, adapted from bash's
11292         canonicalize_pathname().
11293
11294 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
11295
11296         * ftp.c (getftp): Don't discard the buffer.
11297
11298         * retr.c (get_contents): New parameter nobuf.
11299
11300 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
11301
11302         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
11303
11304         * init.c (setval): Strip the trailing slashes on CVECDIR.
11305
11306 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
11307
11308         * init.c: Make excludes and includes under CVECDIR instead of
11309         CVEC.
11310
11311 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
11312
11313         * url.c (get_urls_html): Skip "http:".
11314
11315 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
11316
11317         * utils.c (strcasecmp): From glibc.
11318         (strncasecmp): Also.
11319         (strstr): Also.
11320
11321         * url.c: Added javascript: to the list of URLs prefixes.
11322
11323 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
11324
11325         * recur.c (retrieve_robots): Print the warning message only if
11326         verbose.
11327
11328 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
11329
11330         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
11331
11332 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
11333
11334         * systhings.h: New file.
11335
11336         * ../configure.in: Check for utime.h
11337
11338         * ftp.c: Check whether we have unistd.h.
11339
11340 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
11341
11342         * recur.c (recursive_retrieve): Send the canonical URL as referer.
11343         (recursive_retrieve): Call get_urls_html with the canonical URL.
11344
11345 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
11346
11347         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
11348         ansi2knr support for compilers which don't support ANSI style
11349         function prototypes and signatures.
11350
11351         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
11352
11353 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
11354
11355         * url.c: Use it; Recognize paths ending with "." and ".." as
11356         directories.
11357         (url_filename): Append .n whenever file exists and could be a
11358         directory.
11359
11360         * url.h (ISDDOT): New macro.
11361
11362         * init.c (parse_line): Use unsigned char.
11363
11364         * url.c (get_urls_html): Cast to unsigned char * when calling
11365         htmlfindurl.
11366
11367         * html.c (htmlfindurl): Use unsigned char.
11368
11369         * version.c: Changed version to 1.4.3.
11370
11371 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
11372
11373         * version.c: Released 1.4.2.
11374
11375         * ftp.c (getftp): Simplified assertion.
11376         (ftp_loop_internal): Remove symlink before downloading.
11377         (ftp_retrieve_list): Unlink the symlink name before attempting to
11378         create a symlink!
11379
11380         * options.h (struct options): Renamed print_server_response to
11381         server_response.
11382
11383         * ftp.c (rel_constr): Removed.
11384         (ftp_retrieve_list): Don't use it.
11385         (ftp_retrieve_list): Use opt.retr_symlinks.
11386
11387 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
11388
11389         * main.c (main): New option retr_symlinks.
11390
11391         * url.c (convert_links): Print verbose message.
11392
11393 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
11394
11395         * http.c (http_loop): Reset newloc in the beginning of function;
11396         would cause FMR in retrieve_url.
11397
11398 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
11399
11400         * recur.c (convert_all_links): Find the URL of each HTML document,
11401         and feed it to get_urls_html; would bug out.
11402         (convert_all_links): Check for l2 instead of dl; removed dl.
11403
11404         * url.c (convert_links): Don't refer to freed newname.
11405
11406         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
11407
11408         * main.c (main): Print the OS_TYPE in the debug output, too.
11409
11410         * recur.c (recursive_retrieve): Check for opt.delete_after.
11411
11412         * main.c (main): New option delete-after.
11413
11414         * init.c (setval): Cleaned up.
11415
11416 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
11417
11418         * Makefile.in (wget): Make `wget' the default target.
11419
11420         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
11421         loop.
11422         (ftp_retrieve_list): Warn about non-matching sizes.
11423
11424         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
11425
11426         * init.c (setnum): Renamed from setnuminf; New argument flags.
11427         (setval): Use it.
11428
11429         * main.c (main): Sorted the options.
11430         (main): New option --wait.
11431
11432 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
11433
11434         * html.c (htmlfindurl): Reset s->in_quote after getting out of
11435         quotes.
11436
11437 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
11438
11439         * version.c: Changed version to 1.4.2.
11440
11441 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
11442
11443         * version.c: Released 1.4.1.
11444
11445         * html.c (html_quote_string): New function.
11446         (ftp_index): Use it.
11447         (htmlfindurl): A more gentle ending debug message.
11448
11449         * ftp.c (ftp_loop): Check for opt.htmlify.
11450
11451         * init.c: New command htmlify.
11452
11453         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
11454         strings.
11455         (ftp_loop): Print size of index.html.
11456
11457         * init.c (setval): Implement "styles".
11458
11459         * main.c (main): New option dotstyle.
11460
11461 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
11462
11463         * ftp.c (getftp): Close the master socket in case of errors, after
11464         bindport().
11465
11466         * connect.c (bindport): Initialize msock to -1.
11467
11468         * ftp.c (getftp): Initialize dtsock to -1.
11469
11470         * connect.c (closeport): Don't close sock if sock == -1.
11471
11472 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
11473
11474         * init.c (setnuminf): Nuked default value -- just leave unchanged.
11475         (setval): Don't send default values.
11476         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
11477
11478         * options.h (struct options): Use long for dot_bytes.
11479
11480         * init.c (setquota): Renamed to setbytes.
11481         (setval): Use setbytes on DOTBYTES.
11482
11483 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
11484
11485         * ftp.c (getftp): Initialize con->dltime.
11486
11487         * recur.c (recursive_retrieve): Use same_host instead of
11488         try_robots; simply load robots_txt whenever the host is changed.
11489         (recursive_retrieve): Free forbidden before calling parse_robots.
11490
11491 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
11492
11493         * retr.c (show_progress): Use them.
11494
11495         * options.h (struct options): New options dot_bytes, dots_on_line
11496         and dot_spacing.
11497
11498 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
11499
11500         * recur.c (recursive_retrieve): Retrieve directories regardless of
11501         acc/rej rules; check for empty u->file.
11502
11503 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
11504
11505         * init.c (setval): Use it.
11506
11507         * utils.c (merge_vecs): New function.
11508
11509         * init.c (setval): Reset the list-type functions when encountering
11510         "".
11511
11512 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
11513
11514         * recur.c (recursive_retrieve): Use base_url instead of this_url
11515         for no_parent.
11516
11517 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
11518
11519         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
11520
11521 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
11522
11523         * utils.c (sepstring): Rewrote; don't use strtok.
11524
11525         * recur.c (recursive_retrieve): Enter assorted this_url to slist
11526         when running the first time.
11527         (retrieve_robots): Warn to ignore errors when robots are loaded.
11528
11529         * utils.c (load_file): Moved from url.c.
11530
11531         * http.c: Made static variables const too in h* functions.
11532
11533         * main.c (main): Renamed --continue-ftp to --continue.
11534
11535         * recur.c (recursive_retrieve): Use it.
11536
11537         * utils.c (frontcmp): New function.
11538
11539         * url.c (accdir): New function.
11540
11541         * html.c (htmlfindurl): Recognize <area href=...>.
11542
11543         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
11544
11545         * init.c (setval): Free the existing opt.excludes and
11546         opt.includes, if available.
11547
11548         * main.c (main): New option -I.
11549
11550 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
11551
11552         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
11553
11554         * version.c: Changed version to 1.4.1.
11555
11556 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
11557
11558         * version.c: Released 1.4.0.
11559
11560 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
11561
11562         * main.c (main): Free com and val after parse_line.
11563         (printhelp): Reorder the listing.
11564
11565         * http.c: More robust header parsing.
11566
11567         * http.c: Allow any number of spaces, or no spaces, precede ':'.
11568         (hskip_lws): New function.
11569         (haccepts_bytes): New function.
11570         (gethttp): Use it.
11571
11572         * init.c (setval): Check header sanity.
11573         (setval): Allow resetting of headers.
11574
11575 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
11576
11577         * http.c (http_loop): Don't use has_wildcards.
11578
11579         * http.c (gethttp): Free all_headers -- would leak.
11580
11581         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
11582         0 -- this fixes a long-standing bug in -rl.
11583
11584 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
11585
11586         * ftp.c: Use -1 as "impossible" value for con->fd.
11587
11588         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
11589
11590         * init.c (parse_line): Use isalpha.
11591
11592         * ftp-unix.c: Use HAVE_UNISTD_H.
11593
11594         * mtch.c (has_wildcards): Don't match \.
11595
11596         * http.c (http_loop): Warn on HTTP wildcard usage.
11597
11598 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
11599
11600         * url.c (url_filename): Do not create numbered suffixes if
11601         opt.noclobber -- would bug out on -nc.
11602
11603 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
11604
11605         * recur.c (parse_robots): Don't chuck out the commands without
11606         arguments (`Disallow:<empty>' didn't work).
11607         (parse_robots): Compare versions lowercase.
11608         (parse_robots): Match on base_version, not version_string!
11609         (parse_robots): Handle comments properly.
11610         (parse_robots): Match versions in a sane way.
11611
11612         * init.c: Print nicer error messages.
11613
11614         * version.c: Changed version to 1.4.0.
11615
11616 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
11617
11618         * version.c: Released 1.4.0-test2.
11619
11620         * init.c (run_wgetrc): Close fp.
11621
11622         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
11623         u->dir.
11624
11625 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
11626
11627         * init.c (setquota): Allow inf as quota specification.
11628
11629 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
11630
11631         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
11632         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
11633
11634         * main.c (main): Check for quota by comparison with downloaded
11635         stuff, not from status.
11636
11637         * connect.c (select_fd): Should compile on HPUX without warnings now.
11638
11639         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
11640         returned RETROK.
11641
11642 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
11643
11644         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
11645         (getftp): Return FTPRETRINT on control connection error.
11646
11647         * html.c (htmlfindurl): Recognize <embed src=...> and
11648         <bgsound src=...>.
11649         (ftp_index): Handle username and password correctly.
11650
11651         * main.c (main): Made `-np' a synonim for --no-parent.
11652
11653 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
11654
11655         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
11656         ftp_retrieve_glob.
11657
11658         * version.c: Changed version to 1.4.0-test2.
11659
11660 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
11661
11662         * version.c: Released 1.4.0-test1.
11663
11664         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
11665         directory.
11666         (convert_links): Removed definition of make_backup.
11667
11668         * http.h: Removed definition of MAX_ERROR_LENGTH.
11669
11670         * host.c (ftp_getaddress): Check for "(none)" domains.
11671
11672         * ftp.c (ftp_retrieve_dirs): Docfix.
11673
11674         * http.c (gethttp): Use ou->referer instead of u->referer.
11675
11676         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
11677         this was known to cause coredumps on Linux.
11678
11679         * html.c (ftp_index): Cast the argument to local_time to time_t *.
11680
11681 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
11682
11683         * connect.c (select_fd): Use exceptfds -- once and for all.
11684
11685         * retr.c (retrieve_from_file): Free filename after
11686         recursive_retrieve.
11687         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
11688         first-time retrieval.
11689         (retrieve_from_file): Return uerr_t; new argument, count.
11690         (retrieve_from_file): Break on QUOTEXC.
11691
11692         * init.c (setquota): Fixed a bug that caused rejection of
11693         non-postfixed values..
11694
11695 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
11696
11697         * version.c: Changed name to wget.
11698
11699         * connect.c (iread): Smarter use of select.
11700         (select_fd): Set errno on timeout.  If not timeout, return 1
11701         instead of 0.
11702
11703 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
11704
11705         * ftp.c (ftp_loop_internal): Don't use con->cmd before
11706         establishing it.
11707
11708 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
11709
11710         * http.c (gethttp): Send correct referer when using proxy.
11711         (gethttp): Use struct urlinfo ou to access the relevant data; send
11712         correct authorization in all cases.
11713
11714         * host.c (same_host): Use skip_uname to skip username and
11715         password.
11716
11717         * url.c (skip_uname): New function.
11718         (parseurl): Use it.
11719
11720         * host.c (same_host): Do not assume HTTP -- same_host should now
11721         be totally foolproof.
11722
11723         * url.c (skip_proto): New function.
11724         (parse_uname): Use it.
11725
11726         * http.c (gethttp): Create local user and passwd from what is
11727         given.
11728
11729         * url.c (parseurl): Check for HTTP username and password too.
11730
11731 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
11732
11733         * config.h.in: Removed #define gethostbyname R...
11734
11735 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
11736
11737         * version.c: Changed version to 1.4.0-test1.
11738
11739 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
11740
11741         * version.c: "Released" 1.4b29.
11742
11743         * recur.c (recursive_retrieve): Check for no_parent.
11744
11745         * init.c (setval): Option update.
11746
11747         * main.c (main): New option no-parent.
11748
11749         * options.h (struct options): New variable no_parent.
11750
11751         * recur.c (recursive_retrieve): Only files are checked for
11752         opt.accepts and opt.rejects.
11753         (recursive_retrieve): Check directories for opt.excludes.
11754         (recursive_retrieve): Make the dir absolute when checking
11755         opt.excludes.
11756
11757         * html.c (htmlfindurl): Recognize <applet code=...> and <script
11758         src=...>
11759
11760 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
11761
11762         * ftp.c (getftp): Do not line-break assert entries at all.
11763         (ftp_retrieve_dirs): docfix.
11764
11765         * connect.c (select_fd): Use fd + 1 as nfds.
11766
11767         * version.c: Changed version to 1.4b29.
11768
11769 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
11770
11771         * version.c: "Released" 1.4b28.
11772
11773         * ftp.c (ftp_loop_internal): Check whether f->size == len and
11774         don't continue the loop if it is.
11775         (ftp_get_listing): Remove list_filename on unsuccesful loop.
11776
11777 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
11778
11779         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
11780         (getftp): Do not use multiline assert.
11781
11782         * http.c (hparsestatline): Use mjr and mnr instead of major and
11783         minor, which don't compile on Ultrix.
11784         (http_loop): Use strcpy() to initialize tmp.
11785
11786         * all: Geturl -> Fetch
11787
11788 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
11789
11790         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
11791         ':'.
11792
11793         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
11794         moving `bufsize &&' to the beginning of each check in for-loops.
11795
11796         * recur.c (parse_robots): Close fp on exit.
11797
11798         * url.c (mymkdir): Check for each directory before creating.
11799
11800 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
11801
11802         * version.c: Changed version to 1.4b28.
11803
11804 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
11805
11806         * version.c: "Released" 1.4b27.
11807
11808         * init.c (parse_line): Use isspace.
11809         (parse_line): Free *com on all errors.
11810
11811         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
11812         (delelement): Use next instead of f->next and prev instead of
11813         f->prev.
11814         (delelement): Free the members of the deleted element.
11815
11816         * http.c (http_loop): Do not return RETROK on code != 20x.
11817
11818         * init.c (cleanup): Free opt.user_header.
11819         (cleanup): Free opt.domains.
11820
11821         * url.c (freelists): Moved to cleanup().
11822
11823         * http.c (hparsestatline): Docfix.
11824
11825         * main.c (main): Return with error status on unsuccesful
11826         retrieval.
11827
11828         * init.c (setval): Do not remove listing when mirroring.
11829
11830         * url.c (url_filename): Use opt.fileprefix.
11831
11832         * ftp.c (ftp_get_listing): Use url_filename to get filename for
11833         .listing.
11834
11835         * main.c (main): New option: -rn.
11836
11837 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
11838
11839         * Makefile.in (RM): Added RM = rm -f.
11840
11841         * host.c (clean_hosts): New function.
11842         (free_hlist): Just free the list, no reset.
11843
11844         * version.c: Changed version to 1.4b27.
11845
11846 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
11847
11848         * version.c: "Released" 1.4b26.
11849
11850         * retr.c (retrieve_from_file): If call get_urls_html with
11851         opt.spider to make it silent in spider mode.
11852
11853         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
11854
11855         * url.h (CLEANDUP): New macro.
11856
11857         * http.c (gethttp): Fixed a bug that freed location only when it
11858         was NULL.
11859
11860         * retr.c (retrieve_url): Free url if it will not be stored,
11861         i.e. newloc is NULL.
11862
11863         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
11864         old version would bug out on <a href="x#a"href="y">.
11865
11866         * html.h (state_t): New member in_quote.
11867
11868         * html.c (htmlfindurl): Free s->attr at the beginning of
11869         attr-loop.
11870
11871         * recur.c (recursive_retrieve): Recognize RCLEANUP.
11872         (tried_robots): Make hosts a global variable.
11873         (recursive_retrieve): Free constr after URL host optimization.
11874         (tried_robots): Free urlinfo before exiting.
11875
11876         * utils.c (free_slist): New function.
11877
11878         * recur.c (recursive_retrieve): Use flags to add cleanup
11879         possibility.
11880
11881         * main.c (main): Free filename after recursive_retrieve.
11882
11883         * http.c (gethttp): Store successful responses too.
11884
11885 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
11886
11887         * all: Constified the whole source.  This required some minor
11888         changes in many functions in url.c, possibly introducing bugs -- I
11889         hope not.
11890
11891         * ftp-basic.c: Removed last_respline.
11892
11893         * http.c (gethttp): Free type.
11894
11895         * host.c (same_host): Free real1 and real2.
11896
11897         * main.c (main): New option --spider.
11898
11899         * retr.c (get_contents): Don't reset errno.
11900
11901         * main.c (main): Sorted the options.
11902
11903         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
11904         uninitialized by select().
11905
11906         * http.c (http_loop): Print the time when the connection is
11907         closed.
11908         (gethttp): Debug-print the HTTP request.
11909
11910 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
11911
11912         * connect.c (iread): Do not try reading after timeout.
11913
11914         * main.c (main): Would bug out on -T.
11915
11916         * connect.c (select_fd): Do not use exceptfds.
11917         (iread): Set ETIMEDOUT on select_fd <= 0.
11918
11919         * version.c: Changed version to 1.4b26.
11920
11921 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
11922
11923         * version.c: "Released" 1.4b25.
11924
11925         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
11926         or link name.
11927
11928         * http.c (gethttp): Add errcode to struct hstat.
11929         (http_loop): Use it.
11930
11931         * url.c (no_proxy_match): Simplify using char** for no_proxy.
11932
11933         * options.h (struct options): Make opt.no_proxy a vector.
11934
11935         * utils.c (sepstring): Use !*s instead of !strlen(s).
11936
11937         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
11938         (getperms): Use ISODIGIT instead of isdigit.
11939
11940         * ftp.c (getftp): Print time.
11941
11942         * main.c (main): Use legible output of downloaded quantity.
11943
11944         * ftp.c (getftp): Use elapsed_time().
11945         (ftp_loop_internal): Use rate().
11946
11947         * http.c (http_loop): Add download ratio output; Use rate().
11948
11949         * utils.c (rate): New function.
11950
11951 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
11952
11953         * http.c (http_loop): Use timer.
11954
11955         * ftp.c: Split to ftp-basic.c and ftp.c
11956
11957         * utils.c (reset_timer): New function.
11958         (elapsed_time): New function.
11959
11960         * retr.c (show_progress): Make bytes_in_line and offs long; should
11961         work on 16-bit machines.
11962
11963 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
11964
11965         * url.c (in_acclist): New argument backward.
11966
11967         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
11968         a file should be retrieved according to suffix.
11969         (ftp_get_listing): Check the return value of unlink; Do not call
11970         ftp_retrieve_dirs if depth reached maxreclevel.
11971         (ftp_retrieve_dirs): Check whether the directory is in
11972         exclude-list.
11973
11974         * main.c (main): Print the version number at the beginning of
11975         DEBUG output.
11976         (main): Use strrchr when creating exec_name.
11977
11978         * ftp.c (ftp_retrieve_glob): Do not close control connection.
11979
11980         * version.c: Changed version to 1.4b25.
11981
11982 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
11983
11984         * version.c: "Released" 1.4b24.
11985
11986         * Makefile.in: Rewrite.
11987
11988         * ftp.c (ftp_loop_internal): Likewise.
11989
11990         * retr.c (time_str): Check for failed time().
11991
11992         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
11993         HTML3.0.
11994
11995         * retr.c (time_str): Return time_t *.
11996
11997         * connect.c (bindport): Close msock on unsuccesful bind.
11998         (bindport): The same for getsockname and listen.
11999
12000         * retr.c (retrieve_url): Allow any number of retries on
12001         proxy.
12002
12003         * http.c (gethttp): Do not treat errno == 0 as timeout.
12004         (http_loop): Likewise.
12005         (http_loop): Cosmetic changes.
12006
12007         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
12008
12009         * retr.c (get_contents): Reset errno.
12010
12011         * ftp.c (getftp): Minor fixes.
12012
12013 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
12014
12015         * http.c: Do not use backups.
12016
12017         * geturl.1 (WARNING): Warn that man-page could be obsolete.
12018
12019         * getopt.c (getopt_long): Moved to getopt.c
12020
12021         * geturl.texi: Enhanced.
12022
12023         * main.c (main): Use it.
12024
12025         * recur.c (convert_all_links): New function.
12026
12027         * utils.c (add_slist): New argument flags.
12028
12029         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
12030         (parse_robots): Do not chuck out empty value fields.
12031         (parse_robots): Make yourself welcome on empty Disallow.
12032
12033         * version.c: Changed version to 1.4b24.
12034
12035 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
12036
12037         * version.c: "Released" 1.4b23.
12038
12039         * ftp.c (ftp_loop_internal): Get the time after getftp.
12040
12041         * Makefile.in (install.info): New target.
12042         (install): Use it.
12043
12044         * http.c (http_loop): Fix output when doing -O.
12045
12046 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
12047
12048         * geturl.texi: New file.
12049
12050         * main.c (main): Do not print the warnings and download summary if
12051         opt.quiet is set.
12052
12053         * version.c: Changed version to 1.4b23.
12054
12055 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
12056
12057         * "Released" 1.4b22.
12058
12059         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
12060         to avoid redefinition warnings.
12061
12062         * host.c (store_hostaddress): Use memcpy() to copy the address
12063         returned by inet_addr.
12064
12065         * version.c: Changed version to 1.4b22.
12066
12067 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
12068
12069         * version.c: "Released" 1.4b21.
12070
12071         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
12072
12073         * ftp.c (ftp_port): Use conaddr.
12074         (getftp): Print the file length.
12075         (ftp_retrieve_list): Check the stamps of plain files only.
12076
12077         * connect.c (closeport): Do not call shutdown().
12078         (conaddr): New function.
12079
12080         * html.c (ftp_index): Made it dfp-aware.
12081
12082         * init.c (cleanup): New name of freemem. Close opt.dfp.
12083
12084         * ftp.c (getftp): Use opt.dfp if it is set.
12085
12086         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
12087
12088         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
12089         CWDs to be sent with recursive FTP retrievals.
12090
12091 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
12092
12093         * recur.c (parse_robots): Made it more compliant with "official"
12094         specifications.
12095
12096         * http.c: New function.
12097
12098         * ftp-unix.c (ftp_parse_ls): Added better debug output.
12099
12100         * ftp.c (getftp): Print out the LIST in case of
12101         opt.print_server_response.
12102
12103         * version.c: Changed version to 1.4b21.
12104
12105 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
12106
12107         * version.c: "Released" 1.4b20.
12108
12109         * README: Update.
12110
12111         * http.c (gethttp): Preset lengths of various headers instead of
12112         calculating them dynamically.
12113         (gethttp): Check for 206 partial contents.
12114
12115 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
12116
12117         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
12118
12119         * http.c (gethttp): Send the port number in the Host: header.
12120
12121 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
12122
12123         * http.c (gethttp): Send host: header.
12124         (gethttp): Add the possibility of user-defined headers.
12125         (gethttp): Move decision about pragma: no-cache to http_loop,
12126         where it belongs.
12127         (gethttp): Pass a struct instead of enormous argument list.
12128         (http_loop): Use a new, fancier display format.
12129         (ftp_loop): Likewise.
12130
12131         * main.c: (hangup): Turn off buffering of the new log file.
12132
12133         * install-sh: Likewise.
12134
12135         * config.sub: Replace with the one in autoconf-2.10
12136
12137         * geturl.1: Update.
12138
12139         * init.c: New options httpuser and httppasswd.
12140
12141         * http.c: (base64_encode_line): New function.
12142         (gethttp): Send authentication.
12143
12144         * connect.c (make_connection): Use store_hostaddress.
12145
12146 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
12147
12148         * host.c (store_hostaddress): New function.
12149
12150         * NEWS: Update.
12151
12152         * http.c (hgetrange): New function.
12153         (gethttp): Use ranges.
12154
12155         * utils.c (numdigit): Accept long instead of int.
12156
12157         * http.c (http_loop): Add restart capabilities.
12158
12159         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
12160         being used uninitialized.
12161         (ftp_retrieve_list): Similar fix.
12162
12163         * host.c (add_hlist): Fixed a bug that could cause cmp being used
12164         uninitialized.
12165
12166         * url.c (construct_relative): New function.
12167
12168         * recur.c (recursive_retrieve): Use it.
12169
12170         * retr.c (convert_links): New function.
12171
12172 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
12173
12174         * url.c (free_urlpos): New function.
12175
12176         * recur.c (recursive_retrieve): Adapt.
12177
12178         * url.c (get_urls_html): Return a linked list instead of a vector.
12179
12180         * url.c (get_urls_file): Return a linked list instead of a vector.
12181
12182         * geturl.1: Update.
12183
12184         * http.c (gethttp): Implement it.
12185
12186         * init.c (setval): New option: SAVEHEADERS
12187
12188         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
12189         be retrieved. Lack of this test caused bugs when the connection
12190         was lost during listing.
12191
12192         * retr.c (retrieve_url): Fixed a bug that caused
12193         coredumps. *newloc is now reset by default.
12194         (retrieve_url): Lift the twenty-tries limit on proxies.
12195
12196         * version.c: Changed version to 1.4b20.
12197
12198 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
12199
12200         * version.c: "Released" 1.4b19.
12201
12202 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
12203
12204         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
12205         (getftp): Changed prototype to accept ccon *.
12206
12207 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
12208
12209         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
12210         incorrect values to files pointed to by symbolic links.
12211         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
12212
12213 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
12214
12215         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
12216
12217         * main.c (main): New option: --user-agent.
12218
12219         * geturl.1: Ditto.
12220
12221         * init.h: Ditto.
12222
12223         * init.c (setval): Ditto.
12224
12225         * main.c (main): Rename "server-headers" to "server-response".
12226
12227         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
12228         executables in 'ls -F' listings.
12229
12230 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
12231
12232         * url.c (parseurl): Remove realloc() and sprintf().
12233         (str_url): Get rid of sprintf().
12234
12235         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
12236         servers.
12237
12238         * url.h (URL_CLEANSE): Made it else-resistant.
12239         (USE_PROXY): New macro.
12240
12241 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
12242
12243         * NEWS: Update.
12244
12245         * version.c: Changed version to 1.4b19.
12246
12247 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
12248
12249         * version.c: "Released" 1.4b18.
12250
12251         * url.c: Made it reallocate space exponentially.
12252
12253 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
12254
12255         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
12256         the list of stuff to fetch.
12257
12258 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
12259
12260         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
12261         -Fi.
12262
12263         * html.c (htmlfindurl): Rewrite.
12264
12265         * http.c (gethttp): Use opt.proxy_cache.
12266
12267         * main.c (main): Added --cache option.
12268
12269         * ftp.c (ftp_response): Print server response if opt.print_server
12270         response is set.
12271         (getftp): Print newlines after each request if the server response
12272         is to be printed.
12273         (ftp_response): Copy the last response line to last_respline.
12274
12275         * http.c (gethttp): Add Pragma: nocache for retried
12276         proxy-retrievals.
12277
12278         * ftp.c (getftp): Use it.
12279
12280         * retr.c (buf_discard): New function.
12281
12282         * ftp.c (ftp_response): Use buf_readchar().
12283         (getftp): Flush the control connection buffer before calling
12284         get_contents().
12285
12286         * retr.c (buf_readchar): New function.
12287         (buf_flush): New function.
12288         (get_contents): Use buf_readchar() instead of read(x, x, 1).
12289         (get_contents): Use buf_flush.
12290
12291 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
12292
12293         * ftp.c: Incorporate changes to ftp_response.
12294
12295         * ftp.c (ftp_response): Allocate the server response dynamically,
12296         as in read_whole_line and fetch_next_header.
12297
12298         * utils.c (read_whole_line): Fixed a bug that prevented reading
12299         the last line if it is not \n-terminated. Also fixed a possible
12300         memory overflow.
12301
12302         * http.c (fetch_next_header): Return malloc-ed string as large as
12303         needed.
12304         (gethttp): Use new fetch_next_header.
12305
12306 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
12307
12308         * http.c (hgetlen): Compute the header length the first time only.
12309         (hgettype): Ditto.
12310         (hgetlocation): Ditto.
12311         (hgetmodified): Ditto.
12312
12313 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
12314
12315         * sample.geturlrc: Update.
12316
12317 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
12318
12319         * http.c (http_loop): Ditto.
12320
12321         * ftp.c (getftp): Open the output file as binary.
12322
12323         * version.c: Changed version to 1.4b18.
12324
12325 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
12326
12327         * version.c: "Released" 1.4b17.
12328
12329         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
12330         instead of failed assertion.
12331
12332 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
12333
12334         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
12335         if a file of that name already exists.
12336
12337 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
12338
12339         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
12340
12341         * config.h.in: Define gethostbyname as Rgethostbyname when using
12342         Socks.
12343
12344         * configure.in: Check for -lresolv if using Socks.
12345
12346         * version.c: Changed version to 1.4b17.
12347
12348 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
12349
12350         * version.c: "Released" 1.4b16.
12351
12352         * http.c (gethttp): More intelligent check for first line of HTTP
12353         response.
12354         (gethttp): Would bug out on time-stamping.
12355
12356         * version.c: Changed version to 1.4b16.
12357
12358 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
12359
12360         * version.c: Released 1.4b15.
12361
12362         * http.c (http_loop): Print \n after the loop entry, not before.
12363
12364         * url.c (url_filename): Use ISDOT.
12365
12366         * url.h (ISDOT): New macro.
12367
12368         * recur.c (recursive_retrieve): Change only opt.recursive for
12369         following FTP.
12370
12371 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
12372
12373         * socks/geturl.cgi: Fixed version No.
12374
12375         * socks/download-netscape.html: Ditto.
12376
12377         * socks/download.html: Changed socks.html to download.html.
12378
12379 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
12380
12381         * url.c (url_filename): Check for opt.dirstruct instead for
12382         opt.recursive && opt.dirstruct.
12383
12384         * init.c (defaults): Ditto.
12385         (defaults): Reset dirstruct by default.
12386         (setval): Set opt.dirstruct whenever setting recursive.
12387
12388         * init.h: Removed FORCEDIRHIER.
12389
12390         * INSTALL: Added -L to socks-description.
12391
12392         * version.c: Changed version to 1.4b15.
12393
12394 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
12395
12396         * version.c: "Released" 1.4b14.
12397
12398         * geturl.1: Update AUTHOR to include Rosella as contributor.
12399
12400         * NEWS: Update.
12401
12402         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
12403
12404         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
12405         (cal_time): Fix == to eq.
12406
12407         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
12408
12409         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
12410
12411         * Makefile.in: Use @VERSION@.
12412
12413         * configure.in: Check version from version.c.
12414
12415         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
12416
12417         * socks/download.html: Created from download-netscape.html, made
12418         HTML-2.0 compliant.
12419
12420         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
12421         following FTP links from recursions.
12422
12423 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
12424
12425         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
12426         absolute directories correctly.
12427
12428         * version.c: Changed version to 1.4b14.
12429
12430 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
12431
12432         * version.c: "Released" 1.4b13.
12433
12434         * url.c (make_backup): New function.
12435
12436         * http.c (http_loop): Make a backup copy of the local file (using
12437         rename(2)) before opening it.
12438
12439         * main.c (main): Added --backups.
12440
12441         * host.c (ftp_getaddress): Bail out on failed mycuserid().
12442         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
12443         (ftp_getaddress): Check for empty, null or (null) domain.
12444
12445         * url.c (get_urls_html): If this_url is NULL, the base must have a
12446         protocol.
12447         (parseurl): Use has_proto.
12448
12449         * retr.c (retrieve_url): Warn when proxy is used with more than 20
12450         retries.
12451
12452         * url.c (mkstruct): Create the directory (calling mymkdir()) only
12453         if it is not already there.
12454         (has_proto): New function.
12455         (get_urls_html): Eliminate the remaining call to findurl -- use
12456         has_proto.
12457
12458         * geturl.1: Ditto.
12459
12460         * main.c: Change -X to -x.
12461
12462         * url.c (url_filename): Simplify creation of filename if
12463         prefix_files is set.
12464         (url_filename): Simplify everything. And I do mean *everything*.
12465         (mkstruct): Add dir_prefix before hostname.
12466         (path_simplify): Fixed a bug that caused writing outside the path
12467         string in case of "." and ".." path strings.
12468
12469 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
12470
12471         * init.c: Added --mirror.
12472
12473         * main.c (main): Added -X to force saving of directory hierarchy.
12474
12475         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
12476         (ftp_retrieve_list): Check whether quota is exceeded.
12477
12478         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
12479
12480         * http.c (gethttp): Use referer if present.
12481
12482         * recur.c (recursive_retrieve): Set u->referer before calling
12483         retrieve_url.
12484
12485         * url.c (newurl): Use memset to nullify the struct members.
12486         (freeurl): Free the referer field too.
12487
12488         * url.h: Added referer to urlinfo.
12489
12490         * geturl.1: Updated the manual to document some of the new features.
12491
12492         * utils.c (numdigit): Moved from url.c.
12493
12494         * README: Rewritten.
12495
12496         * config.h.in: Add the support for socks.
12497
12498         * configure.in: Add the support for socks.
12499
12500         * url.c (url_filename): If the dir_prefix is ".", work with just
12501         the file name.
12502         (url_filename): Do not look for .n extensions if timestamping if
12503         turned on.
12504
12505         * retr.c (show_progress): Skip the over-abundant restval data, and
12506         print the rest of it with ',' instead of '.'.
12507
12508 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
12509
12510         * retr.c (show_progress): Changed second arg. to long (as it
12511         should be).
12512         (show_progress): Moved to retr.c.
12513         (get_contents): Moved to retr.c.
12514
12515         * version.c: Change version to 1.4b13.
12516
12517 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
12518
12519         * url.c (in_acclist): Would return after the first suffix.
12520
12521 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
12522
12523         * version.c: "Released" 1.4b12.
12524
12525         * url.c (path_simplify): More kludgifications.
12526         (get_urls_html): Use new parameters for htmlfindurl.
12527
12528         * html.c: Removed memorizing "parser states", since the new
12529         organization does not require them.
12530
12531         * init.c (run_geturlrc): Use read_whole_line.
12532
12533         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
12534
12535         * recur.c (parse_robots): Use read_whole_line.
12536
12537         * utils.c (read_whole_line): New function.
12538
12539         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
12540
12541         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
12542         tested on OSF and Ultrix.
12543         (add_hlist): New function.
12544         (free_hlist): New function.
12545         (search_host): New function.
12546         (search_address): New function.
12547         (realhost): Use search_host, search_address and add_hlist.
12548         (same_host): Replaced realloc() with strdupdelim(), made
12549         case-insensitive, fixed a memory leak.
12550
12551         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
12552         tm_min, like intended.
12553
12554         * version.c: Change user agent information to
12555         Geturl/version.
12556
12557 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
12558
12559         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
12560
12561         * url.c (acceptable): Always accept directories.
12562
12563         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
12564         servers by stripping trailing @ from symlinks and trailing / from
12565         directories.
12566
12567         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
12568
12569         * url.c (skip_url): Use toupper instead of UCASE.
12570
12571         * host.c (sufmatch): Made it case-insensitive.
12572
12573         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
12574         (match_backwards): New function, instead of
12575         match_backwards_or_pattern.
12576
12577         * recur.c (recursive_retrieve): Increased performance by
12578         introducing inl, which reduces number of calls to in_slist to only
12579         one.
12580
12581         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
12582         routine to use.
12583
12584         * main.c (printhelp): Removed the warranty stuff.
12585
12586 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
12587
12588         * url.c (add_slist): Simplify.
12589         (match_backwards_or_pattern): New function.
12590         (in_acclist): Use match_backwards_or_pattern.
12591         (matches): Remove.
12592
12593 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
12594
12595         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
12596         recursive.
12597
12598         * html.c (ftp_index): Fixed to work. Beautified the output.
12599
12600         * ftp.c (ftp_retrieve_glob): Another argument to control whether
12601         globbing is to be used.
12602         (ftp_retrieve_list): Compare the time-stamps of local and remote
12603         files to determine whether to download.
12604
12605 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
12606
12607         * ftp.c (rel_constr): New function.
12608
12609         * retr.c (retrieve_from_file): Check for text/html before
12610         retrieving recursively.
12611
12612         * main.c (main): Check whether the file is HTML before going into
12613         recursive HTML retrieving.
12614
12615         * ftp.c (ftp_retrieve_list): Manage directories.
12616         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
12617         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
12618         initialized, causing bugchecks in getftp to fail.
12619
12620         * configure.in: Check for symlink.
12621
12622         * ftp.c (ftp_retrieve_list): Added support for symlinks.
12623
12624         * version.c: "Released" 1.4b10.
12625
12626         * atotm.c (atotm): Redeclared as time_t.
12627
12628         * init.c: New variable "timestamping".
12629
12630         * main.c (main): New option 'N'.
12631
12632         * http.c (hgetlocation): Case-insensitive match.
12633         (hgetmodified): New function.
12634         (http_loop): Implement time-stamping.
12635
12636 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
12637
12638         * version.c: Changed version to 1.4b10
12639
12640         * atotm.c: New file, from phttpd.
12641
12642         * options.h (struct options): New parameter timestamping.
12643
12644         * version.c: 1.4b9 "released".
12645
12646         * recur.c (recursive_retrieve): Used linked list (ulist) for
12647         faster storing of URLs.
12648
12649         * url.c (get_urls_html): Removed the old kludge with comparing the
12650         outputs of htmlfindurl and findurl.
12651         (get_urls_html): Added better protocol support here.
12652         (create_hash): Removed, as well as add_hash and in_hash.
12653         (addslist): New function.
12654         (in_slist): ditto
12655
12656         * version.c: Released 1.4b8, changed version to b9.
12657
12658 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
12659
12660         * ftp.c (freefileinfo): New function.
12661         (delelement): New function.
12662
12663         * everywhere: GPL!
12664
12665         * ftp.c (ftp_loop): Use ccon.
12666         (ftp_retrieve_glob): Likewise.
12667
12668         * ftp.h: Define ccon, to define status of control connection.
12669
12670         * ftp.c (ftp_get_listing): New function.
12671         (ftp_retrieve_more): New function.
12672         (ftp_retrieve_glob): New function.
12673
12674 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
12675
12676         * configure.in: Removed the search for cuserid().
12677
12678         * init.c (getmode): Renamed to getperms.
12679
12680 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
12681
12682         * version.c: New version.
12683
12684         * main.c (hangup): New function, that handles hangup. Hangup
12685         signal now causes geturl to stop writing on stdout, and to write
12686         to a log file.
12687
12688         * ftp.c (getftp): "Released" 1.4b7.
12689
12690         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
12691         (ftp_index): Use fileinfo/urlinfo.
12692
12693         * ftp-unix.c (ftp_parse_ls): New function.
12694         (symperms): New function.
12695
12696         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
12697
12698         * retr.c (retrieve_url): Added FTP support.
12699
12700 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
12701
12702         * geturl.h: Removed NOTFTP2HTML enum.
12703         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
12704
12705         * ftp.c (getftp): Resynched with urlinfo.
12706         (getftp): Removed HMTL-ization of index.html from getftp.
12707
12708         * version.c: 1.4b6 "released".
12709
12710         * options.h (options): New struct, to keep options in.
12711
12712         * http.c (http_loop,gethttp): Synched with proxy.
12713
12714         * retr.c (retrieve_url): Implemented proxy retrieval.
12715
12716         * main.c (main): Use retrieve_from_file.
12717
12718 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
12719
12720         * retr.c (retrieve_from_file): New function.
12721
12722         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
12723         can be found in u->proto.
12724
12725         * ftp.c (ftp_response): Fixed to accept multi-line responses as
12726         per RFC 959.
12727
12728         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
12729
12730         * url.c (mymkdir): Removed the file of the same name, if one
12731         exists.
12732         (isfile): New function.
12733         (mkstruct): Fixed the '/' glitches.
12734         (path_simplify): Hacked to treat something/.. correctly.
12735
12736 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
12737
12738         * http.c (gethttp): Close the socket after error in headers.
12739         (http_loop): HEOF no longer a fatal header.
12740
12741         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
12742         simplifies the syntax of calling retrieve_url.
12743
12744         * recr.c (recursive_retrieve): Modified to use get_urls_html.
12745
12746         * url.c (get_urls_file): New function.
12747         (get_urls_html): New function.
12748
12749         * recr.c (recursive_retrieve): Patched up to conform to the
12750         standards.
12751
12752         * http.c (gethttp): Synched with the rest...
12753         (gethttp): Treat only CONREFUSED specially, with connection
12754         errors.
12755
12756         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
12757
12758 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
12759
12760         * http.c (http_loop): New function.
12761
12762         * loop.c: Removed *lots* of stuff from retrieve_url.
12763
12764         * url.c (parseurl): Changed to work with urlinfo. Integrated
12765         username finding and path parsing.
12766         (newurl): New function.
12767         (freeurl): New function.
12768         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
12769         (url_filename): Likewise.
12770         (path_simplify): Accept relative paths too.
12771         (opt_url): Made urlinfo-compliant, removed bogosities.
12772         (path_simplify): Expanded to accept relative paths.
12773         (str_url): A replacement for hide_url
12774         (decode_string): Fixed a bug that caused malfunctioning when
12775         encountering an illegal %.. combination.
12776         (opt_url): Removed the argument. Dot-optimizations are now default.
12777
12778         * nmalloc.c (strdupdelim): New function.
12779
12780         * url.h: Added the urlinfo structure
12781
12782 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
12783
12784         * url.c (hide_url): Thrown out the protocol assertion. Do not
12785         change the URL if the protocol if not recognized.
12786         (findurl): Put continue instead of break.
12787
12788 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
12789
12790         * sample.geturlrc: Changed the defaults to be commented out and
12791         harmless (previous defaults caused pains if copied to
12792         ~/.geturlrc).
12793
12794         * http.c (gethttp): Print the HTTP request in debug mode.
12795
12796         * connect.c (iread): Added EINTR check loop to select-ing
12797         too. EINTR is now correctly handled with select().
12798
12799         * TODO: new file
12800
12801 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
12802
12803         * host.c (same_host): Made the function a little bit more
12804         intelligent regarding diversified URL syntaxes.
12805
12806         * url.c (skip_url): Spaces are now skipped after URL:
12807
12808         * Released 1.3.1 with the patch to prevent crashing when sending
12809         NULL to robot* functions and the patch to compile "out of the box"
12810         on AIX.
12811
12812         * recr.c (recursive_retrieve): Added checking whether this_url is
12813         NULL when calling the robot functions.
12814
12815         * ChangeLog: New file.