]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Fix K&R incompatibilities reported by `gcc -Wtraditional'.
[wget] / src / ChangeLog
1 2005-05-03  Hrvoje Niksic  <hniksic@xemacs.org>
2
3         * url.c (url_parse): Rename label `error' to avoid conflict with
4         identifier.
5
6         * retr.c (fd_read_body): Rename label `out' to avoid conflict with
7         identifier.
8         (fd_read_hunk): Use explicit double constant.
9         (retrieve_from_file): Don't use string concatenation.
10         (sleep_between_retrievals): Make sure xsleep is called with a
11         `double' argument.
12         (no_proxy_match): Define as static, like it is declared.
13
14         * progress.c (bar_create): Use 0.0 instead of 0 because K&R
15         compilers can't automatically promote it.
16
17         * http-ntlm.c (ntlm_output): Replace \xHH sequences with \OOO for
18         the sake of old compilers.
19
20         * ftp.c (ftp_loop_internal): Don't use string concatenation.
21
22         * http.c (request_send): Use explicit double constants when
23         calling fd_read and fd_write.
24         (post_file): Ditto.
25         (gethttp): Ditto.
26         (skip_short_body): Ditto.
27
28         * ftp-basic.c: When calling fd_write, specify the last argument as
29         a `double' constant for the sake of K&R compilers which don't see
30         the prototype and therefore can't promote it to double
31         automatically.
32
33         * cookies.c (cookie_jar_load): Rename abort label to abort_cookie
34         to avoid name conflict in K&R compilers.
35
36 2005-04-29  Hrvoje Niksic  <hniksic@xemacs.org>
37
38         * ptimer.c (posix_init): Since we allow _POSIX_MONOTONIC_CLOCK==0,
39         it is not enough to check for _POSIX_MONOTONIC_CLOCK-0, we must
40         also check for defined(_POSIX_MONOTONIC_CLOCK).
41
42 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
43
44         * ftp.c, hash.c, connect.c, host.c, http.c: Remove unreached code,
45         such as "break" following return or abort.
46
47 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
48
49         * init.c (commands): Wrap the use of opt.random_file in #ifdef
50         HAVE_SSL.
51
52 2005-04-28  Hrvoje Niksic  <hniksic@xemacs.org>
53
54         * http.c (gethttp): Correctly set the user agent.
55
56 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
57
58         * init.c (cmd_spec_useragent): Free the old value of
59         opt.useragent before setting the new one.
60
61 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
62
63         * main.c: Map --ftp-password, --http-password and --proxy-password to
64         the new ftppassword, httppassword and proxypassword commands
65         respectively.  Document the --user and --password options in the help
66         string.
67         
68 2005-04-27  Mauro Tortonesi  <mauro@ferrara.linux.it>
69
70         * ftp.c: Add support for --user and --password.
71         
72         * http.c: Add support for --user and --password.
73         
74         * init.c: Deprecated ftppasswd, httppasswd, login, passwd and
75         proxypasswd commands.  Added ftppassword, ftpuser, httppassword,
76         password, proxypassword and user commands.
77
78         * main.c: Renamed --ftp-passwd to --ftp-password.  Added --ftp-user,
79         --http-password, --password, --proxy-password and --user.  Deprecated
80         --http-passwd and --proxy-passwd.  Added documentation for new options
81         and removed documentation for deprecated options in the help string.
82         
83         * options.h (struct options): Added user and passwd members to handle
84         --user and --password respectively.  Renamed ftp_acc and ftp_pass
85         members to ftp_user and ftp_passwd for consistency.
86
87 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
88
89         * main.c (print_help): Advertise "DER", not "ASN1".
90
91 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
92
93         * openssl.c (init_prng): Disable the weak random seed by default.
94
95         * http.c (gethttp): Simplify SSL initialization; disable SSL when
96         anything goes wrong with the initialization.
97
98         * options.h (struct options): New option opt.random_file.
99
100 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
101
102         * init.c: Wrap private key commands in IF_SSL.
103
104 2005-04-27  Hrvoje Niksic  <hniksic@xemacs.org>
105
106         * openssl.c (ssl_init): Ditto.
107
108         * options.h (struct options): Allow separate specification of key
109         type and certificate type.
110
111         * init.c (cmd_spec_cert_type): Provide a "der" synonym for "asn1"
112         certificate encoding.
113
114 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
115
116         * openssl.c: Renamed "gen_sslfunc.c" to "openssl.c" and
117         "gen_sslfunc.h" to "openssl.h".  This reflects the intent of
118         openssl.c encapsulating the OpenSSL-specific code.
119
120 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
121
122         * init.c: Renamed "closure" (a synonym for context in some
123         cultures) to "place", which more accurately reflects the usage.
124
125 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
126
127         * gen_sslfunc.c (ssl_init): Use default locations for loading the
128         certificate bundles.
129         (ssl_init_prng): Disable the cryptographically weak PRNG
130         initialization fallback.
131
132         * init.c: Renamed SSL command-line arguments and wgetrc commands.
133         (defaults): Check the server certificate by default.
134
135 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
136
137         * cookies.c (cookie_handle_set_cookie): Delete the part of the
138         path after the trailing slash.
139
140         * http.c (gethttp): Call cookie_handle_set_cookie with path that
141         begins with '/'.
142
143 2005-04-26  Hrvoje Niksic  <hniksic@xemacs.org>
144
145         * http.c (gethttp): Call skip_short_body only if keep_alive is in
146         use.
147         (gethttp): Send the User-Agent header with the CONNECT request as
148         well.
149
150 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
151
152         * main.c (option_data): Removed support for the undocumented flag
153         --use-proxy.
154
155 2005-04-25  Hrvoje Niksic  <hniksic@xemacs.org>
156
157         * main.c (option_data): Don't treat -Y as a boolean switch; treat
158         it as a value switch instead, so "-Y off" continues to work.
159
160 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
161
162         * utils.c (aprintf): Delete unreachable statement.
163
164 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
165
166         * host.c (cmp_prefer_ipv4): New function.
167         (cmp_prefer_ipv6): New function.
168         (lookup_host): Use the appropriate comparator according to
169         opt.prefer_family.
170
171         * init.c: New option prefer_family.
172
173         * host.c (is_valid_ipv6_address): Spell NS_* constants in lower
174         case to avoid clash with system headers.
175         (lookup_host): Reorder the addresses so that IPv4 ones come first.
176
177         * utils.c (stable_sort): New function.
178
179 2005-04-24  Hrvoje Niksic  <hniksic@xemacs.org>
180
181         * connect.c (retryable_socket_connect_error): Return 0 for
182         ENETUNREACH and EHOSTUNREACH.
183
184 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
185
186         * cmpt.c: Reenable the memmove implementation for systems that
187         lack it.
188
189         * http.c (gethttp): Store the "authorized" state of the persistent
190         connection.
191         (request_remove_header): New function.
192         (gethttp): Don't send the "Basic" authentication if the connection
193         is already authorized.
194
195 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
196
197         * utils.c (base64_encode): Treat input as unsigned chars.
198         Required for correct encoding of binary stuff.
199
200 2005-04-23  Hrvoje Niksic  <hniksic@xemacs.org>
201
202         * http-ntlm.c: Format the function definitions in an
203         ansi2knr-friendly fashion.
204
205 2005-04-22  Hrvoje Niksic  <hniksic@xemacs.org>
206
207         * http.c (gethttp): Handle multiple WWW-Authentication headers,
208         only one of which is recognized.  Those are sent by IIS with NTLM
209         authorization.
210         (create_authorization_line): Propagate information whether
211         authorization is finished.
212         (gethttp): Only stop authorization when it's really finished, not
213         after fixed two steps.
214
215 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
216
217         * gen_sslfunc.c (ssl_init): Fix warning message text; mark the
218         message as translatable.
219
220 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
221
222         * main.c (print_help): Print the EGD option outside the cluster of
223         SSL options.
224
225 2005-04-21  Hrvoje Niksic  <hniksic@xemacs.org>
226
227         * http-ntlm.c (ntlm_output): Fix setting the domain.
228         Suggested by Sami Krank.
229
230 2005-04-20  Mauro Tortonesi  <mauro@ferrara.linux.it>
231
232         * connect.c: Set IPV6_V6ONLY socket option when -6 switch is used.
233
234 2005-04-20  FUJISHIMA Satsuki  <sf@FreeBSD.org>
235
236         * http.c (request_set_header): Fix the check whether a new header
237         needs to be allocated.
238
239 2005-04-18  Hrvoje Niksic  <hniksic@xemacs.org>
240
241         * utils.c (base64_encode): Use the parameter order that makes more
242         sense.  Return the length of the base64 written.  Updated all
243         callers.
244
245 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
246
247         * http.c (request_set_header): Free NAME when VALUE is NULL and
248         freeing the header name is requested.
249
250 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
251
252         * snprintf.c (fmtstr): Declare VALUE as const char *.
253         Based on patch by Russ Allbery.
254
255 2005-04-17  Hrvoje Niksic  <hniksic@xemacs.org>
256
257         * snprintf.c (fmtfp): More correct handling of significant digit
258         count with %g -- 0.002 has one significant digit, not three.
259
260 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
261
262         * retr.c (fd_read_body): Respect read timeout with non-interactive
263         or no progress gauge -- treat ETIMEDOUT specially only when
264         progress_interactive.
265         Reported by FUJISHIMA Satsuki.
266
267 2005-04-16  FUJISHIMA Satsuki  <sf@FreeBSD.org>
268
269         * http.c (gethttp): Don't use HTTP/1.0 persistent connections over
270         proxy.
271
272 2005-04-16  Hrvoje Niksic  <hniksic@xemacs.org>
273
274         * snprintf.c: Use the PARAMS macro to handle prototypes.  Write
275         function definitions in the ansi2knr-friendly way.
276         (fmtstr): If string precision is specified, don't read VALUE past
277         it.
278         (dopr): Actually print %g and %e formats.
279         (fmtfp): Fix a bug that caused 0.01 to be printed as 0.1.
280         (fmtfp): Use LLONG in floating point conversions to be able to
281         convert more digits.
282         (fmtfp): Interpret precision as number of significant digits with
283         %g.
284         (fmtfp): Omit trailing decimal zeros with %g.
285
286         * snprintf.c: Don't include <ctype.h> because none of it is used.
287         Include strings.h/string.h, as per Autoconf.
288
289 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
290
291         * ptimer.c: Use _POSIX_TIMERS - 0 > 0, which handles the case when
292         _POSIX_TIMERS is defined but empty, as well as the case when it is
293         undefined.  Do the same with the check for _POSIX_MONOTONIC_CLOCK.
294         Suggested by Larry Jones.
295
296 2005-04-15  Hrvoje Niksic  <hniksic@xemacs.org>
297
298         * ptimer.c: Check that _POSIX_TIMERS is defined as well as > 0.
299         Problem reported by Steven M. Schweda.
300
301 2005-04-14  Hrvoje Niksic  <hniksic@xemacs.org>
302
303         * http.c (skip_short_body): Print the skipped body data in debug
304         mode.
305         (skip_short_body): Don't skip more than 4k of body data.
306         (skip_short_body): Return whether the skipping was successful.
307         (gethttp): If skip_short_body failed, invalidate the connection.
308
309 2005-04-12  Gisle Vanem  <giva@bgnett.no>
310
311         * ftp.c (getftp): Ditto.
312
313         * http.c (gethttp): Open the output file in binary mode.
314
315 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
316
317         * hash.c: Conditionalize including config.h on HAVE_CONFIG_H
318         instead of on STANDALONE.
319
320 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
321
322         * gen_sslfunc.c (ssl_print_errors): Made static.
323         (ssl_print_errors): Eliminate potentially dangerous fixed-size
324         error buffer.  Passing NULL to ERR_error_string causes it to use
325         its own static buffer, which is fine for our purposes.
326
327         * gen_sslfunc.c: Include gen_sslfunc.h.  Make the declarations of
328         ssl_init and ssl_conect match the actual definitions.
329         (ssl_connect): Simply return a boolean, the SSL context is no
330         longer useful as a return value.
331
332         * retr.c: Don't include SSL headers; we don't need them.
333
334 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
335
336         * config-post.h: Don't define _VA_LIST under Solaris; it breaks
337         compilation with GCC 3.4 under Solaris 10.  (It was defined to
338         avoid a warning with previous versions of GCC.)
339
340 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
341
342         * xmalloc.c (register_ptr): Warn the user to increase SZ prior to
343         aborting.
344
345 2005-04-11  Hrvoje Niksic  <hniksic@xemacs.org>
346
347         * convert.c (convert_cleanup): Free converted_files.
348
349 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
350
351         * wget.h (DEBUGP): Use __builtin_expect to give a hint to GCC that
352         opt.debug is false in the vast majority of cases.
353
354 2005-04-10  Hrvoje Niksic  <hniksic@xemacs.org>
355
356         * config-post.h: Declare alloca as void *, not char *.
357
358 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
359
360         * recur.c (download_child_p): When -p is used, (temporarily)
361         ignore accept/reject rules for HTMLs, even when they are at the
362         maximum recursion depth.  That is because with -p we are, if
363         necessary, overstepping the max. depth to get the requisites.
364
365 2004-06-12  Larry Jones <lawrence.jones@ugsplm.com>
366
367         * recur.c (download_child_p): Correct the logic in check number 6:
368         test opt.reclevel (not DEPTH) against INFINITE_RECURSION.
369
370 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
371
372         * url.c: Use "static const" in preference to "const static".
373         Sun's cc warns that "storage class after type is obsolescent".
374
375         * url.c (urlchr_table): Don't mark ~ as unsafe, too many broken
376         web sites are confused when ~ is changed to %7E.  Their servers
377         redirect /%7Efoo/ to /~foo/, which Wget again accesses using %7E,
378         causing further redirections, therefore looping infinitely.  See
379         Debian bug #301624 for an example.
380
381 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
382
383         * alloca.c: Include wget.h to be able to use xmalloc.  In addition
384         to defining malloc to xmalloc, also define free to xfree.
385
386 2005-04-09  Hrvoje Niksic  <hniksic@xemacs.org>
387
388         * http-ntlm.c (ntlm_output): Use "char", not "unsigned char" for
389         ntlmbuf.  Our base64 functions accept char anyway.
390         (ntlm_output): Join up the format string, since we nominally
391         support K&R compilers.
392         (ntlm_output): Ditto.
393
394 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
395
396         * ptimer.c: Use Windows timers under Cygwin, whose POSIX timer
397         implementation is incomplete.
398
399 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
400
401         * ptimer.c (struct ptimer): Remove the unused initialized field.
402
403         * ptimer.c: Renamed function parameters from WT (which used to
404         stand for wget_timer or wtimer) to PT.
405
406 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
407
408         * ptimer.c (posix_init): Be smarter about choosing clocks.  In
409         decreasing order of preference, use CLOCK_MONOTONIC,
410         CLOCK_HIGHRES, and CLOCK_REALTIME.
411         (ptimer_allocate): Removed.
412
413         * ptimer.c: Refactor the code by cleanly separating the
414         architecture-dependent code from the architecture-independent
415         code.
416
417 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
418
419         * ptimer.c (ptimer_init): Explicitly check that
420         _POSIX_MONOTONIC_CLOCK is *both* defined and >=0.  (Undefined
421         symbols are >=0.)
422
423 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
424
425         * ptimer.c (ptimer_diff): Fix typo affecting Windows build.
426
427 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
428
429         * ptimer.c (ptimer_init): In fact, _POSIX_MONOTONIC_CLOCK needs to
430         be >= 0.
431
432         * ptimer.c (ptimer_init): Check whether _POSIX_MONOTONIC_CLOCK is
433         defined instead of whether it's greater than 0.  glibc defines it
434         to 0, but still makes it available via sysconf.
435
436 2005-04-08  Hrvoje Niksic  <hniksic@xemacs.org>
437
438         * mswindows.c (str_to_int64): Rename OVERFLOW and UNDERFLOW to
439         INT64_OVERFLOW and INT64_UNDERFLOW, since those names are used.
440
441 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
442
443         * ptimer.c: New file.  Move the "wtimer" functions from utils.c to
444         this file and rename them to ptimer_.
445
446 2005-04-07  Hrvoje Niksic  <hniksic@xemacs.org>
447
448         * host.c (NO_ADDRESS): Define NO_ADDRESS only after the system
449         headers have been included.
450
451 2005-04-06  Hrvoje Niksic  <hniksic@xemacs.org>
452
453         * http.c (pconn): Include NTLM data, which is per-connection.
454         (known_authentication_scheme_p): Recognize NTLM authorization.
455         (create_authorization_line): Call ntlm_input and ntlm_output.
456
457         * http-ntlm.c: New file, donated by Daniel Stenberg and originally
458         written for curl, heavily modified for Wget.
459
460         * utils.c (base64_encode): Relocated from http.c, since it is now
461         used by http-ntlm.c, and will possibly be used elsewhere.
462         (base64_decode): New function, originally based on code from GNU
463         recode.
464
465 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
466
467         * ftp.c (ftp_loop): Ditto.
468
469         * ftp-basic.c (ftp_pasv): Use the xzero shorthand for memset(0).
470         (ftp_lpsv): Ditto.
471
472 2005-04-05  Mauro Tortonesi  <mauro@ferrara.linux.it>
473
474         * Makefile.in: removed string_t.c from list of source files.
475
476 2005-04-04  Mauro Tortonesi  <mauro@ferrara.linux.it>
477
478         * string_t.c: Removed.
479         
480         * string_t.h: Removed.
481
482 2005-04-02  Hrvoje Niksic  <hniksic@xemacs.org>
483
484         * url.c (rewrite_shorthand_url): Only accept recognized schemes.
485         That way "foo:80" will correctly be rewritten to "http://foo:80"
486         instead of left unchanged and ultimately rejected because of
487         "unsupported scheme foo".
488
489 2005-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
490
491         * utils.c (number_to_string): Avoid explicit 64-bit constants;
492         construct them by multiplication at compile-time.
493
494         * utils.c, elsewhere: Don't append "L" to 32-bit integer
495         constants; we aren't really compilable on 16-bit systems anyway.
496
497         * hash.c (prime_size): Remove primes larger than 2^31, but include
498         2^31-1, which is prime.
499
500 2005-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
501
502         * utils.c (string_set_to_array): New function.
503
504         * convert.c: Replace the use of "slists" with sets/hash-tables,
505         which in fact suit the intended purpose much better.
506         downloaded_html_list is removed altogether.
507
508 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
509
510         * ftp.h (enum): Rename GLOBALL, GETALL, and GETONE to
511         GLOB_GLOBALL, GLOB_GETALL, and GLOB_GETONE to avoid conflict with
512         Linux headers.
513
514 2005-03-29  Hrvoje Niksic  <hniksic@xemacs.org>
515
516         * utils.c (numdigit): More correct handling of negative numbers.
517
518 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
519
520         * http.c (gethttp): Print the human-readable size.
521
522         * ftp.c (getftp): Print the human-readable size of the file to be
523         downloaded.
524
525         * utils.c (human_readable): New function.
526
527         * utils.c: Renamed "legible" to "with_thousand_seps",
528         "legible_large_int" to "with_thousand_seps_large", and "legible_1"
529         to "add_thousand_seps".
530
531 2005-03-21  Hrvoje Niksic  <hniksic@xemacs.org>
532
533         * http.c (gethttp): Inhibit persistent connections when talking to
534         proxies, as mandated by RFC 2068.
535
536 2005-03-20  Hrvoje Niksic  <hniksic@xemacs.org>
537
538         * url.c (unescape_single_char): New function.
539         (url_escape_dir): Use it to unescape slashes in directory
540         components.
541         (url_string): Escape unsafe chars in host name, except for the ':'
542         charaters, which can appear in IPv6 addresses.
543
544         * main.c (main): Don't access the cookie jar directly.
545
546         * log.c (escnonprint_internal): Correctly calculate the needed
547         string size.  Don't forget the buffer's new size after having
548         reallocated it.
549         (log_cleanup): New function.  Free the escnonprint ring data.
550
551         * init.c (cleanup): Don't free the cookie jar explicitly, it is
552         now done by http_cleanup.
553         (cleanup): opt.user_headers is now a vector, free it with
554         free_vec.
555
556         * http.c (gethttp): Make sure to free the request data, the status
557         message, and the response data before returning from the function.
558         (save_cookies): New function.
559         (http_cleanup): Free the cookie jar here.
560
561         * hash.c: Renamed string_hash to hash_string and ptrhash to
562         hash_pointer.  Exported hash_pointer.
563
564         * xmalloc.c: Organized malloc_table (previously malloc_debug) as a
565         simple EQ hash table.  register_ptr and unregister_ptr are now of
566         O(1) complexity.
567
568         * xmalloc.c: Renamed "*_debug" to debugging_* and "*_real" to
569         checking_*.
570
571 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
572
573         * utils.c (debug_test_md5): Moved to gen-md5.c.
574
575         * mswindows.h: Don't declare inet_ntop, since we don't use it.
576
577         * mswindows.h: For consistency, also wrap closesocket, it being
578         a Winsock call.
579
580         * mswindows.h: Don't declare sleep and usleep; we're defining
581         xsleep now.
582
583         * mswindows.h (mkdir): Don't special-case Borland C, _mkdir
584         works there as well.
585
586         * host.c: Don't include winsock header files; the correct ones
587         are already included by mswindows.h.
588
589         * mswindows.c (xsleep): Round toward the nearest millisecond
590         in an attempt to avoid average short sleeps.
591
592         * utils.c (wtimer_granularity): Report correct values for
593         Windows timers and for high-resolution timers.
594
595         * utils.c (wtimer_initialize_once): New function, called to
596         initialize the timer frequency.
597
598         * utils.c: Replace the use of GetSystemTime with high-resolution
599         counters under Windows.  When high-resolution counters are
600         unavailable, use GetTickCount().
601
602 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
603
604         * retr.c (fd_read_body): Undo the 2004-11-18 change.  Instead,
605         always be "exact".
606
607 2005-03-17  Hrvoje Niksic  <hniksic@xemacs.org>
608
609         * ftp-basic.c (ftp_login): Don't free the string if ftp_response
610         returned an error status because the line didn't get allocated in
611         the first place.
612
613 2005-03-15  Hrvoje Niksic  <hniksic@xemacs.org>
614
615         * http.c (read_http_response_head): Limit the response size to 64k
616         bytes.
617
618         * retr.c (fd_read_hunk): Accept a MAXSIZE argument that limits the
619         number of bytes the function is allowed to allocate.
620         (fd_read_line): Limit the line to 4096 bytes.
621
622 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
623
624         * wget.h: Include options.h after wgint has been defined.
625
626         * options.h (struct options): Declare options processed with
627         cmd_bytes as wgint, not long.
628
629 2005-03-18  Hrvoje Niksic  <hniksic@xemacs.org>
630
631         * init.c (cmd_file): Use concat_strings.
632
633         * http.c (basic_authentication_encode): Use concat_strings.
634
635         * ftp-ls.c (ftp_index): Use concat_strings.
636
637         * ftp-basic.c (ftp_request): Use concat_strings.
638
639         * utils.c (concat_strings): New function.
640
641 2005-03-12  Hrvoje Niksic  <hniksic@xemacs.org>
642
643         * init.c (simple_atof): Handle negative numbers; skip whitespace
644         before the number.
645         (simple_atoi): Ditto.  Also, check for overflow and underflow.
646         (cmd_number): Bail out on negative numbers.
647         (parse_bytes_helper): Ditto.
648
649 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
650
651         * http.c (gethttp): Handle multiple Set-Cookie headers sent by
652         remote server.
653
654 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
655
656         * init.c (defaults): Use passive FTP by default.
657
658 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
659
660         * mswindows.c: Provide wrappers to Winsock functions that set
661         errno to WSAGetLastError() in case of failure.  Also provide a
662         Windows-specific version of strerror.
663
664         * mswindows.h: Wrap calls to socket, bind, connect, recv, send,
665         select, getsockname, getpeername, and setsockopt.
666
667 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
668
669         * url.c (url_parse): Reject port numbers larger than 65535.  We
670         also check for overflow while parsing port numbers.
671
672 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
673
674         * utils.c (read_file): Don't use wgint for file size; LFS won't
675         work since the file is mmap'ed as a whole.
676
677         * options.h: Don't include stdio.h.
678
679         * log.c: Ditto.
680
681         * init.c: Disambiguate assignment from non-zero test to avoid
682         Borland C warning.
683
684         * http.c (response_new): Don't needlessly post-increment count.
685
686         * hash.c: Include stdio.h.
687
688         * gnu-md5.h: Don't include stdio.h.
689
690         * getopt.h (struct option): Always use const.
691
692         * ftp.c (getftp): Avoid unnecessary assignment to RES to avoid
693         Borland C warning.
694
695         * ftp-ls.c: Disambiguate assignment from non-zero test to avoid
696         Borland C warning.
697
698         * cmpt.c (strptime_internal): Don't initialize rp_backup when
699         !_NL_CURRENT to avoid Borland C warning.
700
701 2005-03-06  Hrvoje Niksic  <hniksic@xemacs.org>
702
703         * utils.c (fopen_excl): Fix parse error when O_BINARY is
704         available.
705
706 2005-03-05  Hrvoje Niksic  <hniksic@xemacs.org>
707
708         * url.c (url_file_name): Don't allow hosts named ".." to be
709         appended as path elements.
710
711 2005-03-03  Hrvoje Niksic  <hniksic@xemacs.org>
712
713         * retr.c (retrieve_url): Escape location header.
714
715         * http.c (print_server_response_1): Escape server response when
716         printing it.
717         (gethttp): Escape host name, status message, location header, and
718         content type.
719         (http_loop): Escape error message from server.
720
721         * host.c (lookup_host): Escape host name when printing it.
722
723         * ftp.c (getftp): Escape user name when printing it.
724         (getftp): Escape remote file and directory for printing.
725         (getftp): Escape server listing when printing it.
726         (ftp_retrieve_list): Escape link name and file name.
727         (ftp_retrieve_glob): Escape file name.
728
729         * ftp-basic.c (ftp_response): Escape server response when printing
730         it.
731
732         * cookies.c (parse_set_cookies): Escape the cookie field when
733         printing it.
734         (parse_set_cookies): Escape contents of remote header.
735         (cookie_handle_set_cookie): Escape host name and cookie domain.
736
737         * connect.c (connect_to_ip): Escape the host name.
738
739         * log.c (escnonprint): New function, used for printing strings
740         coming from the server that possibly contain non-ASCII characters.
741         (escnonprint_uri): Ditto.
742
743 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
744
745         * ftp.c (getftp): Ditto.
746
747         * http.c (gethttp): When we're not supposed to overwrite files,
748         use fopen_excl to open the file and recompute the file name.
749
750         * log.c (redirect_output): Use unique_create to avoid a race
751         condition.
752
753         * mswindows.c (fake_fork_child): Use unique_create.
754
755         * utils.c (fopen_excl): New function that opens a stdio stream
756         with the O_EXCL flag (where available).
757         (unique_create): New function, like unique_name, but also creating
758         the file and returning a file pointer.
759         (fork_to_background): Use unique_create to create the file
760         immediately to avoid race condition with multiple instances of
761         wget -b.
762
763 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
764
765         * host.c (lookup_host): Test for AI_ADDRCONFIG directly, instead
766         of checking for HAVE_GETADDRINFO_AI_ADDRCONFIG.
767
768 2005-02-23  Hrvoje Niksic  <hniksic@xemacs.org>
769
770         * host.c (is_valid_ipv6_address): Move here from url.c.
771         (lookup_host): If the address is numeric, don't print the
772         "resolving..." line, don't set up DNS timeouts, and set the
773         AI_NUMERICHOST hint, where available.
774
775 2005-02-26  Gisle Vanem  <giva@bgnett.no>
776
777         * utils.c: Use the nnnLL syntax under GCC.  Define struct_stat to
778         struct _stati64 under __MINGW32__ as well as under MS VC.
779
780 2005-02-26  Hrvoje Niksic  <hniksic@xemacs.org>
781
782         * utils.c: Use the nnnI64 syntax for __int64 constants under all
783         Windows compilers.
784         (SPRINTF_WGINT): Use "%I64" under all Windows compilers.
785
786         * mswindows.h (WGINT_MAX): Use the nnnI64 syntax for
787         __int64 constants under all Windows compilers.
788         (struct_stat): Use `struct stati64' under Borland C.
789         (fstat): Don't redefine to _fstati64 under Borland.
790
791         * mswindows.c: Define str_to_int64 under Borland C as well as
792         under (older) Visual C.
793
794 2005-02-25  Hrvoje Niksic  <hniksic@xemacs.org>
795
796         * ftp.c (getftp): Initialize err to suppress compiler warning.
797
798 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
799
800         * ftp.c (ftp_expected_bytes): Fix bug that caused infloop because
801         of not correctly skipping the '(' character.
802
803 2005-02-24  Hrvoje Niksic  <hniksic@xemacs.org>
804
805         * mswindows.c (wget_ftello): Removed.
806
807         * mswindows.h: Remove bogus definition of stat.
808         (wget_ftello): Remove the leftover ftello replacement.
809
810 2005-02-20  Hrvoje Niksic  <hniksic@xemacs.org>
811
812         * mswindows.c (wget_ftello): Wget's replacement for ftello.
813
814         * utils.c (file_size): Use ftello where available.
815
816         * ftp-ls.c (ftp_parse_unix_ls): Use str_to_wgint to parse the file
817         size.
818         (ftp_parse_winnt_ls): Ditto.
819
820         * ftp-basic.c (ftp_size): Use str_to_wgint to convert number to
821         wgint; pass 10 instead of 0 as the BASE argument.
822
823         * ftp.c (ftp_expected_bytes): Use str_to_wgint to parse the file
824         size.
825
826         * sysdep.h (LARGE_INT_FMT): Use __int64 as LARGE_INT on
827         MSVC/Windows; print it with "%I64".
828
829         * wget.h: Define a `wgint' type, normally aliased to (the possibly
830         64-bit variant of) off_t.
831
832         * all: Use `wgint' instead of `long' for numeric variables that
833         can hold file sizes.
834
835         * utils.c (number_to_string): Support printing of `wgint'
836         argument.
837         (number_to_static_string): New function.
838
839         * all: Replace printf("%ld", long_value) with printf("%s",
840         number_to_static_string(wgint_value)).
841
842 2005-02-18  Mauro Tortonesi <mauro@ferrara.linux.it>
843
844         * main.c: Added the --ftp-passwd command line option.
845
846         * init.c: Renamed command passwd to ftppasswd.
847
848 2005-02-11  Mauro Tortonesi <mauro@ferrara.linux.it>
849         
850         * string_t.c: Fixed a bug in do_escape and triggered escape of
851         backslashes in string_escape to avoid ambiguities in the result
852         string.
853         
854 2005-02-10  Mauro Tortonesi <mauro@ferrara.linux.it>
855
856         * string.h: Renamed to string_t.h to fix a compilation conflict 
857         with the string.h header in the standard C library.
858         
859         * string.c: Renamed to string_t.c for consistency with string.h.
860         
861         * string_t.c: Ditto.
862
863         * string_t.h: Ditto.
864         
865 2004-12-31  Mauro Tortonesi <mauro@ferrara.linux.it>
866
867         * string.c: New file.
868
869         * string.h: New file.
870
871         * Makefile.in: Added string.c to the list of modules to compile.
872
873         * main.c: Updated copyright.
874
875 2004-11-18  Ulf Harnhammar <ulf.harnhammar.9485@student.uu.se>
876
877         * ftp-ls.c: Fixed a problem in ftp_parse_winnt_ls that could allow a
878         malicious remote FTP server to crash wget.
879
880 2004-11-18  Hans-Andreas Engel <engel@node.ch>
881
882         * http.c: Enable --convert-links (-k) when a single page is downloaded
883         via --output-document (-O).
884
885 2004-11-18  Mauro Tortonesi <mauro@deepspace6.net>
886
887         * connect.c: Minor correction to the comment in front of fd_peek.
888
889 2004-11-18  Leonid Petrov <nouser@lpetrov.net>
890
891         * retr.c: Fix a timeout problem in fd_read_body when using http_proxy.
892
893 2004-11-15  YAMAZAKI Makoto <Yamazaki.Makoto@fujixerox.co.jp>
894
895         * netrc.c: Fix termination by assertion bug in netrc parsing.
896
897 2004-05-09  David Fritz  <zeroxdf@att.net>
898
899         * mswindows.c (fake_fork): Pass entire command line to the child
900         process.
901
902 2004-03-31  Hrvoje Niksic  <hniksic@xemacs.org>
903
904         * http.c (gethttp): Fix typo: SCHEME_SSL -> SCHEME_HTTPS.
905
906 2004-03-30  Hrvoje Niksic  <hniksic@xemacs.org>
907
908         * http.c (gethttp): Send the Proxy-Authorization header over
909         non-SSL connections too.
910
911 2004-03-25  David Fritz  <zeroxdf@att.net>
912
913         * mswindows.c (fake_fork_child): Ignore error code when
914         OpenFileMapping() fails; assume it failed because the object does
915         not exist.
916
917 2004-03-24  David Fritz  <zeroxdf@att.net>
918
919         * mswindows.c (fake_fork): New function.
920
921         * mswindows.c (fork_to_background): Use it.
922
923 2004-03-19  David Fritz  <zeroxdf@att.net>
924
925         * mswindows.c (ws_hangup): Incorporate old fork_to_background()
926         code.  Add event name argument.
927         (fork_to_backgorund): Now a simple wrapper around ws_hangup().
928         (ws_handler): Correctly handle the case when neither CTRLC_BACKGND
929         nor CTRLBREAK_BACKGND are defined.  Don't bother handling close,
930         logoff, or shutdown events.  Call ws_hangup() with the correct
931         event name; don't assume it was CTRL+Break.
932
933 2004-03-19  Hrvoje Niksic  <hniksic@xemacs.org>
934
935         * url.c (url_parse): Decode %HH sequences in host name.
936
937 2004-03-04  Hrvoje Niksic  <hniksic@xemacs.org>
938
939         * convert.c (local_quote_string): Quote "#" as "%23" and "%" as
940         "%25" when creating links to local files.
941
942 2004-03-02  David Fritz  <zeroxdf@att.net>
943
944         * mswindows.c (ws_percenttitle): Guard against future changes by
945         doing nothing if the proper variables have not been initialized.
946         Clamp percentage value.
947
948 2004-03-04  Gisle Vanem  <giva@bgnett.no>
949
950         * retr.c (fd_read_body): Don't change console title if quiet.
951
952 2004-02-25  David Fritz  <zeroxdf@att.net>
953
954         * mswindows.c (set_sleep_mode): Remove argument and return value.
955         Call GetModuleHandle() instead of LoadLibrary()/FreeLibrary() for
956         kernel32.dll.  Use typedef for function-pointer.  Don't cast
957         l-value.  Don't use dereference operator when calling through
958         function-pointer.
959         (ws_startup): Update call to set_sleep_mode().
960         (ws_cleanup): Remove call to set_sleep_mode().
961
962 2004-02-23  David Fritz  <zeroxdf@att.net>
963
964         * http.c (http_loop): Ditto.
965
966         * ftp.c (ftp_loop_internal): Update call to ws_changetitle().
967
968         * main.c (main): Don't bother calling ws_changetitle().
969
970         * mswindows.h (ws_changetitle): Update prototype.
971
972         * mswindows.c (ws_changetitle): Remove second argument.  Use
973         xfree_null().
974         (ws_percenttitle): Only update title when percentage has changed.
975
976 2004-02-23  David Fritz  <zeroxdf@att.net>
977
978         * mswindows.h: Ditto.
979
980         * mswindows.c: Misc. formatting/comment tweaks throughout.
981
982 2004-02-20  David Fritz  <zeroxdf@att.net>
983
984         * main.c (print_help): Remove call to ws_help().
985
986         * mswindows.c (ws_help): Remove.
987
988         * mswindows.h (ws_help): Remove.
989
990 2004-02-16  David Fritz  <zeroxdf@att.net>
991
992         * init.c (home_dir): Use aprintf() instead of xmalloc()/sprintf().
993         Under Windows, if $HOME is not defined, use the directory that
994         contains the Wget binary instead of hard-coded `C:\'.
995         (wgetrc_file_name): Under Windows, look for $HOME/.wgetrc then, if
996         not found, look for wget.ini in the directory of the Wget binary.
997
998         * mswindows.c (ws_mypath): Employ slightly more robust methodology.
999         Strip trailing path separator.
1000
1001 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
1002
1003         * http.c (gethttp): Respect --ignore-length.
1004         (gethttp): Inhibit keep-alive if --ignore-length is specified.
1005
1006 2004-02-06  Hrvoje Niksic  <hniksic@xemacs.org>
1007
1008         * connect.c (sockaddr_set_data): Zero out
1009         sockaddr_in/sockaddr_in6.  Apparently BSD-derived stacks need this
1010         when binding a socket to local address.
1011
1012 2004-02-04  Hrvoje Niksic  <hniksic@xemacs.org>
1013
1014         * hash.c: Make the file compilable outside Wget source tree when
1015         -DSTANDALONE is used.
1016
1017 2004-01-29  Hrvoje Niksic  <hniksic@xemacs.org>
1018
1019         * utils.c (determine_screen_width): Return 0 if not running on
1020         Windows or on a TIOCGWINSZ-capable system.
1021
1022 2004-01-28  David Fritz  <zeroxdf@att.net>
1023
1024         * utils.c (determine_screen_width): Correctly determine console
1025         width under Windows.
1026
1027 2004-01-28  Christian Biere  <christianbiere@gmx.de>
1028
1029         * progress.c (bar_set_params): Fixed syntax error when HAVE_ISATTY
1030         was undefined.
1031
1032         * ftp.c (ftp_loop_internal): Allocate a larger buffer in case
1033         "try" gets translated to something large.  Ditto in http_loop in
1034         http.c.
1035
1036         * http.c (response_header_copy): Don't write to buf[BUFSIZE].
1037
1038         * ftp-opie.c (skey_response): Eliminate unnecessary string
1039         concatenation; just call gen_md5_update twice.
1040
1041 2004-01-25  Hrvoje Niksic  <hniksic@xemacs.org>
1042
1043         * utils.c (xsleep): Don't call usleep with values larger than
1044         1,000,000.
1045
1046 2003-12-16  Hrvoje Niksic  <hniksic@xemacs.org>
1047
1048         * http.c (gethttp): Fix generation of `Content-Length'.
1049
1050 2003-12-15  Gisle Vanem  <giva@bgnett.no>
1051
1052         * url.c (url_skip_credentials): Fixed return value; 'url' if no
1053         credentials.
1054
1055 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
1056
1057         * url.c (url_skip_credentials): Return a pointer directly.
1058
1059 2003-12-14  Hrvoje Niksic  <hniksic@xemacs.org>
1060
1061         * url.c (url_file_name): Ditto.
1062         (parse_errors): Ditto.
1063
1064         * retr.c (retr_rate): Ditto.
1065
1066         * progress.c (create_image): Ditto.
1067
1068         * netrc.c (parse_netrc): Ditto.
1069
1070         * main.c (struct cmdline_option): Ditto.
1071         (redirect_output_signal): Ditto.
1072
1073         * init.c (commands): Ditto.
1074
1075         * ftp-ls.c (ftp_index): Ditto.
1076
1077         * cookies.c (check_domain_match): Declare the pointer to a literal
1078         string as `const'.
1079
1080 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
1081
1082         * retr.c (fd_read_body): Pass total size to progress_create, not
1083         the remaining amount.
1084
1085 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
1086
1087         * retr.c (fd_read_body): Don't fiddle with "interactive timeout"
1088         if read timeout is unset.
1089
1090 2003-12-12  Hrvoje Niksic  <hniksic@xemacs.org>
1091
1092         * connect.c (bind_local): Don't set the IPV6_V6ONLY option on the
1093         socket.
1094
1095 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
1096
1097         * url.c (url_file_name): Respect the setting of
1098         opt.protocol_directories.
1099
1100         * main.c (main): Only check for ret=='?' when longindex is unset.
1101         (option_data): New option --protocol-directories.
1102
1103 2003-12-06  Hrvoje Niksic  <hniksic@xemacs.org>
1104
1105         * ftp.c (getftp): Ditto.
1106
1107         * http.c (gethttp): Correctly calculate bandwidth as total data
1108         read divided with download time.
1109
1110         * retr.c (fd_read_body): Separate the return values for data
1111         written and read.
1112
1113 2003-12-05  Hrvoje Niksic  <hniksic@xemacs.org>
1114
1115         * http.c (H_REDIRECTED): Respect the HTTP/1.1 "303 See Other"
1116         response code.
1117         Suggested by Dan Razzell.
1118
1119 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1120
1121         * retr.c (fd_read_body): Report the amount of data *written* as
1122         amount_read.  This is not entirely logical, but that's what the
1123         callers expect, and it's not easy to change.
1124
1125         * ftp.c (ftp_loop_internal): Ditto.
1126
1127         * http.c (http_loop): Be smarter about assigning restval; if we're
1128         in the nth pass of a download, simply use the information we have
1129         about how much data has been retrieved as restval.
1130
1131         * ftp.c (getftp): Ditto for FTP "REST" command.
1132
1133         * http.c (gethttp): When the server doesn't respect range, skip
1134         the first RESTVAL bytes of the read body.  Never truncate the
1135         output file.
1136
1137         * retr.c (fd_read_body): Support skipping initial STARTPOS octets.
1138
1139 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1140
1141         * http.c (skip_short_body): Renamed skip_body to skip_short_body;
1142         don't bother calling fd_read_body.
1143
1144 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1145
1146         * retr.c (fd_read_body): Sanitize arguments and document them
1147         better.  Make sure the timer is created and updated only if
1148         necessary.  Updated callers.
1149
1150 2003-11-30  Hrvoje Niksic  <hniksic@xemacs.org>
1151
1152         * http.c (skip_body): New function.
1153         (gethttp): Use it to skip the body of the responses we don't care
1154         to download.  That allows us to reuse the connection.
1155         (gethttp): Trust that the HEAD requests will not generate body
1156         data.
1157
1158         * retr.c (fd_read_body): Don't write to OUT if it's NULL.
1159
1160 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
1161
1162         * http.c (gethttp): Initialize SSL only the first time when SSL
1163         URL is downloaded.
1164
1165 2003-11-29  Hrvoje Niksic  <hniksic@xemacs.org>
1166
1167         * cookies.c (cookie_header): Only generate the contents of the
1168         header, not the leading "Cookie: " or the trailing "\r\n".
1169
1170         * http.c (gethttp): When adding headers specified with `--header',
1171         allow them to override the headers generated by Wget.
1172
1173         * init.c (cmd_spec_header): Made opt.user_headers a vector.
1174
1175         * http.c (request_new): New function.  Returns a request structure
1176         which can be modified in various ways, most notably by adding HTTP
1177         headers to the request.
1178         (request_set_header): New function for adding the header to the
1179         request.  If the header is already available, it gets replaced.
1180         (request_send): Construct and send the request.
1181         (gethttp): Use the request_* functions to generate the request.
1182
1183 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1184
1185         * http.c (gethttp): Don't include the Proxy-Authorization header
1186         in the request tunneled through proxy.
1187
1188 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1189
1190         * http.c (gethttp): Use the CONNECT handle to establish SSL
1191         passthrough through non-SSL proxies.
1192
1193 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1194
1195         * init.c: Don't #include netinet/Winsock stuff.
1196
1197 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
1198
1199         * http.c: Deleted the old functions header_process,
1200         header_extract_number, header_exists, header_strdup,
1201         http_process_range, http_process_none, http_process_type, and
1202         http_process_connection.
1203
1204         * http.c (response_new): New function.
1205         (response_header_bounds): Ditto.
1206         (response_header_copy): Ditto.
1207         (response_header_strdup): Ditto.
1208         (response_status): Ditto.
1209         (gethttp): Use the new response_* functions to parse the response.
1210         Support HTTP/0.9 responses.
1211
1212 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
1213
1214         * progress.c (create_image): Don't calculate ETA if nothing has
1215         been downloaded yet, because it causes division by zero.
1216
1217 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
1218
1219         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
1220         headers define sa_len as a macro.
1221
1222 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
1223
1224         * html-parse.c (convert_and_copy): Remove embedded newlines when
1225         AP_TRIM_BLANKS is specified.
1226
1227 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
1228
1229         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
1230         previously used.
1231
1232 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
1233
1234         * Makefile.in (http$o): Added the trailing backslash that was
1235         missing.
1236
1237 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
1238
1239         * headers.c: Removed.  The file is no longer relevant, now that no
1240         special handling of headers is done by the rbuf code.  Moved
1241         portions to http.c.
1242
1243 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
1244
1245         * rbuf.c: Removed.
1246
1247         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
1248         struct rbuf.  Updated all callers.
1249
1250         * http.c (gethttp): Use fd_read_head to read all the headers in
1251         one go.
1252         (next_header): New function.
1253
1254         * retr.c (fd_read_line): New function: reads a line from FD,
1255         leaving the rest of the data unread.
1256         (fd_read_head): New function.
1257
1258         * connect.c (fd_peek): New function, implements peeking.
1259         (poll_internal): New function.
1260         (fd_read): Use it.
1261         (fd_write): Ditto.
1262         (fd_peek): Ditto.
1263         (fd_register_transport): Allow registering a "peeker" callback.
1264
1265 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
1266
1267         * connect.c: Renamed xread/xwrite/xclose to
1268         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
1269         because the semantics have diverged from read/write/close too
1270         significantly.  Updated all callers.
1271
1272 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
1273
1274         * connect.c (sock_write): It's not necessary to initialize RES.
1275
1276 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
1277
1278         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
1279         if IPv6 is disabled.
1280
1281 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
1282
1283         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
1284         and AI_ADDRCONFIG is missing.
1285
1286 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
1287
1288         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
1289         random seed.
1290
1291 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
1292
1293         * host.c (address_list_contains): Renamed address_list_find to
1294         address_list_contains because its result is boolean.
1295
1296 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
1297
1298         * connect.c (select_fd): Return 1 if select is not available.
1299
1300 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
1301
1302         * connect.c (connect_to_host): Don't reference address list after
1303         releasing it.
1304
1305 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
1306
1307         * main.c (print_help): Fix alignment of FTP options output.
1308
1309 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
1310
1311         * host.c (lookup_host): Check for the ability to create IPv6
1312         sockets here.
1313
1314         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
1315         systems.
1316
1317 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
1318
1319         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
1320         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
1321         of --convert-links.  Fix docs of SSL options.
1322
1323 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
1324
1325         * ftp-basic.c: Don't include <arpa/inet.h> and others because
1326         they're no longer needed.
1327
1328 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
1329
1330         * main.c (main): Don't allow setting of both opt.ipv4_only and
1331         opt.ipv6_only.
1332
1333         * init.c (defaults): Mark opt.ipv4_only specially when set
1334         automatically.
1335
1336 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
1337
1338         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
1339         unspecified.  This ensures that specifying `--no-inet4' on systems
1340         where IPv6 resolves, but doesn't work behaves the same regardless
1341         of the availability of AI_ADDRCONFIG.
1342
1343 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
1344
1345         * host.c: Don't refer to the now-removed function
1346         forget_host_lookup in the documentation of lookup_host.
1347
1348 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
1349
1350         * http.c (persistent_available_p): Correctly specify the endpoint
1351         argument to socket_ip_address.
1352         (gethttp): When printing the "reusing connection to..." message,
1353         specify the host name of the reused connection, not the current
1354         host name.  That makes more sense because it provides a useful
1355         piece of information -- we know to which host we're supposed to
1356         connect anyway!
1357
1358 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
1359
1360         * init.c: Make sure the options are in alphabetic order!
1361
1362         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
1363         after all -- having both would result in some code duplication.
1364         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
1365         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
1366         AI_ADDRCONFIG where available.
1367         (lookup_host): New flag LH_REFRESH that specifies that a cached
1368         entry for HOST should be refreshed.
1369         (cache_query): New function.
1370         (cache_store): Ditto.
1371         (cache_remove): Ditto.
1372         (forget_host_lookup): No longer necessary, replaced with static
1373         function cache_remove.
1374
1375 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
1376
1377         * main.c: Enable -4 and -6 only if IPv6 is enabled.
1378
1379 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
1380
1381         * connect.c (register_transport): Renamed from register_extended.
1382         Explain the intended usage.
1383
1384 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
1385
1386         * url.c (uri_merge): Merging "foo" and "bar" should result in
1387         "bar", not in "foo/bar".
1388         (path_simplify): Don't remove empty path elements; don't
1389         special-case leading slash.
1390         (path_simplify): Don't swallow ".."'s at the beginning of string.
1391         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
1392         (append_uri_pathel): Defang ".." path element upon encountering
1393         it.
1394
1395 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
1396
1397         * http.c (persistent_available_p): Don't attempt to talk to two
1398         different SSL sites over the same secure connection.
1399
1400 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
1401
1402         * http.c (gethttp): Ditto.
1403
1404         * ftp.c (getftp): Use retryable_socket_connect_error instead of
1405         CONNECT_ERROR.
1406
1407         * wget.h (CONNECT_ERROR): Removed.
1408
1409         * connect.c (retryable_socket_connect_error): New function instead
1410         of unsupported_socket_family_error.
1411
1412 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
1413
1414         * wget.h (CONNECT_ERROR): Use it.
1415
1416         * connect.c (unsupported_socket_family_error): New function.
1417
1418 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
1419
1420         * connect.c (bind_local): Renamed bindport to bind_local; return
1421         the socket directly.  Updated callers.
1422         (accept_connection): Renamed acceptport to accept_connection;
1423         return the created socket directly.  Updated callers.
1424
1425 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
1426
1427         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
1428         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
1429         be created.
1430
1431 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
1432
1433         * host.c (lookup_host): Document the fact that the addresses are
1434         returned in order.
1435
1436 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
1437
1438         * utils.c: Use limits.h only where available.
1439
1440         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
1441
1442 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
1443
1444         * main.c: Added options --inet4-only and --inet6-only.
1445
1446 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
1447
1448         * host.c (host_errstr): Use the more standard message "Unknown
1449         host".
1450
1451 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
1452
1453         * connect.c (connect_to_host): Use that flag to decide whether to
1454         re-resolve the host name.
1455
1456         * host.c (struct address_list): Added a flag that maintains
1457         whether the connection worked at some point.
1458
1459 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
1460
1461         * host.c (lookup_host): Special-case the numeric addresses only in
1462         the non-IPv6 case.
1463
1464 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
1465
1466         * connect.c (resolve_bind_address): Call lookup_host_passive.
1467         Make sure that opt.bind_address is resolved only once.
1468
1469         * host.c (lookup_host_passive): New function, handles "passive"
1470         lookups.
1471         (lookup_host): Remove the passive flags.  Remove the
1472         family-related flags -- use ip_default_family instead.
1473
1474 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
1475
1476         * html-url.c: Get URLs from <object data="...">.
1477
1478 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
1479
1480         * main.c (option_data): Specify the command to use for --mirror.
1481
1482 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1483
1484         * cookies.c (cookie_handle_set_cookie): Specify exact match for
1485         unspecified domains.
1486
1487 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1488
1489         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
1490         `-s'.
1491
1492 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1493
1494         * main.c (main): Add --dont-remove-listing for backward
1495         compatibility with previous versions.
1496         (print_help): Fix typo, spotted by Dennis Smit.
1497
1498 2003-11-08  Gisle Vanem  <giva@bgnett.no>
1499
1500         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
1501         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
1502
1503 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1504
1505         * progress.c (update_speed_ring): Clear the speed ring when the
1506         download stalls.
1507
1508         * retr.c (get_contents): Specify 0.95s read timeout, so that the
1509         progress gauge can be updated even when data arrives very slowly
1510         or stalls.
1511
1512 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1513
1514         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
1515         timer that has merely been allocated because get_contents() does
1516         that.
1517         (wtimer_update): Abort if the timer is not initialized.
1518
1519 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1520
1521         * retr.c (get_contents): Pass the timer to limit_bandwidth().
1522
1523         * utils.c (wtimer_update): New function instead of wget_elapsed;
1524         just update the timer, but don't return anything.
1525         (wtimer_read): Read and return the last known value of the timer.
1526
1527 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1528
1529         * http.c (persistent_available_p): Instead of matching all the
1530         addresses of HOST and last host, determine the peer's IP address
1531         with socket_ip_address and see if that address is one of those
1532         HOST resolves to.
1533
1534         * host.c (address_list_match_all): Removed.
1535         (address_list_find): New function, finds an IP address in the
1536         address list.
1537
1538         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
1539         ftp_epsv so it doesn't need to call getpeername.
1540
1541         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
1542         getpeername.
1543         (ftp_lprt): Ditto.
1544
1545         * connect.c (socket_ip_address): Replaces conaddr, generalized to
1546         either get peer's or local address.
1547         (sockaddr_get_data): Made local to this file.
1548
1549 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1550
1551         * hash.c (HASH_POSITION): Explicitly accept the hash function.
1552         (grow_hash_table): Extract ht->hash_function outside the loop.
1553         (hash_table_remove): Ditto.
1554         (hash_table_clear): Fill entries with 0xff to clear them.
1555         (hash_table_remove): Mark entries as deleted with the correct
1556         marker.
1557
1558 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1559
1560         * http.c (persistent_available_p): No reason for the host lookup
1561         to be silent -- it's a lookup like any other.
1562
1563 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
1564
1565         * connect.c (register_extended): Check that fd >= 0.
1566
1567 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
1568
1569         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
1570
1571 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
1572
1573         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
1574         the field is empty.  This allows NULL pointer and 0 value to be
1575         used as keys, which is necessary for the connect.c code to work
1576         when fd==0.
1577         (hash_table_new): Fill mappings with 0xff.
1578         (grow_hash_table): Ditto.
1579
1580 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
1581
1582         * url.c (url_parse): Allow empty ports.
1583
1584 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
1585
1586         * main.c (print_help): Break the help string into multiple chunks.
1587         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
1588         HANDLE_CMD to generic DATA.
1589         (option_data): Use the new OPT_FUNCALL feature.
1590
1591 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
1592
1593         * log.h: Declare log_init, log_close, and
1594         log_request_redirect_output here.
1595
1596 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
1597
1598         * main.c: (main): added --preserve-permissions option.
1599
1600         * ftp.c (ftp_retrieve_list): added support for
1601         --preserve-permissions option.
1602
1603         * init.c: added support for --preserve-permission option.
1604
1605         * option.h: added support for --preserve-permission option.
1606
1607 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
1608
1609         * main.c (init_switches): New function.  Convert option_data to
1610         long_options and short_options, which can be fed to getopt_long.
1611         (main): Execute command-line options by consulting option_data.
1612
1613 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
1614
1615         * gen_sslfunc.c (ssl_read): Implement a more correct check for
1616         EINTR.
1617         (ssl_write): Ditto.
1618         (init_ssl): Use a global SSL context.
1619
1620 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
1621
1622         * connect.c (xclose): Free INFO even if it doesn't provide a
1623         closer.
1624
1625 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
1626
1627         * connect.c: Updated all callers of
1628         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
1629
1630         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
1631         handled automatically by xread.
1632
1633         * hash.c (ptrhash): Made private.
1634         (ptrcmp): Ditto.
1635         (inthash): Removed.
1636
1637         * connect.c (select_fd): Don't set errno, leave it to the caller.
1638
1639         * gen_sslfunc.c (connect_ssl): Use register_extended to register
1640         SSL callbacks for communication with SSL-enabled endpoints.
1641         (ssl_read): New function.
1642         (ssl_write): Ditto.
1643         (ssl_poll): Ditto.
1644         (ssl_close): Ditto.
1645
1646         * connect.c (register_extended): New function -- register
1647         callbacks for basic socket operations.
1648         (xread): Ditto.
1649         (xwrite): Ditto.
1650         (xclose): Ditto.
1651         (sock_read): New function, default implementation for reading.
1652         (sock_write): Ditto for writing.
1653         (sock_poll): Ditto for polling.
1654         (sock_close): Ditto for closing.
1655
1656 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
1657
1658         * connect.c (bindport): Fix compilation under pre-C99 compilers.
1659
1660 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
1661
1662         * connect.c (connect_to_ip): More compact error checking.
1663         (bindport): Don't treat failed setsockopt as a fatal error.
1664
1665 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
1666
1667         * connect.c (resolve_bind_address): Use a more accurate error
1668         message -- we're not binding to ANY, we're disabling bind
1669         altogether.
1670
1671 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
1672
1673         * cookies.c (save_cookies_mapper): Respect the setting of
1674         keep-session-cookies.
1675         (cookie_jar_load): Import session cookies.
1676         Based on code submitted by Nicolas Schodet.
1677
1678         * utils.c (datetime_str): Use information in TM when it's
1679         non-NULL.
1680
1681         * main.c (main): New option `--keep-session-cookies'.
1682
1683 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
1684
1685         * Makefile.in (realclean): Delete config.h.in.
1686
1687 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
1688
1689         * config-post.h: New file, included from now autogenerated
1690         config.h.in.
1691
1692 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
1693
1694         * progress.c (progress_handle_sigwinch): Don't call
1695         determine_screen_width() from the signal handler.  Instead, just
1696         set a volatile variable.
1697         (bar_create): Check whether SIGWINCH was received.
1698         (bar_update): Ditto.
1699
1700         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
1701
1702 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
1703
1704         * utils.c (xsleep): New function.  Uses nanosleep where available,
1705         resuming sleeps interrupted by signals.  Updated callers of sleep
1706         and usleep to use xsleep.
1707
1708 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
1709
1710         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
1711         declaration of SEED.
1712
1713 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
1714
1715         * log.c (logvprintf): Documented better.  Renamed to
1716         log_vprintf_internal to avoid confusion with the public API
1717         functions logprintf and logputs.
1718
1719 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
1720
1721         * wget.h (N_): Don't parenthesize argument.
1722
1723 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
1724
1725         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
1726         because that doesn't work on machines that define it as bitfield.
1727
1728 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
1729
1730         * connect.c (select_fd): Generalize the third argument into WAIT,
1731         so that the caller can request waiting for both read and write.
1732         Updated callers.
1733
1734 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
1735
1736         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
1737         just call free on them.
1738         (init_interesting): Use hash_table_put instead of string_set_add
1739         because we don't need the strdup that the latter function
1740         performs.
1741
1742         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
1743
1744         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
1745         (xfree_debug): Print at the file and line of the offending call to
1746         free.
1747
1748 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
1749
1750         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
1751         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
1752
1753         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
1754         definition from wget.h to xmalloc.h.
1755
1756 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
1757
1758         * html-parse.c (decode_entity): New function; split the decoding
1759         of entities here.
1760         (convert_and_copy): Use it to decode entities.
1761         (decode_entity): Handle the &apos entity.
1762         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
1763         decode &#0.
1764
1765 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
1766
1767         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
1768         `unsigned long' for the cheksum array.  Document the function.
1769
1770 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
1771
1772         * connect.c (acceptport): Don't call select_fd when timeout is not
1773         requested.
1774
1775 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
1776
1777         * host.c: Removed the ip_default_family global variable.
1778
1779         * host.c (lookup_host): Document the function.  Fixed declaration
1780         of VEC.
1781
1782 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
1783
1784         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
1785         in various places.
1786
1787 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
1788
1789         * wget.h: Move declarations of malloc and logging code to
1790         xmalloc.h and log.h respectively to unclutter this file.
1791         (STRDUP_ALLOCA): Made it side-effect free.
1792
1793         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
1794         and xnew0_array.
1795
1796         * xmalloc.c: New file.  Move the xmalloc routines here.
1797
1798 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
1799
1800         * connect.c (sockaddr_set_data): Remove the broken code that
1801         checked for NULL address.
1802
1803 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
1804
1805         * host.c (address_list_from_single): Removed.
1806         (address_list_from_ipv4_addresses): Renamed from
1807         address_list_from_vector.
1808
1809 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
1810
1811         * sysdep.h (CLOSE): Don't call close on file descriptors less than
1812         0, i.e. on uncreated sockets.
1813
1814         * connect.c (resolve_bind_address): Work on struct sockaddr
1815         directly.
1816         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
1817         and connect to any of its addresses.  If we can't connect and the
1818         host name lookup was cached, try to resolve it again.  This should
1819         fix problems with hosts behind dynamic DNS.  Updated all callers.
1820         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
1821         added the argument PRINT instead.  Updated all callers.
1822         (set_connection_host_name): Removed.
1823
1824         * host.c (address_list_address_at): New function instead of
1825         address_list_copy_one. It returns a pointer to ip_address *, so
1826         it's not necessary to copy the data.
1827         (address_list_cached_p): New function.
1828         (forget_host_lookup): Ditto.
1829
1830         * connect.c: Got rid of the MSOCK global variable.  Made bindport
1831         return the local socket it creates.  Added a new argument to
1832         acceptport, the socket to call accept on.  Updated callers.
1833         (closeport): Removed.
1834
1835         * connect.c: Moved the sockaddr code from host.c to this file,
1836         because most of that stuff is used for connecting, and has nothing
1837         to do with host names anyway.
1838         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
1839         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
1840         and sockaddr_get_port.
1841
1842 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
1843
1844         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
1845         large integers.
1846
1847 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
1848
1849         * url.c (append_uri_pathel): New argument ESCAPED_P that says
1850         whether [B, E) is to be treated as URL-escaped or not.  If
1851         ESCAPED_P is false, don't unescape the region.
1852         (url_file_name): u->file is not URL-escaped.
1853
1854 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
1855
1856         * retr.c (retrieve_from_file): Use retrieve_tree for
1857         page-requisites.
1858
1859         * main.c (main): Don't define opt.recursive when -p is used.
1860         Instead, make sure that recursion is used for HTTP in that case.
1861
1862 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
1863
1864         * host.h: Defined accessors for elements of ip_address.  Updated
1865         all callers.
1866         (address_list_match_all): Use memcmp in the non-IPv6 case.
1867
1868         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
1869         returned EAFNOSUPPORT.
1870
1871 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
1872
1873         * connect.h: changed bindport prototype and added the related
1874         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
1875
1876         * connect.c: changed bindport and resolve_bind_address to allow
1877         protocol-version specific DNS resolution. modified conaddr,
1878         acceptport and connect_to_one to make use of struct
1879         sockaddr_storage and of the new ip_address structure.
1880
1881         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
1882         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
1883
1884         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
1885         handle FTP over IPv6.
1886
1887         * ftp.h: changed prototype of ftp_epsv and added prototypes for
1888         ftp_lpsv, ftp_lprt and ftp_eprt.
1889
1890         * host.c: renamed the
1891         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
1892         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
1893         sockaddr_{g,s}et_port respectively.  changed
1894         address_list_match_all, address_list_from_addrinfo sockaddr_len,
1895         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
1896         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
1897         of the new ip_address structure.  removed map_ipv4_to_ip and
1898         map_ip_to_ipv4.
1899
1900         * host.h: redefined structure ip_address and removed structure
1901         wget_sockaddr.
1902
1903 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
1904
1905         * sysdep.h: Include inttypes.h where available.
1906
1907         * host.c: Switch from u_int32_t to uint32_t.
1908
1909 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
1910
1911         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
1912         quote.
1913
1914 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
1915
1916         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
1917         Use enums for NS_IN* constants.  Use ISXDIGIT.
1918
1919         * convert.c (construct_relative): Document better how the function
1920         works.
1921
1922 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
1923
1924         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
1925         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
1926         Reported by Bernhard Simon.
1927
1928 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
1929
1930         * version.c: Bump version.
1931
1932 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
1933
1934         * url.c: Ditto.
1935
1936         * html-parse.c (advance_declaration): Don't use trailing comma in
1937         enum because older compilers don't support it.
1938
1939         * utils.c: Don't redefine HAVE_SIGSETJMP.
1940
1941 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
1942
1943         * convert.c (construct_relative): Don't handle absolute files
1944         specially -- for example, -P/tmp/foo shouldn't imply that
1945         converted files must refer to "/tmp/foo/..."!
1946
1947 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
1948
1949         * http.c: Consider status 307 a valid redirect.
1950
1951 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
1952
1953         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
1954         elements might have been deleted.
1955
1956 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
1957
1958         * html-url.c (tag_handle_meta): Set the Refresh link to expect
1959         HTML.
1960         (append_one_url): Renamed to append_url.
1961
1962 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
1963
1964         * sysdep.h: Only define u_int32_t.
1965
1966 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
1967
1968         * utils.c (large_int_to_string): Use snprintf() to print the
1969         number.  This will work even on systems where libc doesn't
1970         understand %lld, but the compiler does, because it will use our
1971         snprintf replacement.
1972
1973         * init.c (parse_bytes_helper): New function.
1974         (cmd_bytes): Use it to parse bytes, but cast the result to long.
1975         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
1976         for --quota so that --quota=10G works even on machines without
1977         long long.
1978
1979         * options.h (struct options): Declare quota as LARGE_INT.
1980
1981         * retr.c (downloaded_exceeds_quota): Removed.
1982         (downloaded_increase): Ditto.
1983         (total_downloaded_bytes): New variable, replaces opt.downloaded,
1984         which was the wrong place for it anyway.  Updated callers of
1985         downloaded_exceeds_quota and downloaded_increase to check this
1986         variable directly.
1987
1988         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
1989         purpose, defined as `long', `long long' or `double', depending on
1990         size of long and whether long long is available.
1991
1992 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
1993
1994         * sysdep.h: Also check size of short for int32_t.
1995
1996 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
1997
1998         * host.c (lookup_host): Use u_int32_t to store the result of
1999         inet_addr().  That removes the need for offset fiddling, caring
2000         about endian-ness, etc.
2001
2002         * sysdep.h: Define int32_t and u_int32_t if not available.
2003
2004 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
2005
2006         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
2007         getpeername.
2008
2009         * config.h.in: Define socklen_t stub.
2010
2011         * host.c (sockaddr_len): Return socklen_t.
2012
2013         * connect.c (conaddr): Use socklen_t as the third argument to
2014         accept, getsockname, and connect.
2015
2016 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2017
2018         * recur.c (retrieve_tree): Don't descend into documents that are
2019         not expected to contain HTML, regardless of their content-type.
2020
2021         * html-url.c (tag_url_attributes): Record which attributes are
2022         supposed to yield HTML links that can be followed.
2023         (tag_find_urls): Propagate that information to the caller through
2024         struct urlpos.
2025
2026 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2027
2028         * hash.c (find_mapping): Return the next available mapping when
2029         the key is not found, not NULL.
2030         (hash_table_put): Use find_mapping to find the storage for the new
2031         data.
2032         (hash_table_put): Grow the table before exceeding maximum
2033         fullness, not afterwards.
2034
2035 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
2036
2037         * hash.c (hash_table_new): Slightly change the meaning of the
2038         first parameter.  Instead of being the minimum initial size, it is
2039         now the minimum number of items that the hash table can take
2040         without needing to resize.
2041
2042 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
2043
2044         * html-url.c (init_interesting): Initialize interesting_tags and
2045         interesting_attributes as hash tables.  This simplifies the code
2046         immensely because hash tables handle allocation and remove
2047         duplicates automatically.
2048         (find_tag): Removed.
2049         (collect_tags_mapper): Instead of calling find_tag, simply get the
2050         entry from interesting_tags hash table, which is both simpler and
2051         faster.
2052
2053 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
2054
2055         * hash.c (hash_table_get): Declare hash-table argument as const.
2056         (find_mapping): Ditto.
2057         (hash_table_get_pair): Ditto.
2058         (hash_table_contains): Ditto.
2059         (hash_table_count): Ditto.
2060
2061 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2062
2063         * html-url.c (get_urls_html): Parse the appropriate flags to
2064         html-parse.c.
2065
2066         * html-parse.c (map_html_tags): Accept FLAGS from the caller
2067         instead of examining OPT.
2068
2069 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2070
2071         * html-url.c (find_tag): Switch to binary search.
2072
2073 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2074
2075         * main.c (print_help): Fix typo; stured -> stored.
2076
2077 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2078
2079         * getopt.c: Add definitions of getopt_long and getopt_long_only.
2080
2081 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2082
2083         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
2084         think, a better name, because it implies that debugging output is
2085         merely possible, not "on by default", as might be construed from
2086         just DEBUG.
2087
2088 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2089
2090         * ftp.c (has_insecure_name_p): Define it here.
2091
2092         * utils.c (has_wildcards_p): Define it here.
2093
2094         * sysdep.h: Declare fnmatch-related macros here, if not using
2095         system fnmatch().  Update .c files to not declare fnmatch.h
2096         directly.
2097
2098         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
2099
2100 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
2101
2102         * getopt.c: Newer version, imported from Free libit.
2103
2104 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
2105
2106         * cookies.c (struct cookie): Remove unused backpointer to cookie
2107         jar.
2108
2109 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
2110
2111         * cmpt.c (memmove): Comment out, since it's no longer used.
2112
2113         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
2114         chains in one pass.
2115         (find_chains_of_host): Assume that the caller has allocated DEST
2116         to be sufficiently large to take all the data.
2117         (eliminate_dups): Run through the array and eliminate dups on the
2118         fly instead of using memmove.
2119         (cookie_jar_process_set_cookie): Free cookie->domain before
2120         re-setting it.
2121
2122 2003-10-05  Gisle Vanem  <giva@bgnett.no>
2123
2124         * mswindows.c (set_sleep_mode): Fix type of
2125         _SetThreadExecutionState.
2126
2127 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
2128
2129         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
2130         to this patch, wget --post-file=nosuchfile dumped core.
2131
2132 2003-10-04  Gisle Vanem  <giva@bgnett.no>
2133
2134         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
2135         for thread termination.
2136
2137 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
2138
2139         * log.c: Use `...' in function definitions; ansi2knr will convert
2140         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
2141         VA_START_2 macros.
2142
2143 2003-10-03  Gisle Vanem  <giva@bgnett.no>
2144
2145         * connect.c: And don't include them here.
2146
2147         * mswindows.h: Include winsock headers here.
2148
2149 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
2150
2151         * html-parse.c (convert_and_copy): Move variable declarations
2152         before statements.
2153
2154 2003-10-02  Gisle Vanem  <giva@bgnett.no>
2155         
2156         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
2157         thread via a helper function. Continually query the thread's
2158         exit-code until finished or timed out.
2159
2160 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2161
2162         * wget.h (XMALLOC_ARRAY): Removed.
2163         (ALLOCA_ARRAY): Ditto.
2164
2165         * html-parse.c: Renamed alloca_p to resized.
2166         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
2167         returned it to html-parse.c, since nothing else was using it.
2168
2169 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2170
2171         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
2172         by valgrind.
2173
2174 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2175
2176         * html-parse.c (convert_and_copy): Handle numeric entities in
2177         hexadecimal, &#xHH.
2178         (convert_and_copy): Copy the contents directly to the pool without
2179         a stack-allocated intermediary.
2180
2181 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
2182
2183         * utils.c (alarm_set): New function; use either setitimer or alarm
2184         to set up the alarm.
2185         (alarm_cancel): New function; cancel the alarm set up by
2186         alarm_set.
2187         (run_with_timeout): Use them.
2188
2189 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
2190
2191         * url.c (url_parse): Don't leak memory when a reencoded URL turns
2192         out to be invalid.
2193
2194         * url.c (parse_errors): Mark error messages for translation.
2195         (url_error): Translate error messages returned to the caller.
2196
2197 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
2198
2199         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
2200         the compiler.
2201
2202 2003-09-26  Gisle Vanem  <giva@bgnett.no>
2203
2204         * src/mswindows.c: Added ws_percenttitle() showing progress in the
2205         window titlebar. Called from retr.c. Secured ws_mypath().
2206
2207         * windows/config.h.ms: alloca() prototype not needed.  Removed
2208         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
2209         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
2210         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
2211
2212 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
2213
2214         * ftp.c (getftp): --spider option should now work with FTP
2215         downloads.
2216         (ftp_loop_internal): quiet reports and calculations of downloads
2217         when --spider option set, nor try deleting when --delete-after
2218         also set.
2219         (ftp_loop): --spider will skip HTML-ification of .listing file.
2220
2221 2003-09-26  Gisle Vanem  <giva@bgnett.no>
2222
2223         * mswindows.c (read_registry): Removed.
2224         (set_sleep_mode): New function.
2225         (windows_main_junk): Call it.
2226
2227 2003-09-26  Gisle Vanem  <giva@bgnett.no>
2228
2229         * mswindows.c (read_registry): Fix invocation of registry
2230         functions.
2231
2232         * mswindows.c (read_registry): Condition definitions of sleep and
2233         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
2234         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
2235
2236 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
2237
2238         * url.c (url_escape_1): Revert unintentional change to lowercase
2239         xdigit escapes.
2240         (url_escape_dir): Document that this function depends on the
2241         output of url_escape_1.
2242
2243 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
2244
2245         * progress.c (create_image): Print the current ETA if we're done
2246         with the download.
2247         (create_image): Change '-' display char to '+' in the progress bar.
2248
2249         * Makefile.in (clean): Remove .libs.
2250
2251 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
2252
2253         * cookies.c (struct cookie): New flag domain_exact.
2254         (update_cookie_field): Skip leading dot in domain.
2255         (find_matching_chains): Match numeric addresses exactly; don't
2256         needlessly copy HOST to the stack.
2257         (matching_cookie): Added argument HOST.  If cookie->domain_exact
2258         is set, check that HOST is equal to cookie->domain.
2259         (cookie_jar_load): Only use TAB as delimiter.  Document the
2260         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
2261         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
2262         domain_exact to true if DOMAIN-FLAG is false.
2263         (save_cookies_mapper): If domain_exact is false, prepend the
2264         domain with dot, like Mozilla does.
2265
2266 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2267
2268         * progress.c (create_image): Print the initial part of the
2269         download with '-' characters, analogous to how dot progress prints
2270         the initial part with ','.
2271
2272         * hash.c (ptrhash): New function.
2273         (ptrcmp): Ditto.
2274         (hash_table_new): Default to identity hash table.
2275
2276 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2277
2278         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
2279         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
2280         to unsigned short instead.
2281
2282 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2283
2284         * url.c (path_simplify): Instead of calls to memmove, handle "./"
2285         and "../" by advancing pointers.
2286
2287 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2288
2289         * retr.c (getproxy): Moved from url.c.
2290
2291         * convert.c: Split off link conversion from url.c into separate
2292         file.  Also included the book-keeping stuff from recur.c.
2293
2294 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2295
2296         * init.c: Improved documentation of functions.
2297         (cmd_boolean): Attempt to make code that tries to avoid calling
2298         strcmp for "speed" a bit more readable.
2299
2300         * init.c (simple_atof): Report error on encountering non-digit,
2301         non-"." character.
2302         (simple_atoi): Replacement for myatoi(), calling interface
2303         compatible with simple_atof.  Updated myatoi's callers.
2304
2305 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
2306
2307         * url.c (path_simplify): Would read two bytes past the end of the
2308         string in the "./" case.
2309
2310 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
2311
2312         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
2313         as what Wget considers "text/html".
2314
2315 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2316
2317         * connect.c (connect_with_timeout): Made timeout type double.
2318
2319         * options.h (struct options): New members read_timeout,
2320         dns_timeout, and connect_timeout.
2321         Use them.
2322
2323 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2324
2325         * init.c (simple_atof): New function.
2326         (cmd_time): Use it.
2327         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
2328         to parse decimals.
2329
2330         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
2331         previous one.
2332
2333 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2334
2335         * main.c (main): Use setoptval() for setting the options.  Use
2336         run_command for `-e'.
2337
2338         * init.c (parse_line): Rewritten to return COMIND right away.
2339         Changed linkage to static.
2340         (run_wgetrc): Use the available comind when calling setval, so it
2341         doesn't have to be computed twice.
2342         (setval_internal): New function, runs the command's action without
2343         any error checking.
2344         (setoptval): New function, does what setval used to do, but exits
2345         in case of error.
2346         (run_command): New function.
2347
2348 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
2349
2350         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
2351         its decimal part.
2352
2353         * retr.c (sleep_between_retrievals): In the random-wait case, use
2354         random_float() to wait between 0 and 2*opt.wait seconds.
2355
2356         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
2357         handle timeout values in (0, 1) range.
2358         (random_float): New function.
2359
2360         * options.h (struct options): Change the types of wait, waitretry,
2361         and timeout to double.
2362
2363         * init.c (cmd_time): Accept floating point time.
2364
2365 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
2366
2367         * retr.c (get_contents): Cosmetic fixes.
2368
2369 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
2370
2371         * url.c (uri_merge): Get rid of uri_merge_1.
2372         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
2373         i.e. don't add an extra slash merely because BASE ends with two
2374         slashes.
2375         (parse_credentials): Renamed from parse_uname.  Rewrittern in
2376         standard [beg, end) calling style.
2377         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
2378         (url_skip_credentials): Include # and ; as terminators.  Old code
2379         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
2380         contain a username.
2381         (url_skip_scheme): Removed because it was unused.
2382         (url_has_scheme): Require "scheme" to be at least one char long.
2383
2384 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
2385
2386         * url.c (url_file_name): Expect NULL dir_prefix.
2387
2388         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
2389         WINDOWS.
2390         (defaults): Set dir_prefix to NULL by default.
2391
2392 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
2393
2394         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
2395         gcc does.
2396
2397 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
2398
2399         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
2400         (ARRAY_SIZE): Renamed to countof.  All callers updated.
2401
2402 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
2403
2404         * main.c (main): New option --strict-comments.
2405
2406         * html-parse.c (find_comment_end): New function: simple BM search
2407         for "-->".
2408         (map_html_tags): Use it if looking at a comment and not in strict
2409         comments mode.
2410
2411 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
2412
2413         * ftp.h: Added OS400 system in enum
2414         * ftp-basic.c: recognize OS400 systems
2415         * ftp.c: don't prepend the CWD if talking to OS400, since it
2416         breaks the change in library
2417
2418 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
2419
2420         * retr.c (get_contents): Pass the correct argument to ssl_iread.
2421
2422 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
2423
2424         * safe-ctype.h: Don't #define ctype.h macros to errors because
2425         that loses when someone #include's ctype.h after safe-ctype.h.
2426
2427 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
2428
2429         * url.c: Undef U, W, C after use.
2430
2431 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
2432
2433         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
2434         be augmented by ",nocontrol" which means don't escape the control
2435         characters, but otherwise keep OS settings.
2436
2437         * url.c (file_unsafe_char): Deleted.
2438         (append_uri_pathel): Query filechr_table directly.
2439         (filechr_table): Separated Unix, Windows, and control-unsafe
2440         characters.
2441
2442 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
2443
2444         * url.c (url_escape_1): New function.
2445         (url_escape): Use it.
2446         (sync_path): Handle pathological cases where u->file and u->dir
2447         contain really strange characters.
2448         (ENCODE): Deleted.
2449         (REENCODE): Deleted.
2450
2451 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
2452
2453         * url.c (url_file_name): Don't reallocate FNAME if the file
2454         doesn't exist, as is usually the case.
2455
2456         * utils.c (unique_name): New flag allow_passthrough.
2457
2458 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
2459
2460         * utils.c (wtimer_sys_diff): Convert the time difference to signed
2461         __int64, then to double.  This works around MS VC++ 6 which can't
2462         convert unsigned __int64 to double directly.
2463
2464 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
2465
2466         * Makefile.in (clean): Also remove the core.<number> files
2467         produced by recent Linux systems.
2468
2469 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
2470
2471         * http.c (post_file): Don't pad the file if it's not large
2472         enough.  Bail out instead.
2473
2474 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2475
2476         * retr.c (get_contents): Reduce the buffer size to the amount of
2477         data that may pass through for one second.  This prevents long
2478         sleeps when limiting bandwidth.
2479
2480         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
2481         bandwidth limitation to small values is requested.
2482
2483 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2484
2485         * progress.c (update_speed_ring): Moved the speed ring update to a
2486         separate function and documented it better.
2487
2488         * progress.c: Use `double' for most timers to support granularity
2489         smaller than 1ms.
2490
2491 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2492
2493         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
2494         string.
2495         (XDIGIT_TO_xchar): Ditto.
2496
2497 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2498
2499         * utils.c: Change the type of timer-related functions from long to
2500         double, for better precision.  On machines supporting gettimeofday
2501         the timers now work with granularity of less than one millisecond.
2502
2503 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2504
2505         * cookies.c (parse_set_cookies): Fixed the parser to handle more
2506         edge conditions.
2507         (test_cookies): New function, contains a test suite for
2508         parse_set_cookies.
2509
2510 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2511
2512         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
2513
2514 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
2515
2516         * cookies.c (parse_set_cookies): Allow trailing space in
2517         set-cookies header.  Also, allow any amount of whitespace, not
2518         only one character.  Allow empty set-cookies header without
2519         spewing an error.
2520
2521 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
2522
2523         * url.c (append_uri_pathel): Use opt.restrict_file_names when
2524         calling file_unsafe_char.
2525
2526         * init.c: New command restrict_file_names.
2527
2528         * main.c (main): New option --restrict-file-names[=windows,unix].
2529
2530         * url.c (url_file_name): Renamed from url_filename.
2531         (url_file_name): Add directory and hostdir prefix here, not in
2532         mkstruct.
2533         (append_dir_structure): New function, does part of the work that
2534         used to be in mkstruct.  Iterates over path elements in u->path,
2535         calling append_uri_pathel on each one to append it to the file
2536         name.
2537         (append_uri_pathel): URL-unescape a path element and reencode it
2538         with a different set of rules, more appropriate for handling of
2539         files.
2540         (file_unsafe_char): New function, uses a lookup table to decide
2541         whether a character should be escaped for use in file name.
2542         (append_string): New utility function.
2543         (append_char): Ditto.
2544         (file_unsafe_char): New argument restrict_for_windows, decide
2545         whether Windows file names should be escaped in run-time.
2546
2547         * connect.c: Include <stdlib.h> to get prototype for abort().
2548
2549 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
2550
2551         * utils.c (wtimer_sys_set): Extracted the code that sets the
2552         current time here.
2553         (wtimer_reset): Call it.
2554         (wtimer_sys_diff): Extracted the code that calculates the
2555         difference between two system times here.
2556         (wtimer_elapsed): Call it.
2557         (wtimer_elapsed): Don't return a value smaller than the previous
2558         one, which could previously happen when system time is set back.
2559         Instead, reset start time to current time and note the elapsed
2560         offset for future calculations.  The returned times are now
2561         guaranteed to be monotonically nondecreasing.
2562
2563 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
2564
2565         * host.c (lookup_host): Print the result of the DNS lookup.
2566
2567 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
2568
2569         * init.c (cmd_boolean): Accept yes/no along with on/off.
2570         (cmd_lockable_boolean): Ditto.
2571
2572 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
2573
2574         * init.c: New command dns_cache.
2575
2576         * main.c (main): New option --dns-cache[=off].
2577
2578 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
2579
2580         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
2581
2582         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
2583         HAVE_GETADDRINFO for getaddrinfo-related stuff.
2584
2585 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
2586
2587         * url.c (url_parse): Return an error if the URL contains a [...]
2588         IPv6 numeric address and we don't support IPv6.
2589
2590 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
2591
2592         * url.c (is_valid_ipv6_address): Modified to not require
2593         zero-terminated strings.
2594         (is_valid_ipv4_address): Ditto.
2595
2596 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
2597
2598         src/url.c: added RFC 2732 compliance for URL parsing. The
2599         functions is_*_address valid are a modified version of
2600         glibc 2.3.2 inet_pton's code.
2601
2602 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
2603
2604         * main.c init.c options.h: Added --retry-connrefused option so
2605         that Connection Refused failures are treated as non-fatal (when
2606         trying to retrieve from busy servers).
2607
2608         * wget.h: New CONNECT_ERROR macro for encapsulating this
2609         modification.
2610
2611         * ftp.c http.c : Use CONNECT_ERROR macro in places where
2612         ECONNREFUSED was checked.
2613
2614 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
2615
2616         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
2617         by calling new function has_insecure_name_p.  This is based on a
2618         patch by Red Hat.
2619
2620         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
2621         if filename starts with `/' or contains `../' and is therefore
2622         considered insecure.
2623
2624         * fnmatch.h: Declare has_insecure_name_p().
2625
2626 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
2627
2628         * init.c (cmd_file): Allocate RESULT correctly.
2629
2630 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
2631
2632         * recur.c (retrieve_tree): Check whether downloaded_html_set is
2633         non-NULL before using it.
2634
2635 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2636
2637         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
2638
2639 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2640
2641         * progress.c (bar_set_params): Fall back to dot progress if the
2642         terminal type is "emacs".
2643
2644 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2645
2646         * log.c: Don't #undef WGET_USE_STDARG.
2647
2648 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2649
2650         * hash.c (prime_size): Store the offset of the prime number in the
2651         prime table.  When searching, start with the given offset.
2652         (hash_table_new): Pass the pointer to ht->prime_offset to
2653         prime_size.
2654         (grow_hash_table): Ditto.
2655         (prime_size): Make 13 the first prime to make empty hash tables
2656         slightly smaller.
2657
2658 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
2659
2660         * recur.c (download_child_p): Minor optimization to avoid an
2661         unnecessary additional call to schemes_are_similar_p function.
2662
2663 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
2664
2665         * url.c (schemes_are_similar_p): New function to test enumerated
2666         scheme codes for similarity.
2667
2668         * url.h: Declare it.
2669
2670         * recur.c (download_child_p): Use it to compare schemes.  This
2671         also fixes a bug that allows hosts to be spanned (without the
2672         -H option) when the parent scheme is https and the child's is
2673         http or vice versa.
2674
2675 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
2676
2677         * ftp.c (getftp): Don't ftruncate stdout.
2678
2679         * http.c (gethttp): Don't ftruncate stdout.
2680
2681 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
2682
2683         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
2684         (get_number): Ditto.
2685         (get_alt_number): Ditto.
2686         (__isleap): New function-like macro used by strptime.
2687         (day_of_the_week): New function used by strptime.
2688         (day_of_the_year): Ditto.
2689         (__mon_yday): Now shared by mktime and strptime implementations.
2690
2691 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2692
2693         * cookies.c (check_domain_match): Use match_tail in case
2694         insensitive mode.
2695
2696         * utils.c (match_tail): Allow the caller to specify case
2697         insensitive mode.
2698
2699         * cookies.c (store_cookie): When expiry_time is 0, print it as
2700         undefined, not indefinite.
2701
2702 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
2703
2704         * cookies.c (cookie_jar_process_set_cookie): Do not store
2705         discarded cookie.
2706
2707 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2708
2709         * cookies.c (check_domain_match): Allow cookies to be set for
2710         subdomains of unknown top-level domains under some circumstances.
2711
2712 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
2713
2714         * gen_ssl.c:
2715         - allow checking of server cert
2716         - allow defining client cert type
2717         - allow limit of ssl protocol
2718         - check more return values
2719         - added debug message on break
2720
2721 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2722
2723         * recur.c (download_child_p): Revert order of items in check
2724         number 6 for clarity.
2725
2726 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2727
2728         * init.c: Ditto.
2729
2730         * main.c: Ditto.
2731
2732         * http.c: Use the new interface.
2733
2734         * cookies.c: Provide an OO-style "cookie jar" interface to enable
2735         separate cookie jars.
2736
2737         * http.c (http_atotm): Declare argument as const.
2738
2739 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2740
2741         * cookies.c (cookie_new): Default to PORT_ANY.
2742         (find_cookie_chain_exact): Only search by DOMAIN.
2743         (find_matching_cookie): Also check that PORT matches.
2744         (store_cookie): Only match the domain.
2745         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
2746         is valid for that host rather than discarding it completely.
2747         (find_matching_chains): Don't search by PORT.
2748         (matching_cookie): Also match PORT.
2749         (load_cookies): Set the port if specified, otherwise leave it as
2750         ANY.
2751         (save_cookies_mapper): Save the port if specified, otherwise leave
2752         it empty.
2753
2754 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
2755
2756         * init.c: The option `egdfile' was not in sort order.
2757
2758 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2759
2760         * ftp.c (getftp): Treat directories that begin with <letter>: as
2761         absolute.
2762         (getftp): Strip trailing slashes from con->id before merging it
2763         with TARGET.
2764
2765 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2766
2767         * http.c (gethttp): If Content-Type is not given, assume
2768         text/html.
2769
2770 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2771
2772         * recur.c (download_child_p): Don't ignore rejection of HTML
2773         documents that are themselves leaves of recursion.
2774
2775 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
2776
2777         Makefile.in: Updated several dependencies for object files to take
2778         account of nested include files.
2779
2780 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
2781
2782         Makefile.in: The target `connect$o' (connect.o) now depends on
2783         `utils.h'
2784
2785 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
2786
2787         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
2788         (gethostbyname_with_timeout): Use it.
2789
2790         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
2791         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
2792
2793 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2794
2795         * host.c (getaddrinfo_with_timeout): New function.
2796         (gethostbyname_with_timeout): Ditto.
2797         (lookup_host): Use them.
2798
2799 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2800
2801         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
2802
2803 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2804
2805         * init.c (comind): Use a marginally faster implementation of
2806         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
2807         nanosecond earned."
2808
2809 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2810
2811         * main.c (print_help): Document `--post-data' and `--post-file'.
2812
2813 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2814
2815         * http.c (gethttp): Ditto.
2816
2817         * retr.c (retrieve_url): Initialize variables to appease the
2818         compiler.
2819
2820         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
2821         select_fd.
2822         (ssl_iwrite): Ditto.
2823
2824         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
2825         ETIMEDOUT in case of timeout.
2826         (iread): No need to handle EINTR when calling select_fd.
2827         (iwrite): Ditto.
2828
2829 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2830
2831         * retr.c (retrieve_url): Make sure that POST is not honored for
2832         redirections.
2833
2834         * http.c (gethttp): Send the POST data when requested.
2835         (post_file): New function.
2836         (gethttp): Use it.
2837
2838         * main.c (main): Ditto.
2839
2840         * init.c: Add new options.
2841
2842         * options.h (struct options): New options post_data and
2843         post_file_name.
2844
2845 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2846
2847         * connect.c (connect_with_timeout): Firing SIGALRM can result in
2848         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
2849
2850 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2851
2852         * connect.c (connect_with_timeout): Use it.
2853
2854         * utils.c (run_with_timeout): New function.
2855
2856 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2857
2858         * url.c (getproxy): Accept a struct url argument.  This obviates
2859         the need for USE_PROXY_P.
2860
2861         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
2862
2863         * ftp.c (getftp): Recognize FWTK-style proxy.
2864
2865 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2866
2867         * config.h.in: Only define _VA_LIST when compiled with gcc.
2868
2869 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
2870
2871         * http.c (http_loop): Compensate for MS Windows two-second
2872         granularity of file modification time when comparing timestamps.
2873
2874         * ftp.c (ftp_retrieve_list): Ditto.
2875
2876 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
2877
2878         * utils.c (has_html_suffix_p): New function to test filename for
2879         common html extensions.
2880
2881         * utils.h: Declare it.
2882
2883         * http.c (http_loop): Use it instead of previous test.
2884
2885         * retr.c (retrieve_url): Ditto.
2886
2887         * recur.c (download_child_p): Ditto.
2888
2889 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2890
2891         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
2892         declaring va_list.
2893         From Kevin Rodgers <kevinr@ihs.com>.
2894
2895 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
2896
2897         * Makefile.in: Specify libtool mode explicitly when linking.
2898
2899 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2900
2901         * connect.c (connect_with_timeout): New function.
2902         (connect_to_one): Use it.
2903
2904         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
2905         HAVE_SETJMP_H.
2906
2907 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2908
2909         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
2910         is present.
2911
2912 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2913
2914         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
2915         TOTAL.
2916         (bar_finish): Likewise.
2917
2918 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2919
2920         * html-url.c (tag_handle_form): New function.  Pick up form
2921         actions and mark them for conversion only.
2922
2923 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2924
2925         * progress.c (struct progress_implementation): Use PARAMS when
2926         declaring the parameters of *create, *update, *finish, and
2927         *set_params.
2928
2929         * netrc.c: Ditto.
2930
2931         * http.c: Reformat some function definitions so that ansi2knr can
2932         read them.
2933
2934         * hash.c (struct hash_table): Use the PARAMS macro around
2935         parameters in the declaration of hash_function and test_function.
2936         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
2937         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
2938         that pre-ANSI compilers can read them.
2939         (find_mapping): Use PARAMS when declaring EQUALS.
2940         (hash_table_put): Ditto.
2941
2942         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
2943
2944         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
2945         which was unsupported by pre-ANSI compilers.
2946
2947         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
2948
2949 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2950
2951         * url.c (url_filename): Use compose_file_name regardless of
2952         whether opt.dirstruct is set.
2953         (mkstruct): Don't handle the query and the reencoding of DIR; that
2954         is done in compose_file_name.
2955
2956 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2957
2958         * wget.h: Ditto for extern char *exec_name.
2959
2960         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
2961         perfectly legal to follow an `extern' with a non-`extern' ones,
2962         provided the types match.
2963
2964         * main.c: Don't define OPTIONS_DEFINED_HERE.
2965
2966 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2967
2968         * progress.c (create_image): Revert to calculating ETA based on
2969         average download speed.
2970         (create_image): Don't print ETA until the download has been active
2971         for at least 3 seconds.
2972         (create_image): When ETA is not available, don't print anything.
2973         The previous version would print --:--.
2974
2975 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2976
2977         * progress.c (bar_update): Keep updating a subinterval until it
2978         reaches or exceeds a watermark.  That way the measurement will be
2979         guaranteed to span a configurable minimum of time.  The current
2980         default is 3s in 30 100ms intervals.
2981
2982 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2983
2984         * progress.c (bar_update): Maintain an array of the time it took
2985         to perform previous 30 network reads.
2986         (create_image): Calculate the download speed and ETA based on the
2987         last 30 reads, not the entire download.
2988         (create_image): Make sure that the ETA is not changed more than
2989         once per second.
2990
2991 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
2992
2993         * mswindows.c (borland_utime): New function conditionally defined
2994         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
2995         `utime()' as Borland's `utime()' function is broken on Windows 9x
2996         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
2997
2998 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2999
3000         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
3001
3002 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
3003
3004         * Makefile.in: Updated several dependencies for object files.
3005
3006 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
3007
3008         * mswindows.c: Include "utils.h".
3009
3010 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
3011
3012         * host.h: Don't include netdb.h on windows.
3013
3014 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3015
3016         * recur.c (retrieve_tree): Handle the case when start_url doesn't
3017         parse.
3018
3019 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
3020
3021         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
3022         calling xmalloc and memcpy.
3023
3024 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3025
3026         * host.h: Include Unix-specific includes #ifndef WINDOWS.
3027         Patch originally provided by Christian Lackas.
3028
3029 2002-02-11  Christian Lackas  <delta@lackas.net>
3030
3031         * recur.c: recurive downloading for https fixed.
3032
3033 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
3034
3035         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
3036
3037         * ftp-basic.c: Also include <netinet/in.h>.
3038
3039 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
3040
3041         * http.c (gethttp): when -c used, mark already fully retrieved
3042         file as successfully retrieved.
3043
3044 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3045
3046         * url.c (url_parse): Don't treat '?' as query string separator
3047         when parsing FTP URLs.
3048
3049 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3050
3051         * html-url.c (tag_handle_meta): Don't crash on <meta
3052         http-equiv=refresh> where content is missing.
3053
3054 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
3055
3056         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
3057         netdb.h on windows.
3058
3059 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3060
3061         * retr.c (retrieve_url): Remove redirection cycle detection.  This
3062         is because some sites legitimately redirect the user back to the
3063         same location, e.g. after an authorization check performed by
3064         another page.  MAX_REDIRECTIONS is still used to prevent infinite
3065         redirection loops.
3066
3067 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3068
3069         * http.c (gethttp): Wrap host name in square brackets if it
3070         contains a colon.
3071
3072 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3073
3074         * url.c (url_parse): Allow all hex digits, not only decimal ones,
3075         to form an IP address.
3076
3077 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3078
3079         * url.c (urlchr_table): Make square braces reserved, so we can
3080         parse http://[::1]/.
3081         (url_parse): Handle host in braces.
3082         (url_string): If url->host contains colons, wrap it in braces.
3083
3084 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3085
3086         * connect.c (resolve_bind_address): New function.
3087         (connect_to_one): Use it.
3088         (bindport): Ditto.
3089
3090         * init.c: Don't resolve bind-address here.
3091
3092         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
3093
3094 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3095
3096         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
3097         offset.
3098         (address_list_new): Use map_ipv4_to_ip.
3099         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
3100         in IPv4 context.
3101
3102 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3103
3104         * source: Integrated IPv6 support.
3105         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
3106
3107 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
3108
3109         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
3110         (cmd_directory): New function. Like cmd_file(), but strips
3111         trailing directory separators.
3112         (commands): Change action for "dirprefix" from `cmd_file' to
3113         `cmd_directory'.
3114
3115         * utils.c (make_directory): Allow intermediate `mkdir' calls to
3116         fail, as not all path components that do not exist should be
3117         directory components, especially under Windows.
3118
3119 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3120
3121         * netrc.c (parse_netrc): Skip leading whitespace before testing
3122         whether the line is empty.  Empty lines still contain the line
3123         terminator.
3124
3125 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3126
3127         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
3128         only if no data is pending in SSL buffers.
3129         From tony@bluetail.com.
3130
3131 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3132
3133         * headers.c (header_get): Strip trailing whitespace from the
3134         header.
3135
3136 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3137
3138         * url.c (parse_uname): URL-decode *USER and *PASSWD.
3139
3140 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
3141
3142         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
3143         starts with "//").
3144
3145 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3146
3147         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
3148         error.
3149
3150 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3151
3152         * version.c: Wget 1.8.1 is released.
3153
3154 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3155
3156         * version.c: Wget 1.8.1-pre3 is released.
3157
3158 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3159
3160         * recur.c (retrieve_tree): Enqueue the canonical representation of
3161         start_url, so that the test against dl_url_file_map works.
3162
3163 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3164
3165         * log.c (logputs): Check for requested verbosity before printing
3166         anything.
3167
3168 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3169
3170         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
3171         inline.
3172
3173 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3174
3175         * recur.c (retrieve_tree): Make a copy of file obtained from
3176         dl_url_file_map because the code calls xfree(file) later.
3177
3178 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3179
3180         * recur.c (register_html): Maintain a hash table of HTML files
3181         along with the list.  Disallow duplicates.
3182         (retrieve_tree): Use downloaded_html_set to check whether the file
3183         found in dl_url_file_map is an HTML file, and descend into it if
3184         so.
3185         (convert_all_links): Don't guard against duplicates in
3186         downloaded_html_list, since they are no longer possible.
3187
3188 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
3189
3190         * recur.c (retrieve_tree): Pass on referring URL when retrieving
3191         recursed URL.
3192
3193 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3194
3195         * version.c: Wget 1.8.1-pre2 is released.
3196
3197 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3198
3199         * retr.c (sleep_between_retrievals): Simplify indentation.
3200
3201 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3202
3203         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
3204         of "randomness" at a time.
3205         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
3206
3207         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
3208         random amount averages in opt.wait.
3209         (sleep_between_retrievals): Don't seed the PRNG; random_number
3210         will do that.
3211
3212         * utils.c (random_number): New function.
3213
3214 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3215
3216         * url.c (path_simplify): Move here from utils.c, and make static.
3217
3218 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3219
3220         * init.c (wgetrc_file_name): Print correct message when loading
3221         getenv("WGETRC") fails.
3222
3223 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3224
3225         * recur.c (register_download): Don't abort when one URL references
3226         two different files.
3227
3228 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3229
3230         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
3231         calling ssl_iwrite.
3232
3233 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3234
3235         * version.c: Wget 1.8.1-pre1 is released.
3236
3237 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3238
3239         * res.c (matches): Fix broken URL in the docstring.
3240
3241 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3242
3243         * html-url.c (tag_url_attributes): Mark <embed href=...> as
3244         external.
3245
3246 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3247
3248         * url.c (get_urls_file): Cosmetic changes.
3249
3250 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3251
3252         * html-url.c (append_one_url): Resurrect warning when unable to
3253         resolve a relative link.
3254
3255 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3256
3257         * html-url.c (collect_tags_mapper): Break into several functions.
3258         (tag_url_attributes): Collect <embed href=...>.
3259
3260 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3261
3262         * host.c: New type ipv4_address.  Use it consistently instead of
3263         `unsigned char[4]' and `unsigned char *'.
3264         (pretty_print_address): Accept a `const void *', to require even
3265         less casting.
3266
3267 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3268
3269         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
3270
3271 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3272
3273         * main.c (main): Initialize progress after fork_to_background, so
3274         that it knows when to use dots.
3275
3276         * mswindows.c (ws_hangup): Call log_request_redirect_output.
3277
3278         * utils.c (fork_to_background): Print the PID of the child
3279         process.
3280
3281         * log.c (log_request_redirect_output): Set a flag that output
3282         redirection has been requested.  Doing anything else in a signal
3283         handler is unsafe.
3284         (check_redirect_output): New function: check whether redirection
3285         has been requested and, if so, call redirect_output().
3286         (logputs): Call check_redirect_output.
3287         (logprintf): Ditto.
3288         (debug_logprintf): Ditto.
3289         (redirect_output): Print clearer messages.
3290
3291         * main.c (redirect_output_signal): Don't call
3292         redirect_output_signal directly.  Instead, call
3293         log_request_redirect_output.
3294
3295         * utils.c (memfatal): Ditto.
3296
3297         * progress.c (display_image): Use it.
3298
3299         * log.c (log_set_save_context): New function: allow the caller to
3300         turn off saving log context lines.
3301
3302 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3303
3304         * host.c (address_list_set_faulty): Uncomment a sanity check.
3305
3306 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3307
3308         * utils.c (long_to_string): Return a pointer after where the
3309         number ends.
3310         (long_to_string): Rename to number_to_string.
3311
3312 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3313
3314         * utils.c (path_simplify): Correctly handle the unlikely case that
3315         b starts out as path + 1.
3316
3317 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3318
3319         * utils.c (path_simplify): Rewrite, with better comments, and
3320         without the use of strcpy to move overlapping blocks.
3321
3322 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3323
3324         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
3325         valid progress type before setting it.
3326
3327 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3328
3329         * main.c (main): Remove stray debugging message.
3330
3331 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3332
3333         * progress.c (create_image): Fix ETA padding when hours are prined.
3334
3335 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3336
3337         * version.c: Wget 1.8 is released.
3338
3339 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3340
3341         * url.c (reencode_string): Declare static.
3342
3343         * res.c (registered_specs): Declare static.
3344
3345         * progress.c (current_impl_locked): Declare static.
3346
3347         * log.c (flush_log_p): Declare static.
3348         (needs_flushing): Ditto.
3349
3350         * http.c (digest_authentication_encode): Declare static.
3351
3352         * html-url.c (init_interesting): Declare static.
3353
3354         * host.c (host_name_addresses_map): Declare static.
3355
3356         * cookies.c (find_matching_chains): Declare static.
3357
3358         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
3359         indicated by lint.
3360
3361         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
3362
3363         * host.c (address_list_set_faulty): Document that INDEX is
3364         currently unused.
3365
3366         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
3367
3368 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3369
3370         * version.c: Wget 1.8-pre2 is released.
3371
3372 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3373
3374         * progress.c (progress_handle_sigwinch): Set up the signal again.
3375
3376         * utils.c: Include <sys/termios.h>, where Solaris defines
3377         TIOCGWINSZ.
3378
3379         * progress.c (bar_create): Don't use the last column on the screen.
3380         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
3381         only until it exceeded them.
3382
3383 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3384
3385         * version.c: Wget 1.8-pre1 is released.
3386
3387 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3388
3389         * progress.c (progress_create): Make sure that, when the output is
3390         redirected, the progress implementation gets changed to the
3391         fallback one.
3392         (bar_set_params): Set current_impl_locked to 1 when "force" is
3393         specified.
3394         (progress_create): Don't change the progress implementation if
3395         current_impl_locked is non-zero.
3396
3397         * main.c (redirect_output_signal): Call
3398         progress_schedule_redirect.
3399
3400         * progress.c (progress_schedule_redirect): New function.
3401
3402 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3403
3404         * log.c (logvprintf): Restructure to allow being called multiple
3405         times.
3406         (logprintf): Call logvprintf in a loop.
3407         (debug_logprintf): Ditto.
3408
3409 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3410
3411         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
3412         setting egd_file it to empty string.
3413
3414         * main.c (main): Change the option name from --sslegdsock to
3415         --egd-file.
3416
3417 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3418
3419         * gen_sslfunc.c (ssl_init_prng): Make the printed message
3420         translatable.
3421
3422 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3423
3424         * url.c (scheme_disable): New function.
3425
3426         * main.c (main): Call ssl_init_prng from here rather than from
3427         init_ssl, so that it has a chance to disable support for https
3428         before a URL has been resolved.
3429
3430         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
3431         failed.
3432         (ssl_init_prng): Disable support for https if seeding the PRNG
3433         fails.
3434
3435 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3436
3437         * utils.c (read_whole_line): Handle lines beginning with \0.
3438
3439 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3440
3441         * recur.c (convert_all_links): Guard against duplicates in
3442         downloaded_html_files.
3443         (register_download): Don't invalidate similar-looking URLs.
3444         (match_except_index): New function.
3445
3446 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3447
3448         * utils.c (path_simplify): Document with test cases.
3449
3450 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3451
3452         * gen_sslfunc.c: Ditto.
3453
3454         * rbuf.c: Include <string.h>.
3455
3456 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3457
3458         * recur.c (retrieve_tree): Check whether the URL was already
3459         downloaded before downloading it again.
3460         (descend_child_p): Renamed to download_child_p.
3461         (register_download): When one URL is downloaded to a file already
3462         "owned" by another URL, delete all references that map any URL to
3463         that file.
3464         (register_delete_file): New function.
3465         (retrieve_tree): Use it after deleting a file.
3466
3467         * url.c (url_parse): Re-canonicalize the URL also if the path is
3468         empty, so that e.g. "http://www.server.com" ->
3469         "http://www.server.com/".
3470         (lowercase_str): Use ISUPPER instead of !ISLOWER.
3471
3472         * retr.c (retrieve_url): Use the canonical URL form when calling
3473         register_download().
3474
3475 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
3476
3477         * snprintf.c (dopr): Use `unsigned int' as the second argument to
3478         va_arg when casting to `unsigned short' is intended.
3479
3480 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
3481
3482         * gen_sslfunc.c: on windows provide ssl crypto random 
3483           initialization through RAND_screen(); could possibly
3484           be not enough for strong ssl communication (see the 
3485           relevant manual page from the openssl package).
3486
3487 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3488
3489         * url.c (local_quote_string): Reenable quoting of question marks,
3490         but only when `--html-extension' is used.
3491
3492 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3493
3494         * version.c: Wget 1.8-beta3 is released.
3495
3496 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3497
3498         * snprintf.c (dopr): Cast the result of va_arg to short int and
3499         short unsigned int where these types are expected to be used.
3500
3501 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3502
3503         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
3504         with `int' when using it as the second argument to `va_arg'.
3505
3506 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3507
3508         * host.c (address_list_new_one): New function.
3509         (lookup_host): Use it.
3510
3511 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
3512
3513         * host.c (lookup_host): Don't initialize TMPSTORE directly because
3514         it's not legal C.
3515
3516 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3517
3518         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
3519         the socket data.
3520
3521         * ftp.c: Ditto.
3522
3523         * http.c: No need to declare h_errno.
3524
3525         * host.c: Declare h_errno.
3526
3527 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3528
3529         * utils.c (file_merge): If BASE doesn't contain a slash, just
3530         return a copy of FILE.
3531
3532 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3533
3534         * version.c: Wget 1.8-beta2 is released.
3535
3536 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3537
3538         * ftp.c (getftp): When PWD fails, assume "/".
3539
3540         * ftp-basic.c (ftp_syst): Fix indentation.
3541
3542 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3543
3544         * url.c (get_urls_file): If opt.base_href is specified, merge each
3545         URL with the base.
3546
3547 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3548
3549         * main.c (print_help): Don't document the removed `-nh'.
3550
3551 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3552
3553         * url.c (url_full_path): Document better.
3554
3555         * http.c (gethttp): Use the full path when creating digest
3556         authorization.
3557
3558 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3559
3560         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
3561         '/'.
3562
3563 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3564
3565         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
3566         PREFIX does.
3567
3568 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3569
3570         * cookies.c (check_domain_match): Reimplement to match Netscape's
3571         "preliminary specification" for cookies.
3572
3573 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3574
3575         * url.c (replace_attr_refresh_hack): New function.
3576         (convert_links): Call replace_attr_refresh_hack for Refresh
3577         links.  It will add the "TMOUT; URL=" junk before the link.
3578
3579         * html-url.c (collect_tags_mapper): Set ID to the ID of the
3580         "content" attribute, not "http-equiv".
3581         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
3582         instead, store the information that this entry belongs to a
3583         "refresh" link.
3584
3585 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3586
3587         * version.c: Wget 1.8-beta1 is released.
3588
3589 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3590
3591         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
3592         depth by more than one.
3593
3594 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3595
3596         * retr.c (retrieve_url): Don't allow more than 20 redirections.
3597
3598 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3599
3600         * recur.c (retrieve_tree): Skip the non-inline entries when
3601         enqueuing the children of a leaf HTML node in -p mode.
3602         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
3603         "inline".
3604
3605         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
3606         (collect_tags_mapper): When an entry is "inline", mark it as such.
3607
3608         * recur.c (descend_url_p): Fix test when checking for
3609         acceptance/rejection rules.
3610
3611 2001-10-31 Daniel BODEA <dali@dali-designs.com>
3612
3613         * netrc.c (search_netrc): When slack_default is 0, still look for
3614         an account with matching password, just not the "default account".
3615         HTTP Authorization using .netrc should now work as expected.
3616
3617 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
3618
3619         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
3620         test_socket_open fails.
3621
3622 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3623
3624         * progress.c (display_image): Just print one CR to reset the
3625         cursor position.
3626
3627 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
3628
3629         * init.c: New command `ssl_egd_sock'.
3630
3631         * main.c (main): New option `--sslegdsock'.
3632
3633         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
3634
3635 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3636
3637         * cmpt.c (memmove): Include a simple memmove implementation.
3638
3639 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3640
3641         * headers: Guard against header files being included twice.
3642
3643 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3644
3645         * gen-md5.c: Use unsigned char * as the buffer argument to
3646         gen_md5_update.
3647
3648 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3649
3650         * connect.h: Declare select_fd.
3651
3652 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3653
3654         * recur.c (descend_url_p): When resolving no_parent, compare with
3655         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
3656         wouldn't be followed, although the download started from /a/.
3657
3658 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
3659
3660         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
3661         MS VC; somebody with Borland compiler please check and provide
3662         patch if possible;
3663
3664         * cmpt.c: provided a usleep emulation.
3665
3666 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3667
3668         * host.c (address_list_new): Initialize al->faulty.
3669
3670 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3671
3672         * http.c (http_process_range): Accept the broken output of
3673         "JavaWebServer/1.1.1".
3674
3675 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3676
3677         * progress.c (dot_set_params): If PARAMS is unspecified, use
3678         dot_style, if available.
3679
3680         * init.c: Ditto.
3681
3682         * main.c (main): Resurect --dot-style.
3683
3684         * progress.c (dot_finish): Print the quantity if we're left at the
3685         beginning of a row.
3686
3687 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3688
3689         * cmpt.c (random): Removed.
3690
3691         * retr.c (sleep_between_retrievals): Use the more portable rand()
3692         instead of random().
3693
3694 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
3695
3696         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
3697         prevent seg fault.
3698
3699 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3700
3701         * connect.c (connect_to_many): Use address_list_set_faulty to
3702         prevent the faulty address from being reused.
3703
3704         * host.c (address_list_set_faulty): New function.
3705         (address_list_get_bounds): New function, instead of
3706         address_list_count.
3707
3708 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3709
3710         * url.c (convert_links): Don't translate %d-%d.
3711
3712         * main.c (print_help): Remove stray HAVE_RANDOM code.
3713
3714 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3715
3716         * ftp.c (getftp): Improve output after sending PASV.  Don't
3717         attempt to "look up" the IP address we already know; call
3718         connect_to_one directly.
3719
3720 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3721
3722         * progress.c: Change the default progress implementation to "bar".
3723
3724 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3725
3726         * progress.c (bar_create): Print two newlines.
3727
3728 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3729
3730         * cmpt.c (random): New function, a simple-minded replacement for
3731         random() on systems that don't have it.
3732
3733 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3734
3735         * config.h.in: Put a HAVE_USLEEP stub.
3736
3737         * cmpt.c (usleep): Replacement implementation of usleep using
3738         select.
3739
3740         * init.c: New option init_rate.
3741
3742         * main.c (main): New option --limit-rate.
3743
3744         * retr.c (limit_bandwidth): New function.
3745         (get_contents): Call it to limit the bandwidth used when
3746         downloading.
3747
3748         * progress.c (dot_update): Would print the wrong download speed on
3749         rows other than the first one when the download was continued.
3750         (dot_finish): Ditto.
3751
3752 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
3753
3754         * http.c (gethttp): fix undeclared variable 'err' when compiled
3755         with HAVE_SSL.
3756
3757 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3758
3759         * progress.c: Don't allocate new timers; use the timing data
3760         propagated from the caller.
3761
3762         * retr.c (get_contents): Allocate and use a timer.
3763
3764 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3765
3766         * http.c (last_host_ip): Made into an address_list.
3767         (invalidate_persistent): Release pc_last_host_ip.
3768         (register_persistent): Use lookup_host.
3769         (persistent_available_p): Check for equality of hosts using
3770         address_list_match_all.  Call address_list_release.
3771         (http_cleanup): New function.
3772
3773         * ftp.c (getftp): Use lookup_host and connect_to_many.
3774
3775         * http.c (gethttp): Use lookup_host and connect_to_many.
3776
3777         * connect.c (make_connection): Removed.
3778         (connect_to_one): New function.
3779         (connect_to_many): Ditto.
3780         (set_connection_host_name): Ditto.
3781
3782         * host.c (lookup_host): New function; new return type.
3783         (address_list_new): New function.
3784         (address_list_count): Ditto.
3785         (address_list_copy_one): Ditto.
3786         (address_list_delete): Ditto.
3787         (address_list_release): Ditto.
3788         (pretty_print_address): Ditto.
3789
3790 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3791
3792         * recur.c (retrieve_tree): In case of followed redirection,
3793         blacklist the pre-redirection URL.
3794
3795 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3796
3797         * recur.c (descend_redirect_p): New function.
3798         (retrieve_tree): Make sure redirections are not blindly followed.
3799
3800 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
3801
3802         * config.h.in: added HAVE_RANDOM.
3803
3804         * options.h: added random_wait to struct options.
3805
3806         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
3807         for --random-wait.
3808
3809         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
3810         implementation of random wait times.
3811
3812         * init.c (commands): added "randomwait" keyword.
3813
3814 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3815
3816         * recur.c (descend_url_p): Be more conservative with blacklisting
3817         URLs.
3818         (convert_all_links): Print how many files have been converted, and
3819         how long it took.
3820
3821         * progress.c (create_image): Place the number of downloaded bytes
3822         right after the progress bar.
3823
3824         * utils.c (suffix): Return a pointer into the string.
3825
3826 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3827
3828         * url.c (convert_links): Handle CO_NULLIFY_BASE.
3829
3830         * recur.c (retrieve_tree): Ignore download-ignorable children.
3831         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
3832
3833         * html-url.c (handle_link): Return the newly created urlpos.
3834         (collect_tags_mapper): When dealing with BASE, store the base
3835         reference and mark it as download-ignorable.
3836
3837 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3838
3839         * url.c (convert_links): Attempt to quote '?' as "%3F" when
3840         linking to local files.  Given up on the attempt, as it breaks
3841         local browsing.
3842
3843 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3844
3845         * main.c (private_initialize): Removed.
3846         (main): Don't call private_initialize.
3847
3848         * http.c: Call lookup_host.
3849
3850         * host.c (host_init): Removed.
3851         (add_host_to_cache): Initialize host_name_address_map here, on
3852         demand.
3853         (ngethostbyname): Commented out.
3854
3855         * connect.c (make_connection): Remove dead code; use lookup_host.
3856
3857         * host.c (store_hostaddress): Renamed to lookup_host and reversed
3858         the args.
3859         Removed host_address_name_map and host_slave_master_map.
3860
3861 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3862
3863         * progress.c (dot_create): Align the "[ skipping ... ]" string
3864         with the dots.
3865
3866         * retr.c (rate): Split into two functions: calc_rate and
3867         retr_rate.
3868
3869         * progress.c (create_image): Draw a dummy progress bar even when
3870         total size is unknown.
3871         (display_image): Place the text cursor at the end of the "image".
3872
3873 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3874
3875         * url.c (reencode_string): Use unsigned char, not char --
3876         otherwise the hex digits come out wrong for 8-bit chars such as
3877         nbsp.
3878         (lowercase_str): New function.
3879         (url_parse): Canonicalize u->url if needed.
3880         (get_urls_file): Parse each URL, and return only the valid ones.
3881         (free_urlpos): Call url_free.
3882         (mkstruct): Add :port if the port is non-standard.
3883         (mkstruct): Append the query string to the file name, if any.
3884         (urlpath_length): Use strpbrk_or_eos.
3885         (uri_merge_1): Handle the cases where LINK is an empty string,
3886         where LINK consists only of query, and where LINK consists only of
3887         fragment.
3888         (convert_links): Count and report both kinds of conversion.
3889         (downloaded_file): Use a hash table, not a list.
3890         (downloaded_files_free): Free the hash table.
3891
3892         * retr.c (retrieve_from_file): Ditto.
3893
3894         * main.c (main): Call either retrieve_url or retrieve_tree
3895         for each URL, not both.
3896
3897         * retr.c (register_all_redirections): New function.
3898         (register_redirections_mapper): Ditto.
3899         (retrieve_url): Register the redirections.
3900         (retrieve_url): Make the string "Error parsing proxy ..." 
3901         translatable.
3902
3903         * res.c (add_path): Strip leading slash from robots.txt paths so
3904         that the path representations are "compatible".
3905         (free_specs): Free each individual path, too.
3906         (res_cleanup): New function.
3907         (cleanup_hash_table_mapper): Ditto.
3908
3909         * recur.c (url_queue_new): New function.
3910         (url_queue_delete): Ditto.
3911         (url_enqueue): Ditto.
3912         (url_dequeue): Ditto.
3913         (retrieve_tree): New function, replacement for recursive_retrieve.
3914         (descend_url_p): New function.
3915         (register_redirection): New function.
3916
3917         * progress.c (create_image): Cosmetic changes.
3918
3919         * init.c (cleanup): Do all those complex cleanups only if
3920         DEBUG_MALLOC is defined.
3921
3922         * main.c: Removed --simple-check and the corresponding
3923         simple_host_check in init.c.
3924
3925         * html-url.c (handle_link): Parse the URL here, and propagate the
3926         parsed URL to the caller, who would otherwise have to parse it
3927         again.
3928
3929         * host.c (xstrdup_lower): Moved to utils.c.
3930         (realhost): Removed.
3931         (same_host): Ditto.
3932
3933 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3934
3935         * utils.c (path_simplify): Preserver the (non-)existence of
3936         leading slash.  Return non-zero if changes were made.
3937
3938 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3939
3940         * progress.c (bar_update): Don't modify bp->total_length if it is
3941         zero.
3942
3943 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3944
3945         * retr.c (retrieve_url): When the redirection URL doesn't parse,
3946         print the correct error message rather than "UNKNOWN".
3947
3948 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3949
3950         * progress.c (bar_finish): If the timer didn't record any time
3951         since the download beginning, fake 1ms.
3952
3953 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3954
3955         * recur.c (recursive_retrieve): Fix typo.
3956
3957 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3958
3959         * progress.c (create_image): Don't translate "%ld ".
3960
3961 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3962
3963         * progress.c (bar_set_params): Allow the user to force the use of
3964         the bar.
3965
3966 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
3967
3968         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
3969
3970 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3971
3972         * progress.c: Renamed dp_* functions to dot_* for greater clarity
3973         and consistency with bar_*.
3974         (print_download_speed): Get rid of the unneeded '@' character.
3975         (create_image): Fix download rate geometry.
3976
3977         * progress.c (print_elapsed): Remove spurious space.
3978         (print_elapsed): Renamed to print_download_speed, since that's
3979         what it does.
3980
3981 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3982
3983         * progress.c (bar_update): If the downloaded amount becomes larger
3984         than the expected amount, adjust the expected amount accordingly.
3985
3986 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3987
3988         * utils.c (determine_screen_width): New function.
3989
3990         * main.c (main): New option `--progress=TYPE'.
3991         (main): Implement compatibility with the old option `--dot-style'.
3992
3993         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
3994         dp_set_params.
3995         (cmd_spec_progress): New function.
3996
3997         * retr.c (get_contents): Use the progress_* functions instead of
3998         the old show_progress().
3999         (show_progress): Removed.
4000         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
4001         etc.
4002
4003         * progress.c (set_progress_implementation): New function.
4004         (valid_progress_implementation_p): Ditto.
4005         (progress_create): Ditto.
4006         (progress_update): Ditto.
4007         (progress_finish): Ditto.
4008         (dp_create): Ditto.
4009         (dp_update): Ditto.
4010         (dp_finish): Ditto.
4011         (dp_set_params): Ditto.
4012         (print_elapsed): Ditto.
4013
4014 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4015
4016         * retr.c (show_progress): Use it.
4017
4018         * log.c (log_set_flush): New function.
4019
4020 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4021
4022         * utils.c (path_simplify): Don't remove trailing slashes.
4023
4024         * ftp.c (ftp_get_listing): Use it.
4025
4026         * utils.c (file_merge): New function.
4027
4028         * url.c (opt_url): Removed.
4029
4030         * recur.c (recursive_retrieve): Inline "opt_url" logic.
4031
4032         * main.c (main): Use xfree(), not free().
4033
4034         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
4035
4036         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
4037         internally.
4038
4039         * config.h.in: Include a stub for HAVE_STRPBRK.
4040
4041         * cmpt.c (strpbrk): Include a replacement for systems without
4042         strpbrk().
4043
4044         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
4045
4046         * url.c (url_set_dir): New function.
4047         (url_set_file): Ditto.
4048
4049         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
4050         parser makes the URL "params" available, so we can do that in this
4051         function.
4052
4053         * retr.c: Ditto.
4054
4055         * ftp.c: Ditto; pass the local file information in `ccon'.
4056
4057         * http.c: Get rid of the ugly kludge that had URL being replaced
4058         with the proxy URL when proxy retrieval was requested.  Use a
4059         separate parameter to http_loop and gethttp for the proxy URL.
4060
4061         * http.c: Changed to reflect the fact that local file, proxy, and
4062         referer information are no longer stored in struct url.  The local
4063         file information is passed in `struct hstat' now.
4064
4065         * url.c: Reworked URL parsing to be more regular.  Reencode the
4066         URL using reencode_string.
4067         Removed non-URL-related information from struct url.  This
4068         includes fields `proxy', `local', and `referer'.
4069
4070 2001-11-22  Jochen Hein  <jochen@jochen.org>
4071
4072         * main.c (main): Split the copyright notice for easier
4073         translation.
4074
4075 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
4076
4077         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
4078           command to server to request file size.
4079         * ftp.h (ftp_size): Export it.
4080         * ftp.c (getftp): Use new ftp_size function if restoring
4081           transfer of a file with unknown size.
4082
4083 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4084
4085         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
4086
4087 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4088
4089         * url.c (getproxy): Handle URL shorthands.
4090
4091 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4092
4093         * main.c: Remove --wait / --waitretry backwards compatibility
4094         code.
4095         
4096 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4097
4098         * main.c (main): Use it.
4099
4100         * url.c (rewrite_url_maybe): New function.
4101
4102 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4103
4104         * url.c: Clean up handling of URL schemes.
4105
4106 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4107
4108         * url.c: Get rid of `protostrings'.
4109         (skip_proto): Don't use protostrings.
4110         (has_proto): Ditto.
4111
4112 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4113
4114         * Makefile.in: Conditionally compile getopt.o.
4115
4116 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4117
4118         * md5.h: Renamed to gnu-md5.h.
4119
4120         * md5.c: Renamed to gnu-md5.c.
4121
4122         * http.c: Ditto.
4123
4124         * ftp-opie.c: Use the new macros.
4125
4126         * sysdep.h: Define md5-related macros.
4127
4128         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
4129         depending on which md5 implementation is used.
4130
4131 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4132
4133         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
4134         the compiler.
4135
4136 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4137
4138         * http.c (gethttp): Print the whole response line when printing
4139         headers is requested.
4140
4141 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4142
4143         * res.c: New file.  Implement all RES-related code here.
4144
4145 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4146
4147         * version.c: Wget 1.7.1 is released.
4148
4149 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4150
4151         * headers.c (header_extract_number): Ignore trailing whitespace.
4152
4153 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
4154
4155         * html-url.c (collect_tags_mapper): Fix bug converting links
4156         with -k option for tags with multiple link attributes by
4157         handling links in the order they appear.
4158
4159 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
4160
4161         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
4162           the call to the 'rate' function by moving it past the error
4163           checking for the 'getftp' function return value.
4164
4165 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4166
4167         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
4168         '\"'.  Different compilers' assert macros are broken in different
4169         ways.
4170
4171 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
4172
4173         * http.c (gethttp): print debug output for errors occuring during
4174         the ssl handshake.
4175
4176 2001-11-16  Chris Seawood  <cls@seawood.org>
4177
4178         * init.c: Ditto.
4179
4180         * host.c: Ditto.
4181
4182         * connect.c: Ditto.
4183
4184         * sysdep.h: Support compilation under BEOS.
4185
4186 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
4187
4188         * url.c (url_equal): Fix a memory leak when parseurl returns an
4189         error on the second URL. Also, since url_equal is not used at the
4190         moment, do not compile it.
4191
4192         * url.h: Ditto for the prototype of url_equal.
4193
4194 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4195
4196         * html-parse.c (map_html_tags): Support XML-style empty tags.
4197
4198 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4199
4200         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
4201         loop condition because we're no longer setting SIZEVAR here.
4202
4203 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4204
4205         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
4206         call because it needs the old value.
4207
4208 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4209
4210         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
4211         an attribute name.
4212
4213 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4214
4215         * url.c (url_filename): Make sure that slashes that sneak in to
4216         u->file via query string get protected.
4217         (file_name_protect_query_string): New function.
4218
4219 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4220
4221         * recur.c (recursive_retrieve): Also check undesirable_urls with
4222         canonicalized URL.
4223
4224 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4225
4226         * http.c (gethttp): Search `.netrc' with real host, not the proxy
4227         one.
4228
4229 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4230
4231         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
4232         define it.
4233
4234 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4235
4236         * ftp.h: Provide correct prototype for ftp_parse_ls().
4237
4238 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4239
4240         * version.c: Wget 1.7 is released.
4241
4242 2001-06-03  Karl Eichwalder  <ke@suse.de>
4243
4244         * ftp-ls.c (ftp_parse_ls): Fix typo.
4245
4246 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4247
4248         * all: Update copyright information.
4249
4250 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4251
4252         * http.c (gethttp): Indicate that the continued download failed
4253         for *this* file.
4254
4255 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4256
4257         * version.c: Wget 1.7-pre1 is released.
4258
4259 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4260
4261         * version.c: Updated version to 1.7-pre1.
4262
4263 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4264
4265         * gen_sslfunc.c: Don't include <sys/time.h> directly.
4266
4267 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4268
4269         * http.c (gethttp): Use real URL data for cookies, not the proxy
4270         stuff.
4271
4272 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4273
4274         * main.c (print_help): Document `--no-http-keep-alive'.
4275
4276         * utils.c (numdigit): Handle negative numbers *correctly*.
4277
4278         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
4279         than the confusing "unsigned".
4280
4281         * utils.c (string_set_contains): Renamed from string_set_exists.
4282
4283         * hash.c (hash_table_contains): Renamed from hash_table_exists.
4284
4285         * cookies.c: Move case-insensitive hash tables to hash.c.
4286
4287 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4288
4289         * http.c (gethttp): Before concluding that the file is already
4290         fully retrieved, make sure that the file existed and `Range' was
4291         actually requested.
4292
4293 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4294
4295         * cookies.c (eliminate_dups): New function.
4296         (build_cookies_request): Use it.
4297         (build_cookies_request): Set chain_store_size after reallocating
4298         all_chains.
4299         (check_domain_match): Annotated for easier future debugging.
4300         (store_cookie): In the debug message, print whether the cookie is
4301         permanent.
4302
4303 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4304
4305         * http.c (http_loop): Reset no_truncate before deciding whether to
4306         set it.
4307         (gethttp): Further clarify "-c conflicts with existing file" error
4308         message, based on input from Herold Heiko.
4309
4310 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
4311
4312         * http.c (http_loop): If restval is set, set no_truncate to 1
4313         unconditionally.
4314
4315 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4316
4317         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
4318         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
4319         (ftp_parse_vms_ls): Ditto.
4320
4321 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
4322
4323         * init.c (cmd_address): Zero SIN before using it; apparently
4324         needed on *BSD.
4325
4326 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4327
4328         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
4329         empty.
4330
4331 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
4332
4333         * main.c (main): Make `--cookies' respect its argument.
4334
4335 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
4336
4337         * main.c (main): Removed undocumented option `--email-address'.
4338
4339         * netrc.c: Use the latest read_whole_line.
4340
4341         * init.c (defaults): Set opt.ftp_pass to "-wget@".
4342
4343         * mswindows.c (pwd_cuserid): Ditto.
4344
4345         * utils.c (pwd_cuserid): Removed.
4346
4347         * host.c (ftp_getaddress): Removed.
4348
4349 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
4350
4351         (http_loop): Allocate space for filename_plus_orig_suffix with
4352         alloca; this is more efficient and removes the need to free it
4353         before each and every return.
4354
4355 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
4356
4357         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
4358         unneeded because the file is already there and fully downloaded,
4359         and -c is specified.
4360         (http_loop): Handle RETRUNNEEDED.
4361
4362         * wget.h (uerr_t): New value RETRUNNEEDED.
4363
4364         * http.c (http_loop): Set no_truncate for files that both exist
4365         and are non-empty.
4366         (gethttp): Consider the download finished when restval >= contlen,
4367         not only when restval==contlen.
4368         (gethttp): Handle redirection before giving up due to -c.
4369         (gethttp): Clarify error message which explains that -c will not
4370         truncate the file.
4371         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
4372         the stuff that needs freeing and release the socket.
4373
4374 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4375
4376         * main.c (print_help): Wget booleans accept "off", not "no".
4377
4378 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4379
4380         * http.c (http_loop): If allow_cache is zero, always disable
4381         caching, not only when retrieving through proxy.
4382
4383         * init.c: Ditto.
4384
4385         * options.h (struct options): Rename proxy_cache to allow_cache.
4386
4387 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4388
4389         * http.c (mktime_from_utc): Improve documentation.
4390         (http_atotm): Put format strings into a separate array.
4391
4392 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
4393
4394         * safe-ctype.h: Instead of throwing #error when isalpha is
4395         defined, redefine it to something that will throw a compile-time
4396         error if actually *used*.  Do the same for the rest of the
4397         standard C macros.
4398
4399 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
4400
4401         * url.c (getproxy): Ignore empty proxy vars.
4402
4403 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4404
4405         * http.c (http_loop): Would load cookies every time.
4406
4407         * cookies.c (load_cookies): Handle cookies whose values contain
4408         embedded spaces.
4409
4410 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4411
4412         * utils.c: Define each DIGITS_* in one line.
4413
4414 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
4415
4416         * http.c (http_atotm): Initialize t.tm_isdst to 0.
4417         (mktime_from_utc): Prevent mktime() from having discontinuities at
4418         DST transition points.
4419
4420 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4421
4422         * html-url.c (get_urls_html): Fix documentation.
4423
4424 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4425
4426         * url.c (UNSAFE_CHAR): Reimplement using a static table.
4427         (url_init): Removed.
4428         (init_unsafe_char_table): Removed.
4429
4430 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4431
4432         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
4433
4434 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4435
4436         * utils.c: Document timer functions.
4437
4438         * retr.c (rate): Use it.
4439         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
4440
4441         * utils.c (wtimer_granularity): New function.
4442
4443 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4444
4445         * retr.c (show_progress): Ditto.
4446
4447         * ftp.c (getftp): Ditto.
4448
4449         * http.c (gethttp): Use new timer functions.
4450
4451         * utils.c (wtimer_allocate): New function.
4452         (wtimer_new): Ditto.
4453         (wtimer_delete): Ditto.
4454         (wtimer_reset): Ditto.
4455         (wtimer_elapsed): Ditto.
4456
4457 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4458
4459         * utils.c (long_to_string): New, faster version.  Favors smaller
4460         numbers; much of the calculation is now done at compile-time.
4461
4462 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
4463
4464         * utils.c (numdigit): Handle negative numbers.
4465
4466 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4467
4468         * retr.c (show_progress): Print the download rate even when the
4469         percentages are not available.
4470
4471 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4472
4473         * ftp.c (getftp): Adjust expected_bytes if the length is
4474         authoritative.
4475
4476 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4477
4478         * url.c: Don't declare `construct'.
4479
4480         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
4481         mappings to new locations.
4482         (hash_table_new): Make resize_threshold a field in the hash table,
4483         so we don't have to recalculate it in each hash_table_put.
4484         (grow_hash_table): Update resize_threshold.
4485         (MAX): Remove unused macro.
4486         (prime_size): Made static.
4487
4488 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
4489
4490         * retr.c (retrieve_url): Call uri_merge, not url_concat.
4491
4492         * html-url.c (collect_tags_mapper): Call uri_merge, not
4493         url_concat.
4494
4495         * url.c (mkstruct): Use encode_string instead of xstrdup followed
4496         by URL_CLEANSE.
4497         (path_simplify_with_kludge): Deleted.
4498         (contains_unsafe): Deleted.
4499         (construct): Renamed to uri_merge_1.
4500         (url_concat): Renamed to uri_merge.
4501
4502 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4503
4504         * url.c (str_url): Use encode_string instead of the unnecessary
4505         CLEANDUP.
4506         (encode_string_maybe): New function, returns input string if no
4507         encoding is needed.
4508         (encode_string): Call encode_string_maybe to do the dirty work,
4509         xstrdup if no work needed.
4510
4511 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4512
4513         * wget.h (XDIGIT_TO_xchar): Define here.
4514
4515         * url.c (decode_string): Use new name.
4516         (encode_string): Ditto.
4517
4518         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
4519         (dump_hash): Use new name.
4520
4521         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
4522         XDIGIT_TO_XCHAR respectively.
4523
4524 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4525
4526         * init.c: Include cookies.h.
4527
4528         * cookies.h: Declare cookies_cleanup.
4529
4530         * cookies.c (check_domain_match): Remove unused variable.
4531         (save_cookies): Remove extraneous argument from debug statement.
4532
4533         * host.c (same_host): Don't call skip_url.
4534
4535         * url.c (skip_url): Removed.  Removed its calls from various
4536         functions in url.c.
4537
4538 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4539
4540         * cookies.c (unsigned_string_hash): Use the new code in
4541         string_hash as reference.
4542
4543         * hash.c (hash_table_map): Allow deletion and change of the
4544         element processed by MAPFUN.
4545         (string_hash): Use the function from glib.
4546
4547 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4548
4549         * config.h.in: Include #undef stub.
4550
4551         * hash.c (hash_table_remove): Rewrite to actually clear deleted
4552         entries instead of just marking them as deleted.
4553
4554 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4555
4556         * hash.h: Declare hash_table_get_pair and hash_table_count.
4557
4558 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4559
4560         * cookies.c: Declare http_atotm.
4561
4562 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4563
4564         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
4565         permissions.  A compiler that doesn't accept octal constants is
4566         seriously broken and shouldn't be used -- octal constants were
4567         present in K&R C!
4568
4569 2001-01-20  Karl Eichwalder  <ke@suse.de>
4570
4571         * Makefile.in: Provide and use DESTDIR according to the Coding
4572         Standards.
4573
4574 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4575
4576         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
4577         specification.
4578
4579 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4580
4581         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
4582         because that strips the *leading* slash, thus forcing relative
4583         FTP retrieval.
4584
4585 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4586
4587         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
4588         notation for VMS servers. 
4589         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
4590         odir is an empty string.
4591
4592 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4593
4594         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
4595         effective. Suggested by Edward J. Sabol.
4596
4597 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4598
4599         * cookies.c (build_cookies_request): Use and sort cookies from all
4600         matching domains.
4601         (build_cookies_request): Check for duplicates before generating
4602         the `Cookies' header.
4603
4604         * main.c (main): Don't load cookies here.
4605         (main): Make loadcookies and savecookies call the correct command.
4606
4607         * http.c (http_loop): Load cookies on-demand.
4608
4609 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4610
4611         * http.c (gethttp): Fix indentation of SSL ifdef.
4612
4613 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4614
4615         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
4616         that hack is no longer necessary.
4617         (getftp): Prepend initial directory to *non*-absolute u->dir's.
4618
4619 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
4620
4621         * init.c (cmd_file): New function.
4622         (enable_tilde_expansion): New variable.
4623         (run_wgetrc): Use it.
4624         (cmd_file): Use it.
4625
4626 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4627
4628         * init.c: Include cookie-related options.
4629
4630         * main.c (main): Include cookie-specific options.
4631         (main): Load cookies before download is finished.
4632         (main): Save cookies when done.
4633
4634         * http.c (gethttp): Process the `Set-Cookie' header.
4635         (gethttp): Include cookies in the response.
4636
4637         * cookies.c: New file.
4638
4639 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4640
4641         * utils.c (datetime_str): New function.
4642
4643 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4644
4645         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
4646         12:01PM == 00:01, which was obviously wrong. Taken care of this
4647         anomaly.
4648
4649         * ChangeLog: Removed an excess conflict marker. Reformatted the
4650         entry by Philipp Thomas from 2001-03-09.
4651
4652         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
4653         between 0 and 23. Elminate unused variable `sec'.
4654
4655 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4656
4657         * hash.c (hash_table_count): New function.
4658
4659 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4660
4661         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
4662         Digital Unix cc.
4663
4664 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4665
4666         * config.h.in: Oops, do the namespace tweaks only on systems we
4667         know about.
4668
4669 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4670
4671         * hash.c: Include <string.h>.
4672
4673 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4674
4675         * config.h.in: Define "compilation environment" options that work
4676         under Linux and Solaris.  To be reviewed on other OS'es.
4677
4678 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4679
4680         * http.c (gethttp): Prepend literal newline with `\n\'.
4681
4682 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4683
4684         * sysdep.h: Don't define VERY_LONG_FORMAT.
4685
4686         * utils.c (very_long_to_string): New function.
4687         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
4688
4689 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
4690
4691         * url.c (parse_uname): Would run past the end of the string if the
4692         username was present, but the URL did not contain a slash, e.g.
4693         http://foo:bar@myhost.
4694
4695 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
4696
4697         * http.c (http_atotm): Use %A instead of %a to match full
4698         weekday.  (On most systems there is no difference.)
4699
4700 2001-04-03  Paul Bludov  <paul@ozero.net>
4701
4702         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
4703         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
4704         leak.
4705         (ws_mypath): Use GetModuleFileName instead of argv[0].
4706         (ws_startup): Use data.wVersion for comparison.
4707
4708 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4709
4710         * http.c (http_loop): Ditto.
4711
4712         * ftp.c (ftp_loop_internal): Made the check whether to continue
4713         retrieval `-O'-friendly.
4714
4715 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4716
4717         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
4718         they will be handled as whitespace.
4719         (parse_netrc): Correctly handle lines that end with whitespace.
4720
4721 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4722
4723         * retr.c (retrieve_url): New variable global_download_count used
4724         to identify first retrieval.
4725
4726         * ftp.c (getftp): Ditto.
4727
4728         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
4729
4730 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4731
4732         * init.c (cmd_address): Heap-allocate the address that gets stored
4733         to CLOSURE.  Old code would simply assign an address on the stack.
4734
4735 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
4736
4737         * ftp.c (ftp_get_listing): Propagate error status.
4738         (ftp_retrieve_glob): Use it.
4739         (ftp_loop): Ditto.
4740
4741 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
4742
4743         * main.c (main): Add -C to the string that is the third arg to
4744         getopt_long().
4745
4746 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4747
4748         * ftp.c (getftp): Don't start the download from scratch if `-c'
4749         was specified, but the file is already fully downloaded.
4750
4751         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
4752         specified and the server doesn't support continued download.
4753         (gethttp): Don't start the download from scratch if `-c' was
4754         specified, but the file is already fully downloaded.
4755
4756 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4757
4758         (recursive_retrieve): Don't clear the hash tables at this point at
4759         all; it interferes with the normal operation of register_download.
4760
4761 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4762
4763         * recur.c (recursive_retrieve): Clear the hash tables only when
4764         they are defined.
4765
4766 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4767
4768         * http.c (gethttp): Make sure the socket is closed with
4769         CLOSE_INVALIDATE before we have drained the body.
4770
4771 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4772
4773         * retr.c (retrieve_url): Call register_download() for downloaded
4774         files and register_html() for downloaded HTML files.
4775
4776         * recur.c (register_download): New function; register here that a
4777         file has been downloaded, rather than in recursive_retrieve().
4778         (register_html): New function; enqueue the location of HTML files
4779         here rather than in recursive_retrieve().
4780
4781 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4782
4783         * main.c (print_help): Use multiple fputs instead of a single ugly
4784         printf().
4785         (main): Consistently assign numbers >128 to options without a
4786         corresponding character.
4787
4788 2001-03-09  Philipp Thomas  <pthomas@suse.de>
4789
4790         * safe-ctype.h: New file. Locale independent ctype.h replacement
4791         taken from libiberty.
4792
4793         * safe-ctype.c: New file. Tables for above.
4794
4795         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
4796         safe-ctype$o.
4797
4798         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
4799         isspace.
4800
4801         * ftp-basic.c: Don't include ctype.h.
4802
4803         * ftp-ls.c: Likewise.
4804
4805         * ftp.c: Likewise.
4806
4807         * headers.c: Likewise.
4808
4809         * host.c: Likewise.
4810
4811         * html-parse.c: Likewise.
4812
4813         * html-url.c: Likewise.
4814
4815         * http.c: Likewise.
4816
4817         * init.c: Likewise.
4818
4819         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
4820
4821         * netrc.c: Likewise.
4822
4823         * recur.c: Likewise.
4824
4825         * retr.c: Likewise.
4826
4827         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
4828         instead of isdigit.
4829
4830         * sysdep.h: Remove defines of ctype macros as they aren't needed
4831         for safe-ctype-h.
4832
4833         * url.c: Don't include ctype.h.
4834
4835         * utils.c: Likewise.
4836
4837         * wget.h: Include safe-ctype.h.
4838
4839 2001-03-27  Dan Harkless  <wget@harkless.org>
4840
4841         * Makefile.in: Moved top_builddir out of "User configuration
4842         section" of top Makefile and analogous spot in this one.
4843
4844 2001-03-17  Dan Harkless  <wget@harkless.org>
4845
4846         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
4847         Define top_builddir.  Link wget with libtool so the user doesn't
4848         have to supply a bunch of custom environment variables to 
4849         correctly link with the OpenSSL shared libraries.
4850
4851 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
4852
4853         * http.c (gethttp): skip :port in host header if it is the
4854         DEFAULT_HTTPS_PORT when using SSL.
4855
4856         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
4857         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
4858         rest of the code. 
4859         * url.h: Ditto
4860
4861 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
4862
4863         * retr.c (show_progress): Correctly calculate the number of bytes
4864         in the first line of the download that have been actually
4865         downloaded in this run.
4866
4867 2001-02-23  Dan Harkless  <wget@harkless.org>
4868
4869         * main.c (print_help): --help documentation for -N said it would
4870         re-download files if they had the _same_ timestamp on server.
4871         (print_help): -nr belongs in "FTP options" section of --help
4872         output, not "Recursive retrieval" section.  Alphabetized FTP
4873         options by long option name.
4874
4875 2001-02-16  Dan Harkless  <wget@harkless.org>
4876
4877         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
4878         that "httpsproxy" had been inserted into commands[] out of
4879         alphabetical order, causing "BUG: unknown command `httpuser'".
4880
4881 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4882
4883         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
4884         listing without correct permissons).
4885
4886         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
4887         FTP server. 
4888
4889         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
4890         shall be donwloaded only when it's newer than the local copy or
4891         when it has the same timeestamp but its size is different. ST_VMS
4892         and ST_MACOS as special cases that lie about file size. 
4893
4894         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
4895
4896         * Makefile.in: Removed dependency on ftpparse library due to unclear
4897         copyright issues and absence of any feedback to our queries. 
4898
4899         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
4900         copyright issues and absence of any feedback to our queries.   
4901         (ftp_parse_ls): Added a warning message when remote server system
4902         does not seem to be suported by wget. 
4903         (ftp_parse_vms_ls): New function for parsing VMS ftp
4904         server listing output.
4905         (clean_line): New function responsible for removing
4906         end-of-line characters from FTP listing texts.
4907
4908         * ftp.c (getftp): Global variables pwd and host_type are now
4909         member of the ccon structure under names ccon.id and ccon.rs. 
4910
4911         * ftp.h (struct ccon): Added formed global variables from ftp.c,
4912         enum stype rs (remote system identification) and char *id (initial
4913         working directory), as suggested by Hrvoje.
4914
4915         * url.c (parse_uname): Added support for passwords containing '@'
4916         characters.
4917         (skip_uname): Ditto.
4918
4919 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4920
4921         * ftp.c (ftp_loop): Reset con.
4922
4923 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4924
4925         * url.c (parse_uname): Added support for passwords containing '@'
4926         characters.
4927         (skip_uname): Ditto.
4928
4929 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
4930
4931         * url.c (parseurl): Debug-print u->ftp_type.
4932
4933 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
4934
4935         * ftp.c (ftp_loop_internal): Disable padding.
4936         (getftp): Ditto.
4937
4938         * http.c (http_loop): Disable padding.
4939
4940         * retr.c (show_progress): Use it to enable padding.
4941
4942         * retr.c (rate): Optional parameter PAD for padding the rate.
4943
4944 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4945
4946         * retr.c (show_progress): Make sure that the last output line
4947         includes progress.
4948
4949 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
4950
4951         * retr.c (show_progress): Print the download rate along with the
4952         percentages.
4953         Along with Anders Thorsby <anders@thorsby.dk>.
4954
4955 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
4956
4957         * ftp.h: Rename enums `command' to `wget_ftp_command' and
4958         `fstatus' to `wget_ftp_status' because old names clash with Tru64
4959         net/if.h.
4960
4961 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
4962
4963         * gen_sslfunc.c: verify_callback is now static
4964
4965         * gen_sslfunc.c (init_ssl): load certificate if specified
4966
4967         * gen_sslfunc.c (ssl_printerr): new function
4968
4969         * init.c: added new --sslcertfile and --sslcertkey switches
4970
4971         * main.c: ditto
4972
4973         * options.h: ditto
4974
4975         * http.c (gethttp): abort when init_ssl fails
4976
4977 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
4978
4979         * mswindows.h: Include <malloc.h>; it's needed for alloca().
4980
4981 2001-01-10  Dan Harkless  <wget@harkless.org>
4982
4983         * url.c (str_url): Clarified this function's comment header after
4984         Hrvoje answered my question on the list as to when hide != 1.
4985         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
4986
4987 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4988
4989         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
4990         Drazen Kacar <dave@arsdigita.com>.
4991         (conaddr): Ditto.
4992
4993 2001-01-09  Dan Harkless  <wget@harkless.org>
4994
4995         * html-url.c: A bunch of fixup of `--page-requisites'-related
4996         comments to reflect Hrvoje's changes to my code when transplanting
4997         it into this new file, to fix spelling mistakes, to clarify, etc.
4998
4999         * url.c (write_backup_file): Clarified a comment.
5000         (str_url): Henrik van Ginhoven pointed out on the list that we
5001         shouldn't give away the number of characters in the password by
5002         replacing each character with a 'x'.  Use "<password>" instead.
5003
5004         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
5005         directories didn't work if logging in put you in a directory other
5006         than "/" is fixed now.  Removed the comment here warning of the bug.
5007
5008         * main.c (print_help): --continue's description was misleading.
5009         We don't "restart", we "resume".  Also, better to say
5010         "partially-downloaded file" rather than just "existing file".
5011
5012 2001-01-06  Dan Harkless  <wget@harkless.org>
5013
5014         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
5015         the best way to go about my aim.  Removed them in favor of:
5016
5017         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
5018
5019 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5020
5021         * url.c (replace_attr): New function, to be used by both
5022         TO_COMPLETE and TO_RELATIVE case in convert_links.
5023         (find_fragment): New function for finding URL fragments.
5024         (replace_attr): Better handle the case where the original string
5025         is not quoted.  Use find_fragment.
5026         (convert_links): Use replace_attr().
5027
5028 2000-12-31  Dan Harkless  <wget@harkless.org>
5029
5030         * ChangeLog: Since this flat file doesn't have multiple branches,
5031         looking at the dates would make you think that things went into
5032         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
5033         in 1.6 branch.]" where appropriate to clarify.
5034         
5035 2000-12-30  Dan Harkless  <wget@harkless.org>
5036
5037         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
5038         patch to deal with h_errno not being defined in netdb.h under Cygwin.
5039
5040 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
5041
5042         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
5043
5044 2000-12-17  Igor Khristophorov  <igor@atdot.org>
5045
5046         * http.c (check_end): Fix test for '+' or '-'.
5047
5048 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5049
5050         * url.c (parseurl): Rename inner loop var from i to ind to avoid
5051         clash with the function top-level-declared variable i.
5052         (str_url): Likewise, rename inner-loop i to j.
5053
5054         * recur.c (parse_robots): Don't declare LEN at top of function.
5055         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
5056         global variable.
5057
5058         * main.c (main): Change erroneous use of bitwise and to logical.
5059
5060         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
5061         the stack because it will be copied to closure.
5062
5063         Thanks to Csaba Raduly's run of PC-LINT over the sources.
5064
5065 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5066
5067         * http.c (basic_authentication_encode): Use xmalloc(), not
5068         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
5069         sources.
5070
5071 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
5072
5073         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
5074         compilation.
5075
5076 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5077
5078         * mswindows.c: Include <errno.h>.
5079
5080         * gen_sslfunc.c: Include <errno.h>.
5081
5082         * ftp-basic.c: Don't attempt to declare errno or h_errno because
5083         they're not used.
5084
5085         * main.c: Include <errno.h> because errno is used.
5086
5087         * ftp.c: Ditto.
5088
5089         * http.c: Include <netdb.h> for h_errno.
5090
5091 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5092
5093         * html-parse.c (advance_declaration): MSVC assert() chokes on
5094         '\"'.  Use '"' instead.
5095
5096 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5097
5098         * utils.c (xfree_real): Removed.
5099         (xfree_debug): Just call free().
5100
5101         * wget.h (xfree): Make it an alias for free.
5102
5103 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5104
5105         * http.c (http_loop): Furthermore, touch output_document only if
5106         it is known to be an existing regular file.
5107
5108 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
5109
5110         * ftp.c (ftp_retrieve_list): Ditto.
5111
5112         * http.c (http_loop): Touch output_document if that is used for
5113         output.
5114
5115 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5116
5117         * http.c: Include gen_sslfunc.h after including Wget's headers.
5118         (persistent_available_p): Needed coma before `int ssl'.
5119
5120 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5121
5122         * ftp.c (ftp_loop_internal): Ditto.
5123
5124         * http.c (http_loop): Use it.
5125
5126         * retr.c (sleep_between_retrievals): New function that handles the
5127         logic of opt.wait and opt.waitretry.
5128
5129 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5130
5131         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
5132         rbuf_read_bufferful when the buffer is depleted.
5133
5134         * rbuf.c (rbuf_read_bufferful): New function.
5135
5136 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5137
5138         * gen_sslfunc.h: Use ansi2knr style function declarations.
5139
5140         * gen_sslfunc.c: Reformat according to the GNU coding standards.
5141         More should be done.
5142
5143         * http.c (persistent_available_p): Place the cheap SSL test nearer
5144         the top of the function.
5145         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
5146
5147 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5148
5149         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
5150         char.
5151
5152 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
5153
5154         * Makefile.in: added gen_sslfunc object
5155         * config.h.in: added HAVE_SSL define
5156         * connect.c: changed select_fd from static int to int
5157         * connect.h: ditto
5158         * gen_sslfunc.h: New file
5159         * gen_sslfunc.c: ditto
5160         * http.c: added HTTPS fuctionality
5161         * retrc.c: ditto
5162         * url.c: ditto
5163         * init.c: added opt.httpsproxy
5164         * options.h: ditto
5165         * rbuf.h: added alternate rbuf struct
5166         * wget.h: added CONSSLERR
5167         * rbuf.c: ditto
5168
5169         * http.c: Added HTTPS fuctionality.
5170
5171         * retrc.c: Ditto.
5172
5173         * url.c: Ditto.
5174
5175         * init.c: Added opt.httpsproxy.
5176
5177         * options.h: Ditto.
5178
5179         * rbuf.h: Added alternate rbuf struct.
5180
5181         * wget.h: Added CONSSLERR.
5182
5183         * rbuf.c: Ditto.
5184
5185 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5186
5187         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
5188         "ignore_perms" to ignore file and directory permissions for
5189         Windows NT FTP server listings.
5190         (ftp_parse_winnt_ls): New function.
5191         (ftp_parse_ls): Parses UNIX and Windows NT listings
5192         separately. Simple heuristics for distinguishing between UNIX and
5193         MS-DOS-like FTP listing provided by Windows NT FTP service.
5194
5195 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5196
5197         * ftpparse.c, ftpparse.h: New files.
5198
5199         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
5200         only. Use ftp_parse_nonunix_ls otherwise.
5201         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
5202         exotic FTP servers.
5203
5204         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
5205         FTP servers.
5206
5207         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
5208         (getftp): Support for VMS. Support for FTP servers that do not
5209         place you in the root directory after login.
5210         (ftp_retrieve_list): VMS is silent about the real file size, issue
5211         a more appropriate message.
5212         (ftp_get_listing): Pass host_type to ftp_parse_ls.
5213
5214         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
5215
5216 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5217
5218         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
5219         "ignore_perms" to ignore file and directory permissions for
5220         Windows NT FTP server listings.
5221         (ftp_parse_winnt_ls): New function.
5222         (ftp_parse_ls): Parses UNIX and Windows NT listings
5223         separately. Simple heuristics for distinguishing between UNIX
5224         and MS-DOS-like FTP listing provided by Windows NT FTP service.
5225
5226 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
5227
5228         * netrc.c (parse_netrc): Get rid of line ending.
5229
5230 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
5231
5232         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
5233         Dan.
5234
5235 2000-11-24  Karl Eichwalder  <ke@suse.de>
5236
5237         * main.c (print_help): Untabify.
5238
5239 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
5240
5241         * utils.c (xrealloc_debug): Do the unregister/register thing only
5242         if the pointer has actually changed.
5243         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
5244         (xfree_real): Ditto.
5245         (xrealloc_real): Ditto.
5246         (xstrdup_real): Ditto.
5247
5248 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5249
5250         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
5251         string; no need to strdup() it.
5252         (getftp): Make pwd_len a local variable.
5253         (ftp_loop): Free PWD before returning.
5254
5255         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
5256
5257 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
5258
5259         * all: Use xfree() instead of free.
5260
5261         * utils.c (xfree): New function.
5262
5263 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5264
5265         * url.c (convert_links): HTML-quote the converted string.
5266
5267         * utils.c (html_quote_string): Move here from ftp-ls.c
5268         (html_quote_string): Make non-static; declare in utils.h.
5269         (html_quote_string): Convert SP to &#32;.
5270
5271 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5272
5273         * ftp.c (getftp): Reformat Jan's code according to GNU coding
5274         standards; remove (debugging?) printf's; use '\0' for the ASCII
5275         zero character.  Use alloca() instead of malloc() for
5276         inter-function temporary allocations.
5277
5278 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5279
5280         * ftpparse.c, ftpparse.h: New files.
5281
5282         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
5283         only. Use ftp_parse_nonunix_ls otherwise.
5284         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
5285         exotic FTP servers.
5286
5287         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
5288         FTP servers.
5289
5290         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
5291         (getftp): Support for VMS. Support for FTP servers that do not
5292         place you in the root directory after login.
5293         (ftp_retrieve_list): VMS is silent about the real file size, issue
5294         a more appropriate message.
5295         (ftp_get_listing): Pass host_type to ftp_parse_ls.
5296
5297         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
5298
5299 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5300
5301         * hash.c (hash_table_put): Don't overwrite deleted mappings.
5302
5303 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
5304
5305         * hash.c (find_mapping): New function.
5306         (hash_table_get): Use it.
5307         (hash_table_get_pair): Ditto.
5308         (hash_table_exists): Ditto.
5309         (hash_table_remove): Ditto.
5310         (hash_table_remove): Really delete the entry if the mapping
5311         following LOCATION is empty.
5312
5313         * utils.c (string_set_add): Check whether the element has existed
5314         before.
5315
5316         * hash.c (hash_table_get_pair): New function.
5317
5318 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5319
5320         * http.c (http_process_type): Ignore trailing whitespace; use
5321         strdupdelim().
5322
5323         * recur.c (recursive_retrieve): Use the new `convert' field.
5324         (convert_all_links): Ditto.
5325         (convert_all_links): Don't respect meta_disallow_follow.
5326
5327         * html-url.c (handle_link): Fill out link_relative_p and
5328         link_complete_p.
5329
5330         * url.h (struct _urlpos): Make elements more readable.
5331
5332         * recur.c (recursive_retrieve): Call slist_prepend instead of
5333         slist_append.
5334         (convert_all_links): Call slist_nreverse before iterating through
5335         urls_html.
5336
5337         * utils.c (slist_prepend): New function.
5338         (slist_nreverse): Ditto.
5339
5340 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5341
5342         * http.c (check_end): Constify.
5343
5344 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5345
5346         * http.c (http_loop): If username and password are known, try the
5347         `Basic' authentication scheme by default.
5348
5349         * connect.h: Declare test_socket_open.
5350
5351 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5352
5353         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
5354
5355 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5356
5357         * http.c (gethttp): Don't use the return value of sprintf().
5358         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
5359
5360 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
5361
5362         * recur.c (recursive_retrieve): Print the "so we don't load"
5363         debugging message only if we really don't load.
5364
5365         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
5366         (gethttp): Don't request keep-alive if keep-alive is inhibited.
5367
5368 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5369
5370         * http.c (gethttp): Make the HTTP persistent connections more
5371         robust.
5372
5373 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5374
5375         * retr.c (get_contents): If use_expected, make sure that the
5376         appropriate amount of data is being read.
5377
5378         * http.c (gethttp): Check for both `Keep-Alive: ...' and
5379         `Connection: Keep-Alive'.
5380
5381         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
5382         turned on.
5383
5384 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5385
5386         * http.c (connection_available_p): Use it.
5387
5388         * connect.c (test_socket_open): New function.
5389
5390         * http.c (gethttp): Support persistent connections.  Based on the
5391         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
5392         (register_persistent): New function.
5393         (connection_available_p): Ditto.
5394         (invalidate_connection): Ditto.
5395
5396 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
5397
5398         * url.c (convert_links): Handle UREL2ABS case.
5399
5400         * recur.c (recursive_retrieve): Instead of the list
5401         urls_downloaded, use hash tables dl_file_url_map and
5402         dl_url_file_map.
5403         (convert_all_links): Use them to retrieve data.
5404
5405         * host.c (clean_hosts): Free the hash tables.
5406
5407         * main.c (private_initialize): Call host_init().
5408
5409         * host.c (store_hostaddress): Use a saner, hash table-based data
5410         model.
5411         (realhost): Ditto.
5412         (host_init): Initialize the hash tables.
5413
5414 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
5415
5416         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
5417         used for what the sorted slists used to be used for.
5418         (slist_contains): Don't rely on the list being sorted.
5419         (slist_append): Simplify the code.
5420
5421         * recur.c (recursive_cleanup): Use free_string_set.
5422
5423         * utils.c (string_set_add, string_set_exists, string_set_free):
5424         New functions for easier freeing of hash tables whose keys are
5425         strdup'ed strings.
5426
5427         * recur.c (recursive_retrieve): Use the hash table functions for
5428         storing undesirable URLs.
5429
5430         * hash.c: New file.
5431
5432 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
5433
5434         * main.c (private_initialize): Call url_init.
5435         (main): Call private_initialize.
5436
5437         * url.c (unsafe_char_table): New table.
5438         (UNSAFE_CHAR): Use it.
5439         (init_unsafe_char_table): New function.
5440         (url_init): New function; call init_unsafe_char_table.
5441
5442 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
5443
5444         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
5445         _vsnprintf respectively.
5446
5447 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
5448
5449         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
5450         on Linux.
5451
5452 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
5453
5454         * html-url.c (handle_link): Handle HTML fragment identifiers.
5455
5456         * recur.c (recursive_retrieve): If norobot info is respected and
5457         the file is specified not to be followed by robots, respect that.
5458
5459         * html-url.c (collect_tags_mapper): Handle <meta name=robots
5460         content=X>.  For us the important cases are where X is NONE or
5461         where X contains NOFOLLOW.
5462         (get_urls_html): Propagate that information to the caller.
5463
5464 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
5465
5466         * url.c (convert_links): Unlink the file we might be reading from
5467         before writing to it.
5468         (convert_links): Use alloca instead of malloc for
5469         filename_plus_orig_suffix.
5470
5471 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
5472
5473         * host.c (realhost): Add HOST to the list with quality==0 only if
5474         it wasn't already there.
5475         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
5476
5477 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5478
5479         * url.c (get_urls_file): Ditto.
5480         (convert_links): Ditto.
5481
5482         * html-url.c (get_urls_html): Use read_file() instead of
5483         load_file().
5484
5485         * utils.c (read_file): New function, instead of the old
5486         load_file().
5487         (read_file_free): Ditto.
5488
5489         * url.c (findurl): Search only for the supported protocols.
5490         (convert_links): Use fwrite() when writing out a region of
5491         characters.
5492
5493 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5494
5495         * ftp-ls.c: Move html_quote_string and ftp_index here.
5496
5497         * url.c: Remove get_urls_html, since that's now in html-url.c.
5498
5499         * html-url.c: New file.
5500
5501         * html-parse.c: New file.
5502
5503 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5504
5505         * init.c (run_wgetrc): Don't bother killing off '\r' since
5506         pars_line() skips whitespace at end of line anyway.
5507         (parse_line): Oops, it didn't.  Now it does.
5508
5509         * recur.c (parse_robots): Ditto here.
5510
5511         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
5512         manually because read_whole_line no longer does.
5513
5514         * utils.c (read_whole_line): Rewrite to: a) use less memory
5515         (reallocates to needed size after work), b) work faster -->
5516         fgets() instead of getc, c) be more correct --> doesn't kill the
5517         newline character at the end of line.
5518
5519 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
5520
5521         * init.c (comind): Initialize MAX to array size - 1.
5522
5523 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5524
5525         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
5526         Suggested by Edward J. Sabol.
5527
5528 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
5529
5530         * url.c (construct): Handle the case where host name is not
5531         followed by a slash.
5532
5533 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
5534
5535         * init.c: commands[] need to be sorted!  ("base" wasn't.)
5536
5537 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5538
5539         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
5540         `if'.
5541
5542 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5543
5544         * url.c (construct): Insert unneeded initialization for the
5545         compiler to shut up.
5546
5547         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
5548         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
5549         otherwise gets lost when you define _XOPEN_SOURCE.
5550
5551         * utils.c (touch): Include the file name in the error message.
5552         From Debian.
5553
5554 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5555
5556         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
5557         resize the buffer to fit the formated message.  That way, messages
5558         of arbitrary size may be printed.
5559         (logvprintf): Use saved_append() to optionally log the last
5560         several lines of output.
5561         (logputs): Ditto.
5562         (log_close): Adapt to new data structures.
5563         (log_dump): Ditto.
5564         (redirect_output): Print messages to stderr, not to stdout.
5565
5566         * log.c (saved_append_1): New function.  Replaces the old logging
5567         system ("log all output until 10M characters") with a new, much
5568         more reasonable one ("log last screenful of text").
5569         (saved_append): New function; call saved_append_1.
5570         (free_log_line): New function.
5571
5572 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
5573
5574         * url.c (construct): Fix comment.
5575         (find_last_char): Document.
5576
5577 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
5578
5579         * snprintf.c: New file.
5580
5581 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
5582
5583         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
5584         types to logprintf() and debug_logprintf().
5585
5586 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5587
5588         * ftp.c (ftp_loop_internal): Hide the password from the URL when
5589         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
5590         <darekm@bydg.lomac.com.pl>.
5591
5592 2000-11-02  Junio Hamano  <junio@twinsun.com>
5593
5594         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
5595
5596 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
5597
5598         * http.c (known_authentication_scheme_p): Recognize NTML
5599         authentication.
5600         (create_authorization_line): Treat NTML the same as `Basic'.
5601
5602 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5603
5604         * retr.c (retrieve_url): Free url before returning.
5605         (retrieve_url): Free mynewloc before returning.
5606         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
5607
5608 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
5609
5610         * url.c (parseurl): Remove possible reading past the end of
5611         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
5612
5613 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5614
5615         * main.c (main): In case of opt.downloaded overflowing, print
5616         <overflow> instead of a totally bogus random value.
5617
5618         * retr.c (retrieve_from_file): Ditto.
5619
5620         * recur.c (recursive_retrieve): Ditto.
5621
5622         * main.c (main): Ditto.
5623
5624         * http.c (http_loop): Ditto.
5625
5626         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
5627         `+=', and downloaded_exceeds_quota() instead of the simple-minded
5628         check.
5629         (ftp_retrieve_list): Ditto.
5630         (ftp_retrieve_dirs): Ditto.
5631         (ftp_retrieve_glob): Ditto.
5632
5633         * retr.c (downloaded_increase): New function.  Notice overflows of
5634         opt.downloaded.
5635         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
5636         used if it overflowed.
5637
5638         * options.h (struct options): New member downloaded_overflow.
5639
5640 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5641
5642         * wget.h (enum): Remove extra space after last enumeration.
5643
5644 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5645
5646         * main.c (main): Use legible_very_long() for printing
5647         opt.downloaded.
5648
5649         * utils.c (legible_1): New function that operates on strings and
5650         does the brunt of legible()'s work.
5651         (legible): Use legible_1().
5652         (legible_very_long): New function; dump the argument with
5653         sprintf(), and call legible_1().
5654
5655         * options.h (struct options): Use VERY_LONG_TYPE for
5656         opt.downloaded.
5657
5658         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
5659         type.
5660
5661         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
5662         defined.  Define HAVE_LONG_LONG if long long is available.
5663
5664 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5665
5666         * utils.c (long_to_string): Update with a later, better version.
5667
5668 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5669
5670         * url.c (path_simplify_with_kludge): New function.
5671         (path_simplify_with_kludge): Disable it.  Instead...
5672         (parse_dir): ...make sure that at this point the right thing is
5673         done, i.e. that "query" part of the URL (?...) is always assigned
5674         to the file, never to the directory portion of the path.
5675
5676 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5677
5678         * retr.c (retrieve_url): Detect redirection cycles.
5679
5680 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5681
5682         * url.c (get_urls_html): Decode HTML entities using
5683         html_decode_entities.
5684
5685         * html.c (htmlfindurl): Don't count the `#' in numeric entities
5686         (&#NNN;) as an HTML fragemnt.
5687         (html_decode_entities): New function.
5688
5689 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5690
5691         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
5692
5693 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
5694
5695         * url.c (construct): Rewritten for clarity.  Avoids the
5696         unnecessary copying and stack-allocation the old version
5697         performed.
5698
5699 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5700
5701         * ftp.c (getftp): Ditto.
5702
5703         * http.c (gethttp): Rewind the stream when retrying from scratch.
5704
5705 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
5706
5707         * retr.c (retrieve_url): Use url_concat() to handle relative
5708         redirections instead of /ad hoc/ code.
5709
5710         * url.c (url_concat): New function encapsulating weird
5711         construct().
5712         (urllen_http_hack): New function.
5713         (construct): When constructing new URLs, recognize that `?' does
5714         not form part of the file name in HTTP.
5715
5716 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
5717
5718         * retr.c: Add msec timing support for WINDOWS.
5719         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
5720         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
5721
5722 2000-10-27  Dan Harkless  <wget@harkless.org>
5723
5724         * retr.c (retrieve_url): Manually applied T. Bharath
5725         <TBharath@responsenetworks.com>'s patch to get wget to grok
5726         illegal relative URL redirects.  Reformatted and re-commented it.
5727
5728 2000-10-23  Dan Harkless  <wget@harkless.org>
5729
5730         * connect.c (make_connection and bindport): Manually applied Rob
5731         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
5732         changing coding style to GNU's.
5733
5734         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
5735         files downloaded via FTP.  Per a comment, .listing files were not
5736         counted towards number of bytes and files downloaded because they're 
5737         deleted anyway.  Well, they aren't under -nr, so count them then.
5738
5739         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
5740         --bind-address, alphabetizing, changing coding style to GNU's,
5741         commenting, and renaming cmd_ip_address() to cmd_address() to
5742         imply hostnames also okay.
5743                 
5744         * main.c (main): --delete-after didn't delete the root of the
5745         tree.  Ignore --convert-links if --delete-after was specified.
5746         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
5747         fixing duplicate use of added-since-1.5.3 case value.
5748         (print_help): Clarified that --delete-after deletes local files.
5749         Rob forgot to add a line for his new --bind-address option.
5750                 
5751         * options.h (struct options): Manually applied Rob Mayoff's patch
5752         to add --bind-address (bind_address structure member).
5753                 
5754         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
5755         Ignore --convert-links if --delete-after was specified.
5756                 
5757         * retr.c (retrieve_from_file): Just added a DEBUGP().
5758                 
5759 2000-10-19  Dan Harkless  <wget@harkless.org>
5760
5761         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
5762         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
5763         patch to work around FTP servers that incorrectly respond to the
5764         "REST" command with the remaining size rather than the total file size.
5765                 
5766         * http.c (gethttp): Improved a comment and added code to tack on
5767         ".html" to text/html files without that extension when -E specified.
5768         (http_loop): Use new downloaded_file() enumerators and deal with
5769         the case of gethttp() called xrealloc() on u->local.
5770
5771         * init.c (commands): Added new "htmlextension" command.
5772         Also renamed John Daily's cmd_quad() to the more descriptive
5773         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
5774         removed duplicate cmd_boolean() declaration.
5775
5776         * main.c (print_help): Added my new -E / --html-extension option.
5777         (main): Undocumented --email-address option previously used -E synonym.
5778         Stole it away for the much more deserving --html-extension's use.
5779
5780         * options.h (struct options): Added html_extension field.
5781
5782         * url.c (convert_links): URL X that we saved as X.html locally due
5783         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
5784         (downloaded_file): Now remembers if we added .html extension to a file.
5785
5786         * url.h (downloaded_file_t): Added extra enumerators to support above.
5787         (downloaded_file): Now takes and returns a downloaded_file_t.
5788
5789         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
5790         
5791 2000-10-09  Dan Harkless  <wget@harkless.org>
5792
5793         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
5794                 
5795         * main.c (print_help): Clarified what --retr-symlinks does.
5796         
5797 2000-09-15  John Daily  <jdaily@cyberdude.com>
5798
5799         * init.c: Add support for "always" and "never" values to allow
5800         .wgetrc to override commandline (useful e.g. with .pm files
5801         calling `wget --passive-ftp' when your firewall doesn't allow that).
5802
5803         * ftp.c (getftp): passive_ftp is first option to support always/never.
5804
5805 2000-08-30  Dan Harkless  <wget@harkless.org>
5806
5807         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
5808         
5809         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
5810         Wrapped some > 80-column lines.  When -p is specified and we're at a 
5811         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
5812         <LINK REL="stylesheet">.
5813         
5814         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
5815         
5816         * init.c: Added new -p / --page-requisites / page_requisites option.
5817
5818         * main.c (print_help): Clarified that -l inf and -l 0 both allow
5819         infinite recursion.  Changed the unhelpful --mirrior description
5820         to simply give the options it's equivalent to.  Added new -p option.
5821         (main): Added some comments; handle new -p / --page-requisites.
5822         
5823         * options.h (struct options): Added new page_requisites field.
5824
5825         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
5826         Calculate and pass down new `dash_p_leaf_HTML' parameter to
5827         get_urls_html().  Use new INFINITE_RECURSION #define.
5828
5829         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
5830         final `dash_p_leaf_HTML' parameter.
5831
5832         * url.c: get_urls_html() and htmlfindurl() now take final
5833         `dash_p_leaf_HTML' parameter.
5834
5835         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
5836
5837         * wget.h: Added some comments and new INFINITE_RECURSION #define.
5838         
5839 2000-08-23  Dan Harkless  <wget@harkless.org>
5840
5841         * main.c (print_help): -B / --base was not mentioned.
5842
5843 2000-08-22  Dan Harkless  <wget@harkless.org>
5844
5845         * main.c (print_help): Modified -nc description to mention that it
5846         also prevents the creation of multiple versions of the same file
5847         with ".<number>" suffixes.
5848
5849 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
5850
5851         * retr.c (retrieve_url): Consistently strdup opt.referer when
5852         setting u->referer.
5853
5854 2000-06-09  Dan Harkless  <wget@harkless.org>
5855
5856         * main.c (print_help): --help output for --waitretry was over 80 cols.
5857
5858 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
5859
5860         * url.c (encode_string): Fix comment.
5861         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
5862
5863 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
5864
5865         * ftp.c (ftp_retrieve_list): Change permissions only on plain
5866         files.
5867
5868 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
5869
5870         * url.c (str_url): Print the port number only if it's different
5871         from the default port number for that protocol.
5872
5873 2000-05-22  Dan Harkless  <wget@harkless.org>
5874
5875         * main.c (print_help): Added --help line for Damir Dzeko
5876         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
5877         Removed comments that --referer and --waitretry were undocumented.
5878         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
5879         line for --execute.
5880
5881 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
5882
5883         * ftp.c (getftp): Ditto.
5884
5885         * http.c (gethttp): Check for return value of fclose/fflush.
5886
5887 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
5888
5889         * host.c (store_hostaddress): Instead of shifting ADDR, start
5890         copying from the correct address.
5891
5892 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
5893
5894         * http.c (gethttp): Don't free REQUEST -- it was allocated with
5895         alloca().
5896         Pointed out by Gisle Vanem <gvanem@eunet.no>.
5897
5898 2000-04-04  Dan Harkless  <wget@harkless.org>
5899
5900         * host.c (store_hostaddress): R. K. Owen's patch introduces a
5901         "left shift count >= width of type" warning on 32-bit
5902         architectures.  Got rid of it by tricking the compiler w/ a variable.
5903         
5904         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
5905         characters per RFC1738, namely everything above '~'.  It also
5906         generated a warning on OSes where char =~ unsigned char.  Fixed.
5907         
5908 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5909
5910         * http.c (http_process_type): Removed needless strdup(), a memory
5911         leak.
5912
5913 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
5914
5915         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
5916
5917 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
5918
5919         * init.c (wgetrc_file_name): Don't free HOME under Windows.
5920
5921 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
5922
5923         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
5924
5925 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
5926
5927         * url.c (UNSAFE_CHAR): New macro.
5928         (contains_unsafe): Use it.
5929         (encode_string): Ditto.
5930
5931 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
5932
5933         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
5934
5935 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5936
5937         * Use TOUPPER/TOLOWER.
5938
5939 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
5940
5941         * ftp-opie.c (btoe): Zero-terminate OSTORE.
5942
5943 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
5944
5945         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
5946
5947         * sysdep.h (ISALNUM): New macro.
5948         (TOLOWER): Ditto.
5949         (TOUPPER): Ditto.
5950
5951 2000-03-10  Dan Harkless  <wget@harkless.org>
5952
5953         * html.c (idmatch): Implemented checking of my new --follow-tags
5954         and --ignore-tags options.
5955         
5956         * init.c (commands): Added comment reminding people adding new
5957         entries doing allocation to add corresponding freeing in cleanup().
5958         (commands): Added new followtags and ignoretags commands.
5959         (cleanup): Free storage for new followtags and ignoretags.
5960         
5961         * main.c: Use of "comma-separated list" was random -- normalized
5962         it.  Did some alphabetization.  Added comments pointing out
5963         "Options without arguments" and "Options accepting an argument"
5964         sections of long_options[].  Added new options --follow-tags and
5965         -G / --ignore-tags.  Added comment that Damir's --referer is
5966         currently undocumented.  Added comment that Heiko's --waitretry is
5967         partially undocumented (mentioned in --help but not in
5968         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
5969         
5970         * options.h (struct options): Added new fields follow_tags and
5971         ignore_tags. 
5972         
5973         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
5974         
5975 2000-03-02  Dan Harkless  <wget@harkless.org>
5976
5977         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
5978         braces to avoid ambiguous `else'" warnings.  Eliminated them.
5979         
5980         * http.c (gethttp): Dan Berger's query string patch is totally
5981         bogus.  If you have two different URLs, gen_page.cgi?page1 and
5982         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
5983         second will overwrite the first.  Also, parameters to implicit
5984         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
5985         be printed with trailing garbage characters, and could seg fault.
5986         Backing out the patch, which Dan B. informed me by email was just
5987         a kludge to download StarOffice from Sun made necessary due to
5988         wget's unconditional escaping of certain characters (room for an
5989         option there?).
5990         (http_loop): Heiko introduced "suggest explicit braces to avoid
5991         ambiguous `else'" warnings.  Eliminated them.
5992         
5993         * main.c: Heiko's --wait / --waitretry backwards compatibility
5994         code looks to have been totally untested -- automatic variable
5995         'wr' was used without being initialized, and a long int was passed
5996         into setval()'s char* val parameter.
5997         
5998         * recur.c (parse_robots): Applied Edward J. Sabol
5999         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
6000         problem with "User-agent:<space>*<space>" lines in robots.txt.
6001         
6002         * url.c (parseurl, str_url): Removing Dan Berger's code (see
6003         http.c above for explanation).
6004         
6005 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
6006
6007         * ftp.c: Respect new option waitretry.
6008
6009 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
6010
6011         * http.c (gethttp): Send custom Referer, if required.
6012
6013 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
6014
6015         * netrc.c (parse_netrc): Allow passwords to contain spaces.
6016
6017         * netrc.c (parse_netrc): New function.
6018
6019 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
6020
6021         * http.c (gethttp): Send it.
6022
6023         * url.c (parseurl): Detect query string in HTTP URL-s.
6024         (str_url): Print it.
6025
6026 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
6027
6028         * html.c (html_allow): Add <link href=...> and <script src=...>.
6029
6030 1999-05-02  andrew deryabin  <djsf@softhome.net>
6031
6032         * http.c (gethttp): Specify port in `Host' header only if it's
6033         different from 80.
6034
6035 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
6036
6037         * recur.c (recursive_retrieve): If a finite maximum depth is
6038         specified, and we're are already at that depth, don't download the
6039         HTML file for parsing.
6040
6041 2000-03-01  Dan Harkless  <wget@harkless.org>
6042
6043         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
6044         even though we don't do conversion on HTML files retrieved via
6045         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
6046         (ftp_retrieve_list): Added a comment saying where we need to
6047         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
6048         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
6049         a lie -- reworded as "Server file no newer than local file '%s' --".
6050         
6051         * http.c (http_loop): Fixed a typo and clarified a comment.
6052         (http_loop): When -K and -N are specified together, compare size
6053         and timestamp of server file X against local file X.orig (if
6054         extant) rather than converted local file X.
6055         (http_loop): "Local file '%s' is more recent," is sometimes a lie
6056         -- reworded as "Server file no newer than local file '%s' --".
6057         (http_loop): Call new downloaded_file() function to prevent
6058         wrongful overwriting of .orig file when -N is specified.
6059         
6060         * url.c (convert_links): When -K specified, only rename X to
6061         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
6062         file X due to -N, we clobber an X.orig from a previous invocation.
6063         (convert_links): Call the failsafe xstrdup(), not the real strdup().
6064         (convert_links): Added a note asking anyone who understands how
6065         multiple URLs can correspond to a single file to comment it.
6066         (downloaded_file): Added this new function.
6067         
6068         * url.h (downloaded_file): Added prototype for this new function
6069         as well as its downloaded_file_t enum type.
6070
6071         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
6072
6073 2000-02-29  Dan Harkless  <wget@harkless.org>
6074
6075         * version.c: Upped version to developer-only "1.5.3+dev".
6076
6077 2000-02-18  Dan Harkless  <wget@harkless.org>
6078
6079         * init.c (backup_converted): Added this new option.
6080
6081         * main.c (-K / --backup-converted): Added this new option.
6082
6083         * options.h (backup_converted): Added this new option.
6084
6085         * url.c (convert_links): When backup_converted is specified, save
6086         file X as X.orig before converting.
6087
6088         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
6089
6090 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
6091
6092         * version.c: Wget 1.5.3 is released.
6093
6094 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
6095
6096         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
6097         address doesn't yield FQDN.
6098
6099 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
6100
6101         * cmpt.c (strerror): Fix declaration of sys_errlist.
6102
6103 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6104
6105         * main.c (main): Don't use an array subscript as the first
6106         argument to STRDUP_ALLOCA.
6107         From Kaveh R. Ghazi.
6108
6109 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
6110
6111         * html.c (htmlfindurl): Download table background.
6112
6113 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
6114
6115         * init.c (parse_line): Would free *com before allocating it.
6116         (parse_line): Would free com instead of *com.
6117
6118 1998-09-10  Howard Gayle  <howard@fjst.com>
6119
6120         * url.c (get_urls_html): Would drop the last character of the
6121         link.
6122
6123 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6124
6125         * http.c (http_loop): Don't print status code if quiet.
6126
6127 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
6128
6129         * log.c: Use <stdarg.h> only when __STDC__.
6130
6131 1998-09-10  Adam D. Moss  <adam@foxbox.org>
6132
6133         * html.c (htmlfindurl): Download <layer src=...>.
6134
6135 1998-09-10  Howard Gayle  <howard@fjst.com>
6136
6137         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
6138         not retrieved.
6139
6140 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6141
6142         * utils.c: Include <libc.h> on NeXT.
6143
6144 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
6145
6146         * url.c (get_urls_html): Fix calculation of URL position.
6147
6148 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6149
6150         * version.c: Wget 1.5.2 is released.
6151
6152 1998-06-23  Dave Love  <d.love@dl.ac.uk>
6153
6154         * ftp.c, init.c, netrc.c: Include errno.h.
6155
6156         * http.c: Include errno.h and time header.
6157
6158         * Makefile.in (exext): Define.
6159         (install.bin, uninstall.bin): Use it.
6160
6161 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6162
6163         * http.c (http_loop): Don't attempt to compare local and remote
6164         sizes if the remote size is unknown.
6165
6166 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
6167
6168         * url.c (get_urls_html): Use malloc() instead of alloca in the
6169         loop.
6170
6171 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
6172
6173         * version.c: Wget 1.5.2-b4 is released.
6174
6175 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
6176
6177         * url.c (get_urls_html): Ignore spaces before and after the URI.
6178
6179 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
6180
6181         * ftp.c (getftp): Translate `done'.
6182
6183 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
6184
6185         * version.c: Wget 1.5.2-b3 is released.
6186
6187 1998-06-06  Alexander Kourakos  <awk@bnt.com>
6188
6189         * init.c (cleanup): Close dfp, don't free it.
6190
6191 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
6192
6193         * utils.c (make_directory): Twiddle.
6194
6195         * config.h.in: Added template for access().
6196
6197 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
6198
6199         * html.c (htmlfindurl): Download <input src=...>
6200
6201 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
6202
6203         * utils.c (file_exists_p): Use access() with two arguments.
6204
6205 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
6206
6207         * netrc.c (parse_netrc): Correct logic.
6208
6209 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
6210
6211         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
6212         <ljm@ljm.wownet.net>.
6213
6214 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
6215
6216         * version.c: Wget 1.5.2-b2 is released.
6217
6218 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
6219
6220         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
6221
6222 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
6223
6224         * retr.c (elapsed_time): Return correct value when
6225         HAVE_GETTIMEOFDAY is undefined.
6226
6227 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
6228
6229         * version.c: Wget 1.5.2-b1 is released.
6230
6231 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
6232
6233         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
6234         (_getopt_internal): Don't translate `#if 0'-ed strings.
6235
6236 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
6237
6238         * mswindows.c (ws_handler): Use fork_to_background().
6239
6240 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
6241
6242         * version.c: Wget 1.5.1 is released.
6243
6244 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
6245
6246         * http.c (parse_http_status_line): Avoid `minor' and `major'
6247         names.
6248
6249 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
6250
6251         * utils.c (mkdirhier): Renamed to make_directory.
6252
6253 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
6254
6255         * mswindows.c (fork_to_background): Define under Windows.
6256
6257         * utils.c (fork_to_background): New function.
6258
6259         * html.c (htmlfindurl): Removed rerdundant casts.
6260
6261 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
6262
6263         * mswindows.c (ws_mypath): Cache the path.
6264
6265 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
6266
6267         * ftp.h: Prefix enum ftype members with FT_.
6268
6269         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
6270
6271         * mswindows.h: Use stat under Borland, _stat under MSVC.
6272
6273 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
6274
6275         * http.c (known_authentication_scheme_p): New function.
6276         (gethttp): Handle authorization more correctly.
6277
6278         * ftp-basic.h: Removed.
6279
6280         * cmpt.h: Removed.
6281
6282         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
6283         with gcc 2.8.
6284         (numdigit): Use `while' loop.
6285
6286         * http.c (create_authorization_line): Detect authentication
6287         schemes case-insensitively.
6288
6289         * http.c (extract_header_attr): Use strdupdelim().
6290         (digest_authentication_encode): Move declaration of local
6291         variables to smaller scope.
6292         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
6293         (create_authorization_line): Detect authentication schemes
6294         case-insensitively.
6295
6296         * utils.c (touch): Constify.
6297
6298         * http.c (gethttp): Report a nicer error when no data is received.
6299
6300         * rbuf.h (RBUF_READCHAR): Ditto.
6301
6302         * ftp-basic.c (ftp_response): Use sizeof.
6303
6304 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
6305
6306         * retr.c (print_percentage): EXPECTED is long, not int.
6307         (print_percentage): Use floating-point arithmetic to avoid
6308         overflow with large files' sizes multiplied with 100.
6309
6310 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
6311
6312         * config.h.in: Added pid_t stub.
6313
6314         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
6315         define it).
6316
6317 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
6318
6319         * version.c: Wget 1.5.0 is released.
6320
6321 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
6322
6323         * url.c (str_url): Ditto.
6324
6325         * ftp-basic.c (ftp_rest): Use new name.
6326
6327         * utils.c (long_to_string): Renamed from prnum().
6328
6329 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
6330
6331         * version.c: Wget 1.5-b17 is released.
6332
6333 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
6334
6335         * headers.c (header_get): New argument FLAGS.
6336
6337         * http.c (gethttp): If request is malformed, bail out of the
6338         header loop.
6339         (gethttp): Check for empty header *after* the status line checks.
6340         (gethttp): Disallow continuations for status line.
6341
6342 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
6343
6344         * version.c: Wget 1.5-b16 is released.
6345
6346 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
6347
6348         * init.c (commands): Renamed `always_rest' to `continue'.
6349
6350 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
6351
6352         * all: Use it.
6353
6354         * log.c (logputs): New argument.
6355         (logvprintf): Ditto.
6356         (logprintf): Ditto.
6357
6358 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
6359
6360         * http.c (http_atotm): Update comment.
6361
6362         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
6363
6364         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
6365
6366         * main.c (i18n_initialize): New function.
6367         (main): Use it.
6368
6369         * log.c: Include <unistd.h>.
6370
6371         * retr.c (show_progress): Cast alloca to char *.
6372
6373 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
6374
6375         * version.c: Wget 1.5-b15 is released.
6376
6377 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
6378
6379         * utils.h: Declare file_non_directory_p().
6380
6381 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
6382
6383         * main.c (main): It's `tries', not `numtries' now.
6384
6385 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
6386
6387         * init.c (getperms): Removed.
6388
6389 1998-04-01  Tim Charron  <tcharron@interlog.com>
6390
6391         * log.c (logvprintf): Don't use ARGS twice.
6392
6393 1998-04-01  John  <john@futuresguide.com>
6394
6395         * mswindows.c: Cleaned up.
6396
6397 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
6398
6399         * version.c: Wget 1.5-b14 is released.
6400
6401 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
6402
6403         * ftp-opie.c (STRLEN4): New macro.
6404         (btoe): Use it.
6405
6406 1998-04-01  Junio Hamano  <junio@twinsun.com>
6407
6408         * http.c: Document all the Digest functions.
6409
6410 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
6411
6412         * utils.c (file_non_directory_p): Renamed from isfile().
6413
6414         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
6415
6416 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
6417
6418         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
6419
6420         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
6421         style.
6422         (cmd_permissions): Removed.
6423
6424         * config.h.in: Add template for WORDS_BIGENDIAN.
6425
6426 1998-03-31  Junio Hamano  <junio@twinsun.com>
6427
6428         * http.c (HEXD2asc): New macro.
6429         (dump_hash): Use it.
6430
6431 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
6432
6433         * version.c: Wget 1.5-b13 is released.
6434
6435 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
6436
6437         * main.c (main): Don't try to use `com'.
6438
6439 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
6440
6441         * init.c (cmd_permissions): New function.
6442
6443 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
6444
6445         * version.c: Wget 1.5-b12 is released.
6446
6447 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
6448
6449         * init.c (commands): Renamed `numtries' to `tries'.
6450         (cmd_spec_debug): Removed.
6451         (home_dir): Under Windows, return `C:\' if HOME is undefined.
6452
6453 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
6454
6455         * config.h.in: Define _XOPEN_SOURCE.
6456
6457         * init.c (check_user_specified_header): New function.
6458         (cmd_spec_header): Use it.
6459         (cmd_spec_useragent): New function.
6460
6461 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
6462
6463         * version.c: Wget 1.5-b11 is released.
6464
6465 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
6466
6467         * wget.h: Include <libintl.h> only if NLS is enabled.
6468
6469 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
6470
6471         * options.h (struct options): Made `wait' a long.
6472         (struct options): Ditto for `timeout'.
6473
6474 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
6475
6476         * utils.c (exists): Renamed to file_exists_p.
6477         (file_exists_p): Use access() if available.
6478
6479 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
6480
6481         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
6482         infloop.
6483
6484         * log.c: do_logging -> save_log_p.
6485
6486         * config.h.in: Added template for HAVE_VSNPRINTF.
6487
6488 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
6489
6490         * init.c: Ditto.
6491
6492         * http.c: Protect declaration against non-ANSI compiler.
6493
6494         * log.c (logvprintf): Use vsnprintf() if available.
6495
6496         * getopt.c (main): Don't translate test stuff.
6497
6498 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
6499
6500         * version.c: Wget 1.5-b10 is released.
6501
6502 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
6503
6504         * ftp.c (getftp): Don't translate "CWD %s".
6505
6506         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
6507
6508 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
6509
6510         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
6511
6512         * log.c (logputs): New function.
6513         (logvprintf): Renamed from vlogmsg; use logputs().
6514
6515         * retr.c (show_progress): Print `[100%]' when the retrieval is
6516         finished.
6517
6518         * init.c (run_wgetrc): Use FILE, not PATH.
6519         (wgetrc_file_name): Ditto.
6520
6521 1998-03-07  Tim Adam  <tma@osa.com.au>
6522
6523         * recur.c (parse_robots): Correctly reset `entries' on empty
6524         disallow.
6525
6526 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
6527
6528         * init.c (cmd_spec_debug): Use cmd_boolean().
6529
6530 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
6531
6532         * http.c (gethttp): Create proxy-authorization correctly.
6533
6534 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
6535
6536         * md5.c: Ditto.
6537
6538         * getopt.c: Use ANSI function definitions.
6539
6540         * ftp-opie.c: New file.
6541
6542         * options.h: Don't redefine EXTERN.
6543
6544         * init.c: Sort it correctly.
6545
6546 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
6547
6548         * version.c: Wget 1.5-b9 is released.
6549
6550 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
6551
6552         * recur.c (recursive_retrieve): Reset `first_time'.
6553
6554         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
6555
6556         * rbuf.c (rbuf_peek): Simplified.
6557         (rbuf_flush): Use MINVAL.
6558
6559         * wget.h (MINVAL): Moved from url.h.
6560
6561         * rbuf.h (RBUF_FD): New macro.
6562
6563         * url.c (add_url): Add to the head of the list.
6564
6565         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
6566         file.
6567         (getftp): Set the default permissions to 0600.
6568
6569 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
6570
6571         * url.c (get_urls_html): Ditto.
6572         (convert_links): Ditto.
6573
6574         * recur.c (parse_robots): Ditto.
6575
6576         * html.c (ftp_index): Ditto.
6577
6578         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
6579
6580         * init.c (defaults): Initialize `opt' to zero via memset.
6581
6582         * http.c (digest_authentication_encode): goto considered harmful.
6583
6584 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
6585
6586         * ftp.c (delelement): Simplify and fix leak.
6587
6588 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
6589
6590         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
6591
6592         * url.h (HEXD2ASC): Removed warning.
6593
6594         * init.c (comind): Use binary search.
6595         (commands): Reorganized.
6596         (setval): Ditto.
6597         (cmd_boolean): New function.
6598         (cmd_number): Ditto.
6599         (cmd_number_inf): Ditto.
6600         (cmd_string): Ditto.
6601         (cmd_vector): Ditto.
6602         (cmd_directory_vector): Ditto.
6603         (cmd_bytes): Ditto.
6604         (cmd_time): Ditto.
6605         (cmd_spec_debug): Ditto.
6606         (cmd_spec_dirmode): Ditto.
6607         (cmd_spec_dirstruct): Ditto.
6608         (cmd_spec_dotstyle): Ditto.
6609         (cmd_spec_header): Ditto.
6610         (cmd_spec_htmlify): Ditto.
6611         (cmd_spec_mirror): Ditto.
6612         (cmd_spec_outputdocument): Ditto.
6613         (cmd_spec_recursive): Ditto.
6614         (settime): Merged with cmd_time().
6615         (setbytes): Merged with cmd_bytes().
6616         (setonoff): Merged with cmd_boolean().
6617         (onoff): Ditto.
6618
6619 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
6620
6621         * Makefile.in (distclean): Remove `config.h'.
6622
6623 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
6624
6625         * version.c: Wget 1.5-b8 is released.
6626
6627 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
6628
6629         * http.c (digest_authentication_encode): New function.
6630         (create_authorization_line): Use it.
6631         (dump_hash): New function.
6632         (digest_authentication_encode): Use it.
6633
6634         * fnmatch.c: Renamed from `mtch.c'.
6635
6636 1998-02-15  Karl Eichwalder  <ke@suse.de>
6637
6638         * main.c (main): Tag "Written by..." string as translatable.
6639
6640 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
6641
6642         * wget.h (FREE_MAYBE): New macro.
6643
6644         * http.c (create_authorization_line): Don't use ANSI C string
6645         concatenation feature.
6646         (basic_authentication_encode): Use alloca() for temporary
6647         variables.
6648
6649         * recur.h: Ditto.
6650
6651         * http.c: Ditto.
6652
6653         * headers.h: Ditto.
6654
6655         * ftp-basic.c: Protect declaration against non-ANSI compiler.
6656
6657         * http.c (create_authorization_line): Cast `unsigned char *' to
6658         `char *' for sprintf, to shut up the noisy Digital Unix cc.
6659
6660 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
6661
6662         * version.c: Wget 1.5-b7 is released.
6663
6664 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
6665
6666         * cmpt.c (strstr): Synched with glibc-2.0.6.
6667
6668         * ftp-basic.c (calculate_skey_response): Ditto.
6669         (calculate_skey_response): Use alloca().
6670
6671         * http.c (create_authorization_line): Work with FSF's version of
6672         md5.c.
6673
6674         * md5.c: New file, from GNU libc.
6675
6676 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
6677
6678         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
6679
6680 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
6681
6682         * http.c (basic_authentication_encode): New function, instead of
6683         the macro.
6684
6685 1998-02-13  Junio Hamano  <junio@twinsun.com>
6686
6687         * http.c: Add HTTP-DA support.
6688         * ftp-basic.c: Add Opie/S-key support.
6689         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
6690         * md5.c, md5.h: New files.
6691
6692 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
6693
6694         * http.c (http_process_range): Renamed from hprocrange().
6695         (http_process_range): Parse the whole header.
6696
6697         * headers.c: New file.
6698         (header_process): New function.
6699         (header_get): Renamed from fetch_next_header.
6700
6701         * all: Include utils.h only where necessary.
6702
6703         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
6704
6705         * wget.h: Add provisions for dmalloc.
6706
6707 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
6708
6709         * version.c: Wget 1.5-b6 is released.
6710
6711 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
6712
6713         * ftp.c (ftp_loop): Determine `filename' more precisely.
6714
6715         * init.c (setval): Don't set `opt.quiet' if output-document is
6716         `-'.
6717
6718         * log.c (log_init): Print to STDERR instead of STDOUT.
6719         (vlogmsg): Use STDERR by default.
6720         (logflush): Ditto.
6721
6722 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
6723
6724         * host.c: Use addr_in again.
6725
6726 1998-02-08  Karl Eichwalder  <karl@suse.de>
6727
6728         * http.c (gethttp): Fixed typo.
6729
6730 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
6731
6732         * version.c: Wget 1.5-b5 is released.
6733
6734 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
6735
6736         * retr.c (show_progress): Use it.
6737
6738         * log.c (logflush): New function.
6739
6740         * wget.h: Utilize __attribute__ if on gcc.
6741
6742 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
6743
6744         * http.c (base64_encode_line): New argument LENGTH.
6745         (BASIC_AUTHENTICATION_ENCODE): Use it.
6746         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
6747
6748         * main.c (main): Fixed fprintf() format mismatch.
6749
6750 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
6751
6752         * version.c: Wget 1.5-b4 is released.
6753
6754 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
6755
6756         * host.c: use sockaddr_in instead of addr_in.
6757
6758 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
6759
6760         * init.c (cleanup): Use it.
6761
6762         * recur.c (recursive_cleanup): New function.
6763
6764         * retr.c (retrieve_from_file): Ditto.
6765
6766         * main.c (main): Use it.
6767
6768         * recur.c (recursive_reset): New function.
6769
6770         * retr.c (retrieve_from_file): Ditto.
6771
6772         * main.c (main): Simplify call to recursive_retrieve().
6773
6774         * recur.c (recursive_retrieve): Removed FLAGS argument.
6775
6776         * http.c (gethttp): Changed call to iwrite().
6777
6778 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
6779
6780         * url.c (get_urls_html): Ditto.
6781         (free_urlpos): Ditto.
6782         (mkstruct): Ditto.
6783         (construct): Ditto.
6784
6785         * retr.c (retrieve_url): Move declaration of local variables to
6786         smaller scope.
6787
6788         * url.c (urlproto): Use it.
6789         (parseurl): Ditto.
6790         (str_url): Ditto.
6791         (get_urls_html): Ditto.
6792
6793         * utils.h (ARRAY_SIZE): New macro.
6794
6795         * url.c (proto): Moved from url.h.
6796
6797         * url.h (URL_CLEANSE): Reformatted.
6798         (USE_PROXY_P): Renamed from USE_PROXY.
6799
6800         * ftp-basic.c: Adjust to the new interface of iwrite().
6801
6802         * ftp-basic.c (ftp_port): Use alloca().
6803
6804 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
6805
6806         * version.c: Wget 1.5-b3 is released.
6807
6808         * host.c (ftp_getaddress): Don't print to stderr directly.
6809
6810         * init.c (setbytes): Support `g' for gigabytes.
6811         (cmdtype): New specification CTIME.
6812         (setval): Use it with settime().
6813         (commands): Use it for WAIT and TIMEOUT.
6814
6815 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
6816
6817         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
6818         (gethttp): Use it.
6819
6820         * utils.c (unique_name_1): Moved from url.c.
6821         (unique_name): Ditto.
6822
6823         * url.c (url_filename): Ditto.
6824
6825         * log.c (redirect_output): Changed call to unique_name().
6826
6827         * url.c (unique_name_1): Renamed from unique_name().
6828         (unique_name): Changed interface.
6829
6830         * init.c (enum cmdid): Moved from init.h.
6831         (cmdtype): Ditto.
6832         (struct cmd): Ditto.
6833
6834         * main.c (main): Use it.
6835         (main): Moved `--backups' to not have a short option.
6836
6837         * options.h (struct options): New member BACKGROUND.
6838
6839         * main.c (print_help): Rearranged.
6840         (main): New long options for -n* short options: --no-directories,
6841         --no-host-directories, --non-verbose, --no-host-lookup and
6842         --dont-remove-listing.
6843
6844 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
6845
6846         * main.c (main): Use log_close().
6847
6848         * log.c: New variable LOGFP.
6849         (vlogmsg): Use it.
6850         (redirect_output): Don't open /dev/null; set LOGFP to stdin
6851         instead.
6852         (log_close): New function.
6853
6854         * options.h (struct options): Removed LFILE.
6855
6856         * log.c (log_enable): Removed.
6857
6858         * main.c (main): Use it.
6859
6860         * log.c (log_init): New function.
6861
6862         * url.c (get_urls_html): Removed needless assignment to BASE.
6863
6864         * host.c (add_hlist): Don't set CMP needlessly.
6865
6866         * utils.c (match_backwards): Ditto.
6867         (in_acclist): Ditto.
6868
6869         * url.c (findurl): Ditto.
6870
6871         * netrc.c (parse_netrc): Ditto.
6872
6873         * log.c (log_dump): Ditto.
6874
6875         * html.c (html_quote_string): Ditto.
6876
6877         * ftp-basic.c (ftp_request): Made static.
6878
6879         * connect.c: Made global variables static.
6880
6881         * url.c (construct): Ditto.
6882
6883         * init.c (init_path): Avoid assignment inside `if'-condition.
6884
6885         * ftp.c: Don't include in.h or winsock.h.
6886
6887         * ftp.c (ftp_loop): Use SZ.
6888
6889         * connect.c (bindport): Cast &addrlen to int *.
6890         (conaddr): Ditto.
6891
6892         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
6893
6894 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
6895
6896         * ftp.c (getftp): Initialize opt.ftp_pass here.
6897         (ftp_retrieve_dirs): Use alloca().
6898
6899         * init.c (defaults): Don't initialize opt.ftp_pass.
6900
6901         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
6902         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
6903
6904 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
6905
6906         * recur.c (parse_robots): Check for comments more correctly.
6907
6908         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
6909         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
6910         hostname.
6911
6912 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
6913
6914         * version.c: Wget 1.5-b2 is released.
6915
6916         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
6917
6918         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
6919
6920         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
6921         char.
6922
6923         * log.c: Don't attempt to hide arguments from ansi2knr.
6924
6925         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
6926
6927         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
6928
6929         * ftp.c (getftp): Ditto.
6930
6931         * http.c (gethttp): Use it.
6932
6933         * retr.c (get_contents): New argument EXPECTED; pass it to
6934         show_progress().
6935         (show_progress): New argument EXPECTED; use it to display
6936         percentages.
6937
6938         * init.c (setval): Ditto.
6939
6940         * http.c (gethttp): Ditto.
6941         (http_loop): Ditto.
6942
6943         * ftp.c (getftp): Ditto.
6944         (ftp_loop_internal): Ditto.
6945
6946         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
6947
6948         * sysdep.h (CLOSE): Simplify; use DEBUGP.
6949
6950         * netrc.c (search_netrc): Use alloca().
6951
6952         * init.c (defaults): Initialize no_flush.
6953
6954         * log.c (vlogmsg): Don't flush if no_flush.
6955
6956         * options.h (struct options): New variable no_flush.
6957
6958         * main.c (main): Don't play games with buffering.
6959
6960         * log.c (vlogmsg): Flush the output after every message.
6961
6962 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
6963
6964         * init.c (parse_line): Ditto.
6965
6966         * url.c (get_urls_html): Ditto.
6967
6968         * main.c (main): Don't cast to unsigned char.
6969
6970         * init.c (run_wgetrc): Don't cast to unsigned char.
6971         (parse_line): Accept char instead of unsigned char.
6972
6973         * html.c (htmlfindurl): Use char instead of unsigned char.
6974
6975         * all: Use them.
6976
6977         * sysdep.h: Add wrappers to ctype macros to make them
6978         eight-bit-clean:
6979
6980 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
6981
6982         * html.c (htmlfindurl): Download <img lowsrc=...>
6983
6984         * main.c (main): Ignore SIGPIPE.
6985
6986         * connect.c (select_fd): New argument WRITEP.
6987         (iwrite): Call select_fd().
6988
6989 1997-02-27  Fila Kolodny <fila@ibi.com>
6990
6991         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
6992         one already exists, just skip it.
6993
6994 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
6995
6996         * http.c (gethttp): Cosmetic changes.
6997
6998         * http.c (check_end): Allow `+D...' instead of `GMT'.
6999         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
7000
7001         * url.c (process_ftp_type): New function.
7002         (parseurl): Use it.
7003
7004         * connect.c (iwrite): Allow writing in a few chunks.
7005         (bindport): Made SRV static, so addr can point to it.
7006         (select_fd): Removed HPUX kludge.
7007
7008         * host.c (free_hlist): Incorporated into clean_hosts().
7009
7010 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7011
7012         * host.c (hlist): Made static.
7013         (search_address): Cosmetic change.
7014
7015 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7016
7017         * version.c: Wget v1.5-b1 is released.
7018
7019         * http.c (hgetlen): Use sizeof() to get the header length.
7020         (hgetrange): Ditto.
7021         (hgettype): Ditto.
7022         (hgetlocation): Ditto.
7023         (hgetmodified): Ditto.
7024         (haccepts_none): Ditto.
7025
7026         * main.c (main): Updated `--version' and `--help' output, as per
7027         Francois Pinard's suggestions.
7028
7029         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
7030         textdomain().
7031
7032         * config.h.in: Define stubs for I18N3.
7033
7034         * wget.h: Include libintl.h.
7035
7036 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
7037
7038         * url.c (mkstruct): Check for opt.cut_dirs.
7039         (mkstruct): alloca()-te more, xmalloc() less.
7040
7041         * utils.c (load_file): Check for ferror().
7042
7043         * url.c (get_urls_file): Close only the files we opened.
7044         (get_urls_html): Ditto.
7045         (count_slashes): New function.
7046
7047         * http.h: Removed.
7048
7049         * http.c (gethttp): Respect username and password provided by
7050         proxy URL.
7051         (base64_encode_line): Write into an existing buffer instead of
7052         malloc-ing a new one.
7053         (struct http_stat): Moved from http.h
7054
7055         * retr.c (retrieve_url): Free SUF.
7056
7057         * all: Removed lots of unnecessary .h dependencies.
7058
7059         * html.c (global_state): Made static.
7060
7061         * utils.h (ALLOCA_ARRAY): New macro.
7062
7063         * main.c (main): New option `--cut-dirs'.
7064
7065         * url.c (construct): Use alloca() for T.
7066
7067         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
7068
7069         * host.c (_host_t): Moved from host.h.
7070         (struct host): Renamed from _host_t.
7071         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
7072         (realhost): Ditto.
7073
7074         * host.h: Don't include url.h.
7075
7076         * ftp.c (LIST_FILENAME): Moved from ftp.h.
7077
7078         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
7079
7080         * main.c (main): Enable log if the output goes to a TTY.
7081
7082         * connect.h: Removed unused constant `BACKLOG'.
7083
7084         * config.h.in: Check for isatty().
7085
7086         * Makefile.in (LINK): Use CFLAGS when linking.
7087
7088 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
7089
7090         * mswindows.c (ws_hangup): Use redirect_output().
7091
7092         * main.c (redirect_output_signal): New function; use
7093         redirect_output().
7094
7095         * log.c (redirect_output): New function, based on hangup(), which
7096         is deleted.
7097
7098         * log.c (vlogmsg): New function.
7099
7100         * wget.h (DEBUGP): Use debug_logmsg().
7101
7102         * main.c (hangup): Use it.
7103
7104         * log.c (log_dump): New function.
7105
7106         * utils.h (DO_REALLOC): Use `long' for various sizes.
7107
7108         * http.c (hskip_lws): Use `while', for clarity.
7109         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
7110         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
7111
7112         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
7113         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
7114
7115         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
7116         (LEGIBLE_SEPARATOR): Ditto.
7117         (FILE_BUFFER_SIZE): Ditto.
7118
7119         * retr.c (BUFFER_SIZE): Moved from retr.h.
7120
7121         * log.c: New file.
7122         (logmsg): Moved from utils.c.
7123         (debug_logmsg): New function.
7124
7125         * mswindows.h: Include it here.
7126
7127         * init.c: Ditto.
7128
7129         * utils.c: Don't include <windows.h>.
7130
7131 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
7132
7133         * host.c (ftp_getaddress): Ditto.
7134
7135         * main.c (main): Use it.
7136
7137         * utils.h (STRDUP_ALLOCA): New macro.
7138
7139         * init.c: Prepend `wget: ' to error messages printed on stderr.
7140
7141         * utils.c (mkdirhier): Renamed from mymkdir.
7142         (touch): Renamed from my_touch.
7143         (pwd_cuserid): Renamed from my_cuserid().
7144
7145 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
7146
7147         * utils.c (accdir): Process wildcards.
7148         (proclist): New function.
7149         (accdir): Use it to avoid code repetition.
7150
7151 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
7152
7153         * recur.c (parse_robots): Respect opt.useragent; use alloca().
7154
7155         * http.c (gethttp): Construct useragent accordingly.
7156
7157         * version.c: Changed version string to numbers-only.
7158
7159         * main.c (print_help): List all the options.
7160
7161         * mswindows.c (windows_main_junk): Initialize argv0 here.
7162
7163 1998-01-24  Karl Heuer  <kwzh@gnu.org>
7164
7165         * netrc.c (search_netrc): Initialize `l' only after processing
7166         netrc.
7167
7168         * main.c (main): Don't trap SIGHUP if it's being ignored.
7169
7170 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
7171
7172         * all: Use logmsg().
7173
7174         * utils.c (time_str): Moved from retr.c.
7175         (logmsg): New function.
7176         (logmsg_noflush): Ditto.
7177
7178         * rbuf.c: New file, moved buf_* functions here.
7179
7180         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
7181
7182         * ftp-basic.c (ftp_rest): Use prnum().
7183
7184         * ftp-basic.c: Ditto.
7185
7186         * ftp.c: Use the new reading functions and macros.
7187
7188         * retr.c (buf_initialize): New function.
7189         (buf_initialized_p): Ditto.
7190         (buf_uninitialize): Ditto.
7191         (buf_fd): Ditto.
7192
7193         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
7194         efficiency.
7195         (gethttp): Use alloca() where appropriate.
7196
7197         * retr.c (buf_readchar): Use it.
7198         (buf_peek): Use rstreams.
7199
7200         * retr.h (BUF_READCHAR): New macro.
7201
7202         * init.c (home_dir): Rewritten for clarity.
7203         (init_path): Ditto.
7204
7205         * mswindows.c (ws_backgnd): Made static.
7206         (read_registry): Ditto.
7207         (ws_cleanup): Ditto.
7208         (ws_handler): Ditto.
7209
7210 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
7211
7212         * alloca.c: New file.
7213
7214         * Makefile.in (ALLOCA): Define.
7215
7216         * mswindows.c (ws_help): Constify.
7217         (ws_help): Use alloca.
7218
7219         * mswindows.c: Reformat.
7220
7221         * all: Added _(...) annotations for I18N snarfing and translation.
7222
7223         * host.c (ftp_getaddress): Nuke SYSINFO.
7224         (ftp_getaddress): Don't use getdomainname().
7225         (ftp_getaddress): Use uname(), where available.
7226
7227         * http.c (gethttp): Protect a stray fprintf().
7228
7229         * init.c (settime): New function.
7230         (setval): Treat WAIT specially, allowing suffixes like `m' for
7231         minutes, etc.
7232
7233 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
7234
7235         * url.c (get_urls_html): Use alloca() for TEMP.
7236
7237 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
7238
7239         * url.c (rotate_backups): New function.
7240
7241         * http.c (gethttp): Ditto.
7242
7243         * ftp.c (getftp): Rotate backups.
7244
7245 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
7246
7247         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
7248         xrealloc() and xstrdup().  Use the new functions.
7249
7250         * url.c (decode_string): Made static.
7251         (has_proto): Ditto.
7252         (parse_dir): Ditto.
7253         (parse_uname): Ditto.
7254         (mkstruct): Ditto.
7255         (construct): Ditto.
7256         (construct_relative): Ditto.
7257
7258         * retr.c (show_progress): Made static.
7259
7260         * recur.c (robots_url): Made static.
7261         (retrieve_robots): Ditto.
7262         (parse_robots): Ditto.
7263         (robots_match): Ditto.
7264
7265         * main.h: Removed.
7266
7267         * main.c (printhelp): Made static.
7268         (hangup): Ditto.
7269
7270         * init.c (comind): Made static.
7271         (defaults): Ditto.
7272         (init_path): Ditto.
7273         (run_wgetrc): Ditto.
7274         (onoff): Ditto.
7275         (setonoff): Ditto.
7276         (setnum): Ditto.
7277         (myatoi): Ditto.
7278         (getperms): Ditto.
7279         (setbytes): Ditto.
7280
7281         * http.c (fetch_next_header): Made static.
7282         (hparsestatline): Ditto.
7283         (hskip_lws): Ditto.
7284         (hgetlen): Ditto.
7285         (hgetrange): Ditto.
7286         (hgettype): Ditto.
7287         (hgetlocation): Ditto.
7288         (hgetmodified): Ditto.
7289         (haccepts_none): Ditto.
7290         (gethttp): Ditto.
7291         (base64_encode_line): Ditto.
7292         (mktime_from_utc): Ditto.
7293         (http_atotm): Ditto.
7294
7295         * html.c (idmatch): Made static.
7296
7297         * host.c (search_host): Made static.
7298         (search_address): Ditto.
7299         (free_hlist): Ditto.
7300
7301         * ftp.c (getftp): Made static.
7302         (ftp_loop_internal): Ditto.
7303         (ftp_get_listing): Ditto.
7304         (ftp_retrieve_list): Ditto.
7305         (ftp_retrieve_dirs): Ditto.
7306         (ftp_retrieve_glob): Ditto.
7307         (freefileinfo): Ditto.
7308         (delelement): Ditto.
7309
7310         * ftp-ls.c (symperms): Made static.
7311         (ftp_parse_unix_ls): Ditto.
7312
7313         * connect.c (select_fd): Made static.
7314
7315         * utils.c (xmalloc): Renamed from nmalloc.
7316         (xrealloc): Renamed from nrealloc.
7317         (xstrdup): Renamed from nstrdup.
7318
7319         * getopt.c (exchange): Use alloca.
7320
7321         * mswindows.c (mycuserid): Use strncpy.
7322
7323         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
7324         systhings.h, windecl.h and winjunk.h removed.
7325
7326         * mswindows.c (sleep): New function.
7327
7328         * utils.c: Include <windows.h> under Windows.
7329
7330 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
7331
7332         * url.h (URL_UNSAFE): Change default under Windows.
7333
7334         * retr.c (retrieve_from_file): Respect opt.delete_after.
7335
7336         * main.c (main): Call ws_help on Windows.
7337
7338         * winjunk.c (windows_main_junk): New function.
7339
7340         * main.c (main): Junk-process argv[0].
7341
7342         * http.c (mktime_from_utc): Return -1 if mktime failed.
7343
7344         * http.c (http_loop): Ditto.
7345
7346         * ftp.c (ftp_loop_internal): Change title on Windows when using a
7347         new URL.
7348
7349         * winjunk.c (getdomainname): Lots of functions.
7350
7351 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
7352
7353         * cmpt.c (strptime_internal): Handle years more correctly for
7354         `%y'.
7355
7356 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
7357
7358         * http.c (gethttp): Allocate enough space for
7359         `Proxy-Authorization' header.
7360
7361 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
7362
7363         * version.c: Wget/1.4.5 is released.
7364
7365 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
7366
7367         * retr.c (get_contents): Check return value of fwrite more
7368         carefully.
7369
7370 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
7371
7372         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
7373         year, regardless of century.
7374
7375 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
7376
7377         * utils.c (isfile): Use `lstat' instead of `stat'.
7378
7379 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
7380
7381         * utils.c (numdigit): Use explicit test.
7382
7383 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
7384
7385         * http.c (http_loop): Always use `url_filename' to get u->local.
7386
7387 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
7388
7389         * url.c: Recognize https.
7390
7391 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
7392
7393         * recur.c (recursive_retrieve): Lowercase just the host name.
7394
7395 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
7396
7397         * url.c (get_urls_file): Use the correct test.
7398         (get_urls_html): Ditto.
7399
7400 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
7401
7402         * connect.c: Reverted addrlen to int.
7403
7404         * init.c (parse_line): Check for -1 instead of NONE.
7405
7406         * version.c: Changed version to 1.4.5.
7407
7408 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
7409
7410         * init.c: New option netrc.
7411         (initialize): Don't parse .netrc.
7412
7413         * cmpt.c (recursive): Return rp.
7414         (strptime_internal): Match the long strings first, the abbreviated
7415         second.
7416
7417 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
7418
7419         * http.c (check_end): New function.
7420         (http_atotm): Use it.
7421  
7422 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
7423
7424         * http.c (gethttp): Use them.
7425
7426         * init.c: New options proxy_user and proxy_passwd.
7427
7428 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
7429
7430         * ftp.c (ftp_retrieve_list): Create links even if not relative.
7431
7432 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
7433
7434         * recur.c (recursive_retrieve): Lowercase the host name, if the
7435         URL is not "optimized".
7436
7437         * host.c (realhost): Return l->hostname, even if it matches with
7438         host.
7439
7440 1997-02-10  Marin Purgar  <pmc@asgard.hr>
7441
7442         * connect.c: Make addrlen size_t instead of int.
7443         (conaddr): Ditto.
7444
7445 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
7446
7447         * systhings.h: Define S_ISLNK on NeXT too.
7448
7449 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
7450
7451         * version.c: Released 1.4.3.
7452
7453         * url.c: Futher update to list of protostrings.
7454         (skip_proto): Skip `//' correctly for FTP and HTTP.
7455
7456         * url.c (get_urls_html): Handle bogus `http:' things a little
7457         different.
7458
7459         * main.c (main): Removed `follow-ftp' from `f'.
7460         (main): Dumped the `prefix-files' and `file-prefix' options and
7461         features; old and bogus.
7462         (main): Exit on failed setval() in `-e'.
7463
7464         * http.c (fetch_next_header): Use it to detect header continuation
7465         correctly.
7466
7467         * retr.c (buf_peek): New function.
7468
7469 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
7470
7471         * wget.h: Include time.h and stuff.
7472
7473 1997-02-08  Roger Beeman  <beeman@cisco.com>
7474
7475         * ftp.c: Include <time.h>
7476
7477 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
7478
7479         * url.c (findurl): Would read over buffer limits.
7480
7481 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
7482
7483         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
7484
7485 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
7486
7487         * http.c (http_atotm): Initialize tm.is_dst.
7488
7489 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
7490
7491         * http.c (gethttp): Don't print the number of retrieved headers.
7492
7493         * main.c (main): New option `--no-clobber', alias for `-nc'.
7494
7495         * url.c: Recognize `https://'.
7496
7497 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
7498
7499         * host.c (herrmsg): Don't use h_errno.
7500
7501 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
7502
7503         * host.c (accept_domain): Use it.
7504
7505         * main.c (main): New option `--exclude-domains'.
7506
7507         * retr.c (retrieve_url): Use it.
7508         (retrieve_url): Bail out when an URL is redirecting to itself.
7509
7510         * url.c (url_equal): New function.
7511
7512 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
7513
7514         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
7515
7516         * http.c (mk_utc_time): New function.
7517         (http_atotm): Use it; handle time zones correctly.
7518
7519 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
7520
7521         * http.c: Ditto.
7522
7523         * ftp-basic.c: Use it instead of WRITE.
7524
7525         * connect.c (iwrite): New function.
7526
7527 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
7528
7529         * cmpt.c (mktime): New function.
7530
7531         * netrc.c: Include <sys/types.h>.
7532
7533         * main.c (main): Wouldn't recognize --spider.
7534
7535         * retr.c (rate): Use `B', `KB' and `MB'.
7536         (reset_timer,elapsed_time): Moved from utils.c.
7537
7538         * ftp.c (ftp_retrieve_list): Ditto.
7539
7540         * http.c (http_loop): Don't touch the file if opt.dfp.
7541
7542 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
7543
7544         * cmpt.c: New file.
7545
7546         * ftp.c (ftp_retrieve_glob): New argument semantics.
7547         (ftp_retrieve_dirs): Use it.
7548         (ftp_loop): Ditto.
7549
7550         * html.c (htmlfindurl): Recognize `'' as the quote char.
7551
7552 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
7553
7554         * ftp.c (ftp_loop_internal): Use it.
7555
7556         * utils.c (remove_link): New function.
7557
7558 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
7559
7560         * retr.c (retrieve_url): Require STRICT redirection URL.
7561
7562         * url.c (parseurl): New argument STRICT.
7563
7564         * http.c (hparsestatline): Be a little-bit less strict about
7565         status line format.
7566
7567 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
7568
7569         * http.c (gethttp): Use it.
7570
7571         * main.c (main): Don't use '<digit>' as options.
7572
7573         * init.c: New option ignore_length.
7574
7575         * http.c (gethttp): Ditto.
7576         (http_loop): Check for redirection without Location:.
7577         (gethttp): Don't print Length unless RETROKF.
7578
7579         * ftp.c (getftp): Use it.
7580
7581         * url.c (mkalldirs): New function.
7582
7583         * utils.c (mymkdir): Don't check for existing non-directory.
7584
7585         * url.c (mkstruct): Don't create the directory.
7586
7587 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
7588
7589         * init.c (setval): Removed NO_RECURSION checks.
7590
7591 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
7592
7593         * version.c: "Released" 1.4.3-pre2.
7594
7595         * recur.c (recursive_retrieve): Bypass host checking only if URL
7596         is ftp AND parent URL is not ftp.
7597
7598         * ftp-basic.c (ftp_request): Print out Turtle Power.
7599
7600         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
7601         wildcard.
7602         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
7603         not glob.
7604
7605         * http.c (gethttp): Be a little bit smarter about status codes.
7606
7607         * recur.c (recursive_retrieve): Always reset opt.recursive when
7608         dealing with FTP.
7609
7610 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
7611
7612         * retr.c (retrieve_url): New variable location_changed; use it for
7613         tests instead of mynewloc.
7614         (retrieve_url): Allow heuristic adding of html.
7615
7616         * url.c (url_filename): Don't use the `%' in Windows file names.
7617
7618         * http.c (http_loop): Always time-stamp the local file.
7619
7620         * http.c (http_loop): Ditto.
7621
7622         * ftp.c (ftp_retrieve_list): Use it.
7623
7624         * utils.c (my_touch): New function.
7625
7626         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
7627         instead of #ifndef NeXT.
7628
7629         * utils.c (strptime): New version, by Ulrich Drepper.
7630
7631 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
7632
7633         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
7634         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
7635         (http_loop): Would remove ACCEPTRANGES.
7636
7637         * ftp.c (getftp): Call ftp_list with NULL.
7638
7639 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
7640
7641         * html.c (ftp_index): Don't print minutes and seconds if we don't
7642         know them; beautify the output.
7643
7644         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
7645
7646 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
7647
7648         * utils.c (strptime): New function.
7649         (strptime): Don't use get_alt_number.
7650         (strptime): Don't use locale.
7651         (match_string): Made it a function.
7652
7653 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
7654
7655         * http.c (http_atotm): New function.
7656         (http_loop): Use it.
7657
7658         * atotm.c: Removed from the distribution.
7659
7660         * http.c (base64_encode_line): Rewrite.
7661
7662 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
7663
7664         * ftp.c (getftp): Use ftp_expected_bytes; print size.
7665
7666         * ftp-basic.c (ftp_response): Use ftp_last_respline.
7667         (ftp_expected_bytes): New function.
7668
7669         * ftp.c (getftp): Print the unauthoritative file length.
7670
7671         * ftp-ls.c: Renamed from ftp-unix.c.
7672         (ftp_parse_ls): Moved from ftp.c.
7673         (ftp_parse_unix_ls): Recognize seconds in time spec.
7674         (ftp_parse_unix_ls): Recognize year-less dates of the previous
7675         year.
7676
7677 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
7678
7679         * ftp-basic.c: Don't declare errno if #defined.
7680
7681         * host.c (ftp_getaddress): Check for sysinfo legally.
7682
7683 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
7684
7685         * connect.c (iread): Use READ.
7686
7687 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
7688
7689         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
7690         schemes.
7691
7692 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
7693
7694         * host.c (ftp_getaddress): Allow `.' in hostname.
7695
7696 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
7697
7698         * wget.h: READ and WRITE macros for use instead of read and write
7699         on sockets, grep READ *.c, grep WRITE *.c
7700
7701         * wsstartup.c: new file - startup for winsock
7702
7703         * wsstartup.h: new file
7704
7705         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
7706
7707         * configure.bat: Configure utility for MSVC
7708
7709         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
7710
7711 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
7712
7713         * version.c: Released 1.4.3-pre.
7714
7715         * utils.c (prnum): Accept long.
7716         (legible): Use prnum().
7717
7718         * connect.c (make_connection): Accept port as short.
7719         (bindport): Ditto.
7720
7721         * http.c (gethttp): Use search_netrc.
7722
7723 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
7724
7725         * ftp.c (getftp): Use search_netrc.
7726
7727         * netrc.c (free_netrc): New function.
7728
7729         * init.c (home_dir): New function.
7730
7731         * url.c (convert_links): Allow REL2ABS changes.
7732
7733 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
7734
7735         * netrc.c: New file.
7736         (parse_netrc, maybe_add_to_list): New functions.
7737
7738 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
7739
7740         * retr.c (retrieve_url): Reset opt.recursion before calling
7741         ftp_loop if it is reached through newloc.
7742
7743         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
7744         error; don't use "Syntax error", since we don't know if it is
7745         really a syntax error.
7746
7747 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
7748
7749         * utils.c (acceptable): Extract the filename part of the path.
7750
7751         * recur.c (recursive_retrieve): Call acceptable() with the right
7752         argument; would bug out on wildcards.
7753
7754         * init.c (parse_line): Likewise.
7755
7756         * html.c (htmlfindurl): Cast to char * when calling stuff.
7757
7758 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
7759
7760         * ftp.c (getftp): Use ftp_pasv.
7761
7762         * ftp-basic.c (ftp_request): Accept NULL value.
7763         (ftp_pasv): New function.
7764
7765         * options.h (struct options): Add passive FTP option.
7766
7767 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
7768
7769         * url.c (parseurl): Debug output.
7770
7771         * utils.c (path_simplify): New one, adapted from bash's
7772         canonicalize_pathname().
7773
7774 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
7775
7776         * ftp.c (getftp): Don't discard the buffer.
7777
7778         * retr.c (get_contents): New parameter nobuf.
7779
7780 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
7781
7782         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
7783
7784         * init.c (setval): Strip the trailing slashes on CVECDIR.
7785
7786 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
7787
7788         * init.c: Make excludes and includes under CVECDIR instead of
7789         CVEC.
7790
7791 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
7792
7793         * url.c (get_urls_html): Skip "http:".
7794
7795 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
7796
7797         * utils.c (strcasecmp): From glibc.
7798         (strncasecmp): Also.
7799         (strstr): Also.
7800
7801         * url.c: Added javascript: to the list of URLs prefixes.
7802
7803 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
7804
7805         * recur.c (retrieve_robots): Print the warning message only if
7806         verbose.
7807
7808 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
7809
7810         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
7811
7812 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
7813
7814         * systhings.h: New file.
7815
7816         * ../configure.in: Check for utime.h
7817
7818         * ftp.c: Check whether we have unistd.h.
7819
7820 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
7821
7822         * recur.c (recursive_retrieve): Send the canonical URL as referer.
7823         (recursive_retrieve): Call get_urls_html with the canonical URL.
7824
7825 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
7826
7827         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
7828         ansi2knr support for compilers which don't support ANSI style
7829         function prototypes and signatures.
7830
7831         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
7832
7833 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
7834
7835         * url.c: Use it; Recognize paths ending with "." and ".." as
7836         directories.
7837         (url_filename): Append .n whenever file exists and could be a
7838         directory.
7839
7840         * url.h (ISDDOT): New macro.
7841
7842         * init.c (parse_line): Use unsigned char.
7843
7844         * url.c (get_urls_html): Cast to unsigned char * when calling
7845         htmlfindurl.
7846
7847         * html.c (htmlfindurl): Use unsigned char.
7848
7849         * version.c: Changed version to 1.4.3.
7850
7851 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
7852
7853         * version.c: Released 1.4.2.
7854
7855         * ftp.c (getftp): Simplified assertion.
7856         (ftp_loop_internal): Remove symlink before downloading.
7857         (ftp_retrieve_list): Unlink the symlink name before attempting to
7858         create a symlink!
7859
7860         * options.h (struct options): Renamed print_server_response to
7861         server_response.
7862
7863         * ftp.c (rel_constr): Removed.
7864         (ftp_retrieve_list): Don't use it.
7865         (ftp_retrieve_list): Use opt.retr_symlinks.
7866
7867 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
7868
7869         * main.c (main): New option retr_symlinks.
7870
7871         * url.c (convert_links): Print verbose message.
7872
7873 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
7874
7875         * http.c (http_loop): Reset newloc in the beginning of function;
7876         would cause FMR in retrieve_url.
7877
7878 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
7879
7880         * recur.c (convert_all_links): Find the URL of each HTML document,
7881         and feed it to get_urls_html; would bug out.
7882         (convert_all_links): Check for l2 instead of dl; removed dl.
7883
7884         * url.c (convert_links): Don't refer to freed newname.
7885
7886         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
7887
7888         * main.c (main): Print the OS_TYPE in the debug output, too.
7889
7890         * recur.c (recursive_retrieve): Check for opt.delete_after.
7891
7892         * main.c (main): New option delete-after.
7893
7894         * init.c (setval): Cleaned up.
7895
7896 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
7897
7898         * Makefile.in (wget): Make `wget' the default target.
7899
7900         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
7901         loop.
7902         (ftp_retrieve_list): Warn about non-matching sizes.
7903
7904         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
7905
7906         * init.c (setnum): Renamed from setnuminf; New argument flags.
7907         (setval): Use it.
7908
7909         * main.c (main): Sorted the options.
7910         (main): New option --wait.
7911
7912 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
7913
7914         * html.c (htmlfindurl): Reset s->in_quote after getting out of
7915         quotes.
7916
7917 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
7918
7919         * version.c: Changed version to 1.4.2.
7920
7921 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
7922
7923         * version.c: Released 1.4.1.
7924
7925         * html.c (html_quote_string): New function.
7926         (ftp_index): Use it.
7927         (htmlfindurl): A more gentle ending debug message.
7928
7929         * ftp.c (ftp_loop): Check for opt.htmlify.
7930
7931         * init.c: New command htmlify.
7932
7933         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
7934         strings.
7935         (ftp_loop): Print size of index.html.
7936
7937         * init.c (setval): Implement "styles".
7938
7939         * main.c (main): New option dotstyle.
7940
7941 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
7942
7943         * ftp.c (getftp): Close the master socket in case of errors, after
7944         bindport().
7945
7946         * connect.c (bindport): Initialize msock to -1.
7947
7948         * ftp.c (getftp): Initialize dtsock to -1.
7949
7950         * connect.c (closeport): Don't close sock if sock == -1.
7951
7952 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
7953
7954         * init.c (setnuminf): Nuked default value -- just leave unchanged.
7955         (setval): Don't send default values.
7956         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
7957
7958         * options.h (struct options): Use long for dot_bytes.
7959
7960         * init.c (setquota): Renamed to setbytes.
7961         (setval): Use setbytes on DOTBYTES.
7962
7963 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
7964
7965         * ftp.c (getftp): Initialize con->dltime.
7966
7967         * recur.c (recursive_retrieve): Use same_host instead of
7968         try_robots; simply load robots_txt whenever the host is changed.
7969         (recursive_retrieve): Free forbidden before calling parse_robots.
7970
7971 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
7972
7973         * retr.c (show_progress): Use them.
7974
7975         * options.h (struct options): New options dot_bytes, dots_on_line
7976         and dot_spacing.
7977
7978 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
7979
7980         * recur.c (recursive_retrieve): Retrieve directories regardless of
7981         acc/rej rules; check for empty u->file.
7982
7983 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
7984
7985         * init.c (setval): Use it.
7986
7987         * utils.c (merge_vecs): New function.
7988
7989         * init.c (setval): Reset the list-type functions when encountering
7990         "".
7991
7992 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
7993
7994         * recur.c (recursive_retrieve): Use base_url instead of this_url
7995         for no_parent.
7996
7997 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
7998
7999         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
8000
8001 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
8002
8003         * utils.c (sepstring): Rewrote; don't use strtok.
8004
8005         * recur.c (recursive_retrieve): Enter assorted this_url to slist
8006         when running the first time.
8007         (retrieve_robots): Warn to ignore errors when robots are loaded.
8008
8009         * utils.c (load_file): Moved from url.c.
8010
8011         * http.c: Made static variables const too in h* functions.
8012
8013         * main.c (main): Renamed --continue-ftp to --continue.
8014
8015         * recur.c (recursive_retrieve): Use it.
8016
8017         * utils.c (frontcmp): New function.
8018
8019         * url.c (accdir): New function.
8020
8021         * html.c (htmlfindurl): Recognize <area href=...>.
8022
8023         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
8024
8025         * init.c (setval): Free the existing opt.excludes and
8026         opt.includes, if available.
8027
8028         * main.c (main): New option -I.
8029
8030 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
8031
8032         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
8033
8034         * version.c: Changed version to 1.4.1.
8035
8036 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
8037
8038         * version.c: Released 1.4.0.
8039
8040 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
8041
8042         * main.c (main): Free com and val after parse_line.
8043         (printhelp): Reorder the listing.
8044
8045         * http.c: More robust header parsing.
8046
8047         * http.c: Allow any number of spaces, or no spaces, precede ':'.
8048         (hskip_lws): New function.
8049         (haccepts_bytes): New function.
8050         (gethttp): Use it.
8051
8052         * init.c (setval): Check header sanity.
8053         (setval): Allow resetting of headers.
8054
8055 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
8056
8057         * http.c (http_loop): Don't use has_wildcards.
8058
8059         * http.c (gethttp): Free all_headers -- would leak.
8060
8061         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
8062         0 -- this fixes a long-standing bug in -rl.
8063
8064 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
8065
8066         * ftp.c: Use -1 as "impossible" value for con->fd.
8067
8068         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
8069
8070         * init.c (parse_line): Use isalpha.
8071
8072         * ftp-unix.c: Use HAVE_UNISTD_H.
8073
8074         * mtch.c (has_wildcards): Don't match \.
8075
8076         * http.c (http_loop): Warn on HTTP wildcard usage.
8077
8078 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
8079
8080         * url.c (url_filename): Do not create numbered suffixes if
8081         opt.noclobber -- would bug out on -nc.
8082
8083 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
8084
8085         * recur.c (parse_robots): Don't chuck out the commands without
8086         arguments (`Disallow:<empty>' didn't work).
8087         (parse_robots): Compare versions lowercase.
8088         (parse_robots): Match on base_version, not version_string!
8089         (parse_robots): Handle comments properly.
8090         (parse_robots): Match versions in a sane way.
8091
8092         * init.c: Print nicer error messages.
8093
8094         * version.c: Changed version to 1.4.0.
8095
8096 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
8097
8098         * version.c: Released 1.4.0-test2.
8099
8100         * init.c (run_wgetrc): Close fp.
8101
8102         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
8103         u->dir.
8104
8105 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
8106
8107         * init.c (setquota): Allow inf as quota specification.
8108
8109 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
8110
8111         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
8112         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
8113
8114         * main.c (main): Check for quota by comparison with downloaded
8115         stuff, not from status.
8116
8117         * connect.c (select_fd): Should compile on HPUX without warnings now.
8118
8119         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
8120         returned RETROK.
8121
8122 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
8123
8124         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
8125         (getftp): Return FTPRETRINT on control connection error.
8126
8127         * html.c (htmlfindurl): Recognize <embed src=...> and
8128         <bgsound src=...>.
8129         (ftp_index): Handle username and password correctly.
8130
8131         * main.c (main): Made `-np' a synonim for --no-parent.
8132
8133 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
8134
8135         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
8136         ftp_retrieve_glob.
8137
8138         * version.c: Changed version to 1.4.0-test2.
8139
8140 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
8141
8142         * version.c: Released 1.4.0-test1.
8143
8144         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
8145         directory.
8146         (convert_links): Removed definition of make_backup.
8147
8148         * http.h: Removed definition of MAX_ERROR_LENGTH.
8149
8150         * host.c (ftp_getaddress): Check for "(none)" domains.
8151
8152         * ftp.c (ftp_retrieve_dirs): Docfix.
8153
8154         * http.c (gethttp): Use ou->referer instead of u->referer.
8155
8156         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
8157         this was known to cause coredumps on Linux.
8158
8159         * html.c (ftp_index): Cast the argument to local_time to time_t *.
8160
8161 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
8162
8163         * connect.c (select_fd): Use exceptfds -- once and for all.
8164
8165         * retr.c (retrieve_from_file): Free filename after
8166         recursive_retrieve.
8167         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
8168         first-time retrieval.
8169         (retrieve_from_file): Return uerr_t; new argument, count.
8170         (retrieve_from_file): Break on QUOTEXC.
8171
8172         * init.c (setquota): Fixed a bug that caused rejection of
8173         non-postfixed values..
8174
8175 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
8176
8177         * version.c: Changed name to wget.
8178
8179         * connect.c (iread): Smarter use of select.
8180         (select_fd): Set errno on timeout.  If not timeout, return 1
8181         instead of 0.
8182
8183 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
8184
8185         * ftp.c (ftp_loop_internal): Don't use con->cmd before
8186         establishing it.
8187
8188 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
8189
8190         * http.c (gethttp): Send correct referer when using proxy.
8191         (gethttp): Use struct urlinfo ou to access the relevant data; send
8192         correct authorization in all cases.
8193
8194         * host.c (same_host): Use skip_uname to skip username and
8195         password.
8196
8197         * url.c (skip_uname): New function.
8198         (parseurl): Use it.
8199
8200         * host.c (same_host): Do not assume HTTP -- same_host should now
8201         be totally foolproof.
8202
8203         * url.c (skip_proto): New function.
8204         (parse_uname): Use it.
8205
8206         * http.c (gethttp): Create local user and passwd from what is
8207         given.
8208
8209         * url.c (parseurl): Check for HTTP username and password too.
8210
8211 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
8212
8213         * config.h.in: Removed #define gethostbyname R...
8214
8215 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
8216
8217         * version.c: Changed version to 1.4.0-test1.
8218
8219 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
8220
8221         * version.c: "Released" 1.4b29.
8222
8223         * recur.c (recursive_retrieve): Check for no_parent.
8224
8225         * init.c (setval): Option update.
8226
8227         * main.c (main): New option no-parent.
8228
8229         * options.h (struct options): New variable no_parent.
8230
8231         * recur.c (recursive_retrieve): Only files are checked for
8232         opt.accepts and opt.rejects.
8233         (recursive_retrieve): Check directories for opt.excludes.
8234         (recursive_retrieve): Make the dir absolute when checking
8235         opt.excludes.
8236
8237         * html.c (htmlfindurl): Recognize <applet code=...> and <script
8238         src=...>
8239
8240 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
8241
8242         * ftp.c (getftp): Do not line-break assert entries at all.
8243         (ftp_retrieve_dirs): docfix.
8244
8245         * connect.c (select_fd): Use fd + 1 as nfds.
8246
8247         * version.c: Changed version to 1.4b29.
8248
8249 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
8250
8251         * version.c: "Released" 1.4b28.
8252
8253         * ftp.c (ftp_loop_internal): Check whether f->size == len and
8254         don't continue the loop if it is.
8255         (ftp_get_listing): Remove list_filename on unsuccesful loop.
8256
8257 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
8258
8259         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
8260         (getftp): Do not use multiline assert.
8261
8262         * http.c (hparsestatline): Use mjr and mnr instead of major and
8263         minor, which don't compile on Ultrix.
8264         (http_loop): Use strcpy() to initialize tmp.
8265
8266         * all: Geturl -> Fetch
8267
8268 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
8269
8270         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
8271         ':'.
8272
8273         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
8274         moving `bufsize &&' to the beginning of each check in for-loops.
8275
8276         * recur.c (parse_robots): Close fp on exit.
8277
8278         * url.c (mymkdir): Check for each directory before creating.
8279
8280 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
8281
8282         * version.c: Changed version to 1.4b28.
8283
8284 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
8285
8286         * version.c: "Released" 1.4b27.
8287
8288         * init.c (parse_line): Use isspace.
8289         (parse_line): Free *com on all errors.
8290
8291         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
8292         (delelement): Use next instead of f->next and prev instead of
8293         f->prev.
8294         (delelement): Free the members of the deleted element.
8295
8296         * http.c (http_loop): Do not return RETROK on code != 20x.
8297
8298         * init.c (cleanup): Free opt.user_header.
8299         (cleanup): Free opt.domains.
8300
8301         * url.c (freelists): Moved to cleanup().
8302
8303         * http.c (hparsestatline): Docfix.
8304
8305         * main.c (main): Return with error status on unsuccesful
8306         retrieval.
8307
8308         * init.c (setval): Do not remove listing when mirroring.
8309
8310         * url.c (url_filename): Use opt.fileprefix.
8311
8312         * ftp.c (ftp_get_listing): Use url_filename to get filename for
8313         .listing.
8314
8315         * main.c (main): New option: -rn.
8316
8317 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
8318
8319         * Makefile.in (RM): Added RM = rm -f.
8320
8321         * host.c (clean_hosts): New function.
8322         (free_hlist): Just free the list, no reset.
8323
8324         * version.c: Changed version to 1.4b27.
8325
8326 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
8327
8328         * version.c: "Released" 1.4b26.
8329
8330         * retr.c (retrieve_from_file): If call get_urls_html with
8331         opt.spider to make it silent in spider mode.
8332
8333         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
8334
8335         * url.h (CLEANDUP): New macro.
8336
8337         * http.c (gethttp): Fixed a bug that freed location only when it
8338         was NULL.
8339
8340         * retr.c (retrieve_url): Free url if it will not be stored,
8341         i.e. newloc is NULL.
8342
8343         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
8344         old version would bug out on <a href="x#a"href="y">.
8345
8346         * html.h (state_t): New member in_quote.
8347
8348         * html.c (htmlfindurl): Free s->attr at the beginning of
8349         attr-loop.
8350
8351         * recur.c (recursive_retrieve): Recognize RCLEANUP.
8352         (tried_robots): Make hosts a global variable.
8353         (recursive_retrieve): Free constr after URL host optimization.
8354         (tried_robots): Free urlinfo before exiting.
8355
8356         * utils.c (free_slist): New function.
8357
8358         * recur.c (recursive_retrieve): Use flags to add cleanup
8359         possibility.
8360
8361         * main.c (main): Free filename after recursive_retrieve.
8362
8363         * http.c (gethttp): Store successful responses too.
8364
8365 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
8366
8367         * all: Constified the whole source.  This required some minor
8368         changes in many functions in url.c, possibly introducing bugs -- I
8369         hope not.
8370
8371         * ftp-basic.c: Removed last_respline.
8372
8373         * http.c (gethttp): Free type.
8374
8375         * host.c (same_host): Free real1 and real2.
8376
8377         * main.c (main): New option --spider.
8378
8379         * retr.c (get_contents): Don't reset errno.
8380
8381         * main.c (main): Sorted the options.
8382
8383         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
8384         uninitialized by select().
8385
8386         * http.c (http_loop): Print the time when the connection is
8387         closed.
8388         (gethttp): Debug-print the HTTP request.
8389
8390 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
8391
8392         * connect.c (iread): Do not try reading after timeout.
8393
8394         * main.c (main): Would bug out on -T.
8395
8396         * connect.c (select_fd): Do not use exceptfds.
8397         (iread): Set ETIMEDOUT on select_fd <= 0.
8398
8399         * version.c: Changed version to 1.4b26.
8400
8401 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
8402
8403         * version.c: "Released" 1.4b25.
8404
8405         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
8406         or link name.
8407
8408         * http.c (gethttp): Add errcode to struct hstat.
8409         (http_loop): Use it.
8410
8411         * url.c (no_proxy_match): Simplify using char** for no_proxy.
8412
8413         * options.h (struct options): Make opt.no_proxy a vector.
8414
8415         * utils.c (sepstring): Use !*s instead of !strlen(s).
8416
8417         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
8418         (getperms): Use ISODIGIT instead of isdigit.
8419
8420         * ftp.c (getftp): Print time.
8421
8422         * main.c (main): Use legible output of downloaded quantity.
8423
8424         * ftp.c (getftp): Use elapsed_time().
8425         (ftp_loop_internal): Use rate().
8426
8427         * http.c (http_loop): Add download ratio output; Use rate().
8428
8429         * utils.c (rate): New function.
8430
8431 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
8432
8433         * http.c (http_loop): Use timer.
8434
8435         * ftp.c: Split to ftp-basic.c and ftp.c
8436
8437         * utils.c (reset_timer): New function.
8438         (elapsed_time): New function.
8439
8440         * retr.c (show_progress): Make bytes_in_line and offs long; should
8441         work on 16-bit machines.
8442
8443 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
8444
8445         * url.c (in_acclist): New argument backward.
8446
8447         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
8448         a file should be retrieved according to suffix.
8449         (ftp_get_listing): Check the return value of unlink; Do not call
8450         ftp_retrieve_dirs if depth reached maxreclevel.
8451         (ftp_retrieve_dirs): Check whether the directory is in
8452         exclude-list.
8453
8454         * main.c (main): Print the version number at the beginning of
8455         DEBUG output.
8456         (main): Use strrchr when creating exec_name.
8457
8458         * ftp.c (ftp_retrieve_glob): Do not close control connection.
8459
8460         * version.c: Changed version to 1.4b25.
8461
8462 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
8463
8464         * version.c: "Released" 1.4b24.
8465
8466         * Makefile.in: Rewrite.
8467
8468         * ftp.c (ftp_loop_internal): Likewise.
8469
8470         * retr.c (time_str): Check for failed time().
8471
8472         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
8473         HTML3.0.
8474
8475         * retr.c (time_str): Return time_t *.
8476
8477         * connect.c (bindport): Close msock on unsuccesful bind.
8478         (bindport): The same for getsockname and listen.
8479
8480         * retr.c (retrieve_url): Allow any number of retries on
8481         proxy.
8482
8483         * http.c (gethttp): Do not treat errno == 0 as timeout.
8484         (http_loop): Likewise.
8485         (http_loop): Cosmetic changes.
8486
8487         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
8488
8489         * retr.c (get_contents): Reset errno.
8490
8491         * ftp.c (getftp): Minor fixes.
8492
8493 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
8494
8495         * http.c: Do not use backups.
8496
8497         * geturl.1 (WARNING): Warn that man-page could be obsolete.
8498
8499         * getopt.c (getopt_long): Moved to getopt.c
8500
8501         * geturl.texi: Enhanced.
8502
8503         * main.c (main): Use it.
8504
8505         * recur.c (convert_all_links): New function.
8506
8507         * utils.c (add_slist): New argument flags.
8508
8509         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
8510         (parse_robots): Do not chuck out empty value fields.
8511         (parse_robots): Make yourself welcome on empty Disallow.
8512
8513         * version.c: Changed version to 1.4b24.
8514
8515 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
8516
8517         * version.c: "Released" 1.4b23.
8518
8519         * ftp.c (ftp_loop_internal): Get the time after getftp.
8520
8521         * Makefile.in (install.info): New target.
8522         (install): Use it.
8523
8524         * http.c (http_loop): Fix output when doing -O.
8525
8526 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
8527
8528         * geturl.texi: New file.
8529
8530         * main.c (main): Do not print the warnings and download summary if
8531         opt.quiet is set.
8532
8533         * version.c: Changed version to 1.4b23.
8534
8535 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
8536
8537         * "Released" 1.4b22.
8538
8539         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
8540         to avoid redefinition warnings.
8541
8542         * host.c (store_hostaddress): Use memcpy() to copy the address
8543         returned by inet_addr.
8544
8545         * version.c: Changed version to 1.4b22.
8546
8547 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
8548
8549         * version.c: "Released" 1.4b21.
8550
8551         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
8552
8553         * ftp.c (ftp_port): Use conaddr.
8554         (getftp): Print the file length.
8555         (ftp_retrieve_list): Check the stamps of plain files only.
8556
8557         * connect.c (closeport): Do not call shutdown().
8558         (conaddr): New function.
8559
8560         * html.c (ftp_index): Made it dfp-aware.
8561
8562         * init.c (cleanup): New name of freemem. Close opt.dfp.
8563
8564         * ftp.c (getftp): Use opt.dfp if it is set.
8565
8566         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
8567
8568         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
8569         CWDs to be sent with recursive FTP retrievals.
8570
8571 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
8572
8573         * recur.c (parse_robots): Made it more compliant with "official"
8574         specifications.
8575
8576         * http.c: New function.
8577
8578         * ftp-unix.c (ftp_parse_ls): Added better debug output.
8579
8580         * ftp.c (getftp): Print out the LIST in case of
8581         opt.print_server_response.
8582
8583         * version.c: Changed version to 1.4b21.
8584
8585 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
8586
8587         * version.c: "Released" 1.4b20.
8588
8589         * README: Update.
8590
8591         * http.c (gethttp): Preset lengths of various headers instead of
8592         calculating them dynamically.
8593         (gethttp): Check for 206 partial contents.
8594
8595 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
8596
8597         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
8598
8599         * http.c (gethttp): Send the port number in the Host: header.
8600
8601 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
8602
8603         * http.c (gethttp): Send host: header.
8604         (gethttp): Add the possibility of user-defined headers.
8605         (gethttp): Move decision about pragma: no-cache to http_loop,
8606         where it belongs.
8607         (gethttp): Pass a struct instead of enormous argument list.
8608         (http_loop): Use a new, fancier display format.
8609         (ftp_loop): Likewise.
8610
8611         * main.c: (hangup): Turn off buffering of the new log file.
8612
8613         * install-sh: Likewise.
8614
8615         * config.sub: Replace with the one in autoconf-2.10
8616
8617         * geturl.1: Update.
8618
8619         * init.c: New options httpuser and httppasswd.
8620
8621         * http.c: (base64_encode_line): New function.
8622         (gethttp): Send authentication.
8623
8624         * connect.c (make_connection): Use store_hostaddress.
8625
8626 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
8627
8628         * host.c (store_hostaddress): New function.
8629
8630         * NEWS: Update.
8631
8632         * http.c (hgetrange): New function.
8633         (gethttp): Use ranges.
8634
8635         * utils.c (numdigit): Accept long instead of int.
8636
8637         * http.c (http_loop): Add restart capabilities.
8638
8639         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
8640         being used uninitialized.
8641         (ftp_retrieve_list): Similar fix.
8642
8643         * host.c (add_hlist): Fixed a bug that could cause cmp being used
8644         uninitialized.
8645
8646         * url.c (construct_relative): New function.
8647
8648         * recur.c (recursive_retrieve): Use it.
8649
8650         * retr.c (convert_links): New function.
8651
8652 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
8653
8654         * url.c (free_urlpos): New function.
8655
8656         * recur.c (recursive_retrieve): Adapt.
8657
8658         * url.c (get_urls_html): Return a linked list instead of a vector.
8659
8660         * url.c (get_urls_file): Return a linked list instead of a vector.
8661
8662         * geturl.1: Update.
8663
8664         * http.c (gethttp): Implement it.
8665
8666         * init.c (setval): New option: SAVEHEADERS
8667
8668         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
8669         be retrieved. Lack of this test caused bugs when the connection
8670         was lost during listing.
8671
8672         * retr.c (retrieve_url): Fixed a bug that caused
8673         coredumps. *newloc is now reset by default.
8674         (retrieve_url): Lift the twenty-tries limit on proxies.
8675
8676         * version.c: Changed version to 1.4b20.
8677
8678 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
8679
8680         * version.c: "Released" 1.4b19.
8681
8682 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
8683
8684         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
8685         (getftp): Changed prototype to accept ccon *.
8686
8687 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
8688
8689         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
8690         incorrect values to files pointed to by symbolic links.
8691         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
8692
8693 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
8694
8695         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
8696
8697         * main.c (main): New option: --user-agent.
8698
8699         * geturl.1: Ditto.
8700
8701         * init.h: Ditto.
8702
8703         * init.c (setval): Ditto.
8704
8705         * main.c (main): Rename "server-headers" to "server-response".
8706
8707         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
8708         executables in 'ls -F' listings.
8709
8710 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
8711
8712         * url.c (parseurl): Remove realloc() and sprintf().
8713         (str_url): Get rid of sprintf().
8714
8715         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
8716         servers.
8717
8718         * url.h (URL_CLEANSE): Made it else-resistant.
8719         (USE_PROXY): New macro.
8720
8721 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
8722
8723         * NEWS: Update.
8724
8725         * version.c: Changed version to 1.4b19.
8726
8727 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
8728
8729         * version.c: "Released" 1.4b18.
8730
8731         * url.c: Made it reallocate space exponentially.
8732
8733 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
8734
8735         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
8736         the list of stuff to fetch.
8737
8738 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
8739
8740         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
8741         -Fi.
8742
8743         * html.c (htmlfindurl): Rewrite.
8744
8745         * http.c (gethttp): Use opt.proxy_cache.
8746
8747         * main.c (main): Added --cache option.
8748
8749         * ftp.c (ftp_response): Print server response if opt.print_server
8750         response is set.
8751         (getftp): Print newlines after each request if the server response
8752         is to be printed.
8753         (ftp_response): Copy the last response line to last_respline.
8754
8755         * http.c (gethttp): Add Pragma: nocache for retried
8756         proxy-retrievals.
8757
8758         * ftp.c (getftp): Use it.
8759
8760         * retr.c (buf_discard): New function.
8761
8762         * ftp.c (ftp_response): Use buf_readchar().
8763         (getftp): Flush the control connection buffer before calling
8764         get_contents().
8765
8766         * retr.c (buf_readchar): New function.
8767         (buf_flush): New function.
8768         (get_contents): Use buf_readchar() instead of read(x, x, 1).
8769         (get_contents): Use buf_flush.
8770
8771 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
8772
8773         * ftp.c: Incorporate changes to ftp_response.
8774
8775         * ftp.c (ftp_response): Allocate the server response dynamically,
8776         as in read_whole_line and fetch_next_header.
8777
8778         * utils.c (read_whole_line): Fixed a bug that prevented reading
8779         the last line if it is not \n-terminated. Also fixed a possible
8780         memory overflow.
8781
8782         * http.c (fetch_next_header): Return malloc-ed string as large as
8783         needed.
8784         (gethttp): Use new fetch_next_header.
8785
8786 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
8787
8788         * http.c (hgetlen): Compute the header length the first time only.
8789         (hgettype): Ditto.
8790         (hgetlocation): Ditto.
8791         (hgetmodified): Ditto.
8792
8793 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
8794
8795         * sample.geturlrc: Update.
8796
8797 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
8798
8799         * http.c (http_loop): Ditto.
8800
8801         * ftp.c (getftp): Open the output file as binary.
8802
8803         * version.c: Changed version to 1.4b18.
8804
8805 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
8806
8807         * version.c: "Released" 1.4b17.
8808
8809         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
8810         instead of failed assertion.
8811
8812 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
8813
8814         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
8815         if a file of that name already exists.
8816
8817 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
8818
8819         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
8820
8821         * config.h.in: Define gethostbyname as Rgethostbyname when using
8822         Socks.
8823
8824         * configure.in: Check for -lresolv if using Socks.
8825
8826         * version.c: Changed version to 1.4b17.
8827
8828 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
8829
8830         * version.c: "Released" 1.4b16.
8831
8832         * http.c (gethttp): More intelligent check for first line of HTTP
8833         response.
8834         (gethttp): Would bug out on time-stamping.
8835
8836         * version.c: Changed version to 1.4b16.
8837
8838 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
8839
8840         * version.c: Released 1.4b15.
8841
8842         * http.c (http_loop): Print \n after the loop entry, not before.
8843
8844         * url.c (url_filename): Use ISDOT.
8845
8846         * url.h (ISDOT): New macro.
8847
8848         * recur.c (recursive_retrieve): Change only opt.recursive for
8849         following FTP.
8850
8851 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
8852
8853         * socks/geturl.cgi: Fixed version No.
8854
8855         * socks/download-netscape.html: Ditto.
8856
8857         * socks/download.html: Changed socks.html to download.html.
8858
8859 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
8860
8861         * url.c (url_filename): Check for opt.dirstruct instead for
8862         opt.recursive && opt.dirstruct.
8863
8864         * init.c (defaults): Ditto.
8865         (defaults): Reset dirstruct by default.
8866         (setval): Set opt.dirstruct whenever setting recursive.
8867
8868         * init.h: Removed FORCEDIRHIER.
8869
8870         * INSTALL: Added -L to socks-description.
8871
8872         * version.c: Changed version to 1.4b15.
8873
8874 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
8875
8876         * version.c: "Released" 1.4b14.
8877
8878         * geturl.1: Update AUTHOR to include Rosella as contributor.
8879
8880         * NEWS: Update.
8881
8882         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
8883
8884         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
8885         (cal_time): Fix == to eq.
8886
8887         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
8888
8889         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
8890
8891         * Makefile.in: Use @VERSION@.
8892
8893         * configure.in: Check version from version.c.
8894
8895         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
8896
8897         * socks/download.html: Created from download-netscape.html, made
8898         HTML-2.0 compliant.
8899
8900         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
8901         following FTP links from recursions.
8902
8903 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
8904
8905         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
8906         absolute directories correctly.
8907
8908         * version.c: Changed version to 1.4b14.
8909
8910 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
8911
8912         * version.c: "Released" 1.4b13.
8913
8914         * url.c (make_backup): New function.
8915
8916         * http.c (http_loop): Make a backup copy of the local file (using
8917         rename(2)) before opening it.
8918
8919         * main.c (main): Added --backups.
8920
8921         * host.c (ftp_getaddress): Bail out on failed mycuserid().
8922         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
8923         (ftp_getaddress): Check for empty, null or (null) domain.
8924
8925         * url.c (get_urls_html): If this_url is NULL, the base must have a
8926         protocol.
8927         (parseurl): Use has_proto.
8928
8929         * retr.c (retrieve_url): Warn when proxy is used with more than 20
8930         retries.
8931
8932         * url.c (mkstruct): Create the directory (calling mymkdir()) only
8933         if it is not already there.
8934         (has_proto): New function.
8935         (get_urls_html): Eliminate the remaining call to findurl -- use
8936         has_proto.
8937
8938         * geturl.1: Ditto.
8939
8940         * main.c: Change -X to -x.
8941
8942         * url.c (url_filename): Simplify creation of filename if
8943         prefix_files is set.
8944         (url_filename): Simplify everything. And I do mean *everything*.
8945         (mkstruct): Add dir_prefix before hostname.
8946         (path_simplify): Fixed a bug that caused writing outside the path
8947         string in case of "." and ".." path strings.
8948
8949 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
8950
8951         * init.c: Added --mirror.
8952
8953         * main.c (main): Added -X to force saving of directory hierarchy.
8954
8955         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
8956         (ftp_retrieve_list): Check whether quota is exceeded.
8957
8958         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
8959
8960         * http.c (gethttp): Use referer if present.
8961
8962         * recur.c (recursive_retrieve): Set u->referer before calling
8963         retrieve_url.
8964
8965         * url.c (newurl): Use memset to nullify the struct members.
8966         (freeurl): Free the referer field too.
8967
8968         * url.h: Added referer to urlinfo.
8969
8970         * geturl.1: Updated the manual to document some of the new features.
8971
8972         * utils.c (numdigit): Moved from url.c.
8973
8974         * README: Rewritten.
8975
8976         * config.h.in: Add the support for socks.
8977
8978         * configure.in: Add the support for socks.
8979
8980         * url.c (url_filename): If the dir_prefix is ".", work with just
8981         the file name.
8982         (url_filename): Do not look for .n extensions if timestamping if
8983         turned on.
8984
8985         * retr.c (show_progress): Skip the over-abundant restval data, and
8986         print the rest of it with ',' instead of '.'.
8987
8988 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
8989
8990         * retr.c (show_progress): Changed second arg. to long (as it
8991         should be).
8992         (show_progress): Moved to retr.c.
8993         (get_contents): Moved to retr.c.
8994
8995         * version.c: Change version to 1.4b13.
8996
8997 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
8998
8999         * url.c (in_acclist): Would return after the first suffix.
9000
9001 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
9002
9003         * version.c: "Released" 1.4b12.
9004
9005         * url.c (path_simplify): More kludgifications.
9006         (get_urls_html): Use new parameters for htmlfindurl.
9007
9008         * html.c: Removed memorizing "parser states", since the new
9009         organization does not require them.
9010
9011         * init.c (run_geturlrc): Use read_whole_line.
9012
9013         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
9014
9015         * recur.c (parse_robots): Use read_whole_line.
9016
9017         * utils.c (read_whole_line): New function.
9018
9019         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
9020
9021         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
9022         tested on OSF and Ultrix.
9023         (add_hlist): New function.
9024         (free_hlist): New function.
9025         (search_host): New function.
9026         (search_address): New function.
9027         (realhost): Use search_host, search_address and add_hlist.
9028         (same_host): Replaced realloc() with strdupdelim(), made
9029         case-insensitive, fixed a memory leak.
9030
9031         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
9032         tm_min, like intended.
9033
9034         * version.c: Change user agent information to
9035         Geturl/version.
9036
9037 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
9038
9039         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
9040
9041         * url.c (acceptable): Always accept directories.
9042
9043         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
9044         servers by stripping trailing @ from symlinks and trailing / from
9045         directories.
9046
9047         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
9048
9049         * url.c (skip_url): Use toupper instead of UCASE.
9050
9051         * host.c (sufmatch): Made it case-insensitive.
9052
9053         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
9054         (match_backwards): New function, instead of
9055         match_backwards_or_pattern.
9056
9057         * recur.c (recursive_retrieve): Increased performance by
9058         introducing inl, which reduces number of calls to in_slist to only
9059         one.
9060
9061         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
9062         routine to use.
9063
9064         * main.c (printhelp): Removed the warranty stuff.
9065
9066 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
9067
9068         * url.c (add_slist): Simplify.
9069         (match_backwards_or_pattern): New function.
9070         (in_acclist): Use match_backwards_or_pattern.
9071         (matches): Remove.
9072
9073 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
9074
9075         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
9076         recursive.
9077
9078         * html.c (ftp_index): Fixed to work. Beautified the output.
9079
9080         * ftp.c (ftp_retrieve_glob): Another argument to control whether
9081         globbing is to be used.
9082         (ftp_retrieve_list): Compare the time-stamps of local and remote
9083         files to determine whether to download.
9084
9085 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
9086
9087         * ftp.c (rel_constr): New function.
9088
9089         * retr.c (retrieve_from_file): Check for text/html before
9090         retrieving recursively.
9091
9092         * main.c (main): Check whether the file is HTML before going into
9093         recursive HTML retrieving.
9094
9095         * ftp.c (ftp_retrieve_list): Manage directories.
9096         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
9097         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
9098         initialized, causing bugchecks in getftp to fail.
9099
9100         * configure.in: Check for symlink.
9101
9102         * ftp.c (ftp_retrieve_list): Added support for symlinks.
9103
9104         * version.c: "Released" 1.4b10.
9105
9106         * atotm.c (atotm): Redeclared as time_t.
9107
9108         * init.c: New variable "timestamping".
9109
9110         * main.c (main): New option 'N'.
9111
9112         * http.c (hgetlocation): Case-insensitive match.
9113         (hgetmodified): New function.
9114         (http_loop): Implement time-stamping.
9115
9116 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
9117
9118         * version.c: Changed version to 1.4b10
9119
9120         * atotm.c: New file, from phttpd.
9121
9122         * options.h (struct options): New parameter timestamping.
9123
9124         * version.c: 1.4b9 "released".
9125
9126         * recur.c (recursive_retrieve): Used linked list (ulist) for
9127         faster storing of URLs.
9128
9129         * url.c (get_urls_html): Removed the old kludge with comparing the
9130         outputs of htmlfindurl and findurl.
9131         (get_urls_html): Added better protocol support here.
9132         (create_hash): Removed, as well as add_hash and in_hash.
9133         (addslist): New function.
9134         (in_slist): ditto
9135
9136         * version.c: Released 1.4b8, changed version to b9.
9137
9138 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
9139
9140         * ftp.c (freefileinfo): New function.
9141         (delelement): New function.
9142
9143         * everywhere: GPL!
9144
9145         * ftp.c (ftp_loop): Use ccon.
9146         (ftp_retrieve_glob): Likewise.
9147
9148         * ftp.h: Define ccon, to define status of control connection.
9149
9150         * ftp.c (ftp_get_listing): New function.
9151         (ftp_retrieve_more): New function.
9152         (ftp_retrieve_glob): New function.
9153
9154 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
9155
9156         * configure.in: Removed the search for cuserid().
9157
9158         * init.c (getmode): Renamed to getperms.
9159
9160 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
9161
9162         * version.c: New version.
9163
9164         * main.c (hangup): New function, that handles hangup. Hangup
9165         signal now causes geturl to stop writing on stdout, and to write
9166         to a log file.
9167
9168         * ftp.c (getftp): "Released" 1.4b7.
9169
9170         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
9171         (ftp_index): Use fileinfo/urlinfo.
9172
9173         * ftp-unix.c (ftp_parse_ls): New function.
9174         (symperms): New function.
9175
9176         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
9177
9178         * retr.c (retrieve_url): Added FTP support.
9179
9180 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
9181
9182         * geturl.h: Removed NOTFTP2HTML enum.
9183         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
9184
9185         * ftp.c (getftp): Resynched with urlinfo.
9186         (getftp): Removed HMTL-ization of index.html from getftp.
9187
9188         * version.c: 1.4b6 "released".
9189
9190         * options.h (options): New struct, to keep options in.
9191
9192         * http.c (http_loop,gethttp): Synched with proxy.
9193
9194         * retr.c (retrieve_url): Implemented proxy retrieval.
9195
9196         * main.c (main): Use retrieve_from_file.
9197
9198 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
9199
9200         * retr.c (retrieve_from_file): New function.
9201
9202         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
9203         can be found in u->proto.
9204
9205         * ftp.c (ftp_response): Fixed to accept multi-line responses as
9206         per RFC 959.
9207
9208         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
9209
9210         * url.c (mymkdir): Removed the file of the same name, if one
9211         exists.
9212         (isfile): New function.
9213         (mkstruct): Fixed the '/' glitches.
9214         (path_simplify): Hacked to treat something/.. correctly.
9215
9216 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
9217
9218         * http.c (gethttp): Close the socket after error in headers.
9219         (http_loop): HEOF no longer a fatal header.
9220
9221         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
9222         simplifies the syntax of calling retrieve_url.
9223
9224         * recr.c (recursive_retrieve): Modified to use get_urls_html.
9225
9226         * url.c (get_urls_file): New function.
9227         (get_urls_html): New function.
9228
9229         * recr.c (recursive_retrieve): Patched up to conform to the
9230         standards.
9231
9232         * http.c (gethttp): Synched with the rest...
9233         (gethttp): Treat only CONREFUSED specially, with connection
9234         errors.
9235
9236         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
9237
9238 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
9239
9240         * http.c (http_loop): New function.
9241
9242         * loop.c: Removed *lots* of stuff from retrieve_url.
9243
9244         * url.c (parseurl): Changed to work with urlinfo. Integrated
9245         username finding and path parsing.
9246         (newurl): New function.
9247         (freeurl): New function.
9248         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
9249         (url_filename): Likewise.
9250         (path_simplify): Accept relative paths too.
9251         (opt_url): Made urlinfo-compliant, removed bogosities.
9252         (path_simplify): Expanded to accept relative paths.
9253         (str_url): A replacement for hide_url
9254         (decode_string): Fixed a bug that caused malfunctioning when
9255         encountering an illegal %.. combination.
9256         (opt_url): Removed the argument. Dot-optimizations are now default.
9257
9258         * nmalloc.c (strdupdelim): New function.
9259
9260         * url.h: Added the urlinfo structure
9261
9262 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
9263
9264         * url.c (hide_url): Thrown out the protocol assertion. Do not
9265         change the URL if the protocol if not recognized.
9266         (findurl): Put continue instead of break.
9267
9268 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
9269
9270         * sample.geturlrc: Changed the defaults to be commented out and
9271         harmless (previous defaults caused pains if copied to
9272         ~/.geturlrc).
9273
9274         * http.c (gethttp): Print the HTTP request in debug mode.
9275
9276         * connect.c (iread): Added EINTR check loop to select-ing
9277         too. EINTR is now correctly handled with select().
9278
9279         * TODO: new file
9280
9281 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
9282
9283         * host.c (same_host): Made the function a little bit more
9284         intelligent regarding diversified URL syntaxes.
9285
9286         * url.c (skip_url): Spaces are now skipped after URL:
9287
9288         * Released 1.3.1 with the patch to prevent crashing when sending
9289         NULL to robot* functions and the patch to compile "out of the box"
9290         on AIX.
9291
9292         * recr.c (recursive_retrieve): Added checking whether this_url is
9293         NULL when calling the robot functions.
9294
9295         * ChangeLog: New file.