]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Use the CONNECT method to establish passthrough over SSL traffic
[wget] / src / ChangeLog
1 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
2
3         * http.c (gethttp): Use the CONNECT handle to establish SSL
4         passthrough through non-SSL proxies.
5
6 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
7
8         * init.c: Don't #include netinet/Winsock stuff.
9
10 2003-11-28  Hrvoje Niksic  <hniksic@xemacs.org>
11
12         * http.c: Deleted the old functions header_process,
13         header_extract_number, header_exists, header_strdup,
14         http_process_range, http_process_none, http_process_type, and
15         http_process_connection.
16
17         * http.c (response_new): New function.
18         (response_header_bounds): Ditto.
19         (response_header_copy): Ditto.
20         (response_header_strdup): Ditto.
21         (response_status): Ditto.
22         (gethttp): Use the new response_* functions to parse the response.
23         Support HTTP/0.9 responses.
24
25 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
26
27         * progress.c (create_image): Don't calculate ETA if nothing has
28         been downloaded yet, because it causes division by zero.
29
30 2003-11-27  Hrvoje Niksic  <hniksic@xemacs.org>
31
32         * connect.c (bind_local): Rename sa_len to addrlen because IRIX
33         headers define sa_len as a macro.
34
35 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
36
37         * html-parse.c (convert_and_copy): Remove embedded newlines when
38         AP_TRIM_BLANKS is specified.
39
40 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
41
42         * ftp.c: Set con->csock to -1 where rbuf_uninitialize was
43         previously used.
44
45 2003-11-26  Hrvoje Niksic  <hniksic@xemacs.org>
46
47         * Makefile.in (http$o): Added the trailing backslash that was
48         missing.
49
50 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
51
52         * headers.c: Removed.  The file is no longer relevant, now that no
53         special handling of headers is done by the rbuf code.  Moved
54         portions to http.c.
55
56 2003-11-21  Hrvoje Niksic  <hniksic@xemacs.org>
57
58         * rbuf.c: Removed.
59
60         * ftp-basic.c (ftp_response): Use fd_read_line.  No longer use
61         struct rbuf.  Updated all callers.
62
63         * http.c (gethttp): Use fd_read_head to read all the headers in
64         one go.
65         (next_header): New function.
66
67         * retr.c (fd_read_line): New function: reads a line from FD,
68         leaving the rest of the data unread.
69         (fd_read_head): New function.
70
71         * connect.c (fd_peek): New function, implements peeking.
72         (poll_internal): New function.
73         (fd_read): Use it.
74         (fd_write): Ditto.
75         (fd_peek): Ditto.
76         (fd_register_transport): Allow registering a "peeker" callback.
77
78 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
79
80         * connect.c: Renamed xread/xwrite/xclose to
81         fd_read/fd_write/fd_close.  The "x" prefix is not appropriate
82         because the semantics have diverged from read/write/close too
83         significantly.  Updated all callers.
84
85 2003-11-20  Hrvoje Niksic  <hniksic@xemacs.org>
86
87         * connect.c (sock_write): It's not necessary to initialize RES.
88
89 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
90
91         * main.c (main): Don't reference opt.ipv4_only and opt.ipv6_only
92         if IPv6 is disabled.
93
94 2003-11-19  Hrvoje Niksic  <hniksic@xemacs.org>
95
96         * connect.c (socket_has_inet6): Only compile it if IPv6 is enabled
97         and AI_ADDRCONFIG is missing.
98
99 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
100
101         * gen_sslfunc.c (ssl_init_prng): Warn the user when using a weak
102         random seed.
103
104 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
105
106         * host.c (address_list_contains): Renamed address_list_find to
107         address_list_contains because its result is boolean.
108
109 2003-11-18  Hrvoje Niksic  <hniksic@xemacs.org>
110
111         * connect.c (select_fd): Return 1 if select is not available.
112
113 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
114
115         * connect.c (connect_to_host): Don't reference address list after
116         releasing it.
117
118 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
119
120         * main.c (print_help): Fix alignment of FTP options output.
121
122 2003-11-17  Hrvoje Niksic  <hniksic@xemacs.org>
123
124         * host.c (lookup_host): Check for the ability to create IPv6
125         sockets here.
126
127         * init.c (defaults): Don't auto-set --inet4-only on IPv6-less
128         systems.
129
130 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
131
132         * main.c (print_help): Fix typo in `-O' help message.  Fix docs of
133         -Y/--proxy.  Fix docs of `--cookies' and `--glob'.  Improve docs
134         of --convert-links.  Fix docs of SSL options.
135
136 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
137
138         * ftp-basic.c: Don't include <arpa/inet.h> and others because
139         they're no longer needed.
140
141 2003-11-16  Hrvoje Niksic  <hniksic@xemacs.org>
142
143         * main.c (main): Don't allow setting of both opt.ipv4_only and
144         opt.ipv6_only.
145
146         * init.c (defaults): Mark opt.ipv4_only specially when set
147         automatically.
148
149 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
150
151         * host.c (lookup_host): Use AI_ADDRCONFIG only if the family is
152         unspecified.  This ensures that specifying `--no-inet4' on systems
153         where IPv6 resolves, but doesn't work behaves the same regardless
154         of the availability of AI_ADDRCONFIG.
155
156 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
157
158         * host.c: Don't refer to the now-removed function
159         forget_host_lookup in the documentation of lookup_host.
160
161 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
162
163         * http.c (persistent_available_p): Correctly specify the endpoint
164         argument to socket_ip_address.
165         (gethttp): When printing the "reusing connection to..." message,
166         specify the host name of the reused connection, not the current
167         host name.  That makes more sense because it provides a useful
168         piece of information -- we know to which host we're supposed to
169         connect anyway!
170
171 2003-11-15  Hrvoje Niksic  <hniksic@xemacs.org>
172
173         * init.c: Make sure the options are in alphabetic order!
174
175         * host.c (lookup_host): Merge lookup_host_passive and lookup_host
176         after all -- having both would result in some code duplication.
177         (lookup_host): Set hints.ai_family to AF_INET if ipv4_only is
178         requested.  Likewise, set it to AF_INET6 for ipv6_only.  Specify
179         AI_ADDRCONFIG where available.
180         (lookup_host): New flag LH_REFRESH that specifies that a cached
181         entry for HOST should be refreshed.
182         (cache_query): New function.
183         (cache_store): Ditto.
184         (cache_remove): Ditto.
185         (forget_host_lookup): No longer necessary, replaced with static
186         function cache_remove.
187
188 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
189
190         * main.c: Enable -4 and -6 only if IPv6 is enabled.
191
192 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
193
194         * connect.c (register_transport): Renamed from register_extended.
195         Explain the intended usage.
196
197 2003-11-14  Hrvoje Niksic  <hniksic@xemacs.org>
198
199         * url.c (uri_merge): Merging "foo" and "bar" should result in
200         "bar", not in "foo/bar".
201         (path_simplify): Don't remove empty path elements; don't
202         special-case leading slash.
203         (path_simplify): Don't swallow ".."'s at the beginning of string.
204         E.g. simplify "foo/../../bar" as "../bar", not as "bar".
205         (append_uri_pathel): Defang ".." path element upon encountering
206         it.
207
208 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
209
210         * http.c (persistent_available_p): Don't attempt to talk to two
211         different SSL sites over the same secure connection.
212
213 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
214
215         * http.c (gethttp): Ditto.
216
217         * ftp.c (getftp): Use retryable_socket_connect_error instead of
218         CONNECT_ERROR.
219
220         * wget.h (CONNECT_ERROR): Removed.
221
222         * connect.c (retryable_socket_connect_error): New function instead
223         of unsupported_socket_family_error.
224
225 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
226
227         * wget.h (CONNECT_ERROR): Use it.
228
229         * connect.c (unsupported_socket_family_error): New function.
230
231 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
232
233         * connect.c (bind_local): Renamed bindport to bind_local; return
234         the socket directly.  Updated callers.
235         (accept_connection): Renamed acceptport to accept_connection;
236         return the created socket directly.  Updated callers.
237
238 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
239
240         * init.c (defaults): Turn on opt.ipv4_only if we're compiling with
241         IPv6, and AI_ADDRINFO is not available, and AF_INET6 sockets can't
242         be created.
243
244 2003-11-13  Hrvoje Niksic  <hniksic@xemacs.org>
245
246         * host.c (lookup_host): Document the fact that the addresses are
247         returned in order.
248
249 2003-11-12  Hrvoje Niksic  <hniksic@xemacs.org>
250
251         * utils.c: Use limits.h only where available.
252
253         * hash.c: Use INVALID_PTR and INVALID_PTR_BYTE.  Include limits.h.
254
255 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
256
257         * main.c: Added options --inet4-only and --inet6-only.
258
259 2003-11-11  Hrvoje Niksic  <hniksic@xemacs.org>
260
261         * host.c (host_errstr): Use the more standard message "Unknown
262         host".
263
264 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
265
266         * connect.c (connect_to_host): Use that flag to decide whether to
267         re-resolve the host name.
268
269         * host.c (struct address_list): Added a flag that maintains
270         whether the connection worked at some point.
271
272 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
273
274         * host.c (lookup_host): Special-case the numeric addresses only in
275         the non-IPv6 case.
276
277 2003-11-10  Hrvoje Niksic  <hniksic@xemacs.org>
278
279         * connect.c (resolve_bind_address): Call lookup_host_passive.
280         Make sure that opt.bind_address is resolved only once.
281
282         * host.c (lookup_host_passive): New function, handles "passive"
283         lookups.
284         (lookup_host): Remove the passive flags.  Remove the
285         family-related flags -- use ip_default_family instead.
286
287 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
288
289         * html-url.c: Get URLs from <object data="...">.
290
291 2003-11-09  Hrvoje Niksic  <hniksic@xemacs.org>
292
293         * main.c (option_data): Specify the command to use for --mirror.
294
295 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
296
297         * cookies.c (cookie_handle_set_cookie): Specify exact match for
298         unspecified domains.
299
300 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
301
302         * main.c (main): Removed one-letter options `-C', `-g', `-G', and
303         `-s'.
304
305 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
306
307         * main.c (main): Add --dont-remove-listing for backward
308         compatibility with previous versions.
309         (print_help): Fix typo, spotted by Dennis Smit.
310
311 2003-11-08  Gisle Vanem  <giva@bgnett.no>
312
313         * ftp-basic.c: Support Windows-2000 ftp servers. Win-2000 *is*
314         Win-NT 5.0 so calling it ST_WINNT is okay I guess.
315
316 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
317
318         * progress.c (update_speed_ring): Clear the speed ring when the
319         download stalls.
320
321         * retr.c (get_contents): Specify 0.95s read timeout, so that the
322         progress gauge can be updated even when data arrives very slowly
323         or stalls.
324
325 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
326
327         * utils.c (wtimer_allocate): Bless the use of wtimer_read on a
328         timer that has merely been allocated because get_contents() does
329         that.
330         (wtimer_update): Abort if the timer is not initialized.
331
332 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
333
334         * retr.c (get_contents): Pass the timer to limit_bandwidth().
335
336         * utils.c (wtimer_update): New function instead of wget_elapsed;
337         just update the timer, but don't return anything.
338         (wtimer_read): Read and return the last known value of the timer.
339
340 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
341
342         * http.c (persistent_available_p): Instead of matching all the
343         addresses of HOST and last host, determine the peer's IP address
344         with socket_ip_address and see if that address is one of those
345         HOST resolves to.
346
347         * host.c (address_list_match_all): Removed.
348         (address_list_find): New function, finds an IP address in the
349         address list.
350
351         * ftp.c (ftp_do_pasv): Get the peer's address here, and pass it to
352         ftp_epsv so it doesn't need to call getpeername.
353
354         * ftp-basic.c (ftp_port): Use socket_ip_address instead of
355         getpeername.
356         (ftp_lprt): Ditto.
357
358         * connect.c (socket_ip_address): Replaces conaddr, generalized to
359         either get peer's or local address.
360         (sockaddr_get_data): Made local to this file.
361
362 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
363
364         * hash.c (HASH_POSITION): Explicitly accept the hash function.
365         (grow_hash_table): Extract ht->hash_function outside the loop.
366         (hash_table_remove): Ditto.
367         (hash_table_clear): Fill entries with 0xff to clear them.
368         (hash_table_remove): Mark entries as deleted with the correct
369         marker.
370
371 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
372
373         * http.c (persistent_available_p): No reason for the host lookup
374         to be silent -- it's a lookup like any other.
375
376 2003-11-08  Hrvoje Niksic  <hniksic@xemacs.org>
377
378         * connect.c (register_extended): Check that fd >= 0.
379
380 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
381
382         * connect.c (LAZY_RETRIEVE_INFO): Set LAST_INFO.
383
384 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
385
386         * hash.c (NON_EMPTY): Use the all-bit-set value as the marker that
387         the field is empty.  This allows NULL pointer and 0 value to be
388         used as keys, which is necessary for the connect.c code to work
389         when fd==0.
390         (hash_table_new): Fill mappings with 0xff.
391         (grow_hash_table): Ditto.
392
393 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
394
395         * url.c (url_parse): Allow empty ports.
396
397 2003-11-07  Hrvoje Niksic  <hniksic@xemacs.org>
398
399         * main.c (print_help): Break the help string into multiple chunks.
400         (cmdline_option): New option handler OPT_FUNCALL.  Generalized
401         HANDLE_CMD to generic DATA.
402         (option_data): Use the new OPT_FUNCALL feature.
403
404 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
405
406         * log.h: Declare log_init, log_close, and
407         log_request_redirect_output here.
408
409 2003-11-05  Dennis Smit  <ds@nerds-incorporated.org>
410
411         * main.c: (main): added --preserve-permissions option.
412
413         * ftp.c (ftp_retrieve_list): added support for
414         --preserve-permissions option.
415
416         * init.c: added support for --preserve-permission option.
417
418         * option.h: added support for --preserve-permission option.
419
420 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
421
422         * main.c (init_switches): New function.  Convert option_data to
423         long_options and short_options, which can be fed to getopt_long.
424         (main): Execute command-line options by consulting option_data.
425
426 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
427
428         * gen_sslfunc.c (ssl_read): Implement a more correct check for
429         EINTR.
430         (ssl_write): Ditto.
431         (init_ssl): Use a global SSL context.
432
433 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
434
435         * connect.c (xclose): Free INFO even if it doesn't provide a
436         closer.
437
438 2003-11-06  Hrvoje Niksic  <hniksic@xemacs.org>
439
440         * connect.c: Updated all callers of
441         iread/ssl_iread/iwrite/ssl_iwrite to use xread and xwrite instead.
442
443         * rbuf.h (struct rbuf): Removed the SSL member because SSL is
444         handled automatically by xread.
445
446         * hash.c (ptrhash): Made private.
447         (ptrcmp): Ditto.
448         (inthash): Removed.
449
450         * connect.c (select_fd): Don't set errno, leave it to the caller.
451
452         * gen_sslfunc.c (connect_ssl): Use register_extended to register
453         SSL callbacks for communication with SSL-enabled endpoints.
454         (ssl_read): New function.
455         (ssl_write): Ditto.
456         (ssl_poll): Ditto.
457         (ssl_close): Ditto.
458
459         * connect.c (register_extended): New function -- register
460         callbacks for basic socket operations.
461         (xread): Ditto.
462         (xwrite): Ditto.
463         (xclose): Ditto.
464         (sock_read): New function, default implementation for reading.
465         (sock_write): Ditto for writing.
466         (sock_poll): Ditto for polling.
467         (sock_close): Ditto for closing.
468
469 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
470
471         * connect.c (bindport): Fix compilation under pre-C99 compilers.
472
473 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
474
475         * connect.c (connect_to_ip): More compact error checking.
476         (bindport): Don't treat failed setsockopt as a fatal error.
477
478 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
479
480         * connect.c (resolve_bind_address): Use a more accurate error
481         message -- we're not binding to ANY, we're disabling bind
482         altogether.
483
484 2003-11-05  Hrvoje Niksic  <hniksic@xemacs.org>
485
486         * cookies.c (save_cookies_mapper): Respect the setting of
487         keep-session-cookies.
488         (cookie_jar_load): Import session cookies.
489         Based on code submitted by Nicolas Schodet.
490
491         * utils.c (datetime_str): Use information in TM when it's
492         non-NULL.
493
494         * main.c (main): New option `--keep-session-cookies'.
495
496 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
497
498         * Makefile.in (realclean): Delete config.h.in.
499
500 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
501
502         * config-post.h: New file, included from now autogenerated
503         config.h.in.
504
505 2003-11-04  Hrvoje Niksic  <hniksic@xemacs.org>
506
507         * progress.c (progress_handle_sigwinch): Don't call
508         determine_screen_width() from the signal handler.  Instead, just
509         set a volatile variable.
510         (bar_create): Check whether SIGWINCH was received.
511         (bar_update): Ditto.
512
513         * sysdep.h: Define SYSTEM_FNMATCH only if HAVE_FNMATCH_H is true.
514
515 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
516
517         * utils.c (xsleep): New function.  Uses nanosleep where available,
518         resuming sleeps interrupted by signals.  Updated callers of sleep
519         and usleep to use xsleep.
520
521 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
522
523         * ftp-basic.c (ftp_login): Remove shadowing (and bogus)
524         declaration of SEED.
525
526 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
527
528         * log.c (logvprintf): Documented better.  Renamed to
529         log_vprintf_internal to avoid confusion with the public API
530         functions logprintf and logputs.
531
532 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
533
534         * wget.h (N_): Don't parenthesize argument.
535
536 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
537
538         * host.h (ADDRESS_IPV4_DATA): Don't take the address of in.s_addr
539         because that doesn't work on machines that define it as bitfield.
540
541 2003-11-03  Hrvoje Niksic  <hniksic@xemacs.org>
542
543         * connect.c (select_fd): Generalize the third argument into WAIT,
544         so that the caller can request waiting for both read and write.
545         Updated callers.
546
547 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
548
549         * html-url.c (cleanup_html_url): Destroy the hash tables, don't
550         just call free on them.
551         (init_interesting): Use hash_table_put instead of string_set_add
552         because we don't need the strdup that the latter function
553         performs.
554
555         * init.c (cleanup): Don't pass NULL to cookie_jar_delete.
556
557         * xmalloc.c (xfree_real): Abort when passed a NULL pointer.
558         (xfree_debug): Print at the file and line of the offending call to
559         free.
560
561 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
562
563         * wget.h: Retired the `boolean' type.  Moved the DEFAULT_LOGFILE
564         define to log.h.  Moved the INFINITE_RECURSION define to recur.h.
565
566         * xmalloc.h: Renamed FREE_MAYBE to xfree_null and moved the
567         definition from wget.h to xmalloc.h.
568
569 2003-11-02  Hrvoje Niksic  <hniksic@xemacs.org>
570
571         * html-parse.c (decode_entity): New function; split the decoding
572         of entities here.
573         (convert_and_copy): Use it to decode entities.
574         (decode_entity): Handle the &apos entity.
575         (decode_entity): Don't decode Latin 1 numeric entities.  Don't
576         decode &#0.
577
578 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
579
580         * ftp-opie.c (calculate_skey_response): Use uint32_t instead of
581         `unsigned long' for the cheksum array.  Document the function.
582
583 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
584
585         * connect.c (acceptport): Don't call select_fd when timeout is not
586         requested.
587
588 2003-11-01  Hrvoje Niksic  <hniksic@xemacs.org>
589
590         * host.c: Removed the ip_default_family global variable.
591
592         * host.c (lookup_host): Document the function.  Fixed declaration
593         of VEC.
594
595 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
596
597         * various: Use new macros xnew, xnew0, xnew_array, and xnew0_array
598         in various places.
599
600 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
601
602         * wget.h: Move declarations of malloc and logging code to
603         xmalloc.h and log.h respectively to unclutter this file.
604         (STRDUP_ALLOCA): Made it side-effect free.
605
606         * xmalloc.h: New files.  Define macros xnew, xnew0, xnew_array,
607         and xnew0_array.
608
609         * xmalloc.c: New file.  Move the xmalloc routines here.
610
611 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
612
613         * connect.c (sockaddr_set_data): Remove the broken code that
614         checked for NULL address.
615
616 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
617
618         * host.c (address_list_from_single): Removed.
619         (address_list_from_ipv4_addresses): Renamed from
620         address_list_from_vector.
621
622 2003-10-31  Hrvoje Niksic  <hniksic@xemacs.org>
623
624         * sysdep.h (CLOSE): Don't call close on file descriptors less than
625         0, i.e. on uncreated sockets.
626
627         * connect.c (resolve_bind_address): Work on struct sockaddr
628         directly.
629         (connect_to_host): Replacement for connect_to_many.  Resolve HOST
630         and connect to any of its addresses.  If we can't connect and the
631         host name lookup was cached, try to resolve it again.  This should
632         fix problems with hosts behind dynamic DNS.  Updated all callers.
633         (connect_to_ip): Replacement for connect_to_one.  Removed SILENT;
634         added the argument PRINT instead.  Updated all callers.
635         (set_connection_host_name): Removed.
636
637         * host.c (address_list_address_at): New function instead of
638         address_list_copy_one. It returns a pointer to ip_address *, so
639         it's not necessary to copy the data.
640         (address_list_cached_p): New function.
641         (forget_host_lookup): Ditto.
642
643         * connect.c: Got rid of the MSOCK global variable.  Made bindport
644         return the local socket it creates.  Added a new argument to
645         acceptport, the socket to call accept on.  Updated callers.
646         (closeport): Removed.
647
648         * connect.c: Moved the sockaddr code from host.c to this file,
649         because most of that stuff is used for connecting, and has nothing
650         to do with host names anyway.
651         (sockaddr_set_data, sockaddr_get_data): New functions, replace the
652         old sockaddr_set_address, sockaddr_set_port, sockaddr_get_address,
653         and sockaddr_get_port.
654
655 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
656
657         * sysdep.h: Use `S >= 8' rather than `S == 8' when looking for
658         large integers.
659
660 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
661
662         * url.c (append_uri_pathel): New argument ESCAPED_P that says
663         whether [B, E) is to be treated as URL-escaped or not.  If
664         ESCAPED_P is false, don't unescape the region.
665         (url_file_name): u->file is not URL-escaped.
666
667 2003-10-30  Hrvoje Niksic  <hniksic@xemacs.org>
668
669         * retr.c (retrieve_from_file): Use retrieve_tree for
670         page-requisites.
671
672         * main.c (main): Don't define opt.recursive when -p is used.
673         Instead, make sure that recursion is used for HTTP in that case.
674
675 2003-10-29  Hrvoje Niksic  <hniksic@xemacs.org>
676
677         * host.h: Defined accessors for elements of ip_address.  Updated
678         all callers.
679         (address_list_match_all): Use memcmp in the non-IPv6 case.
680
681         * wget.h (CONNECT_ERROR): Don't retry connecting if connect()
682         returned EAFNOSUPPORT.
683
684 2003-10-27  Mauro Tortonesi <mauro@deepspace6.net>
685
686         * connect.h: changed bindport prototype and added the related
687         BIND_ON_IPV4_ONLY and BIND_ON_IPV6_ONLY flags.
688
689         * connect.c: changed bindport and resolve_bind_address to allow
690         protocol-version specific DNS resolution. modified conaddr,
691         acceptport and connect_to_one to make use of struct
692         sockaddr_storage and of the new ip_address structure.
693
694         * ftp-basic.c: added LPRT/LPSV (RFC1639) support, refactored
695         PORT/PASV (RFC959) and EPRT/EPSV (RFC2428) support code.
696
697         * ftp.c: added the ftp_do_port and ftp_do_pasv functions to
698         handle FTP over IPv6.
699
700         * ftp.h: changed prototype of ftp_epsv and added prototypes for
701         ftp_lpsv, ftp_lprt and ftp_eprt.
702
703         * host.c: renamed the
704         wget_sockaddr_set_address and wget_sockaddr_get_addr, and
705         wget_sockaddr_{s,g}et_port couples to sockaddr_{s,g}et_address and
706         sockaddr_{g,s}et_port respectively.  changed
707         address_list_match_all, address_list_from_addrinfo sockaddr_len,
708         pretty_print_address, lookup_host, sockaddr_{s,g}et_address and
709         sockaddr_{g,s}et_port to make use of struct sockaddr_storage and
710         of the new ip_address structure.  removed map_ipv4_to_ip and
711         map_ip_to_ipv4.
712
713         * host.h: redefined structure ip_address and removed structure
714         wget_sockaddr.
715
716 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
717
718         * sysdep.h: Include inttypes.h where available.
719
720         * host.c: Switch from u_int32_t to uint32_t.
721
722 2003-10-26  Hrvoje Niksic  <hniksic@xemacs.org>
723
724         * netrc.c (parse_netrc): Reset the QUOTE flag after the closing
725         quote.
726
727 2003-10-25  Hrvoje Niksic  <hniksic@xemacs.org>
728
729         * url.c (is_valid_ipv6_address): Reformat to GNU coding style.
730         Use enums for NS_IN* constants.  Use ISXDIGIT.
731
732         * convert.c (construct_relative): Document better how the function
733         works.
734
735 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
736
737         * config.h.in: Deploy preprocessor magic to avoid Ultrix's
738         <netdb.h> include <bitypes.h> which defines its own u_int32_t.
739         Reported by Bernhard Simon.
740
741 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
742
743         * version.c: Bump version.
744
745 2003-10-23  Hrvoje Niksic  <hniksic@xemacs.org>
746
747         * url.c: Ditto.
748
749         * html-parse.c (advance_declaration): Don't use trailing comma in
750         enum because older compilers don't support it.
751
752         * utils.c: Don't redefine HAVE_SIGSETJMP.
753
754 2003-10-16  Hrvoje Niksic  <hniksic@xemacs.org>
755
756         * convert.c (construct_relative): Don't handle absolute files
757         specially -- for example, -P/tmp/foo shouldn't imply that
758         converted files must refer to "/tmp/foo/..."!
759
760 2003-10-15  Hrvoje Niksic  <hniksic@xemacs.org>
761
762         * http.c: Consider status 307 a valid redirect.
763
764 2003-10-15  Philip Stadermann  <philip.stadermann@credativ.de>
765
766         * ftp.c (ftp_retrieve_glob): Correctly loop through the list whose
767         elements might have been deleted.
768
769 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
770
771         * html-url.c (tag_handle_meta): Set the Refresh link to expect
772         HTML.
773         (append_one_url): Renamed to append_url.
774
775 2003-10-13  Hrvoje Niksic  <hniksic@xemacs.org>
776
777         * sysdep.h: Only define u_int32_t.
778
779 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
780
781         * utils.c (large_int_to_string): Use snprintf() to print the
782         number.  This will work even on systems where libc doesn't
783         understand %lld, but the compiler does, because it will use our
784         snprintf replacement.
785
786         * init.c (parse_bytes_helper): New function.
787         (cmd_bytes): Use it to parse bytes, but cast the result to long.
788         (cmd_bytes_large): Ditto, but store the result to LARGE_INT.  Used
789         for --quota so that --quota=10G works even on machines without
790         long long.
791
792         * options.h (struct options): Declare quota as LARGE_INT.
793
794         * retr.c (downloaded_exceeds_quota): Removed.
795         (downloaded_increase): Ditto.
796         (total_downloaded_bytes): New variable, replaces opt.downloaded,
797         which was the wrong place for it anyway.  Updated callers of
798         downloaded_exceeds_quota and downloaded_increase to check this
799         variable directly.
800
801         * sysdep.h: Get rid of VERY_LONG_TYPE.  Use LARGE_INT for the same
802         purpose, defined as `long', `long long' or `double', depending on
803         size of long and whether long long is available.
804
805 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
806
807         * sysdep.h: Also check size of short for int32_t.
808
809 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
810
811         * host.c (lookup_host): Use u_int32_t to store the result of
812         inet_addr().  That removes the need for offset fiddling, caring
813         about endian-ness, etc.
814
815         * sysdep.h: Define int32_t and u_int32_t if not available.
816
817 2003-10-11  Hrvoje Niksic  <hniksic@xemacs.org>
818
819         * ftp-basic.c (ftp_epsv): Use socklen_t * as the third argument to
820         getpeername.
821
822         * config.h.in: Define socklen_t stub.
823
824         * host.c (sockaddr_len): Return socklen_t.
825
826         * connect.c (conaddr): Use socklen_t as the third argument to
827         accept, getsockname, and connect.
828
829 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
830
831         * recur.c (retrieve_tree): Don't descend into documents that are
832         not expected to contain HTML, regardless of their content-type.
833
834         * html-url.c (tag_url_attributes): Record which attributes are
835         supposed to yield HTML links that can be followed.
836         (tag_find_urls): Propagate that information to the caller through
837         struct urlpos.
838
839 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
840
841         * hash.c (find_mapping): Return the next available mapping when
842         the key is not found, not NULL.
843         (hash_table_put): Use find_mapping to find the storage for the new
844         data.
845         (hash_table_put): Grow the table before exceeding maximum
846         fullness, not afterwards.
847
848 2003-10-10  Hrvoje Niksic  <hniksic@xemacs.org>
849
850         * hash.c (hash_table_new): Slightly change the meaning of the
851         first parameter.  Instead of being the minimum initial size, it is
852         now the minimum number of items that the hash table can take
853         without needing to resize.
854
855 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
856
857         * html-url.c (init_interesting): Initialize interesting_tags and
858         interesting_attributes as hash tables.  This simplifies the code
859         immensely because hash tables handle allocation and remove
860         duplicates automatically.
861         (find_tag): Removed.
862         (collect_tags_mapper): Instead of calling find_tag, simply get the
863         entry from interesting_tags hash table, which is both simpler and
864         faster.
865
866 2003-10-09  Hrvoje Niksic  <hniksic@xemacs.org>
867
868         * hash.c (hash_table_get): Declare hash-table argument as const.
869         (find_mapping): Ditto.
870         (hash_table_get_pair): Ditto.
871         (hash_table_contains): Ditto.
872         (hash_table_count): Ditto.
873
874 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
875
876         * html-url.c (get_urls_html): Parse the appropriate flags to
877         html-parse.c.
878
879         * html-parse.c (map_html_tags): Accept FLAGS from the caller
880         instead of examining OPT.
881
882 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
883
884         * html-url.c (find_tag): Switch to binary search.
885
886 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
887
888         * main.c (print_help): Fix typo; stured -> stored.
889
890 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
891
892         * getopt.c: Add definitions of getopt_long and getopt_long_only.
893
894 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
895
896         * config.h.in: Renamed DEBUG to ENABLE_DEBUG.  ENABLE_DEBUG is, I
897         think, a better name, because it implies that debugging output is
898         merely possible, not "on by default", as might be construed from
899         just DEBUG.
900
901 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
902
903         * ftp.c (has_insecure_name_p): Define it here.
904
905         * utils.c (has_wildcards_p): Define it here.
906
907         * sysdep.h: Declare fnmatch-related macros here, if not using
908         system fnmatch().  Update .c files to not declare fnmatch.h
909         directly.
910
911         * cmpt.c (fnmatch): Moved here.  Use it only under non-GNU libc.
912
913 2003-10-08  Hrvoje Niksic  <hniksic@xemacs.org>
914
915         * getopt.c: Newer version, imported from Free libit.
916
917 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
918
919         * cookies.c (struct cookie): Remove unused backpointer to cookie
920         jar.
921
922 2003-10-07  Hrvoje Niksic  <hniksic@xemacs.org>
923
924         * cmpt.c (memmove): Comment out, since it's no longer used.
925
926         * cookies.c (cookie_jar_generate_cookie_header): Allocate room for
927         chains in one pass.
928         (find_chains_of_host): Assume that the caller has allocated DEST
929         to be sufficiently large to take all the data.
930         (eliminate_dups): Run through the array and eliminate dups on the
931         fly instead of using memmove.
932         (cookie_jar_process_set_cookie): Free cookie->domain before
933         re-setting it.
934
935 2003-10-05  Gisle Vanem  <giva@bgnett.no>
936
937         * mswindows.c (set_sleep_mode): Fix type of
938         _SetThreadExecutionState.
939
940 2003-10-05  Hrvoje Niksic  <hniksic@xemacs.org>
941
942         * utils.c (file_size): Return -1 if fopen() returns NULL.  Prior
943         to this patch, wget --post-file=nosuchfile dumped core.
944
945 2003-10-04  Gisle Vanem  <giva@bgnett.no>
946
947         * mswindows.c (run_with_timeout): Use WaitForSingleObject to wait
948         for thread termination.
949
950 2003-10-04  Hrvoje Niksic  <hniksic@xemacs.org>
951
952         * log.c: Use `...' in function definitions; ansi2knr will convert
953         them to va_dcl.  This allowed removal of the ugly VA_START_1 and
954         VA_START_2 macros.
955
956 2003-10-03  Gisle Vanem  <giva@bgnett.no>
957
958         * connect.c: And don't include them here.
959
960         * mswindows.h: Include winsock headers here.
961
962 2003-10-03  Hrvoje Niksic  <hniksic@xemacs.org>
963
964         * html-parse.c (convert_and_copy): Move variable declarations
965         before statements.
966
967 2003-10-02  Gisle Vanem  <giva@bgnett.no>
968         
969         * mswindows.c (run_with_timeout): For Windows: Run the 'fun' in a
970         thread via a helper function. Continually query the thread's
971         exit-code until finished or timed out.
972
973 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
974
975         * wget.h (XMALLOC_ARRAY): Removed.
976         (ALLOCA_ARRAY): Ditto.
977
978         * html-parse.c: Renamed alloca_p to resized.
979         (GROW_ARRAY): Renamed DO_REALLOC_FROM_ALLOCA to GROW_ARRAY and
980         returned it to html-parse.c, since nothing else was using it.
981
982 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
983
984         * retr.c (retrieve_url): Initialize DUMMY storage for DT.  Caught
985         by valgrind.
986
987 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
988
989         * html-parse.c (convert_and_copy): Handle numeric entities in
990         hexadecimal, &#xHH.
991         (convert_and_copy): Copy the contents directly to the pool without
992         a stack-allocated intermediary.
993
994 2003-10-02  Hrvoje Niksic  <hniksic@xemacs.org>
995
996         * utils.c (alarm_set): New function; use either setitimer or alarm
997         to set up the alarm.
998         (alarm_cancel): New function; cancel the alarm set up by
999         alarm_set.
1000         (run_with_timeout): Use them.
1001
1002 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
1003
1004         * url.c (url_parse): Don't leak memory when a reencoded URL turns
1005         out to be invalid.
1006
1007         * url.c (parse_errors): Mark error messages for translation.
1008         (url_error): Translate error messages returned to the caller.
1009
1010 2003-10-01  Hrvoje Niksic  <hniksic@xemacs.org>
1011
1012         * ftp.c (ftp_loop_internal): Initialize TMRATE to NULL to shut up
1013         the compiler.
1014
1015 2003-09-26  Gisle Vanem  <giva@bgnett.no>
1016
1017         * src/mswindows.c: Added ws_percenttitle() showing progress in the
1018         window titlebar. Called from retr.c. Secured ws_mypath().
1019
1020         * windows/config.h.ms: alloca() prototype not needed.  Removed
1021         "#undef ENABLE_NLS"; should be in Makefile IMHO. Moved
1022         WGET_USE_STDARG from mswindows.h to config.ms.h because of #ifdef
1023         in log.c. (MSVC's vararg.h and stdarg.h are incompatible).
1024
1025 2003-09-29  Aaron Hawley <Aaron.Hawley@uvm.edu>
1026
1027         * ftp.c (getftp): --spider option should now work with FTP
1028         downloads.
1029         (ftp_loop_internal): quiet reports and calculations of downloads
1030         when --spider option set, nor try deleting when --delete-after
1031         also set.
1032         (ftp_loop): --spider will skip HTML-ification of .listing file.
1033
1034 2003-09-26  Gisle Vanem  <giva@bgnett.no>
1035
1036         * mswindows.c (read_registry): Removed.
1037         (set_sleep_mode): New function.
1038         (windows_main_junk): Call it.
1039
1040 2003-09-26  Gisle Vanem  <giva@bgnett.no>
1041
1042         * mswindows.c (read_registry): Fix invocation of registry
1043         functions.
1044
1045         * mswindows.c (read_registry): Condition definitions of sleep and
1046         usleep with not HAVE_SLEEP and HAVE_USLEEP respectively.  Define
1047         HAVE_SLEEP and HAVE_USLEEP under __DMC__.
1048
1049 2003-09-24  Hrvoje Niksic  <hniksic@xemacs.org>
1050
1051         * url.c (url_escape_1): Revert unintentional change to lowercase
1052         xdigit escapes.
1053         (url_escape_dir): Document that this function depends on the
1054         output of url_escape_1.
1055
1056 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
1057
1058         * progress.c (create_image): Print the current ETA if we're done
1059         with the download.
1060         (create_image): Change '-' display char to '+' in the progress bar.
1061
1062         * Makefile.in (clean): Remove .libs.
1063
1064 2003-09-23  Hrvoje Niksic  <hniksic@xemacs.org>
1065
1066         * cookies.c (struct cookie): New flag domain_exact.
1067         (update_cookie_field): Skip leading dot in domain.
1068         (find_matching_chains): Match numeric addresses exactly; don't
1069         needlessly copy HOST to the stack.
1070         (matching_cookie): Added argument HOST.  If cookie->domain_exact
1071         is set, check that HOST is equal to cookie->domain.
1072         (cookie_jar_load): Only use TAB as delimiter.  Document the
1073         meaning of DOMAIN-FLAG.  Skip leading dot in domain.
1074         (cookie_jar_load): Don't ignore DOMAIN-FLAG -- instead, set
1075         domain_exact to true if DOMAIN-FLAG is false.
1076         (save_cookies_mapper): If domain_exact is false, prepend the
1077         domain with dot, like Mozilla does.
1078
1079 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1080
1081         * progress.c (create_image): Print the initial part of the
1082         download with '-' characters, analogous to how dot progress prints
1083         the initial part with ','.
1084
1085         * hash.c (ptrhash): New function.
1086         (ptrcmp): Ditto.
1087         (hash_table_new): Default to identity hash table.
1088
1089 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1090
1091         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
1092         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
1093         to unsigned short instead.
1094
1095 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1096
1097         * url.c (path_simplify): Instead of calls to memmove, handle "./"
1098         and "../" by advancing pointers.
1099
1100 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
1101
1102         * retr.c (getproxy): Moved from url.c.
1103
1104         * convert.c: Split off link conversion from url.c into separate
1105         file.  Also included the book-keeping stuff from recur.c.
1106
1107 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1108
1109         * init.c: Improved documentation of functions.
1110         (cmd_boolean): Attempt to make code that tries to avoid calling
1111         strcmp for "speed" a bit more readable.
1112
1113         * init.c (simple_atof): Report error on encountering non-digit,
1114         non-"." character.
1115         (simple_atoi): Replacement for myatoi(), calling interface
1116         compatible with simple_atof.  Updated myatoi's callers.
1117
1118 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
1119
1120         * url.c (path_simplify): Would read two bytes past the end of the
1121         string in the "./" case.
1122
1123 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
1124
1125         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
1126         as what Wget considers "text/html".
1127
1128 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1129
1130         * connect.c (connect_with_timeout): Made timeout type double.
1131
1132         * options.h (struct options): New members read_timeout,
1133         dns_timeout, and connect_timeout.
1134         Use them.
1135
1136 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1137
1138         * init.c (simple_atof): New function.
1139         (cmd_time): Use it.
1140         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
1141         to parse decimals.
1142
1143         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
1144         previous one.
1145
1146 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1147
1148         * main.c (main): Use setoptval() for setting the options.  Use
1149         run_command for `-e'.
1150
1151         * init.c (parse_line): Rewritten to return COMIND right away.
1152         Changed linkage to static.
1153         (run_wgetrc): Use the available comind when calling setval, so it
1154         doesn't have to be computed twice.
1155         (setval_internal): New function, runs the command's action without
1156         any error checking.
1157         (setoptval): New function, does what setval used to do, but exits
1158         in case of error.
1159         (run_command): New function.
1160
1161 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
1162
1163         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
1164         its decimal part.
1165
1166         * retr.c (sleep_between_retrievals): In the random-wait case, use
1167         random_float() to wait between 0 and 2*opt.wait seconds.
1168
1169         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
1170         handle timeout values in (0, 1) range.
1171         (random_float): New function.
1172
1173         * options.h (struct options): Change the types of wait, waitretry,
1174         and timeout to double.
1175
1176         * init.c (cmd_time): Accept floating point time.
1177
1178 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
1179
1180         * retr.c (get_contents): Cosmetic fixes.
1181
1182 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
1183
1184         * url.c (uri_merge): Get rid of uri_merge_1.
1185         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
1186         i.e. don't add an extra slash merely because BASE ends with two
1187         slashes.
1188         (parse_credentials): Renamed from parse_uname.  Rewrittern in
1189         standard [beg, end) calling style.
1190         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
1191         (url_skip_credentials): Include # and ; as terminators.  Old code
1192         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
1193         contain a username.
1194         (url_skip_scheme): Removed because it was unused.
1195         (url_has_scheme): Require "scheme" to be at least one char long.
1196
1197 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1198
1199         * url.c (url_file_name): Expect NULL dir_prefix.
1200
1201         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
1202         WINDOWS.
1203         (defaults): Set dir_prefix to NULL by default.
1204
1205 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1206
1207         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
1208         gcc does.
1209
1210 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1211
1212         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
1213         (ARRAY_SIZE): Renamed to countof.  All callers updated.
1214
1215 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
1216
1217         * main.c (main): New option --strict-comments.
1218
1219         * html-parse.c (find_comment_end): New function: simple BM search
1220         for "-->".
1221         (map_html_tags): Use it if looking at a comment and not in strict
1222         comments mode.
1223
1224 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
1225
1226         * ftp.h: Added OS400 system in enum
1227         * ftp-basic.c: recognize OS400 systems
1228         * ftp.c: don't prepend the CWD if talking to OS400, since it
1229         breaks the change in library
1230
1231 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
1232
1233         * retr.c (get_contents): Pass the correct argument to ssl_iread.
1234
1235 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
1236
1237         * safe-ctype.h: Don't #define ctype.h macros to errors because
1238         that loses when someone #include's ctype.h after safe-ctype.h.
1239
1240 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
1241
1242         * url.c: Undef U, W, C after use.
1243
1244 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
1245
1246         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
1247         be augmented by ",nocontrol" which means don't escape the control
1248         characters, but otherwise keep OS settings.
1249
1250         * url.c (file_unsafe_char): Deleted.
1251         (append_uri_pathel): Query filechr_table directly.
1252         (filechr_table): Separated Unix, Windows, and control-unsafe
1253         characters.
1254
1255 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
1256
1257         * url.c (url_escape_1): New function.
1258         (url_escape): Use it.
1259         (sync_path): Handle pathological cases where u->file and u->dir
1260         contain really strange characters.
1261         (ENCODE): Deleted.
1262         (REENCODE): Deleted.
1263
1264 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1265
1266         * url.c (url_file_name): Don't reallocate FNAME if the file
1267         doesn't exist, as is usually the case.
1268
1269         * utils.c (unique_name): New flag allow_passthrough.
1270
1271 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1272
1273         * utils.c (wtimer_sys_diff): Convert the time difference to signed
1274         __int64, then to double.  This works around MS VC++ 6 which can't
1275         convert unsigned __int64 to double directly.
1276
1277 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1278
1279         * Makefile.in (clean): Also remove the core.<number> files
1280         produced by recent Linux systems.
1281
1282 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
1283
1284         * http.c (post_file): Don't pad the file if it's not large
1285         enough.  Bail out instead.
1286
1287 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1288
1289         * retr.c (get_contents): Reduce the buffer size to the amount of
1290         data that may pass through for one second.  This prevents long
1291         sleeps when limiting bandwidth.
1292
1293         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
1294         bandwidth limitation to small values is requested.
1295
1296 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1297
1298         * progress.c (update_speed_ring): Moved the speed ring update to a
1299         separate function and documented it better.
1300
1301         * progress.c: Use `double' for most timers to support granularity
1302         smaller than 1ms.
1303
1304 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1305
1306         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
1307         string.
1308         (XDIGIT_TO_xchar): Ditto.
1309
1310 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1311
1312         * utils.c: Change the type of timer-related functions from long to
1313         double, for better precision.  On machines supporting gettimeofday
1314         the timers now work with granularity of less than one millisecond.
1315
1316 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1317
1318         * cookies.c (parse_set_cookies): Fixed the parser to handle more
1319         edge conditions.
1320         (test_cookies): New function, contains a test suite for
1321         parse_set_cookies.
1322
1323 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1324
1325         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
1326
1327 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
1328
1329         * cookies.c (parse_set_cookies): Allow trailing space in
1330         set-cookies header.  Also, allow any amount of whitespace, not
1331         only one character.  Allow empty set-cookies header without
1332         spewing an error.
1333
1334 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
1335
1336         * url.c (append_uri_pathel): Use opt.restrict_file_names when
1337         calling file_unsafe_char.
1338
1339         * init.c: New command restrict_file_names.
1340
1341         * main.c (main): New option --restrict-file-names[=windows,unix].
1342
1343         * url.c (url_file_name): Renamed from url_filename.
1344         (url_file_name): Add directory and hostdir prefix here, not in
1345         mkstruct.
1346         (append_dir_structure): New function, does part of the work that
1347         used to be in mkstruct.  Iterates over path elements in u->path,
1348         calling append_uri_pathel on each one to append it to the file
1349         name.
1350         (append_uri_pathel): URL-unescape a path element and reencode it
1351         with a different set of rules, more appropriate for handling of
1352         files.
1353         (file_unsafe_char): New function, uses a lookup table to decide
1354         whether a character should be escaped for use in file name.
1355         (append_string): New utility function.
1356         (append_char): Ditto.
1357         (file_unsafe_char): New argument restrict_for_windows, decide
1358         whether Windows file names should be escaped in run-time.
1359
1360         * connect.c: Include <stdlib.h> to get prototype for abort().
1361
1362 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
1363
1364         * utils.c (wtimer_sys_set): Extracted the code that sets the
1365         current time here.
1366         (wtimer_reset): Call it.
1367         (wtimer_sys_diff): Extracted the code that calculates the
1368         difference between two system times here.
1369         (wtimer_elapsed): Call it.
1370         (wtimer_elapsed): Don't return a value smaller than the previous
1371         one, which could previously happen when system time is set back.
1372         Instead, reset start time to current time and note the elapsed
1373         offset for future calculations.  The returned times are now
1374         guaranteed to be monotonically nondecreasing.
1375
1376 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
1377
1378         * host.c (lookup_host): Print the result of the DNS lookup.
1379
1380 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
1381
1382         * init.c (cmd_boolean): Accept yes/no along with on/off.
1383         (cmd_lockable_boolean): Ditto.
1384
1385 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
1386
1387         * init.c: New command dns_cache.
1388
1389         * main.c (main): New option --dns-cache[=off].
1390
1391 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
1392
1393         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
1394
1395         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
1396         HAVE_GETADDRINFO for getaddrinfo-related stuff.
1397
1398 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
1399
1400         * url.c (url_parse): Return an error if the URL contains a [...]
1401         IPv6 numeric address and we don't support IPv6.
1402
1403 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
1404
1405         * url.c (is_valid_ipv6_address): Modified to not require
1406         zero-terminated strings.
1407         (is_valid_ipv4_address): Ditto.
1408
1409 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
1410
1411         src/url.c: added RFC 2732 compliance for URL parsing. The
1412         functions is_*_address valid are a modified version of
1413         glibc 2.3.2 inet_pton's code.
1414
1415 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
1416
1417         * main.c init.c options.h: Added --retry-connrefused option so
1418         that Connection Refused failures are treated as non-fatal (when
1419         trying to retrieve from busy servers).
1420
1421         * wget.h: New CONNECT_ERROR macro for encapsulating this
1422         modification.
1423
1424         * ftp.c http.c : Use CONNECT_ERROR macro in places where
1425         ECONNREFUSED was checked.
1426
1427 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
1428
1429         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
1430         by calling new function has_insecure_name_p.  This is based on a
1431         patch by Red Hat.
1432
1433         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
1434         if filename starts with `/' or contains `../' and is therefore
1435         considered insecure.
1436
1437         * fnmatch.h: Declare has_insecure_name_p().
1438
1439 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
1440
1441         * init.c (cmd_file): Allocate RESULT correctly.
1442
1443 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
1444
1445         * recur.c (retrieve_tree): Check whether downloaded_html_set is
1446         non-NULL before using it.
1447
1448 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1449
1450         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
1451
1452 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1453
1454         * progress.c (bar_set_params): Fall back to dot progress if the
1455         terminal type is "emacs".
1456
1457 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1458
1459         * log.c: Don't #undef WGET_USE_STDARG.
1460
1461 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1462
1463         * hash.c (prime_size): Store the offset of the prime number in the
1464         prime table.  When searching, start with the given offset.
1465         (hash_table_new): Pass the pointer to ht->prime_offset to
1466         prime_size.
1467         (grow_hash_table): Ditto.
1468         (prime_size): Make 13 the first prime to make empty hash tables
1469         slightly smaller.
1470
1471 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
1472
1473         * recur.c (download_child_p): Minor optimization to avoid an
1474         unnecessary additional call to schemes_are_similar_p function.
1475
1476 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
1477
1478         * url.c (schemes_are_similar_p): New function to test enumerated
1479         scheme codes for similarity.
1480
1481         * url.h: Declare it.
1482
1483         * recur.c (download_child_p): Use it to compare schemes.  This
1484         also fixes a bug that allows hosts to be spanned (without the
1485         -H option) when the parent scheme is https and the child's is
1486         http or vice versa.
1487
1488 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
1489
1490         * ftp.c (getftp): Don't ftruncate stdout.
1491
1492         * http.c (gethttp): Don't ftruncate stdout.
1493
1494 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
1495
1496         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
1497         (get_number): Ditto.
1498         (get_alt_number): Ditto.
1499         (__isleap): New function-like macro used by strptime.
1500         (day_of_the_week): New function used by strptime.
1501         (day_of_the_year): Ditto.
1502         (__mon_yday): Now shared by mktime and strptime implementations.
1503
1504 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1505
1506         * cookies.c (check_domain_match): Use match_tail in case
1507         insensitive mode.
1508
1509         * utils.c (match_tail): Allow the caller to specify case
1510         insensitive mode.
1511
1512         * cookies.c (store_cookie): When expiry_time is 0, print it as
1513         undefined, not indefinite.
1514
1515 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
1516
1517         * cookies.c (cookie_jar_process_set_cookie): Do not store
1518         discarded cookie.
1519
1520 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1521
1522         * cookies.c (check_domain_match): Allow cookies to be set for
1523         subdomains of unknown top-level domains under some circumstances.
1524
1525 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
1526
1527         * gen_ssl.c:
1528         - allow checking of server cert
1529         - allow defining client cert type
1530         - allow limit of ssl protocol
1531         - check more return values
1532         - added debug message on break
1533
1534 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1535
1536         * recur.c (download_child_p): Revert order of items in check
1537         number 6 for clarity.
1538
1539 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1540
1541         * init.c: Ditto.
1542
1543         * main.c: Ditto.
1544
1545         * http.c: Use the new interface.
1546
1547         * cookies.c: Provide an OO-style "cookie jar" interface to enable
1548         separate cookie jars.
1549
1550         * http.c (http_atotm): Declare argument as const.
1551
1552 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1553
1554         * cookies.c (cookie_new): Default to PORT_ANY.
1555         (find_cookie_chain_exact): Only search by DOMAIN.
1556         (find_matching_cookie): Also check that PORT matches.
1557         (store_cookie): Only match the domain.
1558         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
1559         is valid for that host rather than discarding it completely.
1560         (find_matching_chains): Don't search by PORT.
1561         (matching_cookie): Also match PORT.
1562         (load_cookies): Set the port if specified, otherwise leave it as
1563         ANY.
1564         (save_cookies_mapper): Save the port if specified, otherwise leave
1565         it empty.
1566
1567 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
1568
1569         * init.c: The option `egdfile' was not in sort order.
1570
1571 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1572
1573         * ftp.c (getftp): Treat directories that begin with <letter>: as
1574         absolute.
1575         (getftp): Strip trailing slashes from con->id before merging it
1576         with TARGET.
1577
1578 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1579
1580         * http.c (gethttp): If Content-Type is not given, assume
1581         text/html.
1582
1583 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1584
1585         * recur.c (download_child_p): Don't ignore rejection of HTML
1586         documents that are themselves leaves of recursion.
1587
1588 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
1589
1590         Makefile.in: Updated several dependencies for object files to take
1591         account of nested include files.
1592
1593 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
1594
1595         Makefile.in: The target `connect$o' (connect.o) now depends on
1596         `utils.h'
1597
1598 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
1599
1600         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
1601         (gethostbyname_with_timeout): Use it.
1602
1603         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
1604         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
1605
1606 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1607
1608         * host.c (getaddrinfo_with_timeout): New function.
1609         (gethostbyname_with_timeout): Ditto.
1610         (lookup_host): Use them.
1611
1612 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1613
1614         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
1615
1616 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1617
1618         * init.c (comind): Use a marginally faster implementation of
1619         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
1620         nanosecond earned."
1621
1622 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1623
1624         * main.c (print_help): Document `--post-data' and `--post-file'.
1625
1626 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1627
1628         * http.c (gethttp): Ditto.
1629
1630         * retr.c (retrieve_url): Initialize variables to appease the
1631         compiler.
1632
1633         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
1634         select_fd.
1635         (ssl_iwrite): Ditto.
1636
1637         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
1638         ETIMEDOUT in case of timeout.
1639         (iread): No need to handle EINTR when calling select_fd.
1640         (iwrite): Ditto.
1641
1642 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1643
1644         * retr.c (retrieve_url): Make sure that POST is not honored for
1645         redirections.
1646
1647         * http.c (gethttp): Send the POST data when requested.
1648         (post_file): New function.
1649         (gethttp): Use it.
1650
1651         * main.c (main): Ditto.
1652
1653         * init.c: Add new options.
1654
1655         * options.h (struct options): New options post_data and
1656         post_file_name.
1657
1658 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1659
1660         * connect.c (connect_with_timeout): Firing SIGALRM can result in
1661         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
1662
1663 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1664
1665         * connect.c (connect_with_timeout): Use it.
1666
1667         * utils.c (run_with_timeout): New function.
1668
1669 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1670
1671         * url.c (getproxy): Accept a struct url argument.  This obviates
1672         the need for USE_PROXY_P.
1673
1674         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
1675
1676         * ftp.c (getftp): Recognize FWTK-style proxy.
1677
1678 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1679
1680         * config.h.in: Only define _VA_LIST when compiled with gcc.
1681
1682 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
1683
1684         * http.c (http_loop): Compensate for MS Windows two-second
1685         granularity of file modification time when comparing timestamps.
1686
1687         * ftp.c (ftp_retrieve_list): Ditto.
1688
1689 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
1690
1691         * utils.c (has_html_suffix_p): New function to test filename for
1692         common html extensions.
1693
1694         * utils.h: Declare it.
1695
1696         * http.c (http_loop): Use it instead of previous test.
1697
1698         * retr.c (retrieve_url): Ditto.
1699
1700         * recur.c (download_child_p): Ditto.
1701
1702 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1703
1704         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
1705         declaring va_list.
1706         From Kevin Rodgers <kevinr@ihs.com>.
1707
1708 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
1709
1710         * Makefile.in: Specify libtool mode explicitly when linking.
1711
1712 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1713
1714         * connect.c (connect_with_timeout): New function.
1715         (connect_to_one): Use it.
1716
1717         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
1718         HAVE_SETJMP_H.
1719
1720 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1721
1722         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
1723         is present.
1724
1725 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1726
1727         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
1728         TOTAL.
1729         (bar_finish): Likewise.
1730
1731 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1732
1733         * html-url.c (tag_handle_form): New function.  Pick up form
1734         actions and mark them for conversion only.
1735
1736 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1737
1738         * progress.c (struct progress_implementation): Use PARAMS when
1739         declaring the parameters of *create, *update, *finish, and
1740         *set_params.
1741
1742         * netrc.c: Ditto.
1743
1744         * http.c: Reformat some function definitions so that ansi2knr can
1745         read them.
1746
1747         * hash.c (struct hash_table): Use the PARAMS macro around
1748         parameters in the declaration of hash_function and test_function.
1749         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
1750         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
1751         that pre-ANSI compilers can read them.
1752         (find_mapping): Use PARAMS when declaring EQUALS.
1753         (hash_table_put): Ditto.
1754
1755         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
1756
1757         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
1758         which was unsupported by pre-ANSI compilers.
1759
1760         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
1761
1762 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1763
1764         * url.c (url_filename): Use compose_file_name regardless of
1765         whether opt.dirstruct is set.
1766         (mkstruct): Don't handle the query and the reencoding of DIR; that
1767         is done in compose_file_name.
1768
1769 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1770
1771         * wget.h: Ditto for extern char *exec_name.
1772
1773         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
1774         perfectly legal to follow an `extern' with a non-`extern' ones,
1775         provided the types match.
1776
1777         * main.c: Don't define OPTIONS_DEFINED_HERE.
1778
1779 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1780
1781         * progress.c (create_image): Revert to calculating ETA based on
1782         average download speed.
1783         (create_image): Don't print ETA until the download has been active
1784         for at least 3 seconds.
1785         (create_image): When ETA is not available, don't print anything.
1786         The previous version would print --:--.
1787
1788 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1789
1790         * progress.c (bar_update): Keep updating a subinterval until it
1791         reaches or exceeds a watermark.  That way the measurement will be
1792         guaranteed to span a configurable minimum of time.  The current
1793         default is 3s in 30 100ms intervals.
1794
1795 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1796
1797         * progress.c (bar_update): Maintain an array of the time it took
1798         to perform previous 30 network reads.
1799         (create_image): Calculate the download speed and ETA based on the
1800         last 30 reads, not the entire download.
1801         (create_image): Make sure that the ETA is not changed more than
1802         once per second.
1803
1804 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
1805
1806         * mswindows.c (borland_utime): New function conditionally defined
1807         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
1808         `utime()' as Borland's `utime()' function is broken on Windows 9x
1809         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
1810
1811 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1812
1813         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
1814
1815 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
1816
1817         * Makefile.in: Updated several dependencies for object files.
1818
1819 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
1820
1821         * mswindows.c: Include "utils.h".
1822
1823 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
1824
1825         * host.h: Don't include netdb.h on windows.
1826
1827 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1828
1829         * recur.c (retrieve_tree): Handle the case when start_url doesn't
1830         parse.
1831
1832 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
1833
1834         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
1835         calling xmalloc and memcpy.
1836
1837 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1838
1839         * host.h: Include Unix-specific includes #ifndef WINDOWS.
1840         Patch originally provided by Christian Lackas.
1841
1842 2002-02-11  Christian Lackas  <delta@lackas.net>
1843
1844         * recur.c: recurive downloading for https fixed.
1845
1846 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
1847
1848         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
1849
1850         * ftp-basic.c: Also include <netinet/in.h>.
1851
1852 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
1853
1854         * http.c (gethttp): when -c used, mark already fully retrieved
1855         file as successfully retrieved.
1856
1857 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1858
1859         * url.c (url_parse): Don't treat '?' as query string separator
1860         when parsing FTP URLs.
1861
1862 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1863
1864         * html-url.c (tag_handle_meta): Don't crash on <meta
1865         http-equiv=refresh> where content is missing.
1866
1867 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
1868
1869         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
1870         netdb.h on windows.
1871
1872 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1873
1874         * retr.c (retrieve_url): Remove redirection cycle detection.  This
1875         is because some sites legitimately redirect the user back to the
1876         same location, e.g. after an authorization check performed by
1877         another page.  MAX_REDIRECTIONS is still used to prevent infinite
1878         redirection loops.
1879
1880 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1881
1882         * http.c (gethttp): Wrap host name in square brackets if it
1883         contains a colon.
1884
1885 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1886
1887         * url.c (url_parse): Allow all hex digits, not only decimal ones,
1888         to form an IP address.
1889
1890 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1891
1892         * url.c (urlchr_table): Make square braces reserved, so we can
1893         parse http://[::1]/.
1894         (url_parse): Handle host in braces.
1895         (url_string): If url->host contains colons, wrap it in braces.
1896
1897 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1898
1899         * connect.c (resolve_bind_address): New function.
1900         (connect_to_one): Use it.
1901         (bindport): Ditto.
1902
1903         * init.c: Don't resolve bind-address here.
1904
1905         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
1906
1907 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1908
1909         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
1910         offset.
1911         (address_list_new): Use map_ipv4_to_ip.
1912         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
1913         in IPv4 context.
1914
1915 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1916
1917         * source: Integrated IPv6 support.
1918         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
1919
1920 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
1921
1922         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
1923         (cmd_directory): New function. Like cmd_file(), but strips
1924         trailing directory separators.
1925         (commands): Change action for "dirprefix" from `cmd_file' to
1926         `cmd_directory'.
1927
1928         * utils.c (make_directory): Allow intermediate `mkdir' calls to
1929         fail, as not all path components that do not exist should be
1930         directory components, especially under Windows.
1931
1932 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1933
1934         * netrc.c (parse_netrc): Skip leading whitespace before testing
1935         whether the line is empty.  Empty lines still contain the line
1936         terminator.
1937
1938 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1939
1940         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
1941         only if no data is pending in SSL buffers.
1942         From tony@bluetail.com.
1943
1944 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1945
1946         * headers.c (header_get): Strip trailing whitespace from the
1947         header.
1948
1949 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1950
1951         * url.c (parse_uname): URL-decode *USER and *PASSWD.
1952
1953 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
1954
1955         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
1956         starts with "//").
1957
1958 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1959
1960         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
1961         error.
1962
1963 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1964
1965         * version.c: Wget 1.8.1 is released.
1966
1967 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1968
1969         * version.c: Wget 1.8.1-pre3 is released.
1970
1971 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1972
1973         * recur.c (retrieve_tree): Enqueue the canonical representation of
1974         start_url, so that the test against dl_url_file_map works.
1975
1976 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1977
1978         * log.c (logputs): Check for requested verbosity before printing
1979         anything.
1980
1981 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1982
1983         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
1984         inline.
1985
1986 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1987
1988         * recur.c (retrieve_tree): Make a copy of file obtained from
1989         dl_url_file_map because the code calls xfree(file) later.
1990
1991 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1992
1993         * recur.c (register_html): Maintain a hash table of HTML files
1994         along with the list.  Disallow duplicates.
1995         (retrieve_tree): Use downloaded_html_set to check whether the file
1996         found in dl_url_file_map is an HTML file, and descend into it if
1997         so.
1998         (convert_all_links): Don't guard against duplicates in
1999         downloaded_html_list, since they are no longer possible.
2000
2001 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
2002
2003         * recur.c (retrieve_tree): Pass on referring URL when retrieving
2004         recursed URL.
2005
2006 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2007
2008         * version.c: Wget 1.8.1-pre2 is released.
2009
2010 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2011
2012         * retr.c (sleep_between_retrievals): Simplify indentation.
2013
2014 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2015
2016         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
2017         of "randomness" at a time.
2018         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
2019
2020         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
2021         random amount averages in opt.wait.
2022         (sleep_between_retrievals): Don't seed the PRNG; random_number
2023         will do that.
2024
2025         * utils.c (random_number): New function.
2026
2027 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2028
2029         * url.c (path_simplify): Move here from utils.c, and make static.
2030
2031 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2032
2033         * init.c (wgetrc_file_name): Print correct message when loading
2034         getenv("WGETRC") fails.
2035
2036 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2037
2038         * recur.c (register_download): Don't abort when one URL references
2039         two different files.
2040
2041 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2042
2043         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
2044         calling ssl_iwrite.
2045
2046 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2047
2048         * version.c: Wget 1.8.1-pre1 is released.
2049
2050 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2051
2052         * res.c (matches): Fix broken URL in the docstring.
2053
2054 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2055
2056         * html-url.c (tag_url_attributes): Mark <embed href=...> as
2057         external.
2058
2059 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2060
2061         * url.c (get_urls_file): Cosmetic changes.
2062
2063 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2064
2065         * html-url.c (append_one_url): Resurrect warning when unable to
2066         resolve a relative link.
2067
2068 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2069
2070         * html-url.c (collect_tags_mapper): Break into several functions.
2071         (tag_url_attributes): Collect <embed href=...>.
2072
2073 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2074
2075         * host.c: New type ipv4_address.  Use it consistently instead of
2076         `unsigned char[4]' and `unsigned char *'.
2077         (pretty_print_address): Accept a `const void *', to require even
2078         less casting.
2079
2080 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2081
2082         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
2083
2084 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2085
2086         * main.c (main): Initialize progress after fork_to_background, so
2087         that it knows when to use dots.
2088
2089         * mswindows.c (ws_hangup): Call log_request_redirect_output.
2090
2091         * utils.c (fork_to_background): Print the PID of the child
2092         process.
2093
2094         * log.c (log_request_redirect_output): Set a flag that output
2095         redirection has been requested.  Doing anything else in a signal
2096         handler is unsafe.
2097         (check_redirect_output): New function: check whether redirection
2098         has been requested and, if so, call redirect_output().
2099         (logputs): Call check_redirect_output.
2100         (logprintf): Ditto.
2101         (debug_logprintf): Ditto.
2102         (redirect_output): Print clearer messages.
2103
2104         * main.c (redirect_output_signal): Don't call
2105         redirect_output_signal directly.  Instead, call
2106         log_request_redirect_output.
2107
2108         * utils.c (memfatal): Ditto.
2109
2110         * progress.c (display_image): Use it.
2111
2112         * log.c (log_set_save_context): New function: allow the caller to
2113         turn off saving log context lines.
2114
2115 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2116
2117         * host.c (address_list_set_faulty): Uncomment a sanity check.
2118
2119 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2120
2121         * utils.c (long_to_string): Return a pointer after where the
2122         number ends.
2123         (long_to_string): Rename to number_to_string.
2124
2125 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2126
2127         * utils.c (path_simplify): Correctly handle the unlikely case that
2128         b starts out as path + 1.
2129
2130 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2131
2132         * utils.c (path_simplify): Rewrite, with better comments, and
2133         without the use of strcpy to move overlapping blocks.
2134
2135 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2136
2137         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
2138         valid progress type before setting it.
2139
2140 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2141
2142         * main.c (main): Remove stray debugging message.
2143
2144 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2145
2146         * progress.c (create_image): Fix ETA padding when hours are prined.
2147
2148 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2149
2150         * version.c: Wget 1.8 is released.
2151
2152 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2153
2154         * url.c (reencode_string): Declare static.
2155
2156         * res.c (registered_specs): Declare static.
2157
2158         * progress.c (current_impl_locked): Declare static.
2159
2160         * log.c (flush_log_p): Declare static.
2161         (needs_flushing): Ditto.
2162
2163         * http.c (digest_authentication_encode): Declare static.
2164
2165         * html-url.c (init_interesting): Declare static.
2166
2167         * host.c (host_name_addresses_map): Declare static.
2168
2169         * cookies.c (find_matching_chains): Declare static.
2170
2171         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
2172         indicated by lint.
2173
2174         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
2175
2176         * host.c (address_list_set_faulty): Document that INDEX is
2177         currently unused.
2178
2179         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
2180
2181 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2182
2183         * version.c: Wget 1.8-pre2 is released.
2184
2185 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2186
2187         * progress.c (progress_handle_sigwinch): Set up the signal again.
2188
2189         * utils.c: Include <sys/termios.h>, where Solaris defines
2190         TIOCGWINSZ.
2191
2192         * progress.c (bar_create): Don't use the last column on the screen.
2193         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
2194         only until it exceeded them.
2195
2196 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2197
2198         * version.c: Wget 1.8-pre1 is released.
2199
2200 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2201
2202         * progress.c (progress_create): Make sure that, when the output is
2203         redirected, the progress implementation gets changed to the
2204         fallback one.
2205         (bar_set_params): Set current_impl_locked to 1 when "force" is
2206         specified.
2207         (progress_create): Don't change the progress implementation if
2208         current_impl_locked is non-zero.
2209
2210         * main.c (redirect_output_signal): Call
2211         progress_schedule_redirect.
2212
2213         * progress.c (progress_schedule_redirect): New function.
2214
2215 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2216
2217         * log.c (logvprintf): Restructure to allow being called multiple
2218         times.
2219         (logprintf): Call logvprintf in a loop.
2220         (debug_logprintf): Ditto.
2221
2222 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2223
2224         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
2225         setting egd_file it to empty string.
2226
2227         * main.c (main): Change the option name from --sslegdsock to
2228         --egd-file.
2229
2230 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2231
2232         * gen_sslfunc.c (ssl_init_prng): Make the printed message
2233         translatable.
2234
2235 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2236
2237         * url.c (scheme_disable): New function.
2238
2239         * main.c (main): Call ssl_init_prng from here rather than from
2240         init_ssl, so that it has a chance to disable support for https
2241         before a URL has been resolved.
2242
2243         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
2244         failed.
2245         (ssl_init_prng): Disable support for https if seeding the PRNG
2246         fails.
2247
2248 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2249
2250         * utils.c (read_whole_line): Handle lines beginning with \0.
2251
2252 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2253
2254         * recur.c (convert_all_links): Guard against duplicates in
2255         downloaded_html_files.
2256         (register_download): Don't invalidate similar-looking URLs.
2257         (match_except_index): New function.
2258
2259 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2260
2261         * utils.c (path_simplify): Document with test cases.
2262
2263 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2264
2265         * gen_sslfunc.c: Ditto.
2266
2267         * rbuf.c: Include <string.h>.
2268
2269 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2270
2271         * recur.c (retrieve_tree): Check whether the URL was already
2272         downloaded before downloading it again.
2273         (descend_child_p): Renamed to download_child_p.
2274         (register_download): When one URL is downloaded to a file already
2275         "owned" by another URL, delete all references that map any URL to
2276         that file.
2277         (register_delete_file): New function.
2278         (retrieve_tree): Use it after deleting a file.
2279
2280         * url.c (url_parse): Re-canonicalize the URL also if the path is
2281         empty, so that e.g. "http://www.server.com" ->
2282         "http://www.server.com/".
2283         (lowercase_str): Use ISUPPER instead of !ISLOWER.
2284
2285         * retr.c (retrieve_url): Use the canonical URL form when calling
2286         register_download().
2287
2288 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
2289
2290         * snprintf.c (dopr): Use `unsigned int' as the second argument to
2291         va_arg when casting to `unsigned short' is intended.
2292
2293 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
2294
2295         * gen_sslfunc.c: on windows provide ssl crypto random 
2296           initialization through RAND_screen(); could possibly
2297           be not enough for strong ssl communication (see the 
2298           relevant manual page from the openssl package).
2299
2300 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2301
2302         * url.c (local_quote_string): Reenable quoting of question marks,
2303         but only when `--html-extension' is used.
2304
2305 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2306
2307         * version.c: Wget 1.8-beta3 is released.
2308
2309 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2310
2311         * snprintf.c (dopr): Cast the result of va_arg to short int and
2312         short unsigned int where these types are expected to be used.
2313
2314 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2315
2316         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
2317         with `int' when using it as the second argument to `va_arg'.
2318
2319 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2320
2321         * host.c (address_list_new_one): New function.
2322         (lookup_host): Use it.
2323
2324 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
2325
2326         * host.c (lookup_host): Don't initialize TMPSTORE directly because
2327         it's not legal C.
2328
2329 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2330
2331         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
2332         the socket data.
2333
2334         * ftp.c: Ditto.
2335
2336         * http.c: No need to declare h_errno.
2337
2338         * host.c: Declare h_errno.
2339
2340 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2341
2342         * utils.c (file_merge): If BASE doesn't contain a slash, just
2343         return a copy of FILE.
2344
2345 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2346
2347         * version.c: Wget 1.8-beta2 is released.
2348
2349 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2350
2351         * ftp.c (getftp): When PWD fails, assume "/".
2352
2353         * ftp-basic.c (ftp_syst): Fix indentation.
2354
2355 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2356
2357         * url.c (get_urls_file): If opt.base_href is specified, merge each
2358         URL with the base.
2359
2360 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2361
2362         * main.c (print_help): Don't document the removed `-nh'.
2363
2364 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2365
2366         * url.c (url_full_path): Document better.
2367
2368         * http.c (gethttp): Use the full path when creating digest
2369         authorization.
2370
2371 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2372
2373         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
2374         '/'.
2375
2376 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2377
2378         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
2379         PREFIX does.
2380
2381 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2382
2383         * cookies.c (check_domain_match): Reimplement to match Netscape's
2384         "preliminary specification" for cookies.
2385
2386 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2387
2388         * url.c (replace_attr_refresh_hack): New function.
2389         (convert_links): Call replace_attr_refresh_hack for Refresh
2390         links.  It will add the "TMOUT; URL=" junk before the link.
2391
2392         * html-url.c (collect_tags_mapper): Set ID to the ID of the
2393         "content" attribute, not "http-equiv".
2394         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
2395         instead, store the information that this entry belongs to a
2396         "refresh" link.
2397
2398 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2399
2400         * version.c: Wget 1.8-beta1 is released.
2401
2402 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2403
2404         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
2405         depth by more than one.
2406
2407 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2408
2409         * retr.c (retrieve_url): Don't allow more than 20 redirections.
2410
2411 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2412
2413         * recur.c (retrieve_tree): Skip the non-inline entries when
2414         enqueuing the children of a leaf HTML node in -p mode.
2415         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
2416         "inline".
2417
2418         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
2419         (collect_tags_mapper): When an entry is "inline", mark it as such.
2420
2421         * recur.c (descend_url_p): Fix test when checking for
2422         acceptance/rejection rules.
2423
2424 2001-10-31 Daniel BODEA <dali@dali-designs.com>
2425
2426         * netrc.c (search_netrc): When slack_default is 0, still look for
2427         an account with matching password, just not the "default account".
2428         HTTP Authorization using .netrc should now work as expected.
2429
2430 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
2431
2432         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
2433         test_socket_open fails.
2434
2435 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2436
2437         * progress.c (display_image): Just print one CR to reset the
2438         cursor position.
2439
2440 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
2441
2442         * init.c: New command `ssl_egd_sock'.
2443
2444         * main.c (main): New option `--sslegdsock'.
2445
2446         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
2447
2448 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2449
2450         * cmpt.c (memmove): Include a simple memmove implementation.
2451
2452 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2453
2454         * headers: Guard against header files being included twice.
2455
2456 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2457
2458         * gen-md5.c: Use unsigned char * as the buffer argument to
2459         gen_md5_update.
2460
2461 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2462
2463         * connect.h: Declare select_fd.
2464
2465 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2466
2467         * recur.c (descend_url_p): When resolving no_parent, compare with
2468         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
2469         wouldn't be followed, although the download started from /a/.
2470
2471 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2472
2473         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
2474         MS VC; somebody with Borland compiler please check and provide
2475         patch if possible;
2476
2477         * cmpt.c: provided a usleep emulation.
2478
2479 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2480
2481         * host.c (address_list_new): Initialize al->faulty.
2482
2483 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2484
2485         * http.c (http_process_range): Accept the broken output of
2486         "JavaWebServer/1.1.1".
2487
2488 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2489
2490         * progress.c (dot_set_params): If PARAMS is unspecified, use
2491         dot_style, if available.
2492
2493         * init.c: Ditto.
2494
2495         * main.c (main): Resurect --dot-style.
2496
2497         * progress.c (dot_finish): Print the quantity if we're left at the
2498         beginning of a row.
2499
2500 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2501
2502         * cmpt.c (random): Removed.
2503
2504         * retr.c (sleep_between_retrievals): Use the more portable rand()
2505         instead of random().
2506
2507 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
2508
2509         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
2510         prevent seg fault.
2511
2512 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2513
2514         * connect.c (connect_to_many): Use address_list_set_faulty to
2515         prevent the faulty address from being reused.
2516
2517         * host.c (address_list_set_faulty): New function.
2518         (address_list_get_bounds): New function, instead of
2519         address_list_count.
2520
2521 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2522
2523         * url.c (convert_links): Don't translate %d-%d.
2524
2525         * main.c (print_help): Remove stray HAVE_RANDOM code.
2526
2527 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2528
2529         * ftp.c (getftp): Improve output after sending PASV.  Don't
2530         attempt to "look up" the IP address we already know; call
2531         connect_to_one directly.
2532
2533 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2534
2535         * progress.c: Change the default progress implementation to "bar".
2536
2537 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2538
2539         * progress.c (bar_create): Print two newlines.
2540
2541 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2542
2543         * cmpt.c (random): New function, a simple-minded replacement for
2544         random() on systems that don't have it.
2545
2546 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2547
2548         * config.h.in: Put a HAVE_USLEEP stub.
2549
2550         * cmpt.c (usleep): Replacement implementation of usleep using
2551         select.
2552
2553         * init.c: New option init_rate.
2554
2555         * main.c (main): New option --limit-rate.
2556
2557         * retr.c (limit_bandwidth): New function.
2558         (get_contents): Call it to limit the bandwidth used when
2559         downloading.
2560
2561         * progress.c (dot_update): Would print the wrong download speed on
2562         rows other than the first one when the download was continued.
2563         (dot_finish): Ditto.
2564
2565 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
2566
2567         * http.c (gethttp): fix undeclared variable 'err' when compiled
2568         with HAVE_SSL.
2569
2570 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2571
2572         * progress.c: Don't allocate new timers; use the timing data
2573         propagated from the caller.
2574
2575         * retr.c (get_contents): Allocate and use a timer.
2576
2577 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2578
2579         * http.c (last_host_ip): Made into an address_list.
2580         (invalidate_persistent): Release pc_last_host_ip.
2581         (register_persistent): Use lookup_host.
2582         (persistent_available_p): Check for equality of hosts using
2583         address_list_match_all.  Call address_list_release.
2584         (http_cleanup): New function.
2585
2586         * ftp.c (getftp): Use lookup_host and connect_to_many.
2587
2588         * http.c (gethttp): Use lookup_host and connect_to_many.
2589
2590         * connect.c (make_connection): Removed.
2591         (connect_to_one): New function.
2592         (connect_to_many): Ditto.
2593         (set_connection_host_name): Ditto.
2594
2595         * host.c (lookup_host): New function; new return type.
2596         (address_list_new): New function.
2597         (address_list_count): Ditto.
2598         (address_list_copy_one): Ditto.
2599         (address_list_delete): Ditto.
2600         (address_list_release): Ditto.
2601         (pretty_print_address): Ditto.
2602
2603 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2604
2605         * recur.c (retrieve_tree): In case of followed redirection,
2606         blacklist the pre-redirection URL.
2607
2608 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2609
2610         * recur.c (descend_redirect_p): New function.
2611         (retrieve_tree): Make sure redirections are not blindly followed.
2612
2613 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
2614
2615         * config.h.in: added HAVE_RANDOM.
2616
2617         * options.h: added random_wait to struct options.
2618
2619         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
2620         for --random-wait.
2621
2622         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
2623         implementation of random wait times.
2624
2625         * init.c (commands): added "randomwait" keyword.
2626
2627 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2628
2629         * recur.c (descend_url_p): Be more conservative with blacklisting
2630         URLs.
2631         (convert_all_links): Print how many files have been converted, and
2632         how long it took.
2633
2634         * progress.c (create_image): Place the number of downloaded bytes
2635         right after the progress bar.
2636
2637         * utils.c (suffix): Return a pointer into the string.
2638
2639 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2640
2641         * url.c (convert_links): Handle CO_NULLIFY_BASE.
2642
2643         * recur.c (retrieve_tree): Ignore download-ignorable children.
2644         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
2645
2646         * html-url.c (handle_link): Return the newly created urlpos.
2647         (collect_tags_mapper): When dealing with BASE, store the base
2648         reference and mark it as download-ignorable.
2649
2650 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2651
2652         * url.c (convert_links): Attempt to quote '?' as "%3F" when
2653         linking to local files.  Given up on the attempt, as it breaks
2654         local browsing.
2655
2656 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2657
2658         * main.c (private_initialize): Removed.
2659         (main): Don't call private_initialize.
2660
2661         * http.c: Call lookup_host.
2662
2663         * host.c (host_init): Removed.
2664         (add_host_to_cache): Initialize host_name_address_map here, on
2665         demand.
2666         (ngethostbyname): Commented out.
2667
2668         * connect.c (make_connection): Remove dead code; use lookup_host.
2669
2670         * host.c (store_hostaddress): Renamed to lookup_host and reversed
2671         the args.
2672         Removed host_address_name_map and host_slave_master_map.
2673
2674 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2675
2676         * progress.c (dot_create): Align the "[ skipping ... ]" string
2677         with the dots.
2678
2679         * retr.c (rate): Split into two functions: calc_rate and
2680         retr_rate.
2681
2682         * progress.c (create_image): Draw a dummy progress bar even when
2683         total size is unknown.
2684         (display_image): Place the text cursor at the end of the "image".
2685
2686 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2687
2688         * url.c (reencode_string): Use unsigned char, not char --
2689         otherwise the hex digits come out wrong for 8-bit chars such as
2690         nbsp.
2691         (lowercase_str): New function.
2692         (url_parse): Canonicalize u->url if needed.
2693         (get_urls_file): Parse each URL, and return only the valid ones.
2694         (free_urlpos): Call url_free.
2695         (mkstruct): Add :port if the port is non-standard.
2696         (mkstruct): Append the query string to the file name, if any.
2697         (urlpath_length): Use strpbrk_or_eos.
2698         (uri_merge_1): Handle the cases where LINK is an empty string,
2699         where LINK consists only of query, and where LINK consists only of
2700         fragment.
2701         (convert_links): Count and report both kinds of conversion.
2702         (downloaded_file): Use a hash table, not a list.
2703         (downloaded_files_free): Free the hash table.
2704
2705         * retr.c (retrieve_from_file): Ditto.
2706
2707         * main.c (main): Call either retrieve_url or retrieve_tree
2708         for each URL, not both.
2709
2710         * retr.c (register_all_redirections): New function.
2711         (register_redirections_mapper): Ditto.
2712         (retrieve_url): Register the redirections.
2713         (retrieve_url): Make the string "Error parsing proxy ..." 
2714         translatable.
2715
2716         * res.c (add_path): Strip leading slash from robots.txt paths so
2717         that the path representations are "compatible".
2718         (free_specs): Free each individual path, too.
2719         (res_cleanup): New function.
2720         (cleanup_hash_table_mapper): Ditto.
2721
2722         * recur.c (url_queue_new): New function.
2723         (url_queue_delete): Ditto.
2724         (url_enqueue): Ditto.
2725         (url_dequeue): Ditto.
2726         (retrieve_tree): New function, replacement for recursive_retrieve.
2727         (descend_url_p): New function.
2728         (register_redirection): New function.
2729
2730         * progress.c (create_image): Cosmetic changes.
2731
2732         * init.c (cleanup): Do all those complex cleanups only if
2733         DEBUG_MALLOC is defined.
2734
2735         * main.c: Removed --simple-check and the corresponding
2736         simple_host_check in init.c.
2737
2738         * html-url.c (handle_link): Parse the URL here, and propagate the
2739         parsed URL to the caller, who would otherwise have to parse it
2740         again.
2741
2742         * host.c (xstrdup_lower): Moved to utils.c.
2743         (realhost): Removed.
2744         (same_host): Ditto.
2745
2746 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2747
2748         * utils.c (path_simplify): Preserver the (non-)existence of
2749         leading slash.  Return non-zero if changes were made.
2750
2751 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2752
2753         * progress.c (bar_update): Don't modify bp->total_length if it is
2754         zero.
2755
2756 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2757
2758         * retr.c (retrieve_url): When the redirection URL doesn't parse,
2759         print the correct error message rather than "UNKNOWN".
2760
2761 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2762
2763         * progress.c (bar_finish): If the timer didn't record any time
2764         since the download beginning, fake 1ms.
2765
2766 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2767
2768         * recur.c (recursive_retrieve): Fix typo.
2769
2770 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2771
2772         * progress.c (create_image): Don't translate "%ld ".
2773
2774 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2775
2776         * progress.c (bar_set_params): Allow the user to force the use of
2777         the bar.
2778
2779 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
2780
2781         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
2782
2783 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2784
2785         * progress.c: Renamed dp_* functions to dot_* for greater clarity
2786         and consistency with bar_*.
2787         (print_download_speed): Get rid of the unneeded '@' character.
2788         (create_image): Fix download rate geometry.
2789
2790         * progress.c (print_elapsed): Remove spurious space.
2791         (print_elapsed): Renamed to print_download_speed, since that's
2792         what it does.
2793
2794 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2795
2796         * progress.c (bar_update): If the downloaded amount becomes larger
2797         than the expected amount, adjust the expected amount accordingly.
2798
2799 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2800
2801         * utils.c (determine_screen_width): New function.
2802
2803         * main.c (main): New option `--progress=TYPE'.
2804         (main): Implement compatibility with the old option `--dot-style'.
2805
2806         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
2807         dp_set_params.
2808         (cmd_spec_progress): New function.
2809
2810         * retr.c (get_contents): Use the progress_* functions instead of
2811         the old show_progress().
2812         (show_progress): Removed.
2813         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
2814         etc.
2815
2816         * progress.c (set_progress_implementation): New function.
2817         (valid_progress_implementation_p): Ditto.
2818         (progress_create): Ditto.
2819         (progress_update): Ditto.
2820         (progress_finish): Ditto.
2821         (dp_create): Ditto.
2822         (dp_update): Ditto.
2823         (dp_finish): Ditto.
2824         (dp_set_params): Ditto.
2825         (print_elapsed): Ditto.
2826
2827 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2828
2829         * retr.c (show_progress): Use it.
2830
2831         * log.c (log_set_flush): New function.
2832
2833 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2834
2835         * utils.c (path_simplify): Don't remove trailing slashes.
2836
2837         * ftp.c (ftp_get_listing): Use it.
2838
2839         * utils.c (file_merge): New function.
2840
2841         * url.c (opt_url): Removed.
2842
2843         * recur.c (recursive_retrieve): Inline "opt_url" logic.
2844
2845         * main.c (main): Use xfree(), not free().
2846
2847         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
2848
2849         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
2850         internally.
2851
2852         * config.h.in: Include a stub for HAVE_STRPBRK.
2853
2854         * cmpt.c (strpbrk): Include a replacement for systems without
2855         strpbrk().
2856
2857         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
2858
2859         * url.c (url_set_dir): New function.
2860         (url_set_file): Ditto.
2861
2862         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
2863         parser makes the URL "params" available, so we can do that in this
2864         function.
2865
2866         * retr.c: Ditto.
2867
2868         * ftp.c: Ditto; pass the local file information in `ccon'.
2869
2870         * http.c: Get rid of the ugly kludge that had URL being replaced
2871         with the proxy URL when proxy retrieval was requested.  Use a
2872         separate parameter to http_loop and gethttp for the proxy URL.
2873
2874         * http.c: Changed to reflect the fact that local file, proxy, and
2875         referer information are no longer stored in struct url.  The local
2876         file information is passed in `struct hstat' now.
2877
2878         * url.c: Reworked URL parsing to be more regular.  Reencode the
2879         URL using reencode_string.
2880         Removed non-URL-related information from struct url.  This
2881         includes fields `proxy', `local', and `referer'.
2882
2883 2001-11-22  Jochen Hein  <jochen@jochen.org>
2884
2885         * main.c (main): Split the copyright notice for easier
2886         translation.
2887
2888 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
2889
2890         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
2891           command to server to request file size.
2892         * ftp.h (ftp_size): Export it.
2893         * ftp.c (getftp): Use new ftp_size function if restoring
2894           transfer of a file with unknown size.
2895
2896 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2897
2898         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
2899
2900 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2901
2902         * url.c (getproxy): Handle URL shorthands.
2903
2904 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2905
2906         * main.c: Remove --wait / --waitretry backwards compatibility
2907         code.
2908         
2909 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2910
2911         * main.c (main): Use it.
2912
2913         * url.c (rewrite_url_maybe): New function.
2914
2915 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2916
2917         * url.c: Clean up handling of URL schemes.
2918
2919 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2920
2921         * url.c: Get rid of `protostrings'.
2922         (skip_proto): Don't use protostrings.
2923         (has_proto): Ditto.
2924
2925 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2926
2927         * Makefile.in: Conditionally compile getopt.o.
2928
2929 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2930
2931         * md5.h: Renamed to gnu-md5.h.
2932
2933         * md5.c: Renamed to gnu-md5.c.
2934
2935         * http.c: Ditto.
2936
2937         * ftp-opie.c: Use the new macros.
2938
2939         * sysdep.h: Define md5-related macros.
2940
2941         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
2942         depending on which md5 implementation is used.
2943
2944 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2945
2946         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
2947         the compiler.
2948
2949 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2950
2951         * http.c (gethttp): Print the whole response line when printing
2952         headers is requested.
2953
2954 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2955
2956         * res.c: New file.  Implement all RES-related code here.
2957
2958 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2959
2960         * version.c: Wget 1.7.1 is released.
2961
2962 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2963
2964         * headers.c (header_extract_number): Ignore trailing whitespace.
2965
2966 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
2967
2968         * html-url.c (collect_tags_mapper): Fix bug converting links
2969         with -k option for tags with multiple link attributes by
2970         handling links in the order they appear.
2971
2972 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
2973
2974         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
2975           the call to the 'rate' function by moving it past the error
2976           checking for the 'getftp' function return value.
2977
2978 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2979
2980         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
2981         '\"'.  Different compilers' assert macros are broken in different
2982         ways.
2983
2984 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
2985
2986         * http.c (gethttp): print debug output for errors occuring during
2987         the ssl handshake.
2988
2989 2001-11-16  Chris Seawood  <cls@seawood.org>
2990
2991         * init.c: Ditto.
2992
2993         * host.c: Ditto.
2994
2995         * connect.c: Ditto.
2996
2997         * sysdep.h: Support compilation under BEOS.
2998
2999 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3000
3001         * url.c (url_equal): Fix a memory leak when parseurl returns an
3002         error on the second URL. Also, since url_equal is not used at the
3003         moment, do not compile it.
3004
3005         * url.h: Ditto for the prototype of url_equal.
3006
3007 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3008
3009         * html-parse.c (map_html_tags): Support XML-style empty tags.
3010
3011 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3012
3013         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
3014         loop condition because we're no longer setting SIZEVAR here.
3015
3016 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3017
3018         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
3019         call because it needs the old value.
3020
3021 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3022
3023         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
3024         an attribute name.
3025
3026 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3027
3028         * url.c (url_filename): Make sure that slashes that sneak in to
3029         u->file via query string get protected.
3030         (file_name_protect_query_string): New function.
3031
3032 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3033
3034         * recur.c (recursive_retrieve): Also check undesirable_urls with
3035         canonicalized URL.
3036
3037 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3038
3039         * http.c (gethttp): Search `.netrc' with real host, not the proxy
3040         one.
3041
3042 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3043
3044         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
3045         define it.
3046
3047 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3048
3049         * ftp.h: Provide correct prototype for ftp_parse_ls().
3050
3051 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3052
3053         * version.c: Wget 1.7 is released.
3054
3055 2001-06-03  Karl Eichwalder  <ke@suse.de>
3056
3057         * ftp-ls.c (ftp_parse_ls): Fix typo.
3058
3059 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3060
3061         * all: Update copyright information.
3062
3063 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3064
3065         * http.c (gethttp): Indicate that the continued download failed
3066         for *this* file.
3067
3068 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3069
3070         * version.c: Wget 1.7-pre1 is released.
3071
3072 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3073
3074         * version.c: Updated version to 1.7-pre1.
3075
3076 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3077
3078         * gen_sslfunc.c: Don't include <sys/time.h> directly.
3079
3080 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3081
3082         * http.c (gethttp): Use real URL data for cookies, not the proxy
3083         stuff.
3084
3085 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3086
3087         * main.c (print_help): Document `--no-http-keep-alive'.
3088
3089         * utils.c (numdigit): Handle negative numbers *correctly*.
3090
3091         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
3092         than the confusing "unsigned".
3093
3094         * utils.c (string_set_contains): Renamed from string_set_exists.
3095
3096         * hash.c (hash_table_contains): Renamed from hash_table_exists.
3097
3098         * cookies.c: Move case-insensitive hash tables to hash.c.
3099
3100 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3101
3102         * http.c (gethttp): Before concluding that the file is already
3103         fully retrieved, make sure that the file existed and `Range' was
3104         actually requested.
3105
3106 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3107
3108         * cookies.c (eliminate_dups): New function.
3109         (build_cookies_request): Use it.
3110         (build_cookies_request): Set chain_store_size after reallocating
3111         all_chains.
3112         (check_domain_match): Annotated for easier future debugging.
3113         (store_cookie): In the debug message, print whether the cookie is
3114         permanent.
3115
3116 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3117
3118         * http.c (http_loop): Reset no_truncate before deciding whether to
3119         set it.
3120         (gethttp): Further clarify "-c conflicts with existing file" error
3121         message, based on input from Herold Heiko.
3122
3123 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
3124
3125         * http.c (http_loop): If restval is set, set no_truncate to 1
3126         unconditionally.
3127
3128 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3129
3130         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
3131         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
3132         (ftp_parse_vms_ls): Ditto.
3133
3134 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
3135
3136         * init.c (cmd_address): Zero SIN before using it; apparently
3137         needed on *BSD.
3138
3139 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3140
3141         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
3142         empty.
3143
3144 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
3145
3146         * main.c (main): Make `--cookies' respect its argument.
3147
3148 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3149
3150         * main.c (main): Removed undocumented option `--email-address'.
3151
3152         * netrc.c: Use the latest read_whole_line.
3153
3154         * init.c (defaults): Set opt.ftp_pass to "-wget@".
3155
3156         * mswindows.c (pwd_cuserid): Ditto.
3157
3158         * utils.c (pwd_cuserid): Removed.
3159
3160         * host.c (ftp_getaddress): Removed.
3161
3162 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3163
3164         (http_loop): Allocate space for filename_plus_orig_suffix with
3165         alloca; this is more efficient and removes the need to free it
3166         before each and every return.
3167
3168 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
3169
3170         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
3171         unneeded because the file is already there and fully downloaded,
3172         and -c is specified.
3173         (http_loop): Handle RETRUNNEEDED.
3174
3175         * wget.h (uerr_t): New value RETRUNNEEDED.
3176
3177         * http.c (http_loop): Set no_truncate for files that both exist
3178         and are non-empty.
3179         (gethttp): Consider the download finished when restval >= contlen,
3180         not only when restval==contlen.
3181         (gethttp): Handle redirection before giving up due to -c.
3182         (gethttp): Clarify error message which explains that -c will not
3183         truncate the file.
3184         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
3185         the stuff that needs freeing and release the socket.
3186
3187 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3188
3189         * main.c (print_help): Wget booleans accept "off", not "no".
3190
3191 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3192
3193         * http.c (http_loop): If allow_cache is zero, always disable
3194         caching, not only when retrieving through proxy.
3195
3196         * init.c: Ditto.
3197
3198         * options.h (struct options): Rename proxy_cache to allow_cache.
3199
3200 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3201
3202         * http.c (mktime_from_utc): Improve documentation.
3203         (http_atotm): Put format strings into a separate array.
3204
3205 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
3206
3207         * safe-ctype.h: Instead of throwing #error when isalpha is
3208         defined, redefine it to something that will throw a compile-time
3209         error if actually *used*.  Do the same for the rest of the
3210         standard C macros.
3211
3212 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
3213
3214         * url.c (getproxy): Ignore empty proxy vars.
3215
3216 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3217
3218         * http.c (http_loop): Would load cookies every time.
3219
3220         * cookies.c (load_cookies): Handle cookies whose values contain
3221         embedded spaces.
3222
3223 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3224
3225         * utils.c: Define each DIGITS_* in one line.
3226
3227 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
3228
3229         * http.c (http_atotm): Initialize t.tm_isdst to 0.
3230         (mktime_from_utc): Prevent mktime() from having discontinuities at
3231         DST transition points.
3232
3233 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3234
3235         * html-url.c (get_urls_html): Fix documentation.
3236
3237 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3238
3239         * url.c (UNSAFE_CHAR): Reimplement using a static table.
3240         (url_init): Removed.
3241         (init_unsafe_char_table): Removed.
3242
3243 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3244
3245         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
3246
3247 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
3248
3249         * utils.c: Document timer functions.
3250
3251         * retr.c (rate): Use it.
3252         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
3253
3254         * utils.c (wtimer_granularity): New function.
3255
3256 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3257
3258         * retr.c (show_progress): Ditto.
3259
3260         * ftp.c (getftp): Ditto.
3261
3262         * http.c (gethttp): Use new timer functions.
3263
3264         * utils.c (wtimer_allocate): New function.
3265         (wtimer_new): Ditto.
3266         (wtimer_delete): Ditto.
3267         (wtimer_reset): Ditto.
3268         (wtimer_elapsed): Ditto.
3269
3270 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3271
3272         * utils.c (long_to_string): New, faster version.  Favors smaller
3273         numbers; much of the calculation is now done at compile-time.
3274
3275 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
3276
3277         * utils.c (numdigit): Handle negative numbers.
3278
3279 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
3280
3281         * retr.c (show_progress): Print the download rate even when the
3282         percentages are not available.
3283
3284 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3285
3286         * ftp.c (getftp): Adjust expected_bytes if the length is
3287         authoritative.
3288
3289 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3290
3291         * url.c: Don't declare `construct'.
3292
3293         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
3294         mappings to new locations.
3295         (hash_table_new): Make resize_threshold a field in the hash table,
3296         so we don't have to recalculate it in each hash_table_put.
3297         (grow_hash_table): Update resize_threshold.
3298         (MAX): Remove unused macro.
3299         (prime_size): Made static.
3300
3301 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
3302
3303         * retr.c (retrieve_url): Call uri_merge, not url_concat.
3304
3305         * html-url.c (collect_tags_mapper): Call uri_merge, not
3306         url_concat.
3307
3308         * url.c (mkstruct): Use encode_string instead of xstrdup followed
3309         by URL_CLEANSE.
3310         (path_simplify_with_kludge): Deleted.
3311         (contains_unsafe): Deleted.
3312         (construct): Renamed to uri_merge_1.
3313         (url_concat): Renamed to uri_merge.
3314
3315 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3316
3317         * url.c (str_url): Use encode_string instead of the unnecessary
3318         CLEANDUP.
3319         (encode_string_maybe): New function, returns input string if no
3320         encoding is needed.
3321         (encode_string): Call encode_string_maybe to do the dirty work,
3322         xstrdup if no work needed.
3323
3324 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3325
3326         * wget.h (XDIGIT_TO_xchar): Define here.
3327
3328         * url.c (decode_string): Use new name.
3329         (encode_string): Ditto.
3330
3331         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
3332         (dump_hash): Use new name.
3333
3334         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
3335         XDIGIT_TO_XCHAR respectively.
3336
3337 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3338
3339         * init.c: Include cookies.h.
3340
3341         * cookies.h: Declare cookies_cleanup.
3342
3343         * cookies.c (check_domain_match): Remove unused variable.
3344         (save_cookies): Remove extraneous argument from debug statement.
3345
3346         * host.c (same_host): Don't call skip_url.
3347
3348         * url.c (skip_url): Removed.  Removed its calls from various
3349         functions in url.c.
3350
3351 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3352
3353         * cookies.c (unsigned_string_hash): Use the new code in
3354         string_hash as reference.
3355
3356         * hash.c (hash_table_map): Allow deletion and change of the
3357         element processed by MAPFUN.
3358         (string_hash): Use the function from glib.
3359
3360 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3361
3362         * config.h.in: Include #undef stub.
3363
3364         * hash.c (hash_table_remove): Rewrite to actually clear deleted
3365         entries instead of just marking them as deleted.
3366
3367 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3368
3369         * hash.h: Declare hash_table_get_pair and hash_table_count.
3370
3371 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3372
3373         * cookies.c: Declare http_atotm.
3374
3375 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3376
3377         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
3378         permissions.  A compiler that doesn't accept octal constants is
3379         seriously broken and shouldn't be used -- octal constants were
3380         present in K&R C!
3381
3382 2001-01-20  Karl Eichwalder  <ke@suse.de>
3383
3384         * Makefile.in: Provide and use DESTDIR according to the Coding
3385         Standards.
3386
3387 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3388
3389         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
3390         specification.
3391
3392 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3393
3394         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
3395         because that strips the *leading* slash, thus forcing relative
3396         FTP retrieval.
3397
3398 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3399
3400         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
3401         notation for VMS servers. 
3402         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
3403         odir is an empty string.
3404
3405 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3406
3407         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
3408         effective. Suggested by Edward J. Sabol.
3409
3410 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3411
3412         * cookies.c (build_cookies_request): Use and sort cookies from all
3413         matching domains.
3414         (build_cookies_request): Check for duplicates before generating
3415         the `Cookies' header.
3416
3417         * main.c (main): Don't load cookies here.
3418         (main): Make loadcookies and savecookies call the correct command.
3419
3420         * http.c (http_loop): Load cookies on-demand.
3421
3422 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3423
3424         * http.c (gethttp): Fix indentation of SSL ifdef.
3425
3426 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3427
3428         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
3429         that hack is no longer necessary.
3430         (getftp): Prepend initial directory to *non*-absolute u->dir's.
3431
3432 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
3433
3434         * init.c (cmd_file): New function.
3435         (enable_tilde_expansion): New variable.
3436         (run_wgetrc): Use it.
3437         (cmd_file): Use it.
3438
3439 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3440
3441         * init.c: Include cookie-related options.
3442
3443         * main.c (main): Include cookie-specific options.
3444         (main): Load cookies before download is finished.
3445         (main): Save cookies when done.
3446
3447         * http.c (gethttp): Process the `Set-Cookie' header.
3448         (gethttp): Include cookies in the response.
3449
3450         * cookies.c: New file.
3451
3452 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3453
3454         * utils.c (datetime_str): New function.
3455
3456 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3457
3458         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
3459         12:01PM == 00:01, which was obviously wrong. Taken care of this
3460         anomaly.
3461
3462         * ChangeLog: Removed an excess conflict marker. Reformatted the
3463         entry by Philipp Thomas from 2001-03-09.
3464
3465         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
3466         between 0 and 23. Elminate unused variable `sec'.
3467
3468 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3469
3470         * hash.c (hash_table_count): New function.
3471
3472 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3473
3474         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
3475         Digital Unix cc.
3476
3477 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3478
3479         * config.h.in: Oops, do the namespace tweaks only on systems we
3480         know about.
3481
3482 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3483
3484         * hash.c: Include <string.h>.
3485
3486 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3487
3488         * config.h.in: Define "compilation environment" options that work
3489         under Linux and Solaris.  To be reviewed on other OS'es.
3490
3491 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3492
3493         * http.c (gethttp): Prepend literal newline with `\n\'.
3494
3495 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3496
3497         * sysdep.h: Don't define VERY_LONG_FORMAT.
3498
3499         * utils.c (very_long_to_string): New function.
3500         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
3501
3502 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
3503
3504         * url.c (parse_uname): Would run past the end of the string if the
3505         username was present, but the URL did not contain a slash, e.g.
3506         http://foo:bar@myhost.
3507
3508 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
3509
3510         * http.c (http_atotm): Use %A instead of %a to match full
3511         weekday.  (On most systems there is no difference.)
3512
3513 2001-04-03  Paul Bludov  <paul@ozero.net>
3514
3515         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
3516         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
3517         leak.
3518         (ws_mypath): Use GetModuleFileName instead of argv[0].
3519         (ws_startup): Use data.wVersion for comparison.
3520
3521 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3522
3523         * http.c (http_loop): Ditto.
3524
3525         * ftp.c (ftp_loop_internal): Made the check whether to continue
3526         retrieval `-O'-friendly.
3527
3528 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3529
3530         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
3531         they will be handled as whitespace.
3532         (parse_netrc): Correctly handle lines that end with whitespace.
3533
3534 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3535
3536         * retr.c (retrieve_url): New variable global_download_count used
3537         to identify first retrieval.
3538
3539         * ftp.c (getftp): Ditto.
3540
3541         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
3542
3543 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3544
3545         * init.c (cmd_address): Heap-allocate the address that gets stored
3546         to CLOSURE.  Old code would simply assign an address on the stack.
3547
3548 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
3549
3550         * ftp.c (ftp_get_listing): Propagate error status.
3551         (ftp_retrieve_glob): Use it.
3552         (ftp_loop): Ditto.
3553
3554 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
3555
3556         * main.c (main): Add -C to the string that is the third arg to
3557         getopt_long().
3558
3559 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3560
3561         * ftp.c (getftp): Don't start the download from scratch if `-c'
3562         was specified, but the file is already fully downloaded.
3563
3564         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
3565         specified and the server doesn't support continued download.
3566         (gethttp): Don't start the download from scratch if `-c' was
3567         specified, but the file is already fully downloaded.
3568
3569 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3570
3571         (recursive_retrieve): Don't clear the hash tables at this point at
3572         all; it interferes with the normal operation of register_download.
3573
3574 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3575
3576         * recur.c (recursive_retrieve): Clear the hash tables only when
3577         they are defined.
3578
3579 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3580
3581         * http.c (gethttp): Make sure the socket is closed with
3582         CLOSE_INVALIDATE before we have drained the body.
3583
3584 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3585
3586         * retr.c (retrieve_url): Call register_download() for downloaded
3587         files and register_html() for downloaded HTML files.
3588
3589         * recur.c (register_download): New function; register here that a
3590         file has been downloaded, rather than in recursive_retrieve().
3591         (register_html): New function; enqueue the location of HTML files
3592         here rather than in recursive_retrieve().
3593
3594 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3595
3596         * main.c (print_help): Use multiple fputs instead of a single ugly
3597         printf().
3598         (main): Consistently assign numbers >128 to options without a
3599         corresponding character.
3600
3601 2001-03-09  Philipp Thomas  <pthomas@suse.de>
3602
3603         * safe-ctype.h: New file. Locale independent ctype.h replacement
3604         taken from libiberty.
3605
3606         * safe-ctype.c: New file. Tables for above.
3607
3608         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
3609         safe-ctype$o.
3610
3611         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
3612         isspace.
3613
3614         * ftp-basic.c: Don't include ctype.h.
3615
3616         * ftp-ls.c: Likewise.
3617
3618         * ftp.c: Likewise.
3619
3620         * headers.c: Likewise.
3621
3622         * host.c: Likewise.
3623
3624         * html-parse.c: Likewise.
3625
3626         * html-url.c: Likewise.
3627
3628         * http.c: Likewise.
3629
3630         * init.c: Likewise.
3631
3632         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
3633
3634         * netrc.c: Likewise.
3635
3636         * recur.c: Likewise.
3637
3638         * retr.c: Likewise.
3639
3640         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
3641         instead of isdigit.
3642
3643         * sysdep.h: Remove defines of ctype macros as they aren't needed
3644         for safe-ctype-h.
3645
3646         * url.c: Don't include ctype.h.
3647
3648         * utils.c: Likewise.
3649
3650         * wget.h: Include safe-ctype.h.
3651
3652 2001-03-27  Dan Harkless  <wget@harkless.org>
3653
3654         * Makefile.in: Moved top_builddir out of "User configuration
3655         section" of top Makefile and analogous spot in this one.
3656
3657 2001-03-17  Dan Harkless  <wget@harkless.org>
3658
3659         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
3660         Define top_builddir.  Link wget with libtool so the user doesn't
3661         have to supply a bunch of custom environment variables to 
3662         correctly link with the OpenSSL shared libraries.
3663
3664 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
3665
3666         * http.c (gethttp): skip :port in host header if it is the
3667         DEFAULT_HTTPS_PORT when using SSL.
3668
3669         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
3670         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
3671         rest of the code. 
3672         * url.h: Ditto
3673
3674 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
3675
3676         * retr.c (show_progress): Correctly calculate the number of bytes
3677         in the first line of the download that have been actually
3678         downloaded in this run.
3679
3680 2001-02-23  Dan Harkless  <wget@harkless.org>
3681
3682         * main.c (print_help): --help documentation for -N said it would
3683         re-download files if they had the _same_ timestamp on server.
3684         (print_help): -nr belongs in "FTP options" section of --help
3685         output, not "Recursive retrieval" section.  Alphabetized FTP
3686         options by long option name.
3687
3688 2001-02-16  Dan Harkless  <wget@harkless.org>
3689
3690         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
3691         that "httpsproxy" had been inserted into commands[] out of
3692         alphabetical order, causing "BUG: unknown command `httpuser'".
3693
3694 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3695
3696         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
3697         listing without correct permissons).
3698
3699         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
3700         FTP server. 
3701
3702         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
3703         shall be donwloaded only when it's newer than the local copy or
3704         when it has the same timeestamp but its size is different. ST_VMS
3705         and ST_MACOS as special cases that lie about file size. 
3706
3707         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
3708
3709         * Makefile.in: Removed dependency on ftpparse library due to unclear
3710         copyright issues and absence of any feedback to our queries. 
3711
3712         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
3713         copyright issues and absence of any feedback to our queries.   
3714         (ftp_parse_ls): Added a warning message when remote server system
3715         does not seem to be suported by wget. 
3716         (ftp_parse_vms_ls): New function for parsing VMS ftp
3717         server listing output.
3718         (clean_line): New function responsible for removing
3719         end-of-line characters from FTP listing texts.
3720
3721         * ftp.c (getftp): Global variables pwd and host_type are now
3722         member of the ccon structure under names ccon.id and ccon.rs. 
3723
3724         * ftp.h (struct ccon): Added formed global variables from ftp.c,
3725         enum stype rs (remote system identification) and char *id (initial
3726         working directory), as suggested by Hrvoje.
3727
3728         * url.c (parse_uname): Added support for passwords containing '@'
3729         characters.
3730         (skip_uname): Ditto.
3731
3732 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3733
3734         * ftp.c (ftp_loop): Reset con.
3735
3736 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3737
3738         * url.c (parse_uname): Added support for passwords containing '@'
3739         characters.
3740         (skip_uname): Ditto.
3741
3742 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
3743
3744         * url.c (parseurl): Debug-print u->ftp_type.
3745
3746 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3747
3748         * ftp.c (ftp_loop_internal): Disable padding.
3749         (getftp): Ditto.
3750
3751         * http.c (http_loop): Disable padding.
3752
3753         * retr.c (show_progress): Use it to enable padding.
3754
3755         * retr.c (rate): Optional parameter PAD for padding the rate.
3756
3757 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3758
3759         * retr.c (show_progress): Make sure that the last output line
3760         includes progress.
3761
3762 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
3763
3764         * retr.c (show_progress): Print the download rate along with the
3765         percentages.
3766         Along with Anders Thorsby <anders@thorsby.dk>.
3767
3768 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
3769
3770         * ftp.h: Rename enums `command' to `wget_ftp_command' and
3771         `fstatus' to `wget_ftp_status' because old names clash with Tru64
3772         net/if.h.
3773
3774 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
3775
3776         * gen_sslfunc.c: verify_callback is now static
3777
3778         * gen_sslfunc.c (init_ssl): load certificate if specified
3779
3780         * gen_sslfunc.c (ssl_printerr): new function
3781
3782         * init.c: added new --sslcertfile and --sslcertkey switches
3783
3784         * main.c: ditto
3785
3786         * options.h: ditto
3787
3788         * http.c (gethttp): abort when init_ssl fails
3789
3790 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
3791
3792         * mswindows.h: Include <malloc.h>; it's needed for alloca().
3793
3794 2001-01-10  Dan Harkless  <wget@harkless.org>
3795
3796         * url.c (str_url): Clarified this function's comment header after
3797         Hrvoje answered my question on the list as to when hide != 1.
3798         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
3799
3800 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3801
3802         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
3803         Drazen Kacar <dave@arsdigita.com>.
3804         (conaddr): Ditto.
3805
3806 2001-01-09  Dan Harkless  <wget@harkless.org>
3807
3808         * html-url.c: A bunch of fixup of `--page-requisites'-related
3809         comments to reflect Hrvoje's changes to my code when transplanting
3810         it into this new file, to fix spelling mistakes, to clarify, etc.
3811
3812         * url.c (write_backup_file): Clarified a comment.
3813         (str_url): Henrik van Ginhoven pointed out on the list that we
3814         shouldn't give away the number of characters in the password by
3815         replacing each character with a 'x'.  Use "<password>" instead.
3816
3817         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
3818         directories didn't work if logging in put you in a directory other
3819         than "/" is fixed now.  Removed the comment here warning of the bug.
3820
3821         * main.c (print_help): --continue's description was misleading.
3822         We don't "restart", we "resume".  Also, better to say
3823         "partially-downloaded file" rather than just "existing file".
3824
3825 2001-01-06  Dan Harkless  <wget@harkless.org>
3826
3827         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
3828         the best way to go about my aim.  Removed them in favor of:
3829
3830         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
3831
3832 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3833
3834         * url.c (replace_attr): New function, to be used by both
3835         TO_COMPLETE and TO_RELATIVE case in convert_links.
3836         (find_fragment): New function for finding URL fragments.
3837         (replace_attr): Better handle the case where the original string
3838         is not quoted.  Use find_fragment.
3839         (convert_links): Use replace_attr().
3840
3841 2000-12-31  Dan Harkless  <wget@harkless.org>
3842
3843         * ChangeLog: Since this flat file doesn't have multiple branches,
3844         looking at the dates would make you think that things went into
3845         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
3846         in 1.6 branch.]" where appropriate to clarify.
3847         
3848 2000-12-30  Dan Harkless  <wget@harkless.org>
3849
3850         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
3851         patch to deal with h_errno not being defined in netdb.h under Cygwin.
3852
3853 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
3854
3855         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
3856
3857 2000-12-17  Igor Khristophorov  <igor@atdot.org>
3858
3859         * http.c (check_end): Fix test for '+' or '-'.
3860
3861 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3862
3863         * url.c (parseurl): Rename inner loop var from i to ind to avoid
3864         clash with the function top-level-declared variable i.
3865         (str_url): Likewise, rename inner-loop i to j.
3866
3867         * recur.c (parse_robots): Don't declare LEN at top of function.
3868         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
3869         global variable.
3870
3871         * main.c (main): Change erroneous use of bitwise and to logical.
3872
3873         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
3874         the stack because it will be copied to closure.
3875
3876         Thanks to Csaba Raduly's run of PC-LINT over the sources.
3877
3878 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3879
3880         * http.c (basic_authentication_encode): Use xmalloc(), not
3881         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
3882         sources.
3883
3884 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
3885
3886         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
3887         compilation.
3888
3889 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3890
3891         * mswindows.c: Include <errno.h>.
3892
3893         * gen_sslfunc.c: Include <errno.h>.
3894
3895         * ftp-basic.c: Don't attempt to declare errno or h_errno because
3896         they're not used.
3897
3898         * main.c: Include <errno.h> because errno is used.
3899
3900         * ftp.c: Ditto.
3901
3902         * http.c: Include <netdb.h> for h_errno.
3903
3904 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3905
3906         * html-parse.c (advance_declaration): MSVC assert() chokes on
3907         '\"'.  Use '"' instead.
3908
3909 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3910
3911         * utils.c (xfree_real): Removed.
3912         (xfree_debug): Just call free().
3913
3914         * wget.h (xfree): Make it an alias for free.
3915
3916 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3917
3918         * http.c (http_loop): Furthermore, touch output_document only if
3919         it is known to be an existing regular file.
3920
3921 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
3922
3923         * ftp.c (ftp_retrieve_list): Ditto.
3924
3925         * http.c (http_loop): Touch output_document if that is used for
3926         output.
3927
3928 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3929
3930         * http.c: Include gen_sslfunc.h after including Wget's headers.
3931         (persistent_available_p): Needed coma before `int ssl'.
3932
3933 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3934
3935         * ftp.c (ftp_loop_internal): Ditto.
3936
3937         * http.c (http_loop): Use it.
3938
3939         * retr.c (sleep_between_retrievals): New function that handles the
3940         logic of opt.wait and opt.waitretry.
3941
3942 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3943
3944         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
3945         rbuf_read_bufferful when the buffer is depleted.
3946
3947         * rbuf.c (rbuf_read_bufferful): New function.
3948
3949 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3950
3951         * gen_sslfunc.h: Use ansi2knr style function declarations.
3952
3953         * gen_sslfunc.c: Reformat according to the GNU coding standards.
3954         More should be done.
3955
3956         * http.c (persistent_available_p): Place the cheap SSL test nearer
3957         the top of the function.
3958         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
3959
3960 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3961
3962         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
3963         char.
3964
3965 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
3966
3967         * Makefile.in: added gen_sslfunc object
3968         * config.h.in: added HAVE_SSL define
3969         * connect.c: changed select_fd from static int to int
3970         * connect.h: ditto
3971         * gen_sslfunc.h: New file
3972         * gen_sslfunc.c: ditto
3973         * http.c: added HTTPS fuctionality
3974         * retrc.c: ditto
3975         * url.c: ditto
3976         * init.c: added opt.httpsproxy
3977         * options.h: ditto
3978         * rbuf.h: added alternate rbuf struct
3979         * wget.h: added CONSSLERR
3980         * rbuf.c: ditto
3981
3982         * http.c: Added HTTPS fuctionality.
3983
3984         * retrc.c: Ditto.
3985
3986         * url.c: Ditto.
3987
3988         * init.c: Added opt.httpsproxy.
3989
3990         * options.h: Ditto.
3991
3992         * rbuf.h: Added alternate rbuf struct.
3993
3994         * wget.h: Added CONSSLERR.
3995
3996         * rbuf.c: Ditto.
3997
3998 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3999
4000         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
4001         "ignore_perms" to ignore file and directory permissions for
4002         Windows NT FTP server listings.
4003         (ftp_parse_winnt_ls): New function.
4004         (ftp_parse_ls): Parses UNIX and Windows NT listings
4005         separately. Simple heuristics for distinguishing between UNIX and
4006         MS-DOS-like FTP listing provided by Windows NT FTP service.
4007
4008 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4009
4010         * ftpparse.c, ftpparse.h: New files.
4011
4012         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
4013         only. Use ftp_parse_nonunix_ls otherwise.
4014         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
4015         exotic FTP servers.
4016
4017         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
4018         FTP servers.
4019
4020         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
4021         (getftp): Support for VMS. Support for FTP servers that do not
4022         place you in the root directory after login.
4023         (ftp_retrieve_list): VMS is silent about the real file size, issue
4024         a more appropriate message.
4025         (ftp_get_listing): Pass host_type to ftp_parse_ls.
4026
4027         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
4028
4029 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4030
4031         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
4032         "ignore_perms" to ignore file and directory permissions for
4033         Windows NT FTP server listings.
4034         (ftp_parse_winnt_ls): New function.
4035         (ftp_parse_ls): Parses UNIX and Windows NT listings
4036         separately. Simple heuristics for distinguishing between UNIX
4037         and MS-DOS-like FTP listing provided by Windows NT FTP service.
4038
4039 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
4040
4041         * netrc.c (parse_netrc): Get rid of line ending.
4042
4043 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
4044
4045         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
4046         Dan.
4047
4048 2000-11-24  Karl Eichwalder  <ke@suse.de>
4049
4050         * main.c (print_help): Untabify.
4051
4052 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
4053
4054         * utils.c (xrealloc_debug): Do the unregister/register thing only
4055         if the pointer has actually changed.
4056         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
4057         (xfree_real): Ditto.
4058         (xrealloc_real): Ditto.
4059         (xstrdup_real): Ditto.
4060
4061 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4062
4063         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
4064         string; no need to strdup() it.
4065         (getftp): Make pwd_len a local variable.
4066         (ftp_loop): Free PWD before returning.
4067
4068         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
4069
4070 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
4071
4072         * all: Use xfree() instead of free.
4073
4074         * utils.c (xfree): New function.
4075
4076 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4077
4078         * url.c (convert_links): HTML-quote the converted string.
4079
4080         * utils.c (html_quote_string): Move here from ftp-ls.c
4081         (html_quote_string): Make non-static; declare in utils.h.
4082         (html_quote_string): Convert SP to &#32;.
4083
4084 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4085
4086         * ftp.c (getftp): Reformat Jan's code according to GNU coding
4087         standards; remove (debugging?) printf's; use '\0' for the ASCII
4088         zero character.  Use alloca() instead of malloc() for
4089         inter-function temporary allocations.
4090
4091 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4092
4093         * ftpparse.c, ftpparse.h: New files.
4094
4095         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
4096         only. Use ftp_parse_nonunix_ls otherwise.
4097         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
4098         exotic FTP servers.
4099
4100         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
4101         FTP servers.
4102
4103         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
4104         (getftp): Support for VMS. Support for FTP servers that do not
4105         place you in the root directory after login.
4106         (ftp_retrieve_list): VMS is silent about the real file size, issue
4107         a more appropriate message.
4108         (ftp_get_listing): Pass host_type to ftp_parse_ls.
4109
4110         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
4111
4112 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4113
4114         * hash.c (hash_table_put): Don't overwrite deleted mappings.
4115
4116 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
4117
4118         * hash.c (find_mapping): New function.
4119         (hash_table_get): Use it.
4120         (hash_table_get_pair): Ditto.
4121         (hash_table_exists): Ditto.
4122         (hash_table_remove): Ditto.
4123         (hash_table_remove): Really delete the entry if the mapping
4124         following LOCATION is empty.
4125
4126         * utils.c (string_set_add): Check whether the element has existed
4127         before.
4128
4129         * hash.c (hash_table_get_pair): New function.
4130
4131 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4132
4133         * http.c (http_process_type): Ignore trailing whitespace; use
4134         strdupdelim().
4135
4136         * recur.c (recursive_retrieve): Use the new `convert' field.
4137         (convert_all_links): Ditto.
4138         (convert_all_links): Don't respect meta_disallow_follow.
4139
4140         * html-url.c (handle_link): Fill out link_relative_p and
4141         link_complete_p.
4142
4143         * url.h (struct _urlpos): Make elements more readable.
4144
4145         * recur.c (recursive_retrieve): Call slist_prepend instead of
4146         slist_append.
4147         (convert_all_links): Call slist_nreverse before iterating through
4148         urls_html.
4149
4150         * utils.c (slist_prepend): New function.
4151         (slist_nreverse): Ditto.
4152
4153 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4154
4155         * http.c (check_end): Constify.
4156
4157 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4158
4159         * http.c (http_loop): If username and password are known, try the
4160         `Basic' authentication scheme by default.
4161
4162         * connect.h: Declare test_socket_open.
4163
4164 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4165
4166         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
4167
4168 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4169
4170         * http.c (gethttp): Don't use the return value of sprintf().
4171         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
4172
4173 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
4174
4175         * recur.c (recursive_retrieve): Print the "so we don't load"
4176         debugging message only if we really don't load.
4177
4178         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
4179         (gethttp): Don't request keep-alive if keep-alive is inhibited.
4180
4181 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4182
4183         * http.c (gethttp): Make the HTTP persistent connections more
4184         robust.
4185
4186 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4187
4188         * retr.c (get_contents): If use_expected, make sure that the
4189         appropriate amount of data is being read.
4190
4191         * http.c (gethttp): Check for both `Keep-Alive: ...' and
4192         `Connection: Keep-Alive'.
4193
4194         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
4195         turned on.
4196
4197 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4198
4199         * http.c (connection_available_p): Use it.
4200
4201         * connect.c (test_socket_open): New function.
4202
4203         * http.c (gethttp): Support persistent connections.  Based on the
4204         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
4205         (register_persistent): New function.
4206         (connection_available_p): Ditto.
4207         (invalidate_connection): Ditto.
4208
4209 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
4210
4211         * url.c (convert_links): Handle UREL2ABS case.
4212
4213         * recur.c (recursive_retrieve): Instead of the list
4214         urls_downloaded, use hash tables dl_file_url_map and
4215         dl_url_file_map.
4216         (convert_all_links): Use them to retrieve data.
4217
4218         * host.c (clean_hosts): Free the hash tables.
4219
4220         * main.c (private_initialize): Call host_init().
4221
4222         * host.c (store_hostaddress): Use a saner, hash table-based data
4223         model.
4224         (realhost): Ditto.
4225         (host_init): Initialize the hash tables.
4226
4227 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
4228
4229         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
4230         used for what the sorted slists used to be used for.
4231         (slist_contains): Don't rely on the list being sorted.
4232         (slist_append): Simplify the code.
4233
4234         * recur.c (recursive_cleanup): Use free_string_set.
4235
4236         * utils.c (string_set_add, string_set_exists, string_set_free):
4237         New functions for easier freeing of hash tables whose keys are
4238         strdup'ed strings.
4239
4240         * recur.c (recursive_retrieve): Use the hash table functions for
4241         storing undesirable URLs.
4242
4243         * hash.c: New file.
4244
4245 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
4246
4247         * main.c (private_initialize): Call url_init.
4248         (main): Call private_initialize.
4249
4250         * url.c (unsafe_char_table): New table.
4251         (UNSAFE_CHAR): Use it.
4252         (init_unsafe_char_table): New function.
4253         (url_init): New function; call init_unsafe_char_table.
4254
4255 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
4256
4257         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
4258         _vsnprintf respectively.
4259
4260 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4261
4262         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
4263         on Linux.
4264
4265 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
4266
4267         * html-url.c (handle_link): Handle HTML fragment identifiers.
4268
4269         * recur.c (recursive_retrieve): If norobot info is respected and
4270         the file is specified not to be followed by robots, respect that.
4271
4272         * html-url.c (collect_tags_mapper): Handle <meta name=robots
4273         content=X>.  For us the important cases are where X is NONE or
4274         where X contains NOFOLLOW.
4275         (get_urls_html): Propagate that information to the caller.
4276
4277 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
4278
4279         * url.c (convert_links): Unlink the file we might be reading from
4280         before writing to it.
4281         (convert_links): Use alloca instead of malloc for
4282         filename_plus_orig_suffix.
4283
4284 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
4285
4286         * host.c (realhost): Add HOST to the list with quality==0 only if
4287         it wasn't already there.
4288         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
4289
4290 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4291
4292         * url.c (get_urls_file): Ditto.
4293         (convert_links): Ditto.
4294
4295         * html-url.c (get_urls_html): Use read_file() instead of
4296         load_file().
4297
4298         * utils.c (read_file): New function, instead of the old
4299         load_file().
4300         (read_file_free): Ditto.
4301
4302         * url.c (findurl): Search only for the supported protocols.
4303         (convert_links): Use fwrite() when writing out a region of
4304         characters.
4305
4306 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4307
4308         * ftp-ls.c: Move html_quote_string and ftp_index here.
4309
4310         * url.c: Remove get_urls_html, since that's now in html-url.c.
4311
4312         * html-url.c: New file.
4313
4314         * html-parse.c: New file.
4315
4316 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4317
4318         * init.c (run_wgetrc): Don't bother killing off '\r' since
4319         pars_line() skips whitespace at end of line anyway.
4320         (parse_line): Oops, it didn't.  Now it does.
4321
4322         * recur.c (parse_robots): Ditto here.
4323
4324         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
4325         manually because read_whole_line no longer does.
4326
4327         * utils.c (read_whole_line): Rewrite to: a) use less memory
4328         (reallocates to needed size after work), b) work faster -->
4329         fgets() instead of getc, c) be more correct --> doesn't kill the
4330         newline character at the end of line.
4331
4332 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
4333
4334         * init.c (comind): Initialize MAX to array size - 1.
4335
4336 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4337
4338         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
4339         Suggested by Edward J. Sabol.
4340
4341 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
4342
4343         * url.c (construct): Handle the case where host name is not
4344         followed by a slash.
4345
4346 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
4347
4348         * init.c: commands[] need to be sorted!  ("base" wasn't.)
4349
4350 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4351
4352         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
4353         `if'.
4354
4355 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4356
4357         * url.c (construct): Insert unneeded initialization for the
4358         compiler to shut up.
4359
4360         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
4361         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
4362         otherwise gets lost when you define _XOPEN_SOURCE.
4363
4364         * utils.c (touch): Include the file name in the error message.
4365         From Debian.
4366
4367 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4368
4369         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
4370         resize the buffer to fit the formated message.  That way, messages
4371         of arbitrary size may be printed.
4372         (logvprintf): Use saved_append() to optionally log the last
4373         several lines of output.
4374         (logputs): Ditto.
4375         (log_close): Adapt to new data structures.
4376         (log_dump): Ditto.
4377         (redirect_output): Print messages to stderr, not to stdout.
4378
4379         * log.c (saved_append_1): New function.  Replaces the old logging
4380         system ("log all output until 10M characters") with a new, much
4381         more reasonable one ("log last screenful of text").
4382         (saved_append): New function; call saved_append_1.
4383         (free_log_line): New function.
4384
4385 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
4386
4387         * url.c (construct): Fix comment.
4388         (find_last_char): Document.
4389
4390 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
4391
4392         * snprintf.c: New file.
4393
4394 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
4395
4396         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
4397         types to logprintf() and debug_logprintf().
4398
4399 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4400
4401         * ftp.c (ftp_loop_internal): Hide the password from the URL when
4402         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
4403         <darekm@bydg.lomac.com.pl>.
4404
4405 2000-11-02  Junio Hamano  <junio@twinsun.com>
4406
4407         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
4408
4409 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
4410
4411         * http.c (known_authentication_scheme_p): Recognize NTML
4412         authentication.
4413         (create_authorization_line): Treat NTML the same as `Basic'.
4414
4415 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4416
4417         * retr.c (retrieve_url): Free url before returning.
4418         (retrieve_url): Free mynewloc before returning.
4419         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
4420
4421 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
4422
4423         * url.c (parseurl): Remove possible reading past the end of
4424         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
4425
4426 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4427
4428         * main.c (main): In case of opt.downloaded overflowing, print
4429         <overflow> instead of a totally bogus random value.
4430
4431         * retr.c (retrieve_from_file): Ditto.
4432
4433         * recur.c (recursive_retrieve): Ditto.
4434
4435         * main.c (main): Ditto.
4436
4437         * http.c (http_loop): Ditto.
4438
4439         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
4440         `+=', and downloaded_exceeds_quota() instead of the simple-minded
4441         check.
4442         (ftp_retrieve_list): Ditto.
4443         (ftp_retrieve_dirs): Ditto.
4444         (ftp_retrieve_glob): Ditto.
4445
4446         * retr.c (downloaded_increase): New function.  Notice overflows of
4447         opt.downloaded.
4448         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
4449         used if it overflowed.
4450
4451         * options.h (struct options): New member downloaded_overflow.
4452
4453 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4454
4455         * wget.h (enum): Remove extra space after last enumeration.
4456
4457 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4458
4459         * main.c (main): Use legible_very_long() for printing
4460         opt.downloaded.
4461
4462         * utils.c (legible_1): New function that operates on strings and
4463         does the brunt of legible()'s work.
4464         (legible): Use legible_1().
4465         (legible_very_long): New function; dump the argument with
4466         sprintf(), and call legible_1().
4467
4468         * options.h (struct options): Use VERY_LONG_TYPE for
4469         opt.downloaded.
4470
4471         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
4472         type.
4473
4474         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
4475         defined.  Define HAVE_LONG_LONG if long long is available.
4476
4477 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4478
4479         * utils.c (long_to_string): Update with a later, better version.
4480
4481 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4482
4483         * url.c (path_simplify_with_kludge): New function.
4484         (path_simplify_with_kludge): Disable it.  Instead...
4485         (parse_dir): ...make sure that at this point the right thing is
4486         done, i.e. that "query" part of the URL (?...) is always assigned
4487         to the file, never to the directory portion of the path.
4488
4489 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4490
4491         * retr.c (retrieve_url): Detect redirection cycles.
4492
4493 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4494
4495         * url.c (get_urls_html): Decode HTML entities using
4496         html_decode_entities.
4497
4498         * html.c (htmlfindurl): Don't count the `#' in numeric entities
4499         (&#NNN;) as an HTML fragemnt.
4500         (html_decode_entities): New function.
4501
4502 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4503
4504         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
4505
4506 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
4507
4508         * url.c (construct): Rewritten for clarity.  Avoids the
4509         unnecessary copying and stack-allocation the old version
4510         performed.
4511
4512 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4513
4514         * ftp.c (getftp): Ditto.
4515
4516         * http.c (gethttp): Rewind the stream when retrying from scratch.
4517
4518 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
4519
4520         * retr.c (retrieve_url): Use url_concat() to handle relative
4521         redirections instead of /ad hoc/ code.
4522
4523         * url.c (url_concat): New function encapsulating weird
4524         construct().
4525         (urllen_http_hack): New function.
4526         (construct): When constructing new URLs, recognize that `?' does
4527         not form part of the file name in HTTP.
4528
4529 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
4530
4531         * retr.c: Add msec timing support for WINDOWS.
4532         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
4533         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
4534
4535 2000-10-27  Dan Harkless  <wget@harkless.org>
4536
4537         * retr.c (retrieve_url): Manually applied T. Bharath
4538         <TBharath@responsenetworks.com>'s patch to get wget to grok
4539         illegal relative URL redirects.  Reformatted and re-commented it.
4540
4541 2000-10-23  Dan Harkless  <wget@harkless.org>
4542
4543         * connect.c (make_connection and bindport): Manually applied Rob
4544         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
4545         changing coding style to GNU's.
4546
4547         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
4548         files downloaded via FTP.  Per a comment, .listing files were not
4549         counted towards number of bytes and files downloaded because they're 
4550         deleted anyway.  Well, they aren't under -nr, so count them then.
4551
4552         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
4553         --bind-address, alphabetizing, changing coding style to GNU's,
4554         commenting, and renaming cmd_ip_address() to cmd_address() to
4555         imply hostnames also okay.
4556                 
4557         * main.c (main): --delete-after didn't delete the root of the
4558         tree.  Ignore --convert-links if --delete-after was specified.
4559         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
4560         fixing duplicate use of added-since-1.5.3 case value.
4561         (print_help): Clarified that --delete-after deletes local files.
4562         Rob forgot to add a line for his new --bind-address option.
4563                 
4564         * options.h (struct options): Manually applied Rob Mayoff's patch
4565         to add --bind-address (bind_address structure member).
4566                 
4567         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
4568         Ignore --convert-links if --delete-after was specified.
4569                 
4570         * retr.c (retrieve_from_file): Just added a DEBUGP().
4571                 
4572 2000-10-19  Dan Harkless  <wget@harkless.org>
4573
4574         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
4575         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
4576         patch to work around FTP servers that incorrectly respond to the
4577         "REST" command with the remaining size rather than the total file size.
4578                 
4579         * http.c (gethttp): Improved a comment and added code to tack on
4580         ".html" to text/html files without that extension when -E specified.
4581         (http_loop): Use new downloaded_file() enumerators and deal with
4582         the case of gethttp() called xrealloc() on u->local.
4583
4584         * init.c (commands): Added new "htmlextension" command.
4585         Also renamed John Daily's cmd_quad() to the more descriptive
4586         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
4587         removed duplicate cmd_boolean() declaration.
4588
4589         * main.c (print_help): Added my new -E / --html-extension option.
4590         (main): Undocumented --email-address option previously used -E synonym.
4591         Stole it away for the much more deserving --html-extension's use.
4592
4593         * options.h (struct options): Added html_extension field.
4594
4595         * url.c (convert_links): URL X that we saved as X.html locally due
4596         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
4597         (downloaded_file): Now remembers if we added .html extension to a file.
4598
4599         * url.h (downloaded_file_t): Added extra enumerators to support above.
4600         (downloaded_file): Now takes and returns a downloaded_file_t.
4601
4602         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
4603         
4604 2000-10-09  Dan Harkless  <wget@harkless.org>
4605
4606         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
4607                 
4608         * main.c (print_help): Clarified what --retr-symlinks does.
4609         
4610 2000-09-15  John Daily  <jdaily@cyberdude.com>
4611
4612         * init.c: Add support for "always" and "never" values to allow
4613         .wgetrc to override commandline (useful e.g. with .pm files
4614         calling `wget --passive-ftp' when your firewall doesn't allow that).
4615
4616         * ftp.c (getftp): passive_ftp is first option to support always/never.
4617
4618 2000-08-30  Dan Harkless  <wget@harkless.org>
4619
4620         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
4621         
4622         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
4623         Wrapped some > 80-column lines.  When -p is specified and we're at a 
4624         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
4625         <LINK REL="stylesheet">.
4626         
4627         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
4628         
4629         * init.c: Added new -p / --page-requisites / page_requisites option.
4630
4631         * main.c (print_help): Clarified that -l inf and -l 0 both allow
4632         infinite recursion.  Changed the unhelpful --mirrior description
4633         to simply give the options it's equivalent to.  Added new -p option.
4634         (main): Added some comments; handle new -p / --page-requisites.
4635         
4636         * options.h (struct options): Added new page_requisites field.
4637
4638         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
4639         Calculate and pass down new `dash_p_leaf_HTML' parameter to
4640         get_urls_html().  Use new INFINITE_RECURSION #define.
4641
4642         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
4643         final `dash_p_leaf_HTML' parameter.
4644
4645         * url.c: get_urls_html() and htmlfindurl() now take final
4646         `dash_p_leaf_HTML' parameter.
4647
4648         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
4649
4650         * wget.h: Added some comments and new INFINITE_RECURSION #define.
4651         
4652 2000-08-23  Dan Harkless  <wget@harkless.org>
4653
4654         * main.c (print_help): -B / --base was not mentioned.
4655
4656 2000-08-22  Dan Harkless  <wget@harkless.org>
4657
4658         * main.c (print_help): Modified -nc description to mention that it
4659         also prevents the creation of multiple versions of the same file
4660         with ".<number>" suffixes.
4661
4662 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
4663
4664         * retr.c (retrieve_url): Consistently strdup opt.referer when
4665         setting u->referer.
4666
4667 2000-06-09  Dan Harkless  <wget@harkless.org>
4668
4669         * main.c (print_help): --help output for --waitretry was over 80 cols.
4670
4671 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
4672
4673         * url.c (encode_string): Fix comment.
4674         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
4675
4676 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
4677
4678         * ftp.c (ftp_retrieve_list): Change permissions only on plain
4679         files.
4680
4681 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
4682
4683         * url.c (str_url): Print the port number only if it's different
4684         from the default port number for that protocol.
4685
4686 2000-05-22  Dan Harkless  <wget@harkless.org>
4687
4688         * main.c (print_help): Added --help line for Damir Dzeko
4689         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
4690         Removed comments that --referer and --waitretry were undocumented.
4691         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
4692         line for --execute.
4693
4694 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
4695
4696         * ftp.c (getftp): Ditto.
4697
4698         * http.c (gethttp): Check for return value of fclose/fflush.
4699
4700 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
4701
4702         * host.c (store_hostaddress): Instead of shifting ADDR, start
4703         copying from the correct address.
4704
4705 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
4706
4707         * http.c (gethttp): Don't free REQUEST -- it was allocated with
4708         alloca().
4709         Pointed out by Gisle Vanem <gvanem@eunet.no>.
4710
4711 2000-04-04  Dan Harkless  <wget@harkless.org>
4712
4713         * host.c (store_hostaddress): R. K. Owen's patch introduces a
4714         "left shift count >= width of type" warning on 32-bit
4715         architectures.  Got rid of it by tricking the compiler w/ a variable.
4716         
4717         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
4718         characters per RFC1738, namely everything above '~'.  It also
4719         generated a warning on OSes where char =~ unsigned char.  Fixed.
4720         
4721 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
4722
4723         * http.c (http_process_type): Removed needless strdup(), a memory
4724         leak.
4725
4726 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
4727
4728         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
4729
4730 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
4731
4732         * init.c (wgetrc_file_name): Don't free HOME under Windows.
4733
4734 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
4735
4736         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
4737
4738 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
4739
4740         * url.c (UNSAFE_CHAR): New macro.
4741         (contains_unsafe): Use it.
4742         (encode_string): Ditto.
4743
4744 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
4745
4746         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
4747
4748 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4749
4750         * Use TOUPPER/TOLOWER.
4751
4752 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
4753
4754         * ftp-opie.c (btoe): Zero-terminate OSTORE.
4755
4756 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
4757
4758         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
4759
4760         * sysdep.h (ISALNUM): New macro.
4761         (TOLOWER): Ditto.
4762         (TOUPPER): Ditto.
4763
4764 2000-03-10  Dan Harkless  <wget@harkless.org>
4765
4766         * html.c (idmatch): Implemented checking of my new --follow-tags
4767         and --ignore-tags options.
4768         
4769         * init.c (commands): Added comment reminding people adding new
4770         entries doing allocation to add corresponding freeing in cleanup().
4771         (commands): Added new followtags and ignoretags commands.
4772         (cleanup): Free storage for new followtags and ignoretags.
4773         
4774         * main.c: Use of "comma-separated list" was random -- normalized
4775         it.  Did some alphabetization.  Added comments pointing out
4776         "Options without arguments" and "Options accepting an argument"
4777         sections of long_options[].  Added new options --follow-tags and
4778         -G / --ignore-tags.  Added comment that Damir's --referer is
4779         currently undocumented.  Added comment that Heiko's --waitretry is
4780         partially undocumented (mentioned in --help but not in
4781         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
4782         
4783         * options.h (struct options): Added new fields follow_tags and
4784         ignore_tags. 
4785         
4786         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
4787         
4788 2000-03-02  Dan Harkless  <wget@harkless.org>
4789
4790         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
4791         braces to avoid ambiguous `else'" warnings.  Eliminated them.
4792         
4793         * http.c (gethttp): Dan Berger's query string patch is totally
4794         bogus.  If you have two different URLs, gen_page.cgi?page1 and
4795         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
4796         second will overwrite the first.  Also, parameters to implicit
4797         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
4798         be printed with trailing garbage characters, and could seg fault.
4799         Backing out the patch, which Dan B. informed me by email was just
4800         a kludge to download StarOffice from Sun made necessary due to
4801         wget's unconditional escaping of certain characters (room for an
4802         option there?).
4803         (http_loop): Heiko introduced "suggest explicit braces to avoid
4804         ambiguous `else'" warnings.  Eliminated them.
4805         
4806         * main.c: Heiko's --wait / --waitretry backwards compatibility
4807         code looks to have been totally untested -- automatic variable
4808         'wr' was used without being initialized, and a long int was passed
4809         into setval()'s char* val parameter.
4810         
4811         * recur.c (parse_robots): Applied Edward J. Sabol
4812         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
4813         problem with "User-agent:<space>*<space>" lines in robots.txt.
4814         
4815         * url.c (parseurl, str_url): Removing Dan Berger's code (see
4816         http.c above for explanation).
4817         
4818 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
4819
4820         * ftp.c: Respect new option waitretry.
4821
4822 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
4823
4824         * http.c (gethttp): Send custom Referer, if required.
4825
4826 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
4827
4828         * netrc.c (parse_netrc): Allow passwords to contain spaces.
4829
4830         * netrc.c (parse_netrc): New function.
4831
4832 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
4833
4834         * http.c (gethttp): Send it.
4835
4836         * url.c (parseurl): Detect query string in HTTP URL-s.
4837         (str_url): Print it.
4838
4839 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
4840
4841         * html.c (html_allow): Add <link href=...> and <script src=...>.
4842
4843 1999-05-02  andrew deryabin  <djsf@softhome.net>
4844
4845         * http.c (gethttp): Specify port in `Host' header only if it's
4846         different from 80.
4847
4848 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
4849
4850         * recur.c (recursive_retrieve): If a finite maximum depth is
4851         specified, and we're are already at that depth, don't download the
4852         HTML file for parsing.
4853
4854 2000-03-01  Dan Harkless  <wget@harkless.org>
4855
4856         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
4857         even though we don't do conversion on HTML files retrieved via
4858         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
4859         (ftp_retrieve_list): Added a comment saying where we need to
4860         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
4861         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
4862         a lie -- reworded as "Server file no newer than local file '%s' --".
4863         
4864         * http.c (http_loop): Fixed a typo and clarified a comment.
4865         (http_loop): When -K and -N are specified together, compare size
4866         and timestamp of server file X against local file X.orig (if
4867         extant) rather than converted local file X.
4868         (http_loop): "Local file '%s' is more recent," is sometimes a lie
4869         -- reworded as "Server file no newer than local file '%s' --".
4870         (http_loop): Call new downloaded_file() function to prevent
4871         wrongful overwriting of .orig file when -N is specified.
4872         
4873         * url.c (convert_links): When -K specified, only rename X to
4874         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
4875         file X due to -N, we clobber an X.orig from a previous invocation.
4876         (convert_links): Call the failsafe xstrdup(), not the real strdup().
4877         (convert_links): Added a note asking anyone who understands how
4878         multiple URLs can correspond to a single file to comment it.
4879         (downloaded_file): Added this new function.
4880         
4881         * url.h (downloaded_file): Added prototype for this new function
4882         as well as its downloaded_file_t enum type.
4883
4884         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
4885
4886 2000-02-29  Dan Harkless  <wget@harkless.org>
4887
4888         * version.c: Upped version to developer-only "1.5.3+dev".
4889
4890 2000-02-18  Dan Harkless  <wget@harkless.org>
4891
4892         * init.c (backup_converted): Added this new option.
4893
4894         * main.c (-K / --backup-converted): Added this new option.
4895
4896         * options.h (backup_converted): Added this new option.
4897
4898         * url.c (convert_links): When backup_converted is specified, save
4899         file X as X.orig before converting.
4900
4901         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
4902
4903 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4904
4905         * version.c: Wget 1.5.3 is released.
4906
4907 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
4908
4909         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
4910         address doesn't yield FQDN.
4911
4912 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4913
4914         * cmpt.c (strerror): Fix declaration of sys_errlist.
4915
4916 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4917
4918         * main.c (main): Don't use an array subscript as the first
4919         argument to STRDUP_ALLOCA.
4920         From Kaveh R. Ghazi.
4921
4922 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
4923
4924         * html.c (htmlfindurl): Download table background.
4925
4926 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
4927
4928         * init.c (parse_line): Would free *com before allocating it.
4929         (parse_line): Would free com instead of *com.
4930
4931 1998-09-10  Howard Gayle  <howard@fjst.com>
4932
4933         * url.c (get_urls_html): Would drop the last character of the
4934         link.
4935
4936 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4937
4938         * http.c (http_loop): Don't print status code if quiet.
4939
4940 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4941
4942         * log.c: Use <stdarg.h> only when __STDC__.
4943
4944 1998-09-10  Adam D. Moss  <adam@foxbox.org>
4945
4946         * html.c (htmlfindurl): Download <layer src=...>.
4947
4948 1998-09-10  Howard Gayle  <howard@fjst.com>
4949
4950         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
4951         not retrieved.
4952
4953 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4954
4955         * utils.c: Include <libc.h> on NeXT.
4956
4957 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
4958
4959         * url.c (get_urls_html): Fix calculation of URL position.
4960
4961 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4962
4963         * version.c: Wget 1.5.2 is released.
4964
4965 1998-06-23  Dave Love  <d.love@dl.ac.uk>
4966
4967         * ftp.c, init.c, netrc.c: Include errno.h.
4968
4969         * http.c: Include errno.h and time header.
4970
4971         * Makefile.in (exext): Define.
4972         (install.bin, uninstall.bin): Use it.
4973
4974 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4975
4976         * http.c (http_loop): Don't attempt to compare local and remote
4977         sizes if the remote size is unknown.
4978
4979 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
4980
4981         * url.c (get_urls_html): Use malloc() instead of alloca in the
4982         loop.
4983
4984 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4985
4986         * version.c: Wget 1.5.2-b4 is released.
4987
4988 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
4989
4990         * url.c (get_urls_html): Ignore spaces before and after the URI.
4991
4992 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
4993
4994         * ftp.c (getftp): Translate `done'.
4995
4996 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
4997
4998         * version.c: Wget 1.5.2-b3 is released.
4999
5000 1998-06-06  Alexander Kourakos  <awk@bnt.com>
5001
5002         * init.c (cleanup): Close dfp, don't free it.
5003
5004 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
5005
5006         * utils.c (make_directory): Twiddle.
5007
5008         * config.h.in: Added template for access().
5009
5010 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
5011
5012         * html.c (htmlfindurl): Download <input src=...>
5013
5014 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
5015
5016         * utils.c (file_exists_p): Use access() with two arguments.
5017
5018 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
5019
5020         * netrc.c (parse_netrc): Correct logic.
5021
5022 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
5023
5024         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
5025         <ljm@ljm.wownet.net>.
5026
5027 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
5028
5029         * version.c: Wget 1.5.2-b2 is released.
5030
5031 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
5032
5033         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
5034
5035 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
5036
5037         * retr.c (elapsed_time): Return correct value when
5038         HAVE_GETTIMEOFDAY is undefined.
5039
5040 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
5041
5042         * version.c: Wget 1.5.2-b1 is released.
5043
5044 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
5045
5046         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
5047         (_getopt_internal): Don't translate `#if 0'-ed strings.
5048
5049 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
5050
5051         * mswindows.c (ws_handler): Use fork_to_background().
5052
5053 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
5054
5055         * version.c: Wget 1.5.1 is released.
5056
5057 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
5058
5059         * http.c (parse_http_status_line): Avoid `minor' and `major'
5060         names.
5061
5062 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
5063
5064         * utils.c (mkdirhier): Renamed to make_directory.
5065
5066 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
5067
5068         * mswindows.c (fork_to_background): Define under Windows.
5069
5070         * utils.c (fork_to_background): New function.
5071
5072         * html.c (htmlfindurl): Removed rerdundant casts.
5073
5074 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
5075
5076         * mswindows.c (ws_mypath): Cache the path.
5077
5078 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
5079
5080         * ftp.h: Prefix enum ftype members with FT_.
5081
5082         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
5083
5084         * mswindows.h: Use stat under Borland, _stat under MSVC.
5085
5086 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
5087
5088         * http.c (known_authentication_scheme_p): New function.
5089         (gethttp): Handle authorization more correctly.
5090
5091         * ftp-basic.h: Removed.
5092
5093         * cmpt.h: Removed.
5094
5095         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
5096         with gcc 2.8.
5097         (numdigit): Use `while' loop.
5098
5099         * http.c (create_authorization_line): Detect authentication
5100         schemes case-insensitively.
5101
5102         * http.c (extract_header_attr): Use strdupdelim().
5103         (digest_authentication_encode): Move declaration of local
5104         variables to smaller scope.
5105         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
5106         (create_authorization_line): Detect authentication schemes
5107         case-insensitively.
5108
5109         * utils.c (touch): Constify.
5110
5111         * http.c (gethttp): Report a nicer error when no data is received.
5112
5113         * rbuf.h (RBUF_READCHAR): Ditto.
5114
5115         * ftp-basic.c (ftp_response): Use sizeof.
5116
5117 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
5118
5119         * retr.c (print_percentage): EXPECTED is long, not int.
5120         (print_percentage): Use floating-point arithmetic to avoid
5121         overflow with large files' sizes multiplied with 100.
5122
5123 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
5124
5125         * config.h.in: Added pid_t stub.
5126
5127         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
5128         define it).
5129
5130 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
5131
5132         * version.c: Wget 1.5.0 is released.
5133
5134 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
5135
5136         * url.c (str_url): Ditto.
5137
5138         * ftp-basic.c (ftp_rest): Use new name.
5139
5140         * utils.c (long_to_string): Renamed from prnum().
5141
5142 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
5143
5144         * version.c: Wget 1.5-b17 is released.
5145
5146 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
5147
5148         * headers.c (header_get): New argument FLAGS.
5149
5150         * http.c (gethttp): If request is malformed, bail out of the
5151         header loop.
5152         (gethttp): Check for empty header *after* the status line checks.
5153         (gethttp): Disallow continuations for status line.
5154
5155 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
5156
5157         * version.c: Wget 1.5-b16 is released.
5158
5159 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
5160
5161         * init.c (commands): Renamed `always_rest' to `continue'.
5162
5163 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
5164
5165         * all: Use it.
5166
5167         * log.c (logputs): New argument.
5168         (logvprintf): Ditto.
5169         (logprintf): Ditto.
5170
5171 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
5172
5173         * http.c (http_atotm): Update comment.
5174
5175         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
5176
5177         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
5178
5179         * main.c (i18n_initialize): New function.
5180         (main): Use it.
5181
5182         * log.c: Include <unistd.h>.
5183
5184         * retr.c (show_progress): Cast alloca to char *.
5185
5186 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
5187
5188         * version.c: Wget 1.5-b15 is released.
5189
5190 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
5191
5192         * utils.h: Declare file_non_directory_p().
5193
5194 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
5195
5196         * main.c (main): It's `tries', not `numtries' now.
5197
5198 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5199
5200         * init.c (getperms): Removed.
5201
5202 1998-04-01  Tim Charron  <tcharron@interlog.com>
5203
5204         * log.c (logvprintf): Don't use ARGS twice.
5205
5206 1998-04-01  John  <john@futuresguide.com>
5207
5208         * mswindows.c: Cleaned up.
5209
5210 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5211
5212         * version.c: Wget 1.5-b14 is released.
5213
5214 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5215
5216         * ftp-opie.c (STRLEN4): New macro.
5217         (btoe): Use it.
5218
5219 1998-04-01  Junio Hamano  <junio@twinsun.com>
5220
5221         * http.c: Document all the Digest functions.
5222
5223 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
5224
5225         * utils.c (file_non_directory_p): Renamed from isfile().
5226
5227         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
5228
5229 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5230
5231         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
5232
5233         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
5234         style.
5235         (cmd_permissions): Removed.
5236
5237         * config.h.in: Add template for WORDS_BIGENDIAN.
5238
5239 1998-03-31  Junio Hamano  <junio@twinsun.com>
5240
5241         * http.c (HEXD2asc): New macro.
5242         (dump_hash): Use it.
5243
5244 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5245
5246         * version.c: Wget 1.5-b13 is released.
5247
5248 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
5249
5250         * main.c (main): Don't try to use `com'.
5251
5252 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5253
5254         * init.c (cmd_permissions): New function.
5255
5256 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5257
5258         * version.c: Wget 1.5-b12 is released.
5259
5260 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5261
5262         * init.c (commands): Renamed `numtries' to `tries'.
5263         (cmd_spec_debug): Removed.
5264         (home_dir): Under Windows, return `C:\' if HOME is undefined.
5265
5266 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5267
5268         * config.h.in: Define _XOPEN_SOURCE.
5269
5270         * init.c (check_user_specified_header): New function.
5271         (cmd_spec_header): Use it.
5272         (cmd_spec_useragent): New function.
5273
5274 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5275
5276         * version.c: Wget 1.5-b11 is released.
5277
5278 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
5279
5280         * wget.h: Include <libintl.h> only if NLS is enabled.
5281
5282 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
5283
5284         * options.h (struct options): Made `wait' a long.
5285         (struct options): Ditto for `timeout'.
5286
5287 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
5288
5289         * utils.c (exists): Renamed to file_exists_p.
5290         (file_exists_p): Use access() if available.
5291
5292 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
5293
5294         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
5295         infloop.
5296
5297         * log.c: do_logging -> save_log_p.
5298
5299         * config.h.in: Added template for HAVE_VSNPRINTF.
5300
5301 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
5302
5303         * init.c: Ditto.
5304
5305         * http.c: Protect declaration against non-ANSI compiler.
5306
5307         * log.c (logvprintf): Use vsnprintf() if available.
5308
5309         * getopt.c (main): Don't translate test stuff.
5310
5311 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
5312
5313         * version.c: Wget 1.5-b10 is released.
5314
5315 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
5316
5317         * ftp.c (getftp): Don't translate "CWD %s".
5318
5319         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
5320
5321 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5322
5323         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
5324
5325         * log.c (logputs): New function.
5326         (logvprintf): Renamed from vlogmsg; use logputs().
5327
5328         * retr.c (show_progress): Print `[100%]' when the retrieval is
5329         finished.
5330
5331         * init.c (run_wgetrc): Use FILE, not PATH.
5332         (wgetrc_file_name): Ditto.
5333
5334 1998-03-07  Tim Adam  <tma@osa.com.au>
5335
5336         * recur.c (parse_robots): Correctly reset `entries' on empty
5337         disallow.
5338
5339 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5340
5341         * init.c (cmd_spec_debug): Use cmd_boolean().
5342
5343 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
5344
5345         * http.c (gethttp): Create proxy-authorization correctly.
5346
5347 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
5348
5349         * md5.c: Ditto.
5350
5351         * getopt.c: Use ANSI function definitions.
5352
5353         * ftp-opie.c: New file.
5354
5355         * options.h: Don't redefine EXTERN.
5356
5357         * init.c: Sort it correctly.
5358
5359 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
5360
5361         * version.c: Wget 1.5-b9 is released.
5362
5363 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
5364
5365         * recur.c (recursive_retrieve): Reset `first_time'.
5366
5367         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
5368
5369         * rbuf.c (rbuf_peek): Simplified.
5370         (rbuf_flush): Use MINVAL.
5371
5372         * wget.h (MINVAL): Moved from url.h.
5373
5374         * rbuf.h (RBUF_FD): New macro.
5375
5376         * url.c (add_url): Add to the head of the list.
5377
5378         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
5379         file.
5380         (getftp): Set the default permissions to 0600.
5381
5382 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
5383
5384         * url.c (get_urls_html): Ditto.
5385         (convert_links): Ditto.
5386
5387         * recur.c (parse_robots): Ditto.
5388
5389         * html.c (ftp_index): Ditto.
5390
5391         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
5392
5393         * init.c (defaults): Initialize `opt' to zero via memset.
5394
5395         * http.c (digest_authentication_encode): goto considered harmful.
5396
5397 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
5398
5399         * ftp.c (delelement): Simplify and fix leak.
5400
5401 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
5402
5403         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
5404
5405         * url.h (HEXD2ASC): Removed warning.
5406
5407         * init.c (comind): Use binary search.
5408         (commands): Reorganized.
5409         (setval): Ditto.
5410         (cmd_boolean): New function.
5411         (cmd_number): Ditto.
5412         (cmd_number_inf): Ditto.
5413         (cmd_string): Ditto.
5414         (cmd_vector): Ditto.
5415         (cmd_directory_vector): Ditto.
5416         (cmd_bytes): Ditto.
5417         (cmd_time): Ditto.
5418         (cmd_spec_debug): Ditto.
5419         (cmd_spec_dirmode): Ditto.
5420         (cmd_spec_dirstruct): Ditto.
5421         (cmd_spec_dotstyle): Ditto.
5422         (cmd_spec_header): Ditto.
5423         (cmd_spec_htmlify): Ditto.
5424         (cmd_spec_mirror): Ditto.
5425         (cmd_spec_outputdocument): Ditto.
5426         (cmd_spec_recursive): Ditto.
5427         (settime): Merged with cmd_time().
5428         (setbytes): Merged with cmd_bytes().
5429         (setonoff): Merged with cmd_boolean().
5430         (onoff): Ditto.
5431
5432 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5433
5434         * Makefile.in (distclean): Remove `config.h'.
5435
5436 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5437
5438         * version.c: Wget 1.5-b8 is released.
5439
5440 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5441
5442         * http.c (digest_authentication_encode): New function.
5443         (create_authorization_line): Use it.
5444         (dump_hash): New function.
5445         (digest_authentication_encode): Use it.
5446
5447         * fnmatch.c: Renamed from `mtch.c'.
5448
5449 1998-02-15  Karl Eichwalder  <ke@suse.de>
5450
5451         * main.c (main): Tag "Written by..." string as translatable.
5452
5453 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
5454
5455         * wget.h (FREE_MAYBE): New macro.
5456
5457         * http.c (create_authorization_line): Don't use ANSI C string
5458         concatenation feature.
5459         (basic_authentication_encode): Use alloca() for temporary
5460         variables.
5461
5462         * recur.h: Ditto.
5463
5464         * http.c: Ditto.
5465
5466         * headers.h: Ditto.
5467
5468         * ftp-basic.c: Protect declaration against non-ANSI compiler.
5469
5470         * http.c (create_authorization_line): Cast `unsigned char *' to
5471         `char *' for sprintf, to shut up the noisy Digital Unix cc.
5472
5473 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
5474
5475         * version.c: Wget 1.5-b7 is released.
5476
5477 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
5478
5479         * cmpt.c (strstr): Synched with glibc-2.0.6.
5480
5481         * ftp-basic.c (calculate_skey_response): Ditto.
5482         (calculate_skey_response): Use alloca().
5483
5484         * http.c (create_authorization_line): Work with FSF's version of
5485         md5.c.
5486
5487         * md5.c: New file, from GNU libc.
5488
5489 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
5490
5491         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
5492
5493 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
5494
5495         * http.c (basic_authentication_encode): New function, instead of
5496         the macro.
5497
5498 1998-02-13  Junio Hamano  <junio@twinsun.com>
5499
5500         * http.c: Add HTTP-DA support.
5501         * ftp-basic.c: Add Opie/S-key support.
5502         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
5503         * md5.c, md5.h: New files.
5504
5505 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
5506
5507         * http.c (http_process_range): Renamed from hprocrange().
5508         (http_process_range): Parse the whole header.
5509
5510         * headers.c: New file.
5511         (header_process): New function.
5512         (header_get): Renamed from fetch_next_header.
5513
5514         * all: Include utils.h only where necessary.
5515
5516         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
5517
5518         * wget.h: Add provisions for dmalloc.
5519
5520 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
5521
5522         * version.c: Wget 1.5-b6 is released.
5523
5524 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
5525
5526         * ftp.c (ftp_loop): Determine `filename' more precisely.
5527
5528         * init.c (setval): Don't set `opt.quiet' if output-document is
5529         `-'.
5530
5531         * log.c (log_init): Print to STDERR instead of STDOUT.
5532         (vlogmsg): Use STDERR by default.
5533         (logflush): Ditto.
5534
5535 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
5536
5537         * host.c: Use addr_in again.
5538
5539 1998-02-08  Karl Eichwalder  <karl@suse.de>
5540
5541         * http.c (gethttp): Fixed typo.
5542
5543 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5544
5545         * version.c: Wget 1.5-b5 is released.
5546
5547 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5548
5549         * retr.c (show_progress): Use it.
5550
5551         * log.c (logflush): New function.
5552
5553         * wget.h: Utilize __attribute__ if on gcc.
5554
5555 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
5556
5557         * http.c (base64_encode_line): New argument LENGTH.
5558         (BASIC_AUTHENTICATION_ENCODE): Use it.
5559         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
5560
5561         * main.c (main): Fixed fprintf() format mismatch.
5562
5563 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5564
5565         * version.c: Wget 1.5-b4 is released.
5566
5567 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
5568
5569         * host.c: use sockaddr_in instead of addr_in.
5570
5571 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
5572
5573         * init.c (cleanup): Use it.
5574
5575         * recur.c (recursive_cleanup): New function.
5576
5577         * retr.c (retrieve_from_file): Ditto.
5578
5579         * main.c (main): Use it.
5580
5581         * recur.c (recursive_reset): New function.
5582
5583         * retr.c (retrieve_from_file): Ditto.
5584
5585         * main.c (main): Simplify call to recursive_retrieve().
5586
5587         * recur.c (recursive_retrieve): Removed FLAGS argument.
5588
5589         * http.c (gethttp): Changed call to iwrite().
5590
5591 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
5592
5593         * url.c (get_urls_html): Ditto.
5594         (free_urlpos): Ditto.
5595         (mkstruct): Ditto.
5596         (construct): Ditto.
5597
5598         * retr.c (retrieve_url): Move declaration of local variables to
5599         smaller scope.
5600
5601         * url.c (urlproto): Use it.
5602         (parseurl): Ditto.
5603         (str_url): Ditto.
5604         (get_urls_html): Ditto.
5605
5606         * utils.h (ARRAY_SIZE): New macro.
5607
5608         * url.c (proto): Moved from url.h.
5609
5610         * url.h (URL_CLEANSE): Reformatted.
5611         (USE_PROXY_P): Renamed from USE_PROXY.
5612
5613         * ftp-basic.c: Adjust to the new interface of iwrite().
5614
5615         * ftp-basic.c (ftp_port): Use alloca().
5616
5617 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
5618
5619         * version.c: Wget 1.5-b3 is released.
5620
5621         * host.c (ftp_getaddress): Don't print to stderr directly.
5622
5623         * init.c (setbytes): Support `g' for gigabytes.
5624         (cmdtype): New specification CTIME.
5625         (setval): Use it with settime().
5626         (commands): Use it for WAIT and TIMEOUT.
5627
5628 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5629
5630         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
5631         (gethttp): Use it.
5632
5633         * utils.c (unique_name_1): Moved from url.c.
5634         (unique_name): Ditto.
5635
5636         * url.c (url_filename): Ditto.
5637
5638         * log.c (redirect_output): Changed call to unique_name().
5639
5640         * url.c (unique_name_1): Renamed from unique_name().
5641         (unique_name): Changed interface.
5642
5643         * init.c (enum cmdid): Moved from init.h.
5644         (cmdtype): Ditto.
5645         (struct cmd): Ditto.
5646
5647         * main.c (main): Use it.
5648         (main): Moved `--backups' to not have a short option.
5649
5650         * options.h (struct options): New member BACKGROUND.
5651
5652         * main.c (print_help): Rearranged.
5653         (main): New long options for -n* short options: --no-directories,
5654         --no-host-directories, --non-verbose, --no-host-lookup and
5655         --dont-remove-listing.
5656
5657 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5658
5659         * main.c (main): Use log_close().
5660
5661         * log.c: New variable LOGFP.
5662         (vlogmsg): Use it.
5663         (redirect_output): Don't open /dev/null; set LOGFP to stdin
5664         instead.
5665         (log_close): New function.
5666
5667         * options.h (struct options): Removed LFILE.
5668
5669         * log.c (log_enable): Removed.
5670
5671         * main.c (main): Use it.
5672
5673         * log.c (log_init): New function.
5674
5675         * url.c (get_urls_html): Removed needless assignment to BASE.
5676
5677         * host.c (add_hlist): Don't set CMP needlessly.
5678
5679         * utils.c (match_backwards): Ditto.
5680         (in_acclist): Ditto.
5681
5682         * url.c (findurl): Ditto.
5683
5684         * netrc.c (parse_netrc): Ditto.
5685
5686         * log.c (log_dump): Ditto.
5687
5688         * html.c (html_quote_string): Ditto.
5689
5690         * ftp-basic.c (ftp_request): Made static.
5691
5692         * connect.c: Made global variables static.
5693
5694         * url.c (construct): Ditto.
5695
5696         * init.c (init_path): Avoid assignment inside `if'-condition.
5697
5698         * ftp.c: Don't include in.h or winsock.h.
5699
5700         * ftp.c (ftp_loop): Use SZ.
5701
5702         * connect.c (bindport): Cast &addrlen to int *.
5703         (conaddr): Ditto.
5704
5705         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
5706
5707 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5708
5709         * ftp.c (getftp): Initialize opt.ftp_pass here.
5710         (ftp_retrieve_dirs): Use alloca().
5711
5712         * init.c (defaults): Don't initialize opt.ftp_pass.
5713
5714         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
5715         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
5716
5717 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5718
5719         * recur.c (parse_robots): Check for comments more correctly.
5720
5721         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
5722         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
5723         hostname.
5724
5725 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5726
5727         * version.c: Wget 1.5-b2 is released.
5728
5729         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
5730
5731         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
5732
5733         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
5734         char.
5735
5736         * log.c: Don't attempt to hide arguments from ansi2knr.
5737
5738         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
5739
5740         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
5741
5742         * ftp.c (getftp): Ditto.
5743
5744         * http.c (gethttp): Use it.
5745
5746         * retr.c (get_contents): New argument EXPECTED; pass it to
5747         show_progress().
5748         (show_progress): New argument EXPECTED; use it to display
5749         percentages.
5750
5751         * init.c (setval): Ditto.
5752
5753         * http.c (gethttp): Ditto.
5754         (http_loop): Ditto.
5755
5756         * ftp.c (getftp): Ditto.
5757         (ftp_loop_internal): Ditto.
5758
5759         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
5760
5761         * sysdep.h (CLOSE): Simplify; use DEBUGP.
5762
5763         * netrc.c (search_netrc): Use alloca().
5764
5765         * init.c (defaults): Initialize no_flush.
5766
5767         * log.c (vlogmsg): Don't flush if no_flush.
5768
5769         * options.h (struct options): New variable no_flush.
5770
5771         * main.c (main): Don't play games with buffering.
5772
5773         * log.c (vlogmsg): Flush the output after every message.
5774
5775 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
5776
5777         * init.c (parse_line): Ditto.
5778
5779         * url.c (get_urls_html): Ditto.
5780
5781         * main.c (main): Don't cast to unsigned char.
5782
5783         * init.c (run_wgetrc): Don't cast to unsigned char.
5784         (parse_line): Accept char instead of unsigned char.
5785
5786         * html.c (htmlfindurl): Use char instead of unsigned char.
5787
5788         * all: Use them.
5789
5790         * sysdep.h: Add wrappers to ctype macros to make them
5791         eight-bit-clean:
5792
5793 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5794
5795         * html.c (htmlfindurl): Download <img lowsrc=...>
5796
5797         * main.c (main): Ignore SIGPIPE.
5798
5799         * connect.c (select_fd): New argument WRITEP.
5800         (iwrite): Call select_fd().
5801
5802 1997-02-27  Fila Kolodny <fila@ibi.com>
5803
5804         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
5805         one already exists, just skip it.
5806
5807 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5808
5809         * http.c (gethttp): Cosmetic changes.
5810
5811         * http.c (check_end): Allow `+D...' instead of `GMT'.
5812         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
5813
5814         * url.c (process_ftp_type): New function.
5815         (parseurl): Use it.
5816
5817         * connect.c (iwrite): Allow writing in a few chunks.
5818         (bindport): Made SRV static, so addr can point to it.
5819         (select_fd): Removed HPUX kludge.
5820
5821         * host.c (free_hlist): Incorporated into clean_hosts().
5822
5823 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5824
5825         * host.c (hlist): Made static.
5826         (search_address): Cosmetic change.
5827
5828 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5829
5830         * version.c: Wget v1.5-b1 is released.
5831
5832         * http.c (hgetlen): Use sizeof() to get the header length.
5833         (hgetrange): Ditto.
5834         (hgettype): Ditto.
5835         (hgetlocation): Ditto.
5836         (hgetmodified): Ditto.
5837         (haccepts_none): Ditto.
5838
5839         * main.c (main): Updated `--version' and `--help' output, as per
5840         Francois Pinard's suggestions.
5841
5842         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
5843         textdomain().
5844
5845         * config.h.in: Define stubs for I18N3.
5846
5847         * wget.h: Include libintl.h.
5848
5849 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5850
5851         * url.c (mkstruct): Check for opt.cut_dirs.
5852         (mkstruct): alloca()-te more, xmalloc() less.
5853
5854         * utils.c (load_file): Check for ferror().
5855
5856         * url.c (get_urls_file): Close only the files we opened.
5857         (get_urls_html): Ditto.
5858         (count_slashes): New function.
5859
5860         * http.h: Removed.
5861
5862         * http.c (gethttp): Respect username and password provided by
5863         proxy URL.
5864         (base64_encode_line): Write into an existing buffer instead of
5865         malloc-ing a new one.
5866         (struct http_stat): Moved from http.h
5867
5868         * retr.c (retrieve_url): Free SUF.
5869
5870         * all: Removed lots of unnecessary .h dependencies.
5871
5872         * html.c (global_state): Made static.
5873
5874         * utils.h (ALLOCA_ARRAY): New macro.
5875
5876         * main.c (main): New option `--cut-dirs'.
5877
5878         * url.c (construct): Use alloca() for T.
5879
5880         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
5881
5882         * host.c (_host_t): Moved from host.h.
5883         (struct host): Renamed from _host_t.
5884         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
5885         (realhost): Ditto.
5886
5887         * host.h: Don't include url.h.
5888
5889         * ftp.c (LIST_FILENAME): Moved from ftp.h.
5890
5891         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
5892
5893         * main.c (main): Enable log if the output goes to a TTY.
5894
5895         * connect.h: Removed unused constant `BACKLOG'.
5896
5897         * config.h.in: Check for isatty().
5898
5899         * Makefile.in (LINK): Use CFLAGS when linking.
5900
5901 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5902
5903         * mswindows.c (ws_hangup): Use redirect_output().
5904
5905         * main.c (redirect_output_signal): New function; use
5906         redirect_output().
5907
5908         * log.c (redirect_output): New function, based on hangup(), which
5909         is deleted.
5910
5911         * log.c (vlogmsg): New function.
5912
5913         * wget.h (DEBUGP): Use debug_logmsg().
5914
5915         * main.c (hangup): Use it.
5916
5917         * log.c (log_dump): New function.
5918
5919         * utils.h (DO_REALLOC): Use `long' for various sizes.
5920
5921         * http.c (hskip_lws): Use `while', for clarity.
5922         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
5923         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
5924
5925         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
5926         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
5927
5928         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
5929         (LEGIBLE_SEPARATOR): Ditto.
5930         (FILE_BUFFER_SIZE): Ditto.
5931
5932         * retr.c (BUFFER_SIZE): Moved from retr.h.
5933
5934         * log.c: New file.
5935         (logmsg): Moved from utils.c.
5936         (debug_logmsg): New function.
5937
5938         * mswindows.h: Include it here.
5939
5940         * init.c: Ditto.
5941
5942         * utils.c: Don't include <windows.h>.
5943
5944 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
5945
5946         * host.c (ftp_getaddress): Ditto.
5947
5948         * main.c (main): Use it.
5949
5950         * utils.h (STRDUP_ALLOCA): New macro.
5951
5952         * init.c: Prepend `wget: ' to error messages printed on stderr.
5953
5954         * utils.c (mkdirhier): Renamed from mymkdir.
5955         (touch): Renamed from my_touch.
5956         (pwd_cuserid): Renamed from my_cuserid().
5957
5958 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
5959
5960         * utils.c (accdir): Process wildcards.
5961         (proclist): New function.
5962         (accdir): Use it to avoid code repetition.
5963
5964 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5965
5966         * recur.c (parse_robots): Respect opt.useragent; use alloca().
5967
5968         * http.c (gethttp): Construct useragent accordingly.
5969
5970         * version.c: Changed version string to numbers-only.
5971
5972         * main.c (print_help): List all the options.
5973
5974         * mswindows.c (windows_main_junk): Initialize argv0 here.
5975
5976 1998-01-24  Karl Heuer  <kwzh@gnu.org>
5977
5978         * netrc.c (search_netrc): Initialize `l' only after processing
5979         netrc.
5980
5981         * main.c (main): Don't trap SIGHUP if it's being ignored.
5982
5983 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5984
5985         * all: Use logmsg().
5986
5987         * utils.c (time_str): Moved from retr.c.
5988         (logmsg): New function.
5989         (logmsg_noflush): Ditto.
5990
5991         * rbuf.c: New file, moved buf_* functions here.
5992
5993         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
5994
5995         * ftp-basic.c (ftp_rest): Use prnum().
5996
5997         * ftp-basic.c: Ditto.
5998
5999         * ftp.c: Use the new reading functions and macros.
6000
6001         * retr.c (buf_initialize): New function.
6002         (buf_initialized_p): Ditto.
6003         (buf_uninitialize): Ditto.
6004         (buf_fd): Ditto.
6005
6006         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
6007         efficiency.
6008         (gethttp): Use alloca() where appropriate.
6009
6010         * retr.c (buf_readchar): Use it.
6011         (buf_peek): Use rstreams.
6012
6013         * retr.h (BUF_READCHAR): New macro.
6014
6015         * init.c (home_dir): Rewritten for clarity.
6016         (init_path): Ditto.
6017
6018         * mswindows.c (ws_backgnd): Made static.
6019         (read_registry): Ditto.
6020         (ws_cleanup): Ditto.
6021         (ws_handler): Ditto.
6022
6023 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
6024
6025         * alloca.c: New file.
6026
6027         * Makefile.in (ALLOCA): Define.
6028
6029         * mswindows.c (ws_help): Constify.
6030         (ws_help): Use alloca.
6031
6032         * mswindows.c: Reformat.
6033
6034         * all: Added _(...) annotations for I18N snarfing and translation.
6035
6036         * host.c (ftp_getaddress): Nuke SYSINFO.
6037         (ftp_getaddress): Don't use getdomainname().
6038         (ftp_getaddress): Use uname(), where available.
6039
6040         * http.c (gethttp): Protect a stray fprintf().
6041
6042         * init.c (settime): New function.
6043         (setval): Treat WAIT specially, allowing suffixes like `m' for
6044         minutes, etc.
6045
6046 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
6047
6048         * url.c (get_urls_html): Use alloca() for TEMP.
6049
6050 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
6051
6052         * url.c (rotate_backups): New function.
6053
6054         * http.c (gethttp): Ditto.
6055
6056         * ftp.c (getftp): Rotate backups.
6057
6058 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
6059
6060         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
6061         xrealloc() and xstrdup().  Use the new functions.
6062
6063         * url.c (decode_string): Made static.
6064         (has_proto): Ditto.
6065         (parse_dir): Ditto.
6066         (parse_uname): Ditto.
6067         (mkstruct): Ditto.
6068         (construct): Ditto.
6069         (construct_relative): Ditto.
6070
6071         * retr.c (show_progress): Made static.
6072
6073         * recur.c (robots_url): Made static.
6074         (retrieve_robots): Ditto.
6075         (parse_robots): Ditto.
6076         (robots_match): Ditto.
6077
6078         * main.h: Removed.
6079
6080         * main.c (printhelp): Made static.
6081         (hangup): Ditto.
6082
6083         * init.c (comind): Made static.
6084         (defaults): Ditto.
6085         (init_path): Ditto.
6086         (run_wgetrc): Ditto.
6087         (onoff): Ditto.
6088         (setonoff): Ditto.
6089         (setnum): Ditto.
6090         (myatoi): Ditto.
6091         (getperms): Ditto.
6092         (setbytes): Ditto.
6093
6094         * http.c (fetch_next_header): Made static.
6095         (hparsestatline): Ditto.
6096         (hskip_lws): Ditto.
6097         (hgetlen): Ditto.
6098         (hgetrange): Ditto.
6099         (hgettype): Ditto.
6100         (hgetlocation): Ditto.
6101         (hgetmodified): Ditto.
6102         (haccepts_none): Ditto.
6103         (gethttp): Ditto.
6104         (base64_encode_line): Ditto.
6105         (mktime_from_utc): Ditto.
6106         (http_atotm): Ditto.
6107
6108         * html.c (idmatch): Made static.
6109
6110         * host.c (search_host): Made static.
6111         (search_address): Ditto.
6112         (free_hlist): Ditto.
6113
6114         * ftp.c (getftp): Made static.
6115         (ftp_loop_internal): Ditto.
6116         (ftp_get_listing): Ditto.
6117         (ftp_retrieve_list): Ditto.
6118         (ftp_retrieve_dirs): Ditto.
6119         (ftp_retrieve_glob): Ditto.
6120         (freefileinfo): Ditto.
6121         (delelement): Ditto.
6122
6123         * ftp-ls.c (symperms): Made static.
6124         (ftp_parse_unix_ls): Ditto.
6125
6126         * connect.c (select_fd): Made static.
6127
6128         * utils.c (xmalloc): Renamed from nmalloc.
6129         (xrealloc): Renamed from nrealloc.
6130         (xstrdup): Renamed from nstrdup.
6131
6132         * getopt.c (exchange): Use alloca.
6133
6134         * mswindows.c (mycuserid): Use strncpy.
6135
6136         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
6137         systhings.h, windecl.h and winjunk.h removed.
6138
6139         * mswindows.c (sleep): New function.
6140
6141         * utils.c: Include <windows.h> under Windows.
6142
6143 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
6144
6145         * url.h (URL_UNSAFE): Change default under Windows.
6146
6147         * retr.c (retrieve_from_file): Respect opt.delete_after.
6148
6149         * main.c (main): Call ws_help on Windows.
6150
6151         * winjunk.c (windows_main_junk): New function.
6152
6153         * main.c (main): Junk-process argv[0].
6154
6155         * http.c (mktime_from_utc): Return -1 if mktime failed.
6156
6157         * http.c (http_loop): Ditto.
6158
6159         * ftp.c (ftp_loop_internal): Change title on Windows when using a
6160         new URL.
6161
6162         * winjunk.c (getdomainname): Lots of functions.
6163
6164 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
6165
6166         * cmpt.c (strptime_internal): Handle years more correctly for
6167         `%y'.
6168
6169 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
6170
6171         * http.c (gethttp): Allocate enough space for
6172         `Proxy-Authorization' header.
6173
6174 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
6175
6176         * version.c: Wget/1.4.5 is released.
6177
6178 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
6179
6180         * retr.c (get_contents): Check return value of fwrite more
6181         carefully.
6182
6183 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
6184
6185         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
6186         year, regardless of century.
6187
6188 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
6189
6190         * utils.c (isfile): Use `lstat' instead of `stat'.
6191
6192 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
6193
6194         * utils.c (numdigit): Use explicit test.
6195
6196 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
6197
6198         * http.c (http_loop): Always use `url_filename' to get u->local.
6199
6200 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
6201
6202         * url.c: Recognize https.
6203
6204 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
6205
6206         * recur.c (recursive_retrieve): Lowercase just the host name.
6207
6208 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
6209
6210         * url.c (get_urls_file): Use the correct test.
6211         (get_urls_html): Ditto.
6212
6213 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
6214
6215         * connect.c: Reverted addrlen to int.
6216
6217         * init.c (parse_line): Check for -1 instead of NONE.
6218
6219         * version.c: Changed version to 1.4.5.
6220
6221 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
6222
6223         * init.c: New option netrc.
6224         (initialize): Don't parse .netrc.
6225
6226         * cmpt.c (recursive): Return rp.
6227         (strptime_internal): Match the long strings first, the abbreviated
6228         second.
6229
6230 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
6231
6232         * http.c (check_end): New function.
6233         (http_atotm): Use it.
6234  
6235 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
6236
6237         * http.c (gethttp): Use them.
6238
6239         * init.c: New options proxy_user and proxy_passwd.
6240
6241 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
6242
6243         * ftp.c (ftp_retrieve_list): Create links even if not relative.
6244
6245 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
6246
6247         * recur.c (recursive_retrieve): Lowercase the host name, if the
6248         URL is not "optimized".
6249
6250         * host.c (realhost): Return l->hostname, even if it matches with
6251         host.
6252
6253 1997-02-10  Marin Purgar  <pmc@asgard.hr>
6254
6255         * connect.c: Make addrlen size_t instead of int.
6256         (conaddr): Ditto.
6257
6258 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
6259
6260         * systhings.h: Define S_ISLNK on NeXT too.
6261
6262 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
6263
6264         * version.c: Released 1.4.3.
6265
6266         * url.c: Futher update to list of protostrings.
6267         (skip_proto): Skip `//' correctly for FTP and HTTP.
6268
6269         * url.c (get_urls_html): Handle bogus `http:' things a little
6270         different.
6271
6272         * main.c (main): Removed `follow-ftp' from `f'.
6273         (main): Dumped the `prefix-files' and `file-prefix' options and
6274         features; old and bogus.
6275         (main): Exit on failed setval() in `-e'.
6276
6277         * http.c (fetch_next_header): Use it to detect header continuation
6278         correctly.
6279
6280         * retr.c (buf_peek): New function.
6281
6282 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
6283
6284         * wget.h: Include time.h and stuff.
6285
6286 1997-02-08  Roger Beeman  <beeman@cisco.com>
6287
6288         * ftp.c: Include <time.h>
6289
6290 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
6291
6292         * url.c (findurl): Would read over buffer limits.
6293
6294 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
6295
6296         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
6297
6298 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
6299
6300         * http.c (http_atotm): Initialize tm.is_dst.
6301
6302 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
6303
6304         * http.c (gethttp): Don't print the number of retrieved headers.
6305
6306         * main.c (main): New option `--no-clobber', alias for `-nc'.
6307
6308         * url.c: Recognize `https://'.
6309
6310 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
6311
6312         * host.c (herrmsg): Don't use h_errno.
6313
6314 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
6315
6316         * host.c (accept_domain): Use it.
6317
6318         * main.c (main): New option `--exclude-domains'.
6319
6320         * retr.c (retrieve_url): Use it.
6321         (retrieve_url): Bail out when an URL is redirecting to itself.
6322
6323         * url.c (url_equal): New function.
6324
6325 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
6326
6327         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
6328
6329         * http.c (mk_utc_time): New function.
6330         (http_atotm): Use it; handle time zones correctly.
6331
6332 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
6333
6334         * http.c: Ditto.
6335
6336         * ftp-basic.c: Use it instead of WRITE.
6337
6338         * connect.c (iwrite): New function.
6339
6340 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
6341
6342         * cmpt.c (mktime): New function.
6343
6344         * netrc.c: Include <sys/types.h>.
6345
6346         * main.c (main): Wouldn't recognize --spider.
6347
6348         * retr.c (rate): Use `B', `KB' and `MB'.
6349         (reset_timer,elapsed_time): Moved from utils.c.
6350
6351         * ftp.c (ftp_retrieve_list): Ditto.
6352
6353         * http.c (http_loop): Don't touch the file if opt.dfp.
6354
6355 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
6356
6357         * cmpt.c: New file.
6358
6359         * ftp.c (ftp_retrieve_glob): New argument semantics.
6360         (ftp_retrieve_dirs): Use it.
6361         (ftp_loop): Ditto.
6362
6363         * html.c (htmlfindurl): Recognize `'' as the quote char.
6364
6365 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
6366
6367         * ftp.c (ftp_loop_internal): Use it.
6368
6369         * utils.c (remove_link): New function.
6370
6371 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
6372
6373         * retr.c (retrieve_url): Require STRICT redirection URL.
6374
6375         * url.c (parseurl): New argument STRICT.
6376
6377         * http.c (hparsestatline): Be a little-bit less strict about
6378         status line format.
6379
6380 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
6381
6382         * http.c (gethttp): Use it.
6383
6384         * main.c (main): Don't use '<digit>' as options.
6385
6386         * init.c: New option ignore_length.
6387
6388         * http.c (gethttp): Ditto.
6389         (http_loop): Check for redirection without Location:.
6390         (gethttp): Don't print Length unless RETROKF.
6391
6392         * ftp.c (getftp): Use it.
6393
6394         * url.c (mkalldirs): New function.
6395
6396         * utils.c (mymkdir): Don't check for existing non-directory.
6397
6398         * url.c (mkstruct): Don't create the directory.
6399
6400 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
6401
6402         * init.c (setval): Removed NO_RECURSION checks.
6403
6404 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
6405
6406         * version.c: "Released" 1.4.3-pre2.
6407
6408         * recur.c (recursive_retrieve): Bypass host checking only if URL
6409         is ftp AND parent URL is not ftp.
6410
6411         * ftp-basic.c (ftp_request): Print out Turtle Power.
6412
6413         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
6414         wildcard.
6415         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
6416         not glob.
6417
6418         * http.c (gethttp): Be a little bit smarter about status codes.
6419
6420         * recur.c (recursive_retrieve): Always reset opt.recursive when
6421         dealing with FTP.
6422
6423 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
6424
6425         * retr.c (retrieve_url): New variable location_changed; use it for
6426         tests instead of mynewloc.
6427         (retrieve_url): Allow heuristic adding of html.
6428
6429         * url.c (url_filename): Don't use the `%' in Windows file names.
6430
6431         * http.c (http_loop): Always time-stamp the local file.
6432
6433         * http.c (http_loop): Ditto.
6434
6435         * ftp.c (ftp_retrieve_list): Use it.
6436
6437         * utils.c (my_touch): New function.
6438
6439         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
6440         instead of #ifndef NeXT.
6441
6442         * utils.c (strptime): New version, by Ulrich Drepper.
6443
6444 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
6445
6446         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
6447         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
6448         (http_loop): Would remove ACCEPTRANGES.
6449
6450         * ftp.c (getftp): Call ftp_list with NULL.
6451
6452 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
6453
6454         * html.c (ftp_index): Don't print minutes and seconds if we don't
6455         know them; beautify the output.
6456
6457         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
6458
6459 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
6460
6461         * utils.c (strptime): New function.
6462         (strptime): Don't use get_alt_number.
6463         (strptime): Don't use locale.
6464         (match_string): Made it a function.
6465
6466 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
6467
6468         * http.c (http_atotm): New function.
6469         (http_loop): Use it.
6470
6471         * atotm.c: Removed from the distribution.
6472
6473         * http.c (base64_encode_line): Rewrite.
6474
6475 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
6476
6477         * ftp.c (getftp): Use ftp_expected_bytes; print size.
6478
6479         * ftp-basic.c (ftp_response): Use ftp_last_respline.
6480         (ftp_expected_bytes): New function.
6481
6482         * ftp.c (getftp): Print the unauthoritative file length.
6483
6484         * ftp-ls.c: Renamed from ftp-unix.c.
6485         (ftp_parse_ls): Moved from ftp.c.
6486         (ftp_parse_unix_ls): Recognize seconds in time spec.
6487         (ftp_parse_unix_ls): Recognize year-less dates of the previous
6488         year.
6489
6490 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
6491
6492         * ftp-basic.c: Don't declare errno if #defined.
6493
6494         * host.c (ftp_getaddress): Check for sysinfo legally.
6495
6496 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
6497
6498         * connect.c (iread): Use READ.
6499
6500 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
6501
6502         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
6503         schemes.
6504
6505 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
6506
6507         * host.c (ftp_getaddress): Allow `.' in hostname.
6508
6509 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
6510
6511         * wget.h: READ and WRITE macros for use instead of read and write
6512         on sockets, grep READ *.c, grep WRITE *.c
6513
6514         * wsstartup.c: new file - startup for winsock
6515
6516         * wsstartup.h: new file
6517
6518         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
6519
6520         * configure.bat: Configure utility for MSVC
6521
6522         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
6523
6524 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
6525
6526         * version.c: Released 1.4.3-pre.
6527
6528         * utils.c (prnum): Accept long.
6529         (legible): Use prnum().
6530
6531         * connect.c (make_connection): Accept port as short.
6532         (bindport): Ditto.
6533
6534         * http.c (gethttp): Use search_netrc.
6535
6536 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
6537
6538         * ftp.c (getftp): Use search_netrc.
6539
6540         * netrc.c (free_netrc): New function.
6541
6542         * init.c (home_dir): New function.
6543
6544         * url.c (convert_links): Allow REL2ABS changes.
6545
6546 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
6547
6548         * netrc.c: New file.
6549         (parse_netrc, maybe_add_to_list): New functions.
6550
6551 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
6552
6553         * retr.c (retrieve_url): Reset opt.recursion before calling
6554         ftp_loop if it is reached through newloc.
6555
6556         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
6557         error; don't use "Syntax error", since we don't know if it is
6558         really a syntax error.
6559
6560 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
6561
6562         * utils.c (acceptable): Extract the filename part of the path.
6563
6564         * recur.c (recursive_retrieve): Call acceptable() with the right
6565         argument; would bug out on wildcards.
6566
6567         * init.c (parse_line): Likewise.
6568
6569         * html.c (htmlfindurl): Cast to char * when calling stuff.
6570
6571 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
6572
6573         * ftp.c (getftp): Use ftp_pasv.
6574
6575         * ftp-basic.c (ftp_request): Accept NULL value.
6576         (ftp_pasv): New function.
6577
6578         * options.h (struct options): Add passive FTP option.
6579
6580 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
6581
6582         * url.c (parseurl): Debug output.
6583
6584         * utils.c (path_simplify): New one, adapted from bash's
6585         canonicalize_pathname().
6586
6587 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
6588
6589         * ftp.c (getftp): Don't discard the buffer.
6590
6591         * retr.c (get_contents): New parameter nobuf.
6592
6593 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
6594
6595         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
6596
6597         * init.c (setval): Strip the trailing slashes on CVECDIR.
6598
6599 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
6600
6601         * init.c: Make excludes and includes under CVECDIR instead of
6602         CVEC.
6603
6604 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
6605
6606         * url.c (get_urls_html): Skip "http:".
6607
6608 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
6609
6610         * utils.c (strcasecmp): From glibc.
6611         (strncasecmp): Also.
6612         (strstr): Also.
6613
6614         * url.c: Added javascript: to the list of URLs prefixes.
6615
6616 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
6617
6618         * recur.c (retrieve_robots): Print the warning message only if
6619         verbose.
6620
6621 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
6622
6623         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
6624
6625 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
6626
6627         * systhings.h: New file.
6628
6629         * ../configure.in: Check for utime.h
6630
6631         * ftp.c: Check whether we have unistd.h.
6632
6633 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
6634
6635         * recur.c (recursive_retrieve): Send the canonical URL as referer.
6636         (recursive_retrieve): Call get_urls_html with the canonical URL.
6637
6638 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
6639
6640         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
6641         ansi2knr support for compilers which don't support ANSI style
6642         function prototypes and signatures.
6643
6644         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
6645
6646 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
6647
6648         * url.c: Use it; Recognize paths ending with "." and ".." as
6649         directories.
6650         (url_filename): Append .n whenever file exists and could be a
6651         directory.
6652
6653         * url.h (ISDDOT): New macro.
6654
6655         * init.c (parse_line): Use unsigned char.
6656
6657         * url.c (get_urls_html): Cast to unsigned char * when calling
6658         htmlfindurl.
6659
6660         * html.c (htmlfindurl): Use unsigned char.
6661
6662         * version.c: Changed version to 1.4.3.
6663
6664 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
6665
6666         * version.c: Released 1.4.2.
6667
6668         * ftp.c (getftp): Simplified assertion.
6669         (ftp_loop_internal): Remove symlink before downloading.
6670         (ftp_retrieve_list): Unlink the symlink name before attempting to
6671         create a symlink!
6672
6673         * options.h (struct options): Renamed print_server_response to
6674         server_response.
6675
6676         * ftp.c (rel_constr): Removed.
6677         (ftp_retrieve_list): Don't use it.
6678         (ftp_retrieve_list): Use opt.retr_symlinks.
6679
6680 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
6681
6682         * main.c (main): New option retr_symlinks.
6683
6684         * url.c (convert_links): Print verbose message.
6685
6686 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
6687
6688         * http.c (http_loop): Reset newloc in the beginning of function;
6689         would cause FMR in retrieve_url.
6690
6691 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
6692
6693         * recur.c (convert_all_links): Find the URL of each HTML document,
6694         and feed it to get_urls_html; would bug out.
6695         (convert_all_links): Check for l2 instead of dl; removed dl.
6696
6697         * url.c (convert_links): Don't refer to freed newname.
6698
6699         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
6700
6701         * main.c (main): Print the OS_TYPE in the debug output, too.
6702
6703         * recur.c (recursive_retrieve): Check for opt.delete_after.
6704
6705         * main.c (main): New option delete-after.
6706
6707         * init.c (setval): Cleaned up.
6708
6709 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
6710
6711         * Makefile.in (wget): Make `wget' the default target.
6712
6713         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
6714         loop.
6715         (ftp_retrieve_list): Warn about non-matching sizes.
6716
6717         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
6718
6719         * init.c (setnum): Renamed from setnuminf; New argument flags.
6720         (setval): Use it.
6721
6722         * main.c (main): Sorted the options.
6723         (main): New option --wait.
6724
6725 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
6726
6727         * html.c (htmlfindurl): Reset s->in_quote after getting out of
6728         quotes.
6729
6730 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
6731
6732         * version.c: Changed version to 1.4.2.
6733
6734 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
6735
6736         * version.c: Released 1.4.1.
6737
6738         * html.c (html_quote_string): New function.
6739         (ftp_index): Use it.
6740         (htmlfindurl): A more gentle ending debug message.
6741
6742         * ftp.c (ftp_loop): Check for opt.htmlify.
6743
6744         * init.c: New command htmlify.
6745
6746         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
6747         strings.
6748         (ftp_loop): Print size of index.html.
6749
6750         * init.c (setval): Implement "styles".
6751
6752         * main.c (main): New option dotstyle.
6753
6754 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
6755
6756         * ftp.c (getftp): Close the master socket in case of errors, after
6757         bindport().
6758
6759         * connect.c (bindport): Initialize msock to -1.
6760
6761         * ftp.c (getftp): Initialize dtsock to -1.
6762
6763         * connect.c (closeport): Don't close sock if sock == -1.
6764
6765 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
6766
6767         * init.c (setnuminf): Nuked default value -- just leave unchanged.
6768         (setval): Don't send default values.
6769         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
6770
6771         * options.h (struct options): Use long for dot_bytes.
6772
6773         * init.c (setquota): Renamed to setbytes.
6774         (setval): Use setbytes on DOTBYTES.
6775
6776 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
6777
6778         * ftp.c (getftp): Initialize con->dltime.
6779
6780         * recur.c (recursive_retrieve): Use same_host instead of
6781         try_robots; simply load robots_txt whenever the host is changed.
6782         (recursive_retrieve): Free forbidden before calling parse_robots.
6783
6784 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
6785
6786         * retr.c (show_progress): Use them.
6787
6788         * options.h (struct options): New options dot_bytes, dots_on_line
6789         and dot_spacing.
6790
6791 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
6792
6793         * recur.c (recursive_retrieve): Retrieve directories regardless of
6794         acc/rej rules; check for empty u->file.
6795
6796 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
6797
6798         * init.c (setval): Use it.
6799
6800         * utils.c (merge_vecs): New function.
6801
6802         * init.c (setval): Reset the list-type functions when encountering
6803         "".
6804
6805 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
6806
6807         * recur.c (recursive_retrieve): Use base_url instead of this_url
6808         for no_parent.
6809
6810 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
6811
6812         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
6813
6814 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
6815
6816         * utils.c (sepstring): Rewrote; don't use strtok.
6817
6818         * recur.c (recursive_retrieve): Enter assorted this_url to slist
6819         when running the first time.
6820         (retrieve_robots): Warn to ignore errors when robots are loaded.
6821
6822         * utils.c (load_file): Moved from url.c.
6823
6824         * http.c: Made static variables const too in h* functions.
6825
6826         * main.c (main): Renamed --continue-ftp to --continue.
6827
6828         * recur.c (recursive_retrieve): Use it.
6829
6830         * utils.c (frontcmp): New function.
6831
6832         * url.c (accdir): New function.
6833
6834         * html.c (htmlfindurl): Recognize <area href=...>.
6835
6836         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
6837
6838         * init.c (setval): Free the existing opt.excludes and
6839         opt.includes, if available.
6840
6841         * main.c (main): New option -I.
6842
6843 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
6844
6845         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
6846
6847         * version.c: Changed version to 1.4.1.
6848
6849 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
6850
6851         * version.c: Released 1.4.0.
6852
6853 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
6854
6855         * main.c (main): Free com and val after parse_line.
6856         (printhelp): Reorder the listing.
6857
6858         * http.c: More robust header parsing.
6859
6860         * http.c: Allow any number of spaces, or no spaces, precede ':'.
6861         (hskip_lws): New function.
6862         (haccepts_bytes): New function.
6863         (gethttp): Use it.
6864
6865         * init.c (setval): Check header sanity.
6866         (setval): Allow resetting of headers.
6867
6868 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
6869
6870         * http.c (http_loop): Don't use has_wildcards.
6871
6872         * http.c (gethttp): Free all_headers -- would leak.
6873
6874         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
6875         0 -- this fixes a long-standing bug in -rl.
6876
6877 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
6878
6879         * ftp.c: Use -1 as "impossible" value for con->fd.
6880
6881         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
6882
6883         * init.c (parse_line): Use isalpha.
6884
6885         * ftp-unix.c: Use HAVE_UNISTD_H.
6886
6887         * mtch.c (has_wildcards): Don't match \.
6888
6889         * http.c (http_loop): Warn on HTTP wildcard usage.
6890
6891 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
6892
6893         * url.c (url_filename): Do not create numbered suffixes if
6894         opt.noclobber -- would bug out on -nc.
6895
6896 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
6897
6898         * recur.c (parse_robots): Don't chuck out the commands without
6899         arguments (`Disallow:<empty>' didn't work).
6900         (parse_robots): Compare versions lowercase.
6901         (parse_robots): Match on base_version, not version_string!
6902         (parse_robots): Handle comments properly.
6903         (parse_robots): Match versions in a sane way.
6904
6905         * init.c: Print nicer error messages.
6906
6907         * version.c: Changed version to 1.4.0.
6908
6909 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6910
6911         * version.c: Released 1.4.0-test2.
6912
6913         * init.c (run_wgetrc): Close fp.
6914
6915         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
6916         u->dir.
6917
6918 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
6919
6920         * init.c (setquota): Allow inf as quota specification.
6921
6922 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
6923
6924         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
6925         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
6926
6927         * main.c (main): Check for quota by comparison with downloaded
6928         stuff, not from status.
6929
6930         * connect.c (select_fd): Should compile on HPUX without warnings now.
6931
6932         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
6933         returned RETROK.
6934
6935 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
6936
6937         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
6938         (getftp): Return FTPRETRINT on control connection error.
6939
6940         * html.c (htmlfindurl): Recognize <embed src=...> and
6941         <bgsound src=...>.
6942         (ftp_index): Handle username and password correctly.
6943
6944         * main.c (main): Made `-np' a synonim for --no-parent.
6945
6946 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6947
6948         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
6949         ftp_retrieve_glob.
6950
6951         * version.c: Changed version to 1.4.0-test2.
6952
6953 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
6954
6955         * version.c: Released 1.4.0-test1.
6956
6957         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
6958         directory.
6959         (convert_links): Removed definition of make_backup.
6960
6961         * http.h: Removed definition of MAX_ERROR_LENGTH.
6962
6963         * host.c (ftp_getaddress): Check for "(none)" domains.
6964
6965         * ftp.c (ftp_retrieve_dirs): Docfix.
6966
6967         * http.c (gethttp): Use ou->referer instead of u->referer.
6968
6969         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
6970         this was known to cause coredumps on Linux.
6971
6972         * html.c (ftp_index): Cast the argument to local_time to time_t *.
6973
6974 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
6975
6976         * connect.c (select_fd): Use exceptfds -- once and for all.
6977
6978         * retr.c (retrieve_from_file): Free filename after
6979         recursive_retrieve.
6980         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
6981         first-time retrieval.
6982         (retrieve_from_file): Return uerr_t; new argument, count.
6983         (retrieve_from_file): Break on QUOTEXC.
6984
6985         * init.c (setquota): Fixed a bug that caused rejection of
6986         non-postfixed values..
6987
6988 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
6989
6990         * version.c: Changed name to wget.
6991
6992         * connect.c (iread): Smarter use of select.
6993         (select_fd): Set errno on timeout.  If not timeout, return 1
6994         instead of 0.
6995
6996 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
6997
6998         * ftp.c (ftp_loop_internal): Don't use con->cmd before
6999         establishing it.
7000
7001 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
7002
7003         * http.c (gethttp): Send correct referer when using proxy.
7004         (gethttp): Use struct urlinfo ou to access the relevant data; send
7005         correct authorization in all cases.
7006
7007         * host.c (same_host): Use skip_uname to skip username and
7008         password.
7009
7010         * url.c (skip_uname): New function.
7011         (parseurl): Use it.
7012
7013         * host.c (same_host): Do not assume HTTP -- same_host should now
7014         be totally foolproof.
7015
7016         * url.c (skip_proto): New function.
7017         (parse_uname): Use it.
7018
7019         * http.c (gethttp): Create local user and passwd from what is
7020         given.
7021
7022         * url.c (parseurl): Check for HTTP username and password too.
7023
7024 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
7025
7026         * config.h.in: Removed #define gethostbyname R...
7027
7028 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
7029
7030         * version.c: Changed version to 1.4.0-test1.
7031
7032 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
7033
7034         * version.c: "Released" 1.4b29.
7035
7036         * recur.c (recursive_retrieve): Check for no_parent.
7037
7038         * init.c (setval): Option update.
7039
7040         * main.c (main): New option no-parent.
7041
7042         * options.h (struct options): New variable no_parent.
7043
7044         * recur.c (recursive_retrieve): Only files are checked for
7045         opt.accepts and opt.rejects.
7046         (recursive_retrieve): Check directories for opt.excludes.
7047         (recursive_retrieve): Make the dir absolute when checking
7048         opt.excludes.
7049
7050         * html.c (htmlfindurl): Recognize <applet code=...> and <script
7051         src=...>
7052
7053 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
7054
7055         * ftp.c (getftp): Do not line-break assert entries at all.
7056         (ftp_retrieve_dirs): docfix.
7057
7058         * connect.c (select_fd): Use fd + 1 as nfds.
7059
7060         * version.c: Changed version to 1.4b29.
7061
7062 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
7063
7064         * version.c: "Released" 1.4b28.
7065
7066         * ftp.c (ftp_loop_internal): Check whether f->size == len and
7067         don't continue the loop if it is.
7068         (ftp_get_listing): Remove list_filename on unsuccesful loop.
7069
7070 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
7071
7072         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
7073         (getftp): Do not use multiline assert.
7074
7075         * http.c (hparsestatline): Use mjr and mnr instead of major and
7076         minor, which don't compile on Ultrix.
7077         (http_loop): Use strcpy() to initialize tmp.
7078
7079         * all: Geturl -> Fetch
7080
7081 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
7082
7083         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
7084         ':'.
7085
7086         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
7087         moving `bufsize &&' to the beginning of each check in for-loops.
7088
7089         * recur.c (parse_robots): Close fp on exit.
7090
7091         * url.c (mymkdir): Check for each directory before creating.
7092
7093 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
7094
7095         * version.c: Changed version to 1.4b28.
7096
7097 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
7098
7099         * version.c: "Released" 1.4b27.
7100
7101         * init.c (parse_line): Use isspace.
7102         (parse_line): Free *com on all errors.
7103
7104         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
7105         (delelement): Use next instead of f->next and prev instead of
7106         f->prev.
7107         (delelement): Free the members of the deleted element.
7108
7109         * http.c (http_loop): Do not return RETROK on code != 20x.
7110
7111         * init.c (cleanup): Free opt.user_header.
7112         (cleanup): Free opt.domains.
7113
7114         * url.c (freelists): Moved to cleanup().
7115
7116         * http.c (hparsestatline): Docfix.
7117
7118         * main.c (main): Return with error status on unsuccesful
7119         retrieval.
7120
7121         * init.c (setval): Do not remove listing when mirroring.
7122
7123         * url.c (url_filename): Use opt.fileprefix.
7124
7125         * ftp.c (ftp_get_listing): Use url_filename to get filename for
7126         .listing.
7127
7128         * main.c (main): New option: -rn.
7129
7130 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
7131
7132         * Makefile.in (RM): Added RM = rm -f.
7133
7134         * host.c (clean_hosts): New function.
7135         (free_hlist): Just free the list, no reset.
7136
7137         * version.c: Changed version to 1.4b27.
7138
7139 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
7140
7141         * version.c: "Released" 1.4b26.
7142
7143         * retr.c (retrieve_from_file): If call get_urls_html with
7144         opt.spider to make it silent in spider mode.
7145
7146         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
7147
7148         * url.h (CLEANDUP): New macro.
7149
7150         * http.c (gethttp): Fixed a bug that freed location only when it
7151         was NULL.
7152
7153         * retr.c (retrieve_url): Free url if it will not be stored,
7154         i.e. newloc is NULL.
7155
7156         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
7157         old version would bug out on <a href="x#a"href="y">.
7158
7159         * html.h (state_t): New member in_quote.
7160
7161         * html.c (htmlfindurl): Free s->attr at the beginning of
7162         attr-loop.
7163
7164         * recur.c (recursive_retrieve): Recognize RCLEANUP.
7165         (tried_robots): Make hosts a global variable.
7166         (recursive_retrieve): Free constr after URL host optimization.
7167         (tried_robots): Free urlinfo before exiting.
7168
7169         * utils.c (free_slist): New function.
7170
7171         * recur.c (recursive_retrieve): Use flags to add cleanup
7172         possibility.
7173
7174         * main.c (main): Free filename after recursive_retrieve.
7175
7176         * http.c (gethttp): Store successful responses too.
7177
7178 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
7179
7180         * all: Constified the whole source.  This required some minor
7181         changes in many functions in url.c, possibly introducing bugs -- I
7182         hope not.
7183
7184         * ftp-basic.c: Removed last_respline.
7185
7186         * http.c (gethttp): Free type.
7187
7188         * host.c (same_host): Free real1 and real2.
7189
7190         * main.c (main): New option --spider.
7191
7192         * retr.c (get_contents): Don't reset errno.
7193
7194         * main.c (main): Sorted the options.
7195
7196         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
7197         uninitialized by select().
7198
7199         * http.c (http_loop): Print the time when the connection is
7200         closed.
7201         (gethttp): Debug-print the HTTP request.
7202
7203 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
7204
7205         * connect.c (iread): Do not try reading after timeout.
7206
7207         * main.c (main): Would bug out on -T.
7208
7209         * connect.c (select_fd): Do not use exceptfds.
7210         (iread): Set ETIMEDOUT on select_fd <= 0.
7211
7212         * version.c: Changed version to 1.4b26.
7213
7214 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
7215
7216         * version.c: "Released" 1.4b25.
7217
7218         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
7219         or link name.
7220
7221         * http.c (gethttp): Add errcode to struct hstat.
7222         (http_loop): Use it.
7223
7224         * url.c (no_proxy_match): Simplify using char** for no_proxy.
7225
7226         * options.h (struct options): Make opt.no_proxy a vector.
7227
7228         * utils.c (sepstring): Use !*s instead of !strlen(s).
7229
7230         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
7231         (getperms): Use ISODIGIT instead of isdigit.
7232
7233         * ftp.c (getftp): Print time.
7234
7235         * main.c (main): Use legible output of downloaded quantity.
7236
7237         * ftp.c (getftp): Use elapsed_time().
7238         (ftp_loop_internal): Use rate().
7239
7240         * http.c (http_loop): Add download ratio output; Use rate().
7241
7242         * utils.c (rate): New function.
7243
7244 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
7245
7246         * http.c (http_loop): Use timer.
7247
7248         * ftp.c: Split to ftp-basic.c and ftp.c
7249
7250         * utils.c (reset_timer): New function.
7251         (elapsed_time): New function.
7252
7253         * retr.c (show_progress): Make bytes_in_line and offs long; should
7254         work on 16-bit machines.
7255
7256 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
7257
7258         * url.c (in_acclist): New argument backward.
7259
7260         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
7261         a file should be retrieved according to suffix.
7262         (ftp_get_listing): Check the return value of unlink; Do not call
7263         ftp_retrieve_dirs if depth reached maxreclevel.
7264         (ftp_retrieve_dirs): Check whether the directory is in
7265         exclude-list.
7266
7267         * main.c (main): Print the version number at the beginning of
7268         DEBUG output.
7269         (main): Use strrchr when creating exec_name.
7270
7271         * ftp.c (ftp_retrieve_glob): Do not close control connection.
7272
7273         * version.c: Changed version to 1.4b25.
7274
7275 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
7276
7277         * version.c: "Released" 1.4b24.
7278
7279         * Makefile.in: Rewrite.
7280
7281         * ftp.c (ftp_loop_internal): Likewise.
7282
7283         * retr.c (time_str): Check for failed time().
7284
7285         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
7286         HTML3.0.
7287
7288         * retr.c (time_str): Return time_t *.
7289
7290         * connect.c (bindport): Close msock on unsuccesful bind.
7291         (bindport): The same for getsockname and listen.
7292
7293         * retr.c (retrieve_url): Allow any number of retries on
7294         proxy.
7295
7296         * http.c (gethttp): Do not treat errno == 0 as timeout.
7297         (http_loop): Likewise.
7298         (http_loop): Cosmetic changes.
7299
7300         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
7301
7302         * retr.c (get_contents): Reset errno.
7303
7304         * ftp.c (getftp): Minor fixes.
7305
7306 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
7307
7308         * http.c: Do not use backups.
7309
7310         * geturl.1 (WARNING): Warn that man-page could be obsolete.
7311
7312         * getopt.c (getopt_long): Moved to getopt.c
7313
7314         * geturl.texi: Enhanced.
7315
7316         * main.c (main): Use it.
7317
7318         * recur.c (convert_all_links): New function.
7319
7320         * utils.c (add_slist): New argument flags.
7321
7322         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
7323         (parse_robots): Do not chuck out empty value fields.
7324         (parse_robots): Make yourself welcome on empty Disallow.
7325
7326         * version.c: Changed version to 1.4b24.
7327
7328 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
7329
7330         * version.c: "Released" 1.4b23.
7331
7332         * ftp.c (ftp_loop_internal): Get the time after getftp.
7333
7334         * Makefile.in (install.info): New target.
7335         (install): Use it.
7336
7337         * http.c (http_loop): Fix output when doing -O.
7338
7339 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
7340
7341         * geturl.texi: New file.
7342
7343         * main.c (main): Do not print the warnings and download summary if
7344         opt.quiet is set.
7345
7346         * version.c: Changed version to 1.4b23.
7347
7348 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
7349
7350         * "Released" 1.4b22.
7351
7352         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
7353         to avoid redefinition warnings.
7354
7355         * host.c (store_hostaddress): Use memcpy() to copy the address
7356         returned by inet_addr.
7357
7358         * version.c: Changed version to 1.4b22.
7359
7360 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
7361
7362         * version.c: "Released" 1.4b21.
7363
7364         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
7365
7366         * ftp.c (ftp_port): Use conaddr.
7367         (getftp): Print the file length.
7368         (ftp_retrieve_list): Check the stamps of plain files only.
7369
7370         * connect.c (closeport): Do not call shutdown().
7371         (conaddr): New function.
7372
7373         * html.c (ftp_index): Made it dfp-aware.
7374
7375         * init.c (cleanup): New name of freemem. Close opt.dfp.
7376
7377         * ftp.c (getftp): Use opt.dfp if it is set.
7378
7379         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
7380
7381         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
7382         CWDs to be sent with recursive FTP retrievals.
7383
7384 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
7385
7386         * recur.c (parse_robots): Made it more compliant with "official"
7387         specifications.
7388
7389         * http.c: New function.
7390
7391         * ftp-unix.c (ftp_parse_ls): Added better debug output.
7392
7393         * ftp.c (getftp): Print out the LIST in case of
7394         opt.print_server_response.
7395
7396         * version.c: Changed version to 1.4b21.
7397
7398 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
7399
7400         * version.c: "Released" 1.4b20.
7401
7402         * README: Update.
7403
7404         * http.c (gethttp): Preset lengths of various headers instead of
7405         calculating them dynamically.
7406         (gethttp): Check for 206 partial contents.
7407
7408 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
7409
7410         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
7411
7412         * http.c (gethttp): Send the port number in the Host: header.
7413
7414 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
7415
7416         * http.c (gethttp): Send host: header.
7417         (gethttp): Add the possibility of user-defined headers.
7418         (gethttp): Move decision about pragma: no-cache to http_loop,
7419         where it belongs.
7420         (gethttp): Pass a struct instead of enormous argument list.
7421         (http_loop): Use a new, fancier display format.
7422         (ftp_loop): Likewise.
7423
7424         * main.c: (hangup): Turn off buffering of the new log file.
7425
7426         * install-sh: Likewise.
7427
7428         * config.sub: Replace with the one in autoconf-2.10
7429
7430         * geturl.1: Update.
7431
7432         * init.c: New options httpuser and httppasswd.
7433
7434         * http.c: (base64_encode_line): New function.
7435         (gethttp): Send authentication.
7436
7437         * connect.c (make_connection): Use store_hostaddress.
7438
7439 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
7440
7441         * host.c (store_hostaddress): New function.
7442
7443         * NEWS: Update.
7444
7445         * http.c (hgetrange): New function.
7446         (gethttp): Use ranges.
7447
7448         * utils.c (numdigit): Accept long instead of int.
7449
7450         * http.c (http_loop): Add restart capabilities.
7451
7452         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
7453         being used uninitialized.
7454         (ftp_retrieve_list): Similar fix.
7455
7456         * host.c (add_hlist): Fixed a bug that could cause cmp being used
7457         uninitialized.
7458
7459         * url.c (construct_relative): New function.
7460
7461         * recur.c (recursive_retrieve): Use it.
7462
7463         * retr.c (convert_links): New function.
7464
7465 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
7466
7467         * url.c (free_urlpos): New function.
7468
7469         * recur.c (recursive_retrieve): Adapt.
7470
7471         * url.c (get_urls_html): Return a linked list instead of a vector.
7472
7473         * url.c (get_urls_file): Return a linked list instead of a vector.
7474
7475         * geturl.1: Update.
7476
7477         * http.c (gethttp): Implement it.
7478
7479         * init.c (setval): New option: SAVEHEADERS
7480
7481         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
7482         be retrieved. Lack of this test caused bugs when the connection
7483         was lost during listing.
7484
7485         * retr.c (retrieve_url): Fixed a bug that caused
7486         coredumps. *newloc is now reset by default.
7487         (retrieve_url): Lift the twenty-tries limit on proxies.
7488
7489         * version.c: Changed version to 1.4b20.
7490
7491 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
7492
7493         * version.c: "Released" 1.4b19.
7494
7495 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
7496
7497         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
7498         (getftp): Changed prototype to accept ccon *.
7499
7500 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
7501
7502         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
7503         incorrect values to files pointed to by symbolic links.
7504         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
7505
7506 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
7507
7508         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
7509
7510         * main.c (main): New option: --user-agent.
7511
7512         * geturl.1: Ditto.
7513
7514         * init.h: Ditto.
7515
7516         * init.c (setval): Ditto.
7517
7518         * main.c (main): Rename "server-headers" to "server-response".
7519
7520         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
7521         executables in 'ls -F' listings.
7522
7523 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
7524
7525         * url.c (parseurl): Remove realloc() and sprintf().
7526         (str_url): Get rid of sprintf().
7527
7528         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
7529         servers.
7530
7531         * url.h (URL_CLEANSE): Made it else-resistant.
7532         (USE_PROXY): New macro.
7533
7534 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
7535
7536         * NEWS: Update.
7537
7538         * version.c: Changed version to 1.4b19.
7539
7540 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
7541
7542         * version.c: "Released" 1.4b18.
7543
7544         * url.c: Made it reallocate space exponentially.
7545
7546 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
7547
7548         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
7549         the list of stuff to fetch.
7550
7551 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
7552
7553         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
7554         -Fi.
7555
7556         * html.c (htmlfindurl): Rewrite.
7557
7558         * http.c (gethttp): Use opt.proxy_cache.
7559
7560         * main.c (main): Added --cache option.
7561
7562         * ftp.c (ftp_response): Print server response if opt.print_server
7563         response is set.
7564         (getftp): Print newlines after each request if the server response
7565         is to be printed.
7566         (ftp_response): Copy the last response line to last_respline.
7567
7568         * http.c (gethttp): Add Pragma: nocache for retried
7569         proxy-retrievals.
7570
7571         * ftp.c (getftp): Use it.
7572
7573         * retr.c (buf_discard): New function.
7574
7575         * ftp.c (ftp_response): Use buf_readchar().
7576         (getftp): Flush the control connection buffer before calling
7577         get_contents().
7578
7579         * retr.c (buf_readchar): New function.
7580         (buf_flush): New function.
7581         (get_contents): Use buf_readchar() instead of read(x, x, 1).
7582         (get_contents): Use buf_flush.
7583
7584 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
7585
7586         * ftp.c: Incorporate changes to ftp_response.
7587
7588         * ftp.c (ftp_response): Allocate the server response dynamically,
7589         as in read_whole_line and fetch_next_header.
7590
7591         * utils.c (read_whole_line): Fixed a bug that prevented reading
7592         the last line if it is not \n-terminated. Also fixed a possible
7593         memory overflow.
7594
7595         * http.c (fetch_next_header): Return malloc-ed string as large as
7596         needed.
7597         (gethttp): Use new fetch_next_header.
7598
7599 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
7600
7601         * http.c (hgetlen): Compute the header length the first time only.
7602         (hgettype): Ditto.
7603         (hgetlocation): Ditto.
7604         (hgetmodified): Ditto.
7605
7606 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
7607
7608         * sample.geturlrc: Update.
7609
7610 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7611
7612         * http.c (http_loop): Ditto.
7613
7614         * ftp.c (getftp): Open the output file as binary.
7615
7616         * version.c: Changed version to 1.4b18.
7617
7618 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
7619
7620         * version.c: "Released" 1.4b17.
7621
7622         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
7623         instead of failed assertion.
7624
7625 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
7626
7627         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
7628         if a file of that name already exists.
7629
7630 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
7631
7632         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
7633
7634         * config.h.in: Define gethostbyname as Rgethostbyname when using
7635         Socks.
7636
7637         * configure.in: Check for -lresolv if using Socks.
7638
7639         * version.c: Changed version to 1.4b17.
7640
7641 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
7642
7643         * version.c: "Released" 1.4b16.
7644
7645         * http.c (gethttp): More intelligent check for first line of HTTP
7646         response.
7647         (gethttp): Would bug out on time-stamping.
7648
7649         * version.c: Changed version to 1.4b16.
7650
7651 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
7652
7653         * version.c: Released 1.4b15.
7654
7655         * http.c (http_loop): Print \n after the loop entry, not before.
7656
7657         * url.c (url_filename): Use ISDOT.
7658
7659         * url.h (ISDOT): New macro.
7660
7661         * recur.c (recursive_retrieve): Change only opt.recursive for
7662         following FTP.
7663
7664 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
7665
7666         * socks/geturl.cgi: Fixed version No.
7667
7668         * socks/download-netscape.html: Ditto.
7669
7670         * socks/download.html: Changed socks.html to download.html.
7671
7672 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
7673
7674         * url.c (url_filename): Check for opt.dirstruct instead for
7675         opt.recursive && opt.dirstruct.
7676
7677         * init.c (defaults): Ditto.
7678         (defaults): Reset dirstruct by default.
7679         (setval): Set opt.dirstruct whenever setting recursive.
7680
7681         * init.h: Removed FORCEDIRHIER.
7682
7683         * INSTALL: Added -L to socks-description.
7684
7685         * version.c: Changed version to 1.4b15.
7686
7687 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
7688
7689         * version.c: "Released" 1.4b14.
7690
7691         * geturl.1: Update AUTHOR to include Rosella as contributor.
7692
7693         * NEWS: Update.
7694
7695         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
7696
7697         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
7698         (cal_time): Fix == to eq.
7699
7700         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
7701
7702         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
7703
7704         * Makefile.in: Use @VERSION@.
7705
7706         * configure.in: Check version from version.c.
7707
7708         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
7709
7710         * socks/download.html: Created from download-netscape.html, made
7711         HTML-2.0 compliant.
7712
7713         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
7714         following FTP links from recursions.
7715
7716 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
7717
7718         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
7719         absolute directories correctly.
7720
7721         * version.c: Changed version to 1.4b14.
7722
7723 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
7724
7725         * version.c: "Released" 1.4b13.
7726
7727         * url.c (make_backup): New function.
7728
7729         * http.c (http_loop): Make a backup copy of the local file (using
7730         rename(2)) before opening it.
7731
7732         * main.c (main): Added --backups.
7733
7734         * host.c (ftp_getaddress): Bail out on failed mycuserid().
7735         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
7736         (ftp_getaddress): Check for empty, null or (null) domain.
7737
7738         * url.c (get_urls_html): If this_url is NULL, the base must have a
7739         protocol.
7740         (parseurl): Use has_proto.
7741
7742         * retr.c (retrieve_url): Warn when proxy is used with more than 20
7743         retries.
7744
7745         * url.c (mkstruct): Create the directory (calling mymkdir()) only
7746         if it is not already there.
7747         (has_proto): New function.
7748         (get_urls_html): Eliminate the remaining call to findurl -- use
7749         has_proto.
7750
7751         * geturl.1: Ditto.
7752
7753         * main.c: Change -X to -x.
7754
7755         * url.c (url_filename): Simplify creation of filename if
7756         prefix_files is set.
7757         (url_filename): Simplify everything. And I do mean *everything*.
7758         (mkstruct): Add dir_prefix before hostname.
7759         (path_simplify): Fixed a bug that caused writing outside the path
7760         string in case of "." and ".." path strings.
7761
7762 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
7763
7764         * init.c: Added --mirror.
7765
7766         * main.c (main): Added -X to force saving of directory hierarchy.
7767
7768         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
7769         (ftp_retrieve_list): Check whether quota is exceeded.
7770
7771         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
7772
7773         * http.c (gethttp): Use referer if present.
7774
7775         * recur.c (recursive_retrieve): Set u->referer before calling
7776         retrieve_url.
7777
7778         * url.c (newurl): Use memset to nullify the struct members.
7779         (freeurl): Free the referer field too.
7780
7781         * url.h: Added referer to urlinfo.
7782
7783         * geturl.1: Updated the manual to document some of the new features.
7784
7785         * utils.c (numdigit): Moved from url.c.
7786
7787         * README: Rewritten.
7788
7789         * config.h.in: Add the support for socks.
7790
7791         * configure.in: Add the support for socks.
7792
7793         * url.c (url_filename): If the dir_prefix is ".", work with just
7794         the file name.
7795         (url_filename): Do not look for .n extensions if timestamping if
7796         turned on.
7797
7798         * retr.c (show_progress): Skip the over-abundant restval data, and
7799         print the rest of it with ',' instead of '.'.
7800
7801 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
7802
7803         * retr.c (show_progress): Changed second arg. to long (as it
7804         should be).
7805         (show_progress): Moved to retr.c.
7806         (get_contents): Moved to retr.c.
7807
7808         * version.c: Change version to 1.4b13.
7809
7810 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
7811
7812         * url.c (in_acclist): Would return after the first suffix.
7813
7814 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
7815
7816         * version.c: "Released" 1.4b12.
7817
7818         * url.c (path_simplify): More kludgifications.
7819         (get_urls_html): Use new parameters for htmlfindurl.
7820
7821         * html.c: Removed memorizing "parser states", since the new
7822         organization does not require them.
7823
7824         * init.c (run_geturlrc): Use read_whole_line.
7825
7826         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
7827
7828         * recur.c (parse_robots): Use read_whole_line.
7829
7830         * utils.c (read_whole_line): New function.
7831
7832         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
7833
7834         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
7835         tested on OSF and Ultrix.
7836         (add_hlist): New function.
7837         (free_hlist): New function.
7838         (search_host): New function.
7839         (search_address): New function.
7840         (realhost): Use search_host, search_address and add_hlist.
7841         (same_host): Replaced realloc() with strdupdelim(), made
7842         case-insensitive, fixed a memory leak.
7843
7844         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
7845         tm_min, like intended.
7846
7847         * version.c: Change user agent information to
7848         Geturl/version.
7849
7850 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
7851
7852         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
7853
7854         * url.c (acceptable): Always accept directories.
7855
7856         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
7857         servers by stripping trailing @ from symlinks and trailing / from
7858         directories.
7859
7860         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
7861
7862         * url.c (skip_url): Use toupper instead of UCASE.
7863
7864         * host.c (sufmatch): Made it case-insensitive.
7865
7866         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
7867         (match_backwards): New function, instead of
7868         match_backwards_or_pattern.
7869
7870         * recur.c (recursive_retrieve): Increased performance by
7871         introducing inl, which reduces number of calls to in_slist to only
7872         one.
7873
7874         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
7875         routine to use.
7876
7877         * main.c (printhelp): Removed the warranty stuff.
7878
7879 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
7880
7881         * url.c (add_slist): Simplify.
7882         (match_backwards_or_pattern): New function.
7883         (in_acclist): Use match_backwards_or_pattern.
7884         (matches): Remove.
7885
7886 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
7887
7888         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
7889         recursive.
7890
7891         * html.c (ftp_index): Fixed to work. Beautified the output.
7892
7893         * ftp.c (ftp_retrieve_glob): Another argument to control whether
7894         globbing is to be used.
7895         (ftp_retrieve_list): Compare the time-stamps of local and remote
7896         files to determine whether to download.
7897
7898 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
7899
7900         * ftp.c (rel_constr): New function.
7901
7902         * retr.c (retrieve_from_file): Check for text/html before
7903         retrieving recursively.
7904
7905         * main.c (main): Check whether the file is HTML before going into
7906         recursive HTML retrieving.
7907
7908         * ftp.c (ftp_retrieve_list): Manage directories.
7909         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
7910         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
7911         initialized, causing bugchecks in getftp to fail.
7912
7913         * configure.in: Check for symlink.
7914
7915         * ftp.c (ftp_retrieve_list): Added support for symlinks.
7916
7917         * version.c: "Released" 1.4b10.
7918
7919         * atotm.c (atotm): Redeclared as time_t.
7920
7921         * init.c: New variable "timestamping".
7922
7923         * main.c (main): New option 'N'.
7924
7925         * http.c (hgetlocation): Case-insensitive match.
7926         (hgetmodified): New function.
7927         (http_loop): Implement time-stamping.
7928
7929 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
7930
7931         * version.c: Changed version to 1.4b10
7932
7933         * atotm.c: New file, from phttpd.
7934
7935         * options.h (struct options): New parameter timestamping.
7936
7937         * version.c: 1.4b9 "released".
7938
7939         * recur.c (recursive_retrieve): Used linked list (ulist) for
7940         faster storing of URLs.
7941
7942         * url.c (get_urls_html): Removed the old kludge with comparing the
7943         outputs of htmlfindurl and findurl.
7944         (get_urls_html): Added better protocol support here.
7945         (create_hash): Removed, as well as add_hash and in_hash.
7946         (addslist): New function.
7947         (in_slist): ditto
7948
7949         * version.c: Released 1.4b8, changed version to b9.
7950
7951 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
7952
7953         * ftp.c (freefileinfo): New function.
7954         (delelement): New function.
7955
7956         * everywhere: GPL!
7957
7958         * ftp.c (ftp_loop): Use ccon.
7959         (ftp_retrieve_glob): Likewise.
7960
7961         * ftp.h: Define ccon, to define status of control connection.
7962
7963         * ftp.c (ftp_get_listing): New function.
7964         (ftp_retrieve_more): New function.
7965         (ftp_retrieve_glob): New function.
7966
7967 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
7968
7969         * configure.in: Removed the search for cuserid().
7970
7971         * init.c (getmode): Renamed to getperms.
7972
7973 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
7974
7975         * version.c: New version.
7976
7977         * main.c (hangup): New function, that handles hangup. Hangup
7978         signal now causes geturl to stop writing on stdout, and to write
7979         to a log file.
7980
7981         * ftp.c (getftp): "Released" 1.4b7.
7982
7983         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
7984         (ftp_index): Use fileinfo/urlinfo.
7985
7986         * ftp-unix.c (ftp_parse_ls): New function.
7987         (symperms): New function.
7988
7989         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
7990
7991         * retr.c (retrieve_url): Added FTP support.
7992
7993 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
7994
7995         * geturl.h: Removed NOTFTP2HTML enum.
7996         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
7997
7998         * ftp.c (getftp): Resynched with urlinfo.
7999         (getftp): Removed HMTL-ization of index.html from getftp.
8000
8001         * version.c: 1.4b6 "released".
8002
8003         * options.h (options): New struct, to keep options in.
8004
8005         * http.c (http_loop,gethttp): Synched with proxy.
8006
8007         * retr.c (retrieve_url): Implemented proxy retrieval.
8008
8009         * main.c (main): Use retrieve_from_file.
8010
8011 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
8012
8013         * retr.c (retrieve_from_file): New function.
8014
8015         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
8016         can be found in u->proto.
8017
8018         * ftp.c (ftp_response): Fixed to accept multi-line responses as
8019         per RFC 959.
8020
8021         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
8022
8023         * url.c (mymkdir): Removed the file of the same name, if one
8024         exists.
8025         (isfile): New function.
8026         (mkstruct): Fixed the '/' glitches.
8027         (path_simplify): Hacked to treat something/.. correctly.
8028
8029 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
8030
8031         * http.c (gethttp): Close the socket after error in headers.
8032         (http_loop): HEOF no longer a fatal header.
8033
8034         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
8035         simplifies the syntax of calling retrieve_url.
8036
8037         * recr.c (recursive_retrieve): Modified to use get_urls_html.
8038
8039         * url.c (get_urls_file): New function.
8040         (get_urls_html): New function.
8041
8042         * recr.c (recursive_retrieve): Patched up to conform to the
8043         standards.
8044
8045         * http.c (gethttp): Synched with the rest...
8046         (gethttp): Treat only CONREFUSED specially, with connection
8047         errors.
8048
8049         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
8050
8051 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
8052
8053         * http.c (http_loop): New function.
8054
8055         * loop.c: Removed *lots* of stuff from retrieve_url.
8056
8057         * url.c (parseurl): Changed to work with urlinfo. Integrated
8058         username finding and path parsing.
8059         (newurl): New function.
8060         (freeurl): New function.
8061         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
8062         (url_filename): Likewise.
8063         (path_simplify): Accept relative paths too.
8064         (opt_url): Made urlinfo-compliant, removed bogosities.
8065         (path_simplify): Expanded to accept relative paths.
8066         (str_url): A replacement for hide_url
8067         (decode_string): Fixed a bug that caused malfunctioning when
8068         encountering an illegal %.. combination.
8069         (opt_url): Removed the argument. Dot-optimizations are now default.
8070
8071         * nmalloc.c (strdupdelim): New function.
8072
8073         * url.h: Added the urlinfo structure
8074
8075 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
8076
8077         * url.c (hide_url): Thrown out the protocol assertion. Do not
8078         change the URL if the protocol if not recognized.
8079         (findurl): Put continue instead of break.
8080
8081 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
8082
8083         * sample.geturlrc: Changed the defaults to be commented out and
8084         harmless (previous defaults caused pains if copied to
8085         ~/.geturlrc).
8086
8087         * http.c (gethttp): Print the HTTP request in debug mode.
8088
8089         * connect.c (iread): Added EINTR check loop to select-ing
8090         too. EINTR is now correctly handled with select().
8091
8092         * TODO: new file
8093
8094 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
8095
8096         * host.c (same_host): Made the function a little bit more
8097         intelligent regarding diversified URL syntaxes.
8098
8099         * url.c (skip_url): Spaces are now skipped after URL:
8100
8101         * Released 1.3.1 with the patch to prevent crashing when sending
8102         NULL to robot* functions and the patch to compile "out of the box"
8103         on AIX.
8104
8105         * recr.c (recursive_retrieve): Added checking whether this_url is
8106         NULL when calling the robot functions.
8107
8108         * ChangeLog: New file.