]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Use stdarg only if compiling with an ANSI C compiler.
[wget] / src / ChangeLog
1 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2
3         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
4         is present.
5
6 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
7
8         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
9         TOTAL.
10         (bar_finish): Likewise.
11
12 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
13
14         * html-url.c (tag_handle_form): New function.  Pick up form
15         actions and mark them for conversion only.
16
17 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
18
19         * progress.c (struct progress_implementation): Use PARAMS when
20         declaring the parameters of *create, *update, *finish, and
21         *set_params.
22
23         * netrc.c: Ditto.
24
25         * http.c: Reformat some function definitions so that ansi2knr can
26         read them.
27
28         * hash.c (struct hash_table): Use the PARAMS macro around
29         parameters in the declaration of hash_function and test_function.
30         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
31         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
32         that pre-ANSI compilers can read them.
33         (find_mapping): Use PARAMS when declaring EQUALS.
34         (hash_table_put): Ditto.
35
36         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
37
38         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
39         which was unsupported by pre-ANSI compilers.
40
41         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
42
43 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
44
45         * url.c (url_filename): Use compose_file_name regardless of
46         whether opt.dirstruct is set.
47         (mkstruct): Don't handle the query and the reencoding of DIR; that
48         is done in compose_file_name.
49
50 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
51
52         * wget.h: Ditto for extern char *exec_name.
53
54         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
55         perfectly legal to follow an `extern' with a non-`extern' ones,
56         provided the types match.
57
58         * main.c: Don't define OPTIONS_DEFINED_HERE.
59
60 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
61
62         * progress.c (create_image): Revert to calculating ETA based on
63         average download speed.
64         (create_image): Don't print ETA until the download has been active
65         for at least 3 seconds.
66         (create_image): When ETA is not available, don't print anything.
67         The previous version would print --:--.
68
69 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
70
71         * progress.c (bar_update): Keep updating a subinterval until it
72         reaches or exceeds a watermark.  That way the measurement will be
73         guaranteed to span a configurable minimum of time.  The current
74         default is 3s in 30 100ms intervals.
75
76 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
77
78         * progress.c (bar_update): Maintain an array of the time it took
79         to perform previous 30 network reads.
80         (create_image): Calculate the download speed and ETA based on the
81         last 30 reads, not the entire download.
82         (create_image): Make sure that the ETA is not changed more than
83         once per second.
84
85 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
86
87         * mswindows.c (borland_utime): New function conditionally defined
88         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
89         `utime()' as Borland's `utime()' function is broken on Windows 9x
90         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
91
92 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
93
94         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
95
96 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
97
98         * Makefile.in: Updated several dependencies for object files.
99
100 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
101
102         * mswindows.c: Include "utils.h".
103
104 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
105
106         * host.h: Don't include netdb.h on windows.
107
108 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
109
110         * recur.c (retrieve_tree): Handle the case when start_url doesn't
111         parse.
112
113 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
114
115         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
116         calling xmalloc and memcpy.
117
118 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
119
120         * host.h: Include Unix-specific includes #ifndef WINDOWS.
121         Patch originally provided by Christian Lackas.
122
123 2002-02-11  Christian Lackas  <delta@lackas.net>
124
125         * recur.c: recurive downloading for https fixed.
126
127 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
128
129         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
130
131         * ftp-basic.c: Also include <netinet/in.h>.
132
133 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
134
135         * http.c (gethttp): when -c used, mark already fully retrieved
136         file as successfully retrieved.
137
138 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
139
140         * url.c (url_parse): Don't treat '?' as query string separator
141         when parsing FTP URLs.
142
143 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
144
145         * html-url.c (tag_handle_meta): Don't crash on <meta
146         http-equiv=refresh> where content is missing.
147
148 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
149
150         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
151         netdb.h on windows.
152
153 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
154
155         * retr.c (retrieve_url): Remove redirection cycle detection.  This
156         is because some sites legitimately redirect the user back to the
157         same location, e.g. after an authorization check performed by
158         another page.  MAX_REDIRECTIONS is still used to prevent infinite
159         redirection loops.
160
161 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
162
163         * http.c (gethttp): Wrap host name in square brackets if it
164         contains a colon.
165
166 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
167
168         * url.c (url_parse): Allow all hex digits, not only decimal ones,
169         to form an IP address.
170
171 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
172
173         * url.c (urlchr_table): Make square braces reserved, so we can
174         parse http://[::1]/.
175         (url_parse): Handle host in braces.
176         (url_string): If url->host contains colons, wrap it in braces.
177
178 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
179
180         * connect.c (resolve_bind_address): New function.
181         (connect_to_one): Use it.
182         (bindport): Ditto.
183
184         * init.c: Don't resolve bind-address here.
185
186         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
187
188 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
189
190         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
191         offset.
192         (address_list_new): Use map_ipv4_to_ip.
193         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
194         in IPv4 context.
195
196 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
197
198         * source: Integrated IPv6 support.
199         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
200
201 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
202
203         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
204         (cmd_directory): New function. Like cmd_file(), but strips
205         trailing directory separators.
206         (commands): Change action for "dirprefix" from `cmd_file' to
207         `cmd_directory'.
208
209         * utils.c (make_directory): Allow intermediate `mkdir' calls to
210         fail, as not all path components that do not exist should be
211         directory components, especially under Windows.
212
213 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
214
215         * netrc.c (parse_netrc): Skip leading whitespace before testing
216         whether the line is empty.  Empty lines still contain the line
217         terminator.
218
219 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
220
221         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
222         only if no data is pending in SSL buffers.
223         From tony@bluetail.com.
224
225 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
226
227         * headers.c (header_get): Strip trailing whitespace from the
228         header.
229
230 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
231
232         * url.c (parse_uname): URL-decode *USER and *PASSWD.
233
234 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
235
236         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
237         starts with "//").
238
239 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
240
241         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
242         error.
243
244 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
245
246         * version.c: Wget 1.8.1 is released.
247
248 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
249
250         * version.c: Wget 1.8.1-pre3 is released.
251
252 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
253
254         * recur.c (retrieve_tree): Enqueue the canonical representation of
255         start_url, so that the test against dl_url_file_map works.
256
257 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
258
259         * log.c (logputs): Check for requested verbosity before printing
260         anything.
261
262 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
263
264         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
265         inline.
266
267 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
268
269         * recur.c (retrieve_tree): Make a copy of file obtained from
270         dl_url_file_map because the code calls xfree(file) later.
271
272 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
273
274         * recur.c (register_html): Maintain a hash table of HTML files
275         along with the list.  Disallow duplicates.
276         (retrieve_tree): Use downloaded_html_set to check whether the file
277         found in dl_url_file_map is an HTML file, and descend into it if
278         so.
279         (convert_all_links): Don't guard against duplicates in
280         downloaded_html_list, since they are no longer possible.
281
282 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
283
284         * recur.c (retrieve_tree): Pass on referring URL when retrieving
285         recursed URL.
286
287 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
288
289         * version.c: Wget 1.8.1-pre2 is released.
290
291 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
292
293         * retr.c (sleep_between_retrievals): Simplify indentation.
294
295 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
296
297         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
298         of "randomness" at a time.
299         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
300
301         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
302         random amount averages in opt.wait.
303         (sleep_between_retrievals): Don't seed the PRNG; random_number
304         will do that.
305
306         * utils.c (random_number): New function.
307
308 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
309
310         * url.c (path_simplify): Move here from utils.c, and make static.
311
312 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
313
314         * init.c (wgetrc_file_name): Print correct message when loading
315         getenv("WGETRC") fails.
316
317 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
318
319         * recur.c (register_download): Don't abort when one URL references
320         two different files.
321
322 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
323
324         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
325         calling ssl_iwrite.
326
327 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
328
329         * version.c: Wget 1.8.1-pre1 is released.
330
331 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
332
333         * res.c (matches): Fix broken URL in the docstring.
334
335 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
336
337         * html-url.c (tag_url_attributes): Mark <embed href=...> as
338         external.
339
340 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
341
342         * url.c (get_urls_file): Cosmetic changes.
343
344 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
345
346         * html-url.c (append_one_url): Resurrect warning when unable to
347         resolve a relative link.
348
349 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
350
351         * html-url.c (collect_tags_mapper): Break into several functions.
352         (tag_url_attributes): Collect <embed href=...>.
353
354 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
355
356         * host.c: New type ipv4_address.  Use it consistently instead of
357         `unsigned char[4]' and `unsigned char *'.
358         (pretty_print_address): Accept a `const void *', to require even
359         less casting.
360
361 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
362
363         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
364
365 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
366
367         * main.c (main): Initialize progress after fork_to_background, so
368         that it knows when to use dots.
369
370         * mswindows.c (ws_hangup): Call log_request_redirect_output.
371
372         * utils.c (fork_to_background): Print the PID of the child
373         process.
374
375         * log.c (log_request_redirect_output): Set a flag that output
376         redirection has been requested.  Doing anything else in a signal
377         handler is unsafe.
378         (check_redirect_output): New function: check whether redirection
379         has been requested and, if so, call redirect_output().
380         (logputs): Call check_redirect_output.
381         (logprintf): Ditto.
382         (debug_logprintf): Ditto.
383         (redirect_output): Print clearer messages.
384
385         * main.c (redirect_output_signal): Don't call
386         redirect_output_signal directly.  Instead, call
387         log_request_redirect_output.
388
389         * utils.c (memfatal): Ditto.
390
391         * progress.c (display_image): Use it.
392
393         * log.c (log_set_save_context): New function: allow the caller to
394         turn off saving log context lines.
395
396 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
397
398         * host.c (address_list_set_faulty): Uncomment a sanity check.
399
400 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
401
402         * utils.c (long_to_string): Return a pointer after where the
403         number ends.
404         (long_to_string): Rename to number_to_string.
405
406 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
407
408         * utils.c (path_simplify): Correctly handle the unlikely case that
409         b starts out as path + 1.
410
411 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
412
413         * utils.c (path_simplify): Rewrite, with better comments, and
414         without the use of strcpy to move overlapping blocks.
415
416 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
417
418         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
419         valid progress type before setting it.
420
421 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
422
423         * main.c (main): Remove stray debugging message.
424
425 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
426
427         * progress.c (create_image): Fix ETA padding when hours are prined.
428
429 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
430
431         * version.c: Wget 1.8 is released.
432
433 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
434
435         * url.c (reencode_string): Declare static.
436
437         * res.c (registered_specs): Declare static.
438
439         * progress.c (current_impl_locked): Declare static.
440
441         * log.c (flush_log_p): Declare static.
442         (needs_flushing): Ditto.
443
444         * http.c (digest_authentication_encode): Declare static.
445
446         * html-url.c (init_interesting): Declare static.
447
448         * host.c (host_name_addresses_map): Declare static.
449
450         * cookies.c (find_matching_chains): Declare static.
451
452         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
453         indicated by lint.
454
455         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
456
457         * host.c (address_list_set_faulty): Document that INDEX is
458         currently unused.
459
460         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
461
462 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
463
464         * version.c: Wget 1.8-pre2 is released.
465
466 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
467
468         * progress.c (progress_handle_sigwinch): Set up the signal again.
469
470         * utils.c: Include <sys/termios.h>, where Solaris defines
471         TIOCGWINSZ.
472
473         * progress.c (bar_create): Don't use the last column on the screen.
474         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
475         only until it exceeded them.
476
477 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
478
479         * version.c: Wget 1.8-pre1 is released.
480
481 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
482
483         * progress.c (progress_create): Make sure that, when the output is
484         redirected, the progress implementation gets changed to the
485         fallback one.
486         (bar_set_params): Set current_impl_locked to 1 when "force" is
487         specified.
488         (progress_create): Don't change the progress implementation if
489         current_impl_locked is non-zero.
490
491         * main.c (redirect_output_signal): Call
492         progress_schedule_redirect.
493
494         * progress.c (progress_schedule_redirect): New function.
495
496 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
497
498         * log.c (logvprintf): Restructure to allow being called multiple
499         times.
500         (logprintf): Call logvprintf in a loop.
501         (debug_logprintf): Ditto.
502
503 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
504
505         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
506         setting egd_file it to empty string.
507
508         * main.c (main): Change the option name from --sslegdsock to
509         --egd-file.
510
511 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
512
513         * gen_sslfunc.c (ssl_init_prng): Make the printed message
514         translatable.
515
516 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
517
518         * url.c (scheme_disable): New function.
519
520         * main.c (main): Call ssl_init_prng from here rather than from
521         init_ssl, so that it has a chance to disable support for https
522         before a URL has been resolved.
523
524         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
525         failed.
526         (ssl_init_prng): Disable support for https if seeding the PRNG
527         fails.
528
529 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
530
531         * utils.c (read_whole_line): Handle lines beginning with \0.
532
533 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
534
535         * recur.c (convert_all_links): Guard against duplicates in
536         downloaded_html_files.
537         (register_download): Don't invalidate similar-looking URLs.
538         (match_except_index): New function.
539
540 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
541
542         * utils.c (path_simplify): Document with test cases.
543
544 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
545
546         * gen_sslfunc.c: Ditto.
547
548         * rbuf.c: Include <string.h>.
549
550 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
551
552         * recur.c (retrieve_tree): Check whether the URL was already
553         downloaded before downloading it again.
554         (descend_child_p): Renamed to download_child_p.
555         (register_download): When one URL is downloaded to a file already
556         "owned" by another URL, delete all references that map any URL to
557         that file.
558         (register_delete_file): New function.
559         (retrieve_tree): Use it after deleting a file.
560
561         * url.c (url_parse): Re-canonicalize the URL also if the path is
562         empty, so that e.g. "http://www.server.com" ->
563         "http://www.server.com/".
564         (lowercase_str): Use ISUPPER instead of !ISLOWER.
565
566         * retr.c (retrieve_url): Use the canonical URL form when calling
567         register_download().
568
569 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
570
571         * snprintf.c (dopr): Use `unsigned int' as the second argument to
572         va_arg when casting to `unsigned short' is intended.
573
574 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
575
576         * gen_sslfunc.c: on windows provide ssl crypto random 
577           initialization through RAND_screen(); could possibly
578           be not enough for strong ssl communication (see the 
579           relevant manual page from the openssl package).
580
581 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
582
583         * url.c (local_quote_string): Reenable quoting of question marks,
584         but only when `--html-extension' is used.
585
586 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
587
588         * version.c: Wget 1.8-beta3 is released.
589
590 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
591
592         * snprintf.c (dopr): Cast the result of va_arg to short int and
593         short unsigned int where these types are expected to be used.
594
595 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
596
597         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
598         with `int' when using it as the second argument to `va_arg'.
599
600 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
601
602         * host.c (address_list_new_one): New function.
603         (lookup_host): Use it.
604
605 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
606
607         * host.c (lookup_host): Don't initialize TMPSTORE directly because
608         it's not legal C.
609
610 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
611
612         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
613         the socket data.
614
615         * ftp.c: Ditto.
616
617         * http.c: No need to declare h_errno.
618
619         * host.c: Declare h_errno.
620
621 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
622
623         * utils.c (file_merge): If BASE doesn't contain a slash, just
624         return a copy of FILE.
625
626 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
627
628         * version.c: Wget 1.8-beta2 is released.
629
630 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
631
632         * ftp.c (getftp): When PWD fails, assume "/".
633
634         * ftp-basic.c (ftp_syst): Fix indentation.
635
636 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
637
638         * url.c (get_urls_file): If opt.base_href is specified, merge each
639         URL with the base.
640
641 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
642
643         * main.c (print_help): Don't document the removed `-nh'.
644
645 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
646
647         * url.c (url_full_path): Document better.
648
649         * http.c (gethttp): Use the full path when creating digest
650         authorization.
651
652 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
653
654         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
655         '/'.
656
657 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
658
659         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
660         PREFIX does.
661
662 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
663
664         * cookies.c (check_domain_match): Reimplement to match Netscape's
665         "preliminary specification" for cookies.
666
667 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
668
669         * url.c (replace_attr_refresh_hack): New function.
670         (convert_links): Call replace_attr_refresh_hack for Refresh
671         links.  It will add the "TMOUT; URL=" junk before the link.
672
673         * html-url.c (collect_tags_mapper): Set ID to the ID of the
674         "content" attribute, not "http-equiv".
675         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
676         instead, store the information that this entry belongs to a
677         "refresh" link.
678
679 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
680
681         * version.c: Wget 1.8-beta1 is released.
682
683 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
684
685         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
686         depth by more than one.
687
688 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
689
690         * retr.c (retrieve_url): Don't allow more than 20 redirections.
691
692 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
693
694         * recur.c (retrieve_tree): Skip the non-inline entries when
695         enqueuing the children of a leaf HTML node in -p mode.
696         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
697         "inline".
698
699         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
700         (collect_tags_mapper): When an entry is "inline", mark it as such.
701
702         * recur.c (descend_url_p): Fix test when checking for
703         acceptance/rejection rules.
704
705 2001-10-31 Daniel BODEA <dali@dali-designs.com>
706
707         * netrc.c (search_netrc): When slack_default is 0, still look for
708         an account with matching password, just not the "default account".
709         HTTP Authorization using .netrc should now work as expected.
710
711 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
712
713         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
714         test_socket_open fails.
715
716 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
717
718         * progress.c (display_image): Just print one CR to reset the
719         cursor position.
720
721 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
722
723         * init.c: New command `ssl_egd_sock'.
724
725         * main.c (main): New option `--sslegdsock'.
726
727         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
728
729 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
730
731         * cmpt.c (memmove): Include a simple memmove implementation.
732
733 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
734
735         * headers: Guard against header files being included twice.
736
737 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
738
739         * gen-md5.c: Use unsigned char * as the buffer argument to
740         gen_md5_update.
741
742 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
743
744         * connect.h: Declare select_fd.
745
746 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
747
748         * recur.c (descend_url_p): When resolving no_parent, compare with
749         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
750         wouldn't be followed, although the download started from /a/.
751
752 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
753
754         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
755         MS VC; somebody with Borland compiler please check and provide
756         patch if possible;
757
758         * cmpt.c: provided a usleep emulation.
759
760 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
761
762         * host.c (address_list_new): Initialize al->faulty.
763
764 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
765
766         * http.c (http_process_range): Accept the broken output of
767         "JavaWebServer/1.1.1".
768
769 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
770
771         * progress.c (dot_set_params): If PARAMS is unspecified, use
772         dot_style, if available.
773
774         * init.c: Ditto.
775
776         * main.c (main): Resurect --dot-style.
777
778         * progress.c (dot_finish): Print the quantity if we're left at the
779         beginning of a row.
780
781 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
782
783         * cmpt.c (random): Removed.
784
785         * retr.c (sleep_between_retrievals): Use the more portable rand()
786         instead of random().
787
788 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
789
790         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
791         prevent seg fault.
792
793 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
794
795         * connect.c (connect_to_many): Use address_list_set_faulty to
796         prevent the faulty address from being reused.
797
798         * host.c (address_list_set_faulty): New function.
799         (address_list_get_bounds): New function, instead of
800         address_list_count.
801
802 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
803
804         * url.c (convert_links): Don't translate %d-%d.
805
806         * main.c (print_help): Remove stray HAVE_RANDOM code.
807
808 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
809
810         * ftp.c (getftp): Improve output after sending PASV.  Don't
811         attempt to "look up" the IP address we already know; call
812         connect_to_one directly.
813
814 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
815
816         * progress.c: Change the default progress implementation to "bar".
817
818 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
819
820         * progress.c (bar_create): Print two newlines.
821
822 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
823
824         * cmpt.c (random): New function, a simple-minded replacement for
825         random() on systems that don't have it.
826
827 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
828
829         * config.h.in: Put a HAVE_USLEEP stub.
830
831         * cmpt.c (usleep): Replacement implementation of usleep using
832         select.
833
834         * init.c: New option init_rate.
835
836         * main.c (main): New option --limit-rate.
837
838         * retr.c (limit_bandwidth): New function.
839         (get_contents): Call it to limit the bandwidth used when
840         downloading.
841
842         * progress.c (dot_update): Would print the wrong download speed on
843         rows other than the first one when the download was continued.
844         (dot_finish): Ditto.
845
846 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
847
848         * http.c (gethttp): fix undeclared variable 'err' when compiled
849         with HAVE_SSL.
850
851 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
852
853         * progress.c: Don't allocate new timers; use the timing data
854         propagated from the caller.
855
856         * retr.c (get_contents): Allocate and use a timer.
857
858 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
859
860         * http.c (last_host_ip): Made into an address_list.
861         (invalidate_persistent): Release pc_last_host_ip.
862         (register_persistent): Use lookup_host.
863         (persistent_available_p): Check for equality of hosts using
864         address_list_match_all.  Call address_list_release.
865         (http_cleanup): New function.
866
867         * ftp.c (getftp): Use lookup_host and connect_to_many.
868
869         * http.c (gethttp): Use lookup_host and connect_to_many.
870
871         * connect.c (make_connection): Removed.
872         (connect_to_one): New function.
873         (connect_to_many): Ditto.
874         (set_connection_host_name): Ditto.
875
876         * host.c (lookup_host): New function; new return type.
877         (address_list_new): New function.
878         (address_list_count): Ditto.
879         (address_list_copy_one): Ditto.
880         (address_list_delete): Ditto.
881         (address_list_release): Ditto.
882         (pretty_print_address): Ditto.
883
884 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
885
886         * recur.c (retrieve_tree): In case of followed redirection,
887         blacklist the pre-redirection URL.
888
889 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
890
891         * recur.c (descend_redirect_p): New function.
892         (retrieve_tree): Make sure redirections are not blindly followed.
893
894 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
895
896         * config.h.in: added HAVE_RANDOM.
897
898         * options.h: added random_wait to struct options.
899
900         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
901         for --random-wait.
902
903         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
904         implementation of random wait times.
905
906         * init.c (commands): added "randomwait" keyword.
907
908 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
909
910         * recur.c (descend_url_p): Be more conservative with blacklisting
911         URLs.
912         (convert_all_links): Print how many files have been converted, and
913         how long it took.
914
915         * progress.c (create_image): Place the number of downloaded bytes
916         right after the progress bar.
917
918         * utils.c (suffix): Return a pointer into the string.
919
920 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
921
922         * url.c (convert_links): Handle CO_NULLIFY_BASE.
923
924         * recur.c (retrieve_tree): Ignore download-ignorable children.
925         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
926
927         * html-url.c (handle_link): Return the newly created urlpos.
928         (collect_tags_mapper): When dealing with BASE, store the base
929         reference and mark it as download-ignorable.
930
931 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
932
933         * url.c (convert_links): Attempt to quote '?' as "%3F" when
934         linking to local files.  Given up on the attempt, as it breaks
935         local browsing.
936
937 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
938
939         * main.c (private_initialize): Removed.
940         (main): Don't call private_initialize.
941
942         * http.c: Call lookup_host.
943
944         * host.c (host_init): Removed.
945         (add_host_to_cache): Initialize host_name_address_map here, on
946         demand.
947         (ngethostbyname): Commented out.
948
949         * connect.c (make_connection): Remove dead code; use lookup_host.
950
951         * host.c (store_hostaddress): Renamed to lookup_host and reversed
952         the args.
953         Removed host_address_name_map and host_slave_master_map.
954
955 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
956
957         * progress.c (dot_create): Align the "[ skipping ... ]" string
958         with the dots.
959
960         * retr.c (rate): Split into two functions: calc_rate and
961         retr_rate.
962
963         * progress.c (create_image): Draw a dummy progress bar even when
964         total size is unknown.
965         (display_image): Place the text cursor at the end of the "image".
966
967 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
968
969         * url.c (reencode_string): Use unsigned char, not char --
970         otherwise the hex digits come out wrong for 8-bit chars such as
971         nbsp.
972         (lowercase_str): New function.
973         (url_parse): Canonicalize u->url if needed.
974         (get_urls_file): Parse each URL, and return only the valid ones.
975         (free_urlpos): Call url_free.
976         (mkstruct): Add :port if the port is non-standard.
977         (mkstruct): Append the query string to the file name, if any.
978         (urlpath_length): Use strpbrk_or_eos.
979         (uri_merge_1): Handle the cases where LINK is an empty string,
980         where LINK consists only of query, and where LINK consists only of
981         fragment.
982         (convert_links): Count and report both kinds of conversion.
983         (downloaded_file): Use a hash table, not a list.
984         (downloaded_files_free): Free the hash table.
985
986         * retr.c (retrieve_from_file): Ditto.
987
988         * main.c (main): Call either retrieve_url or retrieve_tree
989         for each URL, not both.
990
991         * retr.c (register_all_redirections): New function.
992         (register_redirections_mapper): Ditto.
993         (retrieve_url): Register the redirections.
994         (retrieve_url): Make the string "Error parsing proxy ..." 
995         translatable.
996
997         * res.c (add_path): Strip leading slash from robots.txt paths so
998         that the path representations are "compatible".
999         (free_specs): Free each individual path, too.
1000         (res_cleanup): New function.
1001         (cleanup_hash_table_mapper): Ditto.
1002
1003         * recur.c (url_queue_new): New function.
1004         (url_queue_delete): Ditto.
1005         (url_enqueue): Ditto.
1006         (url_dequeue): Ditto.
1007         (retrieve_tree): New function, replacement for recursive_retrieve.
1008         (descend_url_p): New function.
1009         (register_redirection): New function.
1010
1011         * progress.c (create_image): Cosmetic changes.
1012
1013         * init.c (cleanup): Do all those complex cleanups only if
1014         DEBUG_MALLOC is defined.
1015
1016         * main.c: Removed --simple-check and the corresponding
1017         simple_host_check in init.c.
1018
1019         * html-url.c (handle_link): Parse the URL here, and propagate the
1020         parsed URL to the caller, who would otherwise have to parse it
1021         again.
1022
1023         * host.c (xstrdup_lower): Moved to utils.c.
1024         (realhost): Removed.
1025         (same_host): Ditto.
1026
1027 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1028
1029         * utils.c (path_simplify): Preserver the (non-)existence of
1030         leading slash.  Return non-zero if changes were made.
1031
1032 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1033
1034         * progress.c (bar_update): Don't modify bp->total_length if it is
1035         zero.
1036
1037 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1038
1039         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1040         print the correct error message rather than "UNKNOWN".
1041
1042 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1043
1044         * progress.c (bar_finish): If the timer didn't record any time
1045         since the download beginning, fake 1ms.
1046
1047 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1048
1049         * recur.c (recursive_retrieve): Fix typo.
1050
1051 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1052
1053         * progress.c (create_image): Don't translate "%ld ".
1054
1055 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1056
1057         * progress.c (bar_set_params): Allow the user to force the use of
1058         the bar.
1059
1060 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1061
1062         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1063
1064 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1065
1066         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1067         and consistency with bar_*.
1068         (print_download_speed): Get rid of the unneeded '@' character.
1069         (create_image): Fix download rate geometry.
1070
1071         * progress.c (print_elapsed): Remove spurious space.
1072         (print_elapsed): Renamed to print_download_speed, since that's
1073         what it does.
1074
1075 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1076
1077         * progress.c (bar_update): If the downloaded amount becomes larger
1078         than the expected amount, adjust the expected amount accordingly.
1079
1080 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1081
1082         * utils.c (determine_screen_width): New function.
1083
1084         * main.c (main): New option `--progress=TYPE'.
1085         (main): Implement compatibility with the old option `--dot-style'.
1086
1087         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1088         dp_set_params.
1089         (cmd_spec_progress): New function.
1090
1091         * retr.c (get_contents): Use the progress_* functions instead of
1092         the old show_progress().
1093         (show_progress): Removed.
1094         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1095         etc.
1096
1097         * progress.c (set_progress_implementation): New function.
1098         (valid_progress_implementation_p): Ditto.
1099         (progress_create): Ditto.
1100         (progress_update): Ditto.
1101         (progress_finish): Ditto.
1102         (dp_create): Ditto.
1103         (dp_update): Ditto.
1104         (dp_finish): Ditto.
1105         (dp_set_params): Ditto.
1106         (print_elapsed): Ditto.
1107
1108 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1109
1110         * retr.c (show_progress): Use it.
1111
1112         * log.c (log_set_flush): New function.
1113
1114 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1115
1116         * utils.c (path_simplify): Don't remove trailing slashes.
1117
1118         * ftp.c (ftp_get_listing): Use it.
1119
1120         * utils.c (file_merge): New function.
1121
1122         * url.c (opt_url): Removed.
1123
1124         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1125
1126         * main.c (main): Use xfree(), not free().
1127
1128         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1129
1130         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1131         internally.
1132
1133         * config.h.in: Include a stub for HAVE_STRPBRK.
1134
1135         * cmpt.c (strpbrk): Include a replacement for systems without
1136         strpbrk().
1137
1138         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1139
1140         * url.c (url_set_dir): New function.
1141         (url_set_file): Ditto.
1142
1143         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1144         parser makes the URL "params" available, so we can do that in this
1145         function.
1146
1147         * retr.c: Ditto.
1148
1149         * ftp.c: Ditto; pass the local file information in `ccon'.
1150
1151         * http.c: Get rid of the ugly kludge that had URL being replaced
1152         with the proxy URL when proxy retrieval was requested.  Use a
1153         separate parameter to http_loop and gethttp for the proxy URL.
1154
1155         * http.c: Changed to reflect the fact that local file, proxy, and
1156         referer information are no longer stored in struct url.  The local
1157         file information is passed in `struct hstat' now.
1158
1159         * url.c: Reworked URL parsing to be more regular.  Reencode the
1160         URL using reencode_string.
1161         Removed non-URL-related information from struct url.  This
1162         includes fields `proxy', `local', and `referer'.
1163
1164 2001-11-22  Jochen Hein  <jochen@jochen.org>
1165
1166         * main.c (main): Split the copyright notice for easier
1167         translation.
1168
1169 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
1170
1171         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
1172           command to server to request file size.
1173         * ftp.h (ftp_size): Export it.
1174         * ftp.c (getftp): Use new ftp_size function if restoring
1175           transfer of a file with unknown size.
1176
1177 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1178
1179         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
1180
1181 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1182
1183         * url.c (getproxy): Handle URL shorthands.
1184
1185 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1186
1187         * main.c: Remove --wait / --waitretry backwards compatibility
1188         code.
1189         
1190 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1191
1192         * main.c (main): Use it.
1193
1194         * url.c (rewrite_url_maybe): New function.
1195
1196 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1197
1198         * url.c: Clean up handling of URL schemes.
1199
1200 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1201
1202         * url.c: Get rid of `protostrings'.
1203         (skip_proto): Don't use protostrings.
1204         (has_proto): Ditto.
1205
1206 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1207
1208         * Makefile.in: Conditionally compile getopt.o.
1209
1210 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1211
1212         * md5.h: Renamed to gnu-md5.h.
1213
1214         * md5.c: Renamed to gnu-md5.c.
1215
1216         * http.c: Ditto.
1217
1218         * ftp-opie.c: Use the new macros.
1219
1220         * sysdep.h: Define md5-related macros.
1221
1222         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
1223         depending on which md5 implementation is used.
1224
1225 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1226
1227         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
1228         the compiler.
1229
1230 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1231
1232         * http.c (gethttp): Print the whole response line when printing
1233         headers is requested.
1234
1235 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1236
1237         * res.c: New file.  Implement all RES-related code here.
1238
1239 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1240
1241         * version.c: Wget 1.7.1 is released.
1242
1243 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1244
1245         * headers.c (header_extract_number): Ignore trailing whitespace.
1246
1247 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
1248
1249         * html-url.c (collect_tags_mapper): Fix bug converting links
1250         with -k option for tags with multiple link attributes by
1251         handling links in the order they appear.
1252
1253 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
1254
1255         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
1256           the call to the 'rate' function by moving it past the error
1257           checking for the 'getftp' function return value.
1258
1259 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1260
1261         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
1262         '\"'.  Different compilers' assert macros are broken in different
1263         ways.
1264
1265 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
1266
1267         * http.c (gethttp): print debug output for errors occuring during
1268         the ssl handshake.
1269
1270 2001-11-16  Chris Seawood  <cls@seawood.org>
1271
1272         * init.c: Ditto.
1273
1274         * host.c: Ditto.
1275
1276         * connect.c: Ditto.
1277
1278         * sysdep.h: Support compilation under BEOS.
1279
1280 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1281
1282         * url.c (url_equal): Fix a memory leak when parseurl returns an
1283         error on the second URL. Also, since url_equal is not used at the
1284         moment, do not compile it.
1285
1286         * url.h: Ditto for the prototype of url_equal.
1287
1288 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1289
1290         * html-parse.c (map_html_tags): Support XML-style empty tags.
1291
1292 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1293
1294         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
1295         loop condition because we're no longer setting SIZEVAR here.
1296
1297 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1298
1299         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
1300         call because it needs the old value.
1301
1302 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1303
1304         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
1305         an attribute name.
1306
1307 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1308
1309         * url.c (url_filename): Make sure that slashes that sneak in to
1310         u->file via query string get protected.
1311         (file_name_protect_query_string): New function.
1312
1313 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1314
1315         * recur.c (recursive_retrieve): Also check undesirable_urls with
1316         canonicalized URL.
1317
1318 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1319
1320         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1321         one.
1322
1323 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1324
1325         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1326         define it.
1327
1328 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1329
1330         * ftp.h: Provide correct prototype for ftp_parse_ls().
1331
1332 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1333
1334         * version.c: Wget 1.7 is released.
1335
1336 2001-06-03  Karl Eichwalder  <ke@suse.de>
1337
1338         * ftp-ls.c (ftp_parse_ls): Fix typo.
1339
1340 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1341
1342         * all: Update copyright information.
1343
1344 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1345
1346         * http.c (gethttp): Indicate that the continued download failed
1347         for *this* file.
1348
1349 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1350
1351         * version.c: Wget 1.7-pre1 is released.
1352
1353 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1354
1355         * version.c: Updated version to 1.7-pre1.
1356
1357 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1358
1359         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1360
1361 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1362
1363         * http.c (gethttp): Use real URL data for cookies, not the proxy
1364         stuff.
1365
1366 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1367
1368         * main.c (print_help): Document `--no-http-keep-alive'.
1369
1370         * utils.c (numdigit): Handle negative numbers *correctly*.
1371
1372         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
1373         than the confusing "unsigned".
1374
1375         * utils.c (string_set_contains): Renamed from string_set_exists.
1376
1377         * hash.c (hash_table_contains): Renamed from hash_table_exists.
1378
1379         * cookies.c: Move case-insensitive hash tables to hash.c.
1380
1381 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1382
1383         * http.c (gethttp): Before concluding that the file is already
1384         fully retrieved, make sure that the file existed and `Range' was
1385         actually requested.
1386
1387 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1388
1389         * cookies.c (eliminate_dups): New function.
1390         (build_cookies_request): Use it.
1391         (build_cookies_request): Set chain_store_size after reallocating
1392         all_chains.
1393         (check_domain_match): Annotated for easier future debugging.
1394         (store_cookie): In the debug message, print whether the cookie is
1395         permanent.
1396
1397 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1398
1399         * http.c (http_loop): Reset no_truncate before deciding whether to
1400         set it.
1401         (gethttp): Further clarify "-c conflicts with existing file" error
1402         message, based on input from Herold Heiko.
1403
1404 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
1405
1406         * http.c (http_loop): If restval is set, set no_truncate to 1
1407         unconditionally.
1408
1409 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1410
1411         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
1412         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
1413         (ftp_parse_vms_ls): Ditto.
1414
1415 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1416
1417         * init.c (cmd_address): Zero SIN before using it; apparently
1418         needed on *BSD.
1419
1420 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1421
1422         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
1423         empty.
1424
1425 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1426
1427         * main.c (main): Make `--cookies' respect its argument.
1428
1429 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1430
1431         * main.c (main): Removed undocumented option `--email-address'.
1432
1433         * netrc.c: Use the latest read_whole_line.
1434
1435         * init.c (defaults): Set opt.ftp_pass to "-wget@".
1436
1437         * mswindows.c (pwd_cuserid): Ditto.
1438
1439         * utils.c (pwd_cuserid): Removed.
1440
1441         * host.c (ftp_getaddress): Removed.
1442
1443 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1444
1445         (http_loop): Allocate space for filename_plus_orig_suffix with
1446         alloca; this is more efficient and removes the need to free it
1447         before each and every return.
1448
1449 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1450
1451         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
1452         unneeded because the file is already there and fully downloaded,
1453         and -c is specified.
1454         (http_loop): Handle RETRUNNEEDED.
1455
1456         * wget.h (uerr_t): New value RETRUNNEEDED.
1457
1458         * http.c (http_loop): Set no_truncate for files that both exist
1459         and are non-empty.
1460         (gethttp): Consider the download finished when restval >= contlen,
1461         not only when restval==contlen.
1462         (gethttp): Handle redirection before giving up due to -c.
1463         (gethttp): Clarify error message which explains that -c will not
1464         truncate the file.
1465         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
1466         the stuff that needs freeing and release the socket.
1467
1468 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1469
1470         * main.c (print_help): Wget booleans accept "off", not "no".
1471
1472 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1473
1474         * http.c (http_loop): If allow_cache is zero, always disable
1475         caching, not only when retrieving through proxy.
1476
1477         * init.c: Ditto.
1478
1479         * options.h (struct options): Rename proxy_cache to allow_cache.
1480
1481 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1482
1483         * http.c (mktime_from_utc): Improve documentation.
1484         (http_atotm): Put format strings into a separate array.
1485
1486 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1487
1488         * safe-ctype.h: Instead of throwing #error when isalpha is
1489         defined, redefine it to something that will throw a compile-time
1490         error if actually *used*.  Do the same for the rest of the
1491         standard C macros.
1492
1493 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1494
1495         * url.c (getproxy): Ignore empty proxy vars.
1496
1497 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1498
1499         * http.c (http_loop): Would load cookies every time.
1500
1501         * cookies.c (load_cookies): Handle cookies whose values contain
1502         embedded spaces.
1503
1504 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1505
1506         * utils.c: Define each DIGITS_* in one line.
1507
1508 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
1509
1510         * http.c (http_atotm): Initialize t.tm_isdst to 0.
1511         (mktime_from_utc): Prevent mktime() from having discontinuities at
1512         DST transition points.
1513
1514 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1515
1516         * html-url.c (get_urls_html): Fix documentation.
1517
1518 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1519
1520         * url.c (UNSAFE_CHAR): Reimplement using a static table.
1521         (url_init): Removed.
1522         (init_unsafe_char_table): Removed.
1523
1524 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1525
1526         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
1527
1528 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1529
1530         * utils.c: Document timer functions.
1531
1532         * retr.c (rate): Use it.
1533         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
1534
1535         * utils.c (wtimer_granularity): New function.
1536
1537 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1538
1539         * retr.c (show_progress): Ditto.
1540
1541         * ftp.c (getftp): Ditto.
1542
1543         * http.c (gethttp): Use new timer functions.
1544
1545         * utils.c (wtimer_allocate): New function.
1546         (wtimer_new): Ditto.
1547         (wtimer_delete): Ditto.
1548         (wtimer_reset): Ditto.
1549         (wtimer_elapsed): Ditto.
1550
1551 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1552
1553         * utils.c (long_to_string): New, faster version.  Favors smaller
1554         numbers; much of the calculation is now done at compile-time.
1555
1556 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1557
1558         * utils.c (numdigit): Handle negative numbers.
1559
1560 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1561
1562         * retr.c (show_progress): Print the download rate even when the
1563         percentages are not available.
1564
1565 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
1566
1567         * ftp.c (getftp): Adjust expected_bytes if the length is
1568         authoritative.
1569
1570 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1571
1572         * url.c: Don't declare `construct'.
1573
1574         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
1575         mappings to new locations.
1576         (hash_table_new): Make resize_threshold a field in the hash table,
1577         so we don't have to recalculate it in each hash_table_put.
1578         (grow_hash_table): Update resize_threshold.
1579         (MAX): Remove unused macro.
1580         (prime_size): Made static.
1581
1582 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1583
1584         * retr.c (retrieve_url): Call uri_merge, not url_concat.
1585
1586         * html-url.c (collect_tags_mapper): Call uri_merge, not
1587         url_concat.
1588
1589         * url.c (mkstruct): Use encode_string instead of xstrdup followed
1590         by URL_CLEANSE.
1591         (path_simplify_with_kludge): Deleted.
1592         (contains_unsafe): Deleted.
1593         (construct): Renamed to uri_merge_1.
1594         (url_concat): Renamed to uri_merge.
1595
1596 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1597
1598         * url.c (str_url): Use encode_string instead of the unnecessary
1599         CLEANDUP.
1600         (encode_string_maybe): New function, returns input string if no
1601         encoding is needed.
1602         (encode_string): Call encode_string_maybe to do the dirty work,
1603         xstrdup if no work needed.
1604
1605 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1606
1607         * wget.h (XDIGIT_TO_xchar): Define here.
1608
1609         * url.c (decode_string): Use new name.
1610         (encode_string): Ditto.
1611
1612         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
1613         (dump_hash): Use new name.
1614
1615         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
1616         XDIGIT_TO_XCHAR respectively.
1617
1618 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1619
1620         * init.c: Include cookies.h.
1621
1622         * cookies.h: Declare cookies_cleanup.
1623
1624         * cookies.c (check_domain_match): Remove unused variable.
1625         (save_cookies): Remove extraneous argument from debug statement.
1626
1627         * host.c (same_host): Don't call skip_url.
1628
1629         * url.c (skip_url): Removed.  Removed its calls from various
1630         functions in url.c.
1631
1632 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1633
1634         * cookies.c (unsigned_string_hash): Use the new code in
1635         string_hash as reference.
1636
1637         * hash.c (hash_table_map): Allow deletion and change of the
1638         element processed by MAPFUN.
1639         (string_hash): Use the function from glib.
1640
1641 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1642
1643         * config.h.in: Include #undef stub.
1644
1645         * hash.c (hash_table_remove): Rewrite to actually clear deleted
1646         entries instead of just marking them as deleted.
1647
1648 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1649
1650         * hash.h: Declare hash_table_get_pair and hash_table_count.
1651
1652 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1653
1654         * cookies.c: Declare http_atotm.
1655
1656 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1657
1658         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
1659         permissions.  A compiler that doesn't accept octal constants is
1660         seriously broken and shouldn't be used -- octal constants were
1661         present in K&R C!
1662
1663 2001-01-20  Karl Eichwalder  <ke@suse.de>
1664
1665         * Makefile.in: Provide and use DESTDIR according to the Coding
1666         Standards.
1667
1668 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1669
1670         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
1671         specification.
1672
1673 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
1674
1675         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
1676         because that strips the *leading* slash, thus forcing relative
1677         FTP retrieval.
1678
1679 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1680
1681         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
1682         notation for VMS servers. 
1683         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
1684         odir is an empty string.
1685
1686 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1687
1688         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
1689         effective. Suggested by Edward J. Sabol.
1690
1691 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1692
1693         * cookies.c (build_cookies_request): Use and sort cookies from all
1694         matching domains.
1695         (build_cookies_request): Check for duplicates before generating
1696         the `Cookies' header.
1697
1698         * main.c (main): Don't load cookies here.
1699         (main): Make loadcookies and savecookies call the correct command.
1700
1701         * http.c (http_loop): Load cookies on-demand.
1702
1703 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1704
1705         * http.c (gethttp): Fix indentation of SSL ifdef.
1706
1707 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1708
1709         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
1710         that hack is no longer necessary.
1711         (getftp): Prepend initial directory to *non*-absolute u->dir's.
1712
1713 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1714
1715         * init.c (cmd_file): New function.
1716         (enable_tilde_expansion): New variable.
1717         (run_wgetrc): Use it.
1718         (cmd_file): Use it.
1719
1720 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1721
1722         * init.c: Include cookie-related options.
1723
1724         * main.c (main): Include cookie-specific options.
1725         (main): Load cookies before download is finished.
1726         (main): Save cookies when done.
1727
1728         * http.c (gethttp): Process the `Set-Cookie' header.
1729         (gethttp): Include cookies in the response.
1730
1731         * cookies.c: New file.
1732
1733 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1734
1735         * utils.c (datetime_str): New function.
1736
1737 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1738
1739         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
1740         12:01PM == 00:01, which was obviously wrong. Taken care of this
1741         anomaly.
1742
1743         * ChangeLog: Removed an excess conflict marker. Reformatted the
1744         entry by Philipp Thomas from 2001-03-09.
1745
1746         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
1747         between 0 and 23. Elminate unused variable `sec'.
1748
1749 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1750
1751         * hash.c (hash_table_count): New function.
1752
1753 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1754
1755         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
1756         Digital Unix cc.
1757
1758 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1759
1760         * config.h.in: Oops, do the namespace tweaks only on systems we
1761         know about.
1762
1763 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1764
1765         * hash.c: Include <string.h>.
1766
1767 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1768
1769         * config.h.in: Define "compilation environment" options that work
1770         under Linux and Solaris.  To be reviewed on other OS'es.
1771
1772 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1773
1774         * http.c (gethttp): Prepend literal newline with `\n\'.
1775
1776 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1777
1778         * sysdep.h: Don't define VERY_LONG_FORMAT.
1779
1780         * utils.c (very_long_to_string): New function.
1781         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
1782
1783 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
1784
1785         * url.c (parse_uname): Would run past the end of the string if the
1786         username was present, but the URL did not contain a slash, e.g.
1787         http://foo:bar@myhost.
1788
1789 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
1790
1791         * http.c (http_atotm): Use %A instead of %a to match full
1792         weekday.  (On most systems there is no difference.)
1793
1794 2001-04-03  Paul Bludov  <paul@ozero.net>
1795
1796         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
1797         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
1798         leak.
1799         (ws_mypath): Use GetModuleFileName instead of argv[0].
1800         (ws_startup): Use data.wVersion for comparison.
1801
1802 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1803
1804         * http.c (http_loop): Ditto.
1805
1806         * ftp.c (ftp_loop_internal): Made the check whether to continue
1807         retrieval `-O'-friendly.
1808
1809 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1810
1811         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
1812         they will be handled as whitespace.
1813         (parse_netrc): Correctly handle lines that end with whitespace.
1814
1815 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1816
1817         * retr.c (retrieve_url): New variable global_download_count used
1818         to identify first retrieval.
1819
1820         * ftp.c (getftp): Ditto.
1821
1822         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
1823
1824 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1825
1826         * init.c (cmd_address): Heap-allocate the address that gets stored
1827         to CLOSURE.  Old code would simply assign an address on the stack.
1828
1829 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
1830
1831         * ftp.c (ftp_get_listing): Propagate error status.
1832         (ftp_retrieve_glob): Use it.
1833         (ftp_loop): Ditto.
1834
1835 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
1836
1837         * main.c (main): Add -C to the string that is the third arg to
1838         getopt_long().
1839
1840 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1841
1842         * ftp.c (getftp): Don't start the download from scratch if `-c'
1843         was specified, but the file is already fully downloaded.
1844
1845         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
1846         specified and the server doesn't support continued download.
1847         (gethttp): Don't start the download from scratch if `-c' was
1848         specified, but the file is already fully downloaded.
1849
1850 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1851
1852         (recursive_retrieve): Don't clear the hash tables at this point at
1853         all; it interferes with the normal operation of register_download.
1854
1855 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1856
1857         * recur.c (recursive_retrieve): Clear the hash tables only when
1858         they are defined.
1859
1860 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1861
1862         * http.c (gethttp): Make sure the socket is closed with
1863         CLOSE_INVALIDATE before we have drained the body.
1864
1865 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1866
1867         * retr.c (retrieve_url): Call register_download() for downloaded
1868         files and register_html() for downloaded HTML files.
1869
1870         * recur.c (register_download): New function; register here that a
1871         file has been downloaded, rather than in recursive_retrieve().
1872         (register_html): New function; enqueue the location of HTML files
1873         here rather than in recursive_retrieve().
1874
1875 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1876
1877         * main.c (print_help): Use multiple fputs instead of a single ugly
1878         printf().
1879         (main): Consistently assign numbers >128 to options without a
1880         corresponding character.
1881
1882 2001-03-09  Philipp Thomas  <pthomas@suse.de>
1883
1884         * safe-ctype.h: New file. Locale independent ctype.h replacement
1885         taken from libiberty.
1886
1887         * safe-ctype.c: New file. Tables for above.
1888
1889         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
1890         safe-ctype$o.
1891
1892         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
1893         isspace.
1894
1895         * ftp-basic.c: Don't include ctype.h.
1896
1897         * ftp-ls.c: Likewise.
1898
1899         * ftp.c: Likewise.
1900
1901         * headers.c: Likewise.
1902
1903         * host.c: Likewise.
1904
1905         * html-parse.c: Likewise.
1906
1907         * html-url.c: Likewise.
1908
1909         * http.c: Likewise.
1910
1911         * init.c: Likewise.
1912
1913         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
1914
1915         * netrc.c: Likewise.
1916
1917         * recur.c: Likewise.
1918
1919         * retr.c: Likewise.
1920
1921         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
1922         instead of isdigit.
1923
1924         * sysdep.h: Remove defines of ctype macros as they aren't needed
1925         for safe-ctype-h.
1926
1927         * url.c: Don't include ctype.h.
1928
1929         * utils.c: Likewise.
1930
1931         * wget.h: Include safe-ctype.h.
1932
1933 2001-03-27  Dan Harkless  <wget@harkless.org>
1934
1935         * Makefile.in: Moved top_builddir out of "User configuration
1936         section" of top Makefile and analogous spot in this one.
1937
1938 2001-03-17  Dan Harkless  <wget@harkless.org>
1939
1940         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
1941         Define top_builddir.  Link wget with libtool so the user doesn't
1942         have to supply a bunch of custom environment variables to 
1943         correctly link with the OpenSSL shared libraries.
1944
1945 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
1946
1947         * http.c (gethttp): skip :port in host header if it is the
1948         DEFAULT_HTTPS_PORT when using SSL.
1949
1950         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
1951         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
1952         rest of the code. 
1953         * url.h: Ditto
1954
1955 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
1956
1957         * retr.c (show_progress): Correctly calculate the number of bytes
1958         in the first line of the download that have been actually
1959         downloaded in this run.
1960
1961 2001-02-23  Dan Harkless  <wget@harkless.org>
1962
1963         * main.c (print_help): --help documentation for -N said it would
1964         re-download files if they had the _same_ timestamp on server.
1965         (print_help): -nr belongs in "FTP options" section of --help
1966         output, not "Recursive retrieval" section.  Alphabetized FTP
1967         options by long option name.
1968
1969 2001-02-16  Dan Harkless  <wget@harkless.org>
1970
1971         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
1972         that "httpsproxy" had been inserted into commands[] out of
1973         alphabetical order, causing "BUG: unknown command `httpuser'".
1974
1975 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1976
1977         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
1978         listing without correct permissons).
1979
1980         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
1981         FTP server. 
1982
1983         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
1984         shall be donwloaded only when it's newer than the local copy or
1985         when it has the same timeestamp but its size is different. ST_VMS
1986         and ST_MACOS as special cases that lie about file size. 
1987
1988         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
1989
1990         * Makefile.in: Removed dependency on ftpparse library due to unclear
1991         copyright issues and absence of any feedback to our queries. 
1992
1993         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
1994         copyright issues and absence of any feedback to our queries.   
1995         (ftp_parse_ls): Added a warning message when remote server system
1996         does not seem to be suported by wget. 
1997         (ftp_parse_vms_ls): New function for parsing VMS ftp
1998         server listing output.
1999         (clean_line): New function responsible for removing
2000         end-of-line characters from FTP listing texts.
2001
2002         * ftp.c (getftp): Global variables pwd and host_type are now
2003         member of the ccon structure under names ccon.id and ccon.rs. 
2004
2005         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2006         enum stype rs (remote system identification) and char *id (initial
2007         working directory), as suggested by Hrvoje.
2008
2009         * url.c (parse_uname): Added support for passwords containing '@'
2010         characters.
2011         (skip_uname): Ditto.
2012
2013 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2014
2015         * ftp.c (ftp_loop): Reset con.
2016
2017 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2018
2019         * url.c (parse_uname): Added support for passwords containing '@'
2020         characters.
2021         (skip_uname): Ditto.
2022
2023 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2024
2025         * url.c (parseurl): Debug-print u->ftp_type.
2026
2027 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2028
2029         * ftp.c (ftp_loop_internal): Disable padding.
2030         (getftp): Ditto.
2031
2032         * http.c (http_loop): Disable padding.
2033
2034         * retr.c (show_progress): Use it to enable padding.
2035
2036         * retr.c (rate): Optional parameter PAD for padding the rate.
2037
2038 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2039
2040         * retr.c (show_progress): Make sure that the last output line
2041         includes progress.
2042
2043 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2044
2045         * retr.c (show_progress): Print the download rate along with the
2046         percentages.
2047         Along with Anders Thorsby <anders@thorsby.dk>.
2048
2049 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2050
2051         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2052         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2053         net/if.h.
2054
2055 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2056
2057         * gen_sslfunc.c: verify_callback is now static
2058
2059         * gen_sslfunc.c (init_ssl): load certificate if specified
2060
2061         * gen_sslfunc.c (ssl_printerr): new function
2062
2063         * init.c: added new --sslcertfile and --sslcertkey switches
2064
2065         * main.c: ditto
2066
2067         * options.h: ditto
2068
2069         * http.c (gethttp): abort when init_ssl fails
2070
2071 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2072
2073         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2074
2075 2001-01-10  Dan Harkless  <wget@harkless.org>
2076
2077         * url.c (str_url): Clarified this function's comment header after
2078         Hrvoje answered my question on the list as to when hide != 1.
2079         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2080
2081 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2082
2083         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2084         Drazen Kacar <dave@arsdigita.com>.
2085         (conaddr): Ditto.
2086
2087 2001-01-09  Dan Harkless  <wget@harkless.org>
2088
2089         * html-url.c: A bunch of fixup of `--page-requisites'-related
2090         comments to reflect Hrvoje's changes to my code when transplanting
2091         it into this new file, to fix spelling mistakes, to clarify, etc.
2092
2093         * url.c (write_backup_file): Clarified a comment.
2094         (str_url): Henrik van Ginhoven pointed out on the list that we
2095         shouldn't give away the number of characters in the password by
2096         replacing each character with a 'x'.  Use "<password>" instead.
2097
2098         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2099         directories didn't work if logging in put you in a directory other
2100         than "/" is fixed now.  Removed the comment here warning of the bug.
2101
2102         * main.c (print_help): --continue's description was misleading.
2103         We don't "restart", we "resume".  Also, better to say
2104         "partially-downloaded file" rather than just "existing file".
2105
2106 2001-01-06  Dan Harkless  <wget@harkless.org>
2107
2108         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2109         the best way to go about my aim.  Removed them in favor of:
2110
2111         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2112
2113 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2114
2115         * url.c (replace_attr): New function, to be used by both
2116         TO_COMPLETE and TO_RELATIVE case in convert_links.
2117         (find_fragment): New function for finding URL fragments.
2118         (replace_attr): Better handle the case where the original string
2119         is not quoted.  Use find_fragment.
2120         (convert_links): Use replace_attr().
2121
2122 2000-12-31  Dan Harkless  <wget@harkless.org>
2123
2124         * ChangeLog: Since this flat file doesn't have multiple branches,
2125         looking at the dates would make you think that things went into
2126         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2127         in 1.6 branch.]" where appropriate to clarify.
2128         
2129 2000-12-30  Dan Harkless  <wget@harkless.org>
2130
2131         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2132         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2133
2134 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2135
2136         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2137
2138 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2139
2140         * http.c (check_end): Fix test for '+' or '-'.
2141
2142 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2143
2144         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2145         clash with the function top-level-declared variable i.
2146         (str_url): Likewise, rename inner-loop i to j.
2147
2148         * recur.c (parse_robots): Don't declare LEN at top of function.
2149         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2150         global variable.
2151
2152         * main.c (main): Change erroneous use of bitwise and to logical.
2153
2154         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
2155         the stack because it will be copied to closure.
2156
2157         Thanks to Csaba Raduly's run of PC-LINT over the sources.
2158
2159 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2160
2161         * http.c (basic_authentication_encode): Use xmalloc(), not
2162         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
2163         sources.
2164
2165 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
2166
2167         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
2168         compilation.
2169
2170 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2171
2172         * mswindows.c: Include <errno.h>.
2173
2174         * gen_sslfunc.c: Include <errno.h>.
2175
2176         * ftp-basic.c: Don't attempt to declare errno or h_errno because
2177         they're not used.
2178
2179         * main.c: Include <errno.h> because errno is used.
2180
2181         * ftp.c: Ditto.
2182
2183         * http.c: Include <netdb.h> for h_errno.
2184
2185 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2186
2187         * html-parse.c (advance_declaration): MSVC assert() chokes on
2188         '\"'.  Use '"' instead.
2189
2190 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2191
2192         * utils.c (xfree_real): Removed.
2193         (xfree_debug): Just call free().
2194
2195         * wget.h (xfree): Make it an alias for free.
2196
2197 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2198
2199         * http.c (http_loop): Furthermore, touch output_document only if
2200         it is known to be an existing regular file.
2201
2202 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2203
2204         * ftp.c (ftp_retrieve_list): Ditto.
2205
2206         * http.c (http_loop): Touch output_document if that is used for
2207         output.
2208
2209 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2210
2211         * http.c: Include gen_sslfunc.h after including Wget's headers.
2212         (persistent_available_p): Needed coma before `int ssl'.
2213
2214 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2215
2216         * ftp.c (ftp_loop_internal): Ditto.
2217
2218         * http.c (http_loop): Use it.
2219
2220         * retr.c (sleep_between_retrievals): New function that handles the
2221         logic of opt.wait and opt.waitretry.
2222
2223 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2224
2225         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
2226         rbuf_read_bufferful when the buffer is depleted.
2227
2228         * rbuf.c (rbuf_read_bufferful): New function.
2229
2230 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2231
2232         * gen_sslfunc.h: Use ansi2knr style function declarations.
2233
2234         * gen_sslfunc.c: Reformat according to the GNU coding standards.
2235         More should be done.
2236
2237         * http.c (persistent_available_p): Place the cheap SSL test nearer
2238         the top of the function.
2239         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
2240
2241 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2242
2243         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
2244         char.
2245
2246 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
2247
2248         * Makefile.in: added gen_sslfunc object
2249         * config.h.in: added HAVE_SSL define
2250         * connect.c: changed select_fd from static int to int
2251         * connect.h: ditto
2252         * gen_sslfunc.h: New file
2253         * gen_sslfunc.c: ditto
2254         * http.c: added HTTPS fuctionality
2255         * retrc.c: ditto
2256         * url.c: ditto
2257         * init.c: added opt.httpsproxy
2258         * options.h: ditto
2259         * rbuf.h: added alternate rbuf struct
2260         * wget.h: added CONSSLERR
2261         * rbuf.c: ditto
2262
2263         * http.c: Added HTTPS fuctionality.
2264
2265         * retrc.c: Ditto.
2266
2267         * url.c: Ditto.
2268
2269         * init.c: Added opt.httpsproxy.
2270
2271         * options.h: Ditto.
2272
2273         * rbuf.h: Added alternate rbuf struct.
2274
2275         * wget.h: Added CONSSLERR.
2276
2277         * rbuf.c: Ditto.
2278
2279 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2280
2281         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2282         "ignore_perms" to ignore file and directory permissions for
2283         Windows NT FTP server listings.
2284         (ftp_parse_winnt_ls): New function.
2285         (ftp_parse_ls): Parses UNIX and Windows NT listings
2286         separately. Simple heuristics for distinguishing between UNIX and
2287         MS-DOS-like FTP listing provided by Windows NT FTP service.
2288
2289 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2290
2291         * ftpparse.c, ftpparse.h: New files.
2292
2293         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2294         only. Use ftp_parse_nonunix_ls otherwise.
2295         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2296         exotic FTP servers.
2297
2298         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2299         FTP servers.
2300
2301         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
2302         (getftp): Support for VMS. Support for FTP servers that do not
2303         place you in the root directory after login.
2304         (ftp_retrieve_list): VMS is silent about the real file size, issue
2305         a more appropriate message.
2306         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2307
2308         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2309
2310 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2311
2312         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2313         "ignore_perms" to ignore file and directory permissions for
2314         Windows NT FTP server listings.
2315         (ftp_parse_winnt_ls): New function.
2316         (ftp_parse_ls): Parses UNIX and Windows NT listings
2317         separately. Simple heuristics for distinguishing between UNIX
2318         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2319
2320 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2321
2322         * netrc.c (parse_netrc): Get rid of line ending.
2323
2324 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2325
2326         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2327         Dan.
2328
2329 2000-11-24  Karl Eichwalder  <ke@suse.de>
2330
2331         * main.c (print_help): Untabify.
2332
2333 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2334
2335         * utils.c (xrealloc_debug): Do the unregister/register thing only
2336         if the pointer has actually changed.
2337         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2338         (xfree_real): Ditto.
2339         (xrealloc_real): Ditto.
2340         (xstrdup_real): Ditto.
2341
2342 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2343
2344         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2345         string; no need to strdup() it.
2346         (getftp): Make pwd_len a local variable.
2347         (ftp_loop): Free PWD before returning.
2348
2349         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2350
2351 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2352
2353         * all: Use xfree() instead of free.
2354
2355         * utils.c (xfree): New function.
2356
2357 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2358
2359         * url.c (convert_links): HTML-quote the converted string.
2360
2361         * utils.c (html_quote_string): Move here from ftp-ls.c
2362         (html_quote_string): Make non-static; declare in utils.h.
2363         (html_quote_string): Convert SP to &#32;.
2364
2365 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2366
2367         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2368         standards; remove (debugging?) printf's; use '\0' for the ASCII
2369         zero character.  Use alloca() instead of malloc() for
2370         inter-function temporary allocations.
2371
2372 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2373
2374         * ftpparse.c, ftpparse.h: New files.
2375
2376         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2377         only. Use ftp_parse_nonunix_ls otherwise.
2378         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2379         exotic FTP servers.
2380
2381         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2382         FTP servers.
2383
2384         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
2385         (getftp): Support for VMS. Support for FTP servers that do not
2386         place you in the root directory after login.
2387         (ftp_retrieve_list): VMS is silent about the real file size, issue
2388         a more appropriate message.
2389         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2390
2391         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2392
2393 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2394
2395         * hash.c (hash_table_put): Don't overwrite deleted mappings.
2396
2397 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2398
2399         * hash.c (find_mapping): New function.
2400         (hash_table_get): Use it.
2401         (hash_table_get_pair): Ditto.
2402         (hash_table_exists): Ditto.
2403         (hash_table_remove): Ditto.
2404         (hash_table_remove): Really delete the entry if the mapping
2405         following LOCATION is empty.
2406
2407         * utils.c (string_set_add): Check whether the element has existed
2408         before.
2409
2410         * hash.c (hash_table_get_pair): New function.
2411
2412 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2413
2414         * http.c (http_process_type): Ignore trailing whitespace; use
2415         strdupdelim().
2416
2417         * recur.c (recursive_retrieve): Use the new `convert' field.
2418         (convert_all_links): Ditto.
2419         (convert_all_links): Don't respect meta_disallow_follow.
2420
2421         * html-url.c (handle_link): Fill out link_relative_p and
2422         link_complete_p.
2423
2424         * url.h (struct _urlpos): Make elements more readable.
2425
2426         * recur.c (recursive_retrieve): Call slist_prepend instead of
2427         slist_append.
2428         (convert_all_links): Call slist_nreverse before iterating through
2429         urls_html.
2430
2431         * utils.c (slist_prepend): New function.
2432         (slist_nreverse): Ditto.
2433
2434 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2435
2436         * http.c (check_end): Constify.
2437
2438 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2439
2440         * http.c (http_loop): If username and password are known, try the
2441         `Basic' authentication scheme by default.
2442
2443         * connect.h: Declare test_socket_open.
2444
2445 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2446
2447         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
2448
2449 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2450
2451         * http.c (gethttp): Don't use the return value of sprintf().
2452         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
2453
2454 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
2455
2456         * recur.c (recursive_retrieve): Print the "so we don't load"
2457         debugging message only if we really don't load.
2458
2459         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
2460         (gethttp): Don't request keep-alive if keep-alive is inhibited.
2461
2462 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2463
2464         * http.c (gethttp): Make the HTTP persistent connections more
2465         robust.
2466
2467 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2468
2469         * retr.c (get_contents): If use_expected, make sure that the
2470         appropriate amount of data is being read.
2471
2472         * http.c (gethttp): Check for both `Keep-Alive: ...' and
2473         `Connection: Keep-Alive'.
2474
2475         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
2476         turned on.
2477
2478 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2479
2480         * http.c (connection_available_p): Use it.
2481
2482         * connect.c (test_socket_open): New function.
2483
2484         * http.c (gethttp): Support persistent connections.  Based on the
2485         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
2486         (register_persistent): New function.
2487         (connection_available_p): Ditto.
2488         (invalidate_connection): Ditto.
2489
2490 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
2491
2492         * url.c (convert_links): Handle UREL2ABS case.
2493
2494         * recur.c (recursive_retrieve): Instead of the list
2495         urls_downloaded, use hash tables dl_file_url_map and
2496         dl_url_file_map.
2497         (convert_all_links): Use them to retrieve data.
2498
2499         * host.c (clean_hosts): Free the hash tables.
2500
2501         * main.c (private_initialize): Call host_init().
2502
2503         * host.c (store_hostaddress): Use a saner, hash table-based data
2504         model.
2505         (realhost): Ditto.
2506         (host_init): Initialize the hash tables.
2507
2508 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
2509
2510         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
2511         used for what the sorted slists used to be used for.
2512         (slist_contains): Don't rely on the list being sorted.
2513         (slist_append): Simplify the code.
2514
2515         * recur.c (recursive_cleanup): Use free_string_set.
2516
2517         * utils.c (string_set_add, string_set_exists, string_set_free):
2518         New functions for easier freeing of hash tables whose keys are
2519         strdup'ed strings.
2520
2521         * recur.c (recursive_retrieve): Use the hash table functions for
2522         storing undesirable URLs.
2523
2524         * hash.c: New file.
2525
2526 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2527
2528         * main.c (private_initialize): Call url_init.
2529         (main): Call private_initialize.
2530
2531         * url.c (unsafe_char_table): New table.
2532         (UNSAFE_CHAR): Use it.
2533         (init_unsafe_char_table): New function.
2534         (url_init): New function; call init_unsafe_char_table.
2535
2536 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
2537
2538         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
2539         _vsnprintf respectively.
2540
2541 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2542
2543         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
2544         on Linux.
2545
2546 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
2547
2548         * html-url.c (handle_link): Handle HTML fragment identifiers.
2549
2550         * recur.c (recursive_retrieve): If norobot info is respected and
2551         the file is specified not to be followed by robots, respect that.
2552
2553         * html-url.c (collect_tags_mapper): Handle <meta name=robots
2554         content=X>.  For us the important cases are where X is NONE or
2555         where X contains NOFOLLOW.
2556         (get_urls_html): Propagate that information to the caller.
2557
2558 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2559
2560         * url.c (convert_links): Unlink the file we might be reading from
2561         before writing to it.
2562         (convert_links): Use alloca instead of malloc for
2563         filename_plus_orig_suffix.
2564
2565 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2566
2567         * host.c (realhost): Add HOST to the list with quality==0 only if
2568         it wasn't already there.
2569         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
2570
2571 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2572
2573         * url.c (get_urls_file): Ditto.
2574         (convert_links): Ditto.
2575
2576         * html-url.c (get_urls_html): Use read_file() instead of
2577         load_file().
2578
2579         * utils.c (read_file): New function, instead of the old
2580         load_file().
2581         (read_file_free): Ditto.
2582
2583         * url.c (findurl): Search only for the supported protocols.
2584         (convert_links): Use fwrite() when writing out a region of
2585         characters.
2586
2587 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2588
2589         * ftp-ls.c: Move html_quote_string and ftp_index here.
2590
2591         * url.c: Remove get_urls_html, since that's now in html-url.c.
2592
2593         * html-url.c: New file.
2594
2595         * html-parse.c: New file.
2596
2597 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2598
2599         * init.c (run_wgetrc): Don't bother killing off '\r' since
2600         pars_line() skips whitespace at end of line anyway.
2601         (parse_line): Oops, it didn't.  Now it does.
2602
2603         * recur.c (parse_robots): Ditto here.
2604
2605         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
2606         manually because read_whole_line no longer does.
2607
2608         * utils.c (read_whole_line): Rewrite to: a) use less memory
2609         (reallocates to needed size after work), b) work faster -->
2610         fgets() instead of getc, c) be more correct --> doesn't kill the
2611         newline character at the end of line.
2612
2613 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2614
2615         * init.c (comind): Initialize MAX to array size - 1.
2616
2617 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2618
2619         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
2620         Suggested by Edward J. Sabol.
2621
2622 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2623
2624         * url.c (construct): Handle the case where host name is not
2625         followed by a slash.
2626
2627 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2628
2629         * init.c: commands[] need to be sorted!  ("base" wasn't.)
2630
2631 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2632
2633         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
2634         `if'.
2635
2636 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2637
2638         * url.c (construct): Insert unneeded initialization for the
2639         compiler to shut up.
2640
2641         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
2642         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
2643         otherwise gets lost when you define _XOPEN_SOURCE.
2644
2645         * utils.c (touch): Include the file name in the error message.
2646         From Debian.
2647
2648 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2649
2650         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
2651         resize the buffer to fit the formated message.  That way, messages
2652         of arbitrary size may be printed.
2653         (logvprintf): Use saved_append() to optionally log the last
2654         several lines of output.
2655         (logputs): Ditto.
2656         (log_close): Adapt to new data structures.
2657         (log_dump): Ditto.
2658         (redirect_output): Print messages to stderr, not to stdout.
2659
2660         * log.c (saved_append_1): New function.  Replaces the old logging
2661         system ("log all output until 10M characters") with a new, much
2662         more reasonable one ("log last screenful of text").
2663         (saved_append): New function; call saved_append_1.
2664         (free_log_line): New function.
2665
2666 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2667
2668         * url.c (construct): Fix comment.
2669         (find_last_char): Document.
2670
2671 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2672
2673         * snprintf.c: New file.
2674
2675 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
2676
2677         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
2678         types to logprintf() and debug_logprintf().
2679
2680 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2681
2682         * ftp.c (ftp_loop_internal): Hide the password from the URL when
2683         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
2684         <darekm@bydg.lomac.com.pl>.
2685
2686 2000-11-02  Junio Hamano  <junio@twinsun.com>
2687
2688         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
2689
2690 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
2691
2692         * http.c (known_authentication_scheme_p): Recognize NTML
2693         authentication.
2694         (create_authorization_line): Treat NTML the same as `Basic'.
2695
2696 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2697
2698         * retr.c (retrieve_url): Free url before returning.
2699         (retrieve_url): Free mynewloc before returning.
2700         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2701
2702 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2703
2704         * url.c (parseurl): Remove possible reading past the end of
2705         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
2706
2707 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2708
2709         * main.c (main): In case of opt.downloaded overflowing, print
2710         <overflow> instead of a totally bogus random value.
2711
2712         * retr.c (retrieve_from_file): Ditto.
2713
2714         * recur.c (recursive_retrieve): Ditto.
2715
2716         * main.c (main): Ditto.
2717
2718         * http.c (http_loop): Ditto.
2719
2720         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
2721         `+=', and downloaded_exceeds_quota() instead of the simple-minded
2722         check.
2723         (ftp_retrieve_list): Ditto.
2724         (ftp_retrieve_dirs): Ditto.
2725         (ftp_retrieve_glob): Ditto.
2726
2727         * retr.c (downloaded_increase): New function.  Notice overflows of
2728         opt.downloaded.
2729         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
2730         used if it overflowed.
2731
2732         * options.h (struct options): New member downloaded_overflow.
2733
2734 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2735
2736         * wget.h (enum): Remove extra space after last enumeration.
2737
2738 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2739
2740         * main.c (main): Use legible_very_long() for printing
2741         opt.downloaded.
2742
2743         * utils.c (legible_1): New function that operates on strings and
2744         does the brunt of legible()'s work.
2745         (legible): Use legible_1().
2746         (legible_very_long): New function; dump the argument with
2747         sprintf(), and call legible_1().
2748
2749         * options.h (struct options): Use VERY_LONG_TYPE for
2750         opt.downloaded.
2751
2752         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
2753         type.
2754
2755         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
2756         defined.  Define HAVE_LONG_LONG if long long is available.
2757
2758 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2759
2760         * utils.c (long_to_string): Update with a later, better version.
2761
2762 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2763
2764         * url.c (path_simplify_with_kludge): New function.
2765         (path_simplify_with_kludge): Disable it.  Instead...
2766         (parse_dir): ...make sure that at this point the right thing is
2767         done, i.e. that "query" part of the URL (?...) is always assigned
2768         to the file, never to the directory portion of the path.
2769
2770 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2771
2772         * retr.c (retrieve_url): Detect redirection cycles.
2773
2774 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2775
2776         * url.c (get_urls_html): Decode HTML entities using
2777         html_decode_entities.
2778
2779         * html.c (htmlfindurl): Don't count the `#' in numeric entities
2780         (&#NNN;) as an HTML fragemnt.
2781         (html_decode_entities): New function.
2782
2783 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2784
2785         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
2786
2787 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2788
2789         * url.c (construct): Rewritten for clarity.  Avoids the
2790         unnecessary copying and stack-allocation the old version
2791         performed.
2792
2793 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2794
2795         * ftp.c (getftp): Ditto.
2796
2797         * http.c (gethttp): Rewind the stream when retrying from scratch.
2798
2799 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2800
2801         * retr.c (retrieve_url): Use url_concat() to handle relative
2802         redirections instead of /ad hoc/ code.
2803
2804         * url.c (url_concat): New function encapsulating weird
2805         construct().
2806         (urllen_http_hack): New function.
2807         (construct): When constructing new URLs, recognize that `?' does
2808         not form part of the file name in HTTP.
2809
2810 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
2811
2812         * retr.c: Add msec timing support for WINDOWS.
2813         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
2814         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
2815
2816 2000-10-27  Dan Harkless  <wget@harkless.org>
2817
2818         * retr.c (retrieve_url): Manually applied T. Bharath
2819         <TBharath@responsenetworks.com>'s patch to get wget to grok
2820         illegal relative URL redirects.  Reformatted and re-commented it.
2821
2822 2000-10-23  Dan Harkless  <wget@harkless.org>
2823
2824         * connect.c (make_connection and bindport): Manually applied Rob
2825         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
2826         changing coding style to GNU's.
2827
2828         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
2829         files downloaded via FTP.  Per a comment, .listing files were not
2830         counted towards number of bytes and files downloaded because they're 
2831         deleted anyway.  Well, they aren't under -nr, so count them then.
2832
2833         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
2834         --bind-address, alphabetizing, changing coding style to GNU's,
2835         commenting, and renaming cmd_ip_address() to cmd_address() to
2836         imply hostnames also okay.
2837                 
2838         * main.c (main): --delete-after didn't delete the root of the
2839         tree.  Ignore --convert-links if --delete-after was specified.
2840         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
2841         fixing duplicate use of added-since-1.5.3 case value.
2842         (print_help): Clarified that --delete-after deletes local files.
2843         Rob forgot to add a line for his new --bind-address option.
2844                 
2845         * options.h (struct options): Manually applied Rob Mayoff's patch
2846         to add --bind-address (bind_address structure member).
2847                 
2848         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
2849         Ignore --convert-links if --delete-after was specified.
2850                 
2851         * retr.c (retrieve_from_file): Just added a DEBUGP().
2852                 
2853 2000-10-19  Dan Harkless  <wget@harkless.org>
2854
2855         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
2856         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
2857         patch to work around FTP servers that incorrectly respond to the
2858         "REST" command with the remaining size rather than the total file size.
2859                 
2860         * http.c (gethttp): Improved a comment and added code to tack on
2861         ".html" to text/html files without that extension when -E specified.
2862         (http_loop): Use new downloaded_file() enumerators and deal with
2863         the case of gethttp() called xrealloc() on u->local.
2864
2865         * init.c (commands): Added new "htmlextension" command.
2866         Also renamed John Daily's cmd_quad() to the more descriptive
2867         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
2868         removed duplicate cmd_boolean() declaration.
2869
2870         * main.c (print_help): Added my new -E / --html-extension option.
2871         (main): Undocumented --email-address option previously used -E synonym.
2872         Stole it away for the much more deserving --html-extension's use.
2873
2874         * options.h (struct options): Added html_extension field.
2875
2876         * url.c (convert_links): URL X that we saved as X.html locally due
2877         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
2878         (downloaded_file): Now remembers if we added .html extension to a file.
2879
2880         * url.h (downloaded_file_t): Added extra enumerators to support above.
2881         (downloaded_file): Now takes and returns a downloaded_file_t.
2882
2883         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
2884         
2885 2000-10-09  Dan Harkless  <wget@harkless.org>
2886
2887         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
2888                 
2889         * main.c (print_help): Clarified what --retr-symlinks does.
2890         
2891 2000-09-15  John Daily  <jdaily@cyberdude.com>
2892
2893         * init.c: Add support for "always" and "never" values to allow
2894         .wgetrc to override commandline (useful e.g. with .pm files
2895         calling `wget --passive-ftp' when your firewall doesn't allow that).
2896
2897         * ftp.c (getftp): passive_ftp is first option to support always/never.
2898
2899 2000-08-30  Dan Harkless  <wget@harkless.org>
2900
2901         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
2902         
2903         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
2904         Wrapped some > 80-column lines.  When -p is specified and we're at a 
2905         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
2906         <LINK REL="stylesheet">.
2907         
2908         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
2909         
2910         * init.c: Added new -p / --page-requisites / page_requisites option.
2911
2912         * main.c (print_help): Clarified that -l inf and -l 0 both allow
2913         infinite recursion.  Changed the unhelpful --mirrior description
2914         to simply give the options it's equivalent to.  Added new -p option.
2915         (main): Added some comments; handle new -p / --page-requisites.
2916         
2917         * options.h (struct options): Added new page_requisites field.
2918
2919         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
2920         Calculate and pass down new `dash_p_leaf_HTML' parameter to
2921         get_urls_html().  Use new INFINITE_RECURSION #define.
2922
2923         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
2924         final `dash_p_leaf_HTML' parameter.
2925
2926         * url.c: get_urls_html() and htmlfindurl() now take final
2927         `dash_p_leaf_HTML' parameter.
2928
2929         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
2930
2931         * wget.h: Added some comments and new INFINITE_RECURSION #define.
2932         
2933 2000-08-23  Dan Harkless  <wget@harkless.org>
2934
2935         * main.c (print_help): -B / --base was not mentioned.
2936
2937 2000-08-22  Dan Harkless  <wget@harkless.org>
2938
2939         * main.c (print_help): Modified -nc description to mention that it
2940         also prevents the creation of multiple versions of the same file
2941         with ".<number>" suffixes.
2942
2943 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2944
2945         * retr.c (retrieve_url): Consistently strdup opt.referer when
2946         setting u->referer.
2947
2948 2000-06-09  Dan Harkless  <wget@harkless.org>
2949
2950         * main.c (print_help): --help output for --waitretry was over 80 cols.
2951
2952 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
2953
2954         * url.c (encode_string): Fix comment.
2955         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
2956
2957 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
2958
2959         * ftp.c (ftp_retrieve_list): Change permissions only on plain
2960         files.
2961
2962 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
2963
2964         * url.c (str_url): Print the port number only if it's different
2965         from the default port number for that protocol.
2966
2967 2000-05-22  Dan Harkless  <wget@harkless.org>
2968
2969         * main.c (print_help): Added --help line for Damir Dzeko
2970         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
2971         Removed comments that --referer and --waitretry were undocumented.
2972         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
2973         line for --execute.
2974
2975 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
2976
2977         * ftp.c (getftp): Ditto.
2978
2979         * http.c (gethttp): Check for return value of fclose/fflush.
2980
2981 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
2982
2983         * host.c (store_hostaddress): Instead of shifting ADDR, start
2984         copying from the correct address.
2985
2986 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
2987
2988         * http.c (gethttp): Don't free REQUEST -- it was allocated with
2989         alloca().
2990         Pointed out by Gisle Vanem <gvanem@eunet.no>.
2991
2992 2000-04-04  Dan Harkless  <wget@harkless.org>
2993
2994         * host.c (store_hostaddress): R. K. Owen's patch introduces a
2995         "left shift count >= width of type" warning on 32-bit
2996         architectures.  Got rid of it by tricking the compiler w/ a variable.
2997         
2998         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
2999         characters per RFC1738, namely everything above '~'.  It also
3000         generated a warning on OSes where char =~ unsigned char.  Fixed.
3001         
3002 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3003
3004         * http.c (http_process_type): Removed needless strdup(), a memory
3005         leak.
3006
3007 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3008
3009         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3010
3011 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3012
3013         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3014
3015 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3016
3017         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3018
3019 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3020
3021         * url.c (UNSAFE_CHAR): New macro.
3022         (contains_unsafe): Use it.
3023         (encode_string): Ditto.
3024
3025 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3026
3027         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3028
3029 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3030
3031         * Use TOUPPER/TOLOWER.
3032
3033 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3034
3035         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3036
3037 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3038
3039         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3040
3041         * sysdep.h (ISALNUM): New macro.
3042         (TOLOWER): Ditto.
3043         (TOUPPER): Ditto.
3044
3045 2000-03-10  Dan Harkless  <wget@harkless.org>
3046
3047         * html.c (idmatch): Implemented checking of my new --follow-tags
3048         and --ignore-tags options.
3049         
3050         * init.c (commands): Added comment reminding people adding new
3051         entries doing allocation to add corresponding freeing in cleanup().
3052         (commands): Added new followtags and ignoretags commands.
3053         (cleanup): Free storage for new followtags and ignoretags.
3054         
3055         * main.c: Use of "comma-separated list" was random -- normalized
3056         it.  Did some alphabetization.  Added comments pointing out
3057         "Options without arguments" and "Options accepting an argument"
3058         sections of long_options[].  Added new options --follow-tags and
3059         -G / --ignore-tags.  Added comment that Damir's --referer is
3060         currently undocumented.  Added comment that Heiko's --waitretry is
3061         partially undocumented (mentioned in --help but not in
3062         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3063         
3064         * options.h (struct options): Added new fields follow_tags and
3065         ignore_tags. 
3066         
3067         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3068         
3069 2000-03-02  Dan Harkless  <wget@harkless.org>
3070
3071         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3072         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3073         
3074         * http.c (gethttp): Dan Berger's query string patch is totally
3075         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3076         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3077         second will overwrite the first.  Also, parameters to implicit
3078         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3079         be printed with trailing garbage characters, and could seg fault.
3080         Backing out the patch, which Dan B. informed me by email was just
3081         a kludge to download StarOffice from Sun made necessary due to
3082         wget's unconditional escaping of certain characters (room for an
3083         option there?).
3084         (http_loop): Heiko introduced "suggest explicit braces to avoid
3085         ambiguous `else'" warnings.  Eliminated them.
3086         
3087         * main.c: Heiko's --wait / --waitretry backwards compatibility
3088         code looks to have been totally untested -- automatic variable
3089         'wr' was used without being initialized, and a long int was passed
3090         into setval()'s char* val parameter.
3091         
3092         * recur.c (parse_robots): Applied Edward J. Sabol
3093         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3094         problem with "User-agent:<space>*<space>" lines in robots.txt.
3095         
3096         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3097         http.c above for explanation).
3098         
3099 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3100
3101         * ftp.c: Respect new option waitretry.
3102
3103 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3104
3105         * http.c (gethttp): Send custom Referer, if required.
3106
3107 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3108
3109         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3110
3111         * netrc.c (parse_netrc): New function.
3112
3113 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3114
3115         * http.c (gethttp): Send it.
3116
3117         * url.c (parseurl): Detect query string in HTTP URL-s.
3118         (str_url): Print it.
3119
3120 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3121
3122         * html.c (html_allow): Add <link href=...> and <script src=...>.
3123
3124 1999-05-02  andrew deryabin  <djsf@softhome.net>
3125
3126         * http.c (gethttp): Specify port in `Host' header only if it's
3127         different from 80.
3128
3129 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3130
3131         * recur.c (recursive_retrieve): If a finite maximum depth is
3132         specified, and we're are already at that depth, don't download the
3133         HTML file for parsing.
3134
3135 2000-03-01  Dan Harkless  <wget@harkless.org>
3136
3137         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3138         even though we don't do conversion on HTML files retrieved via
3139         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
3140         (ftp_retrieve_list): Added a comment saying where we need to
3141         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3142         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3143         a lie -- reworded as "Server file no newer than local file '%s' --".
3144         
3145         * http.c (http_loop): Fixed a typo and clarified a comment.
3146         (http_loop): When -K and -N are specified together, compare size
3147         and timestamp of server file X against local file X.orig (if
3148         extant) rather than converted local file X.
3149         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3150         -- reworded as "Server file no newer than local file '%s' --".
3151         (http_loop): Call new downloaded_file() function to prevent
3152         wrongful overwriting of .orig file when -N is specified.
3153         
3154         * url.c (convert_links): When -K specified, only rename X to
3155         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
3156         file X due to -N, we clobber an X.orig from a previous invocation.
3157         (convert_links): Call the failsafe xstrdup(), not the real strdup().
3158         (convert_links): Added a note asking anyone who understands how
3159         multiple URLs can correspond to a single file to comment it.
3160         (downloaded_file): Added this new function.
3161         
3162         * url.h (downloaded_file): Added prototype for this new function
3163         as well as its downloaded_file_t enum type.
3164
3165         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
3166
3167 2000-02-29  Dan Harkless  <wget@harkless.org>
3168
3169         * version.c: Upped version to developer-only "1.5.3+dev".
3170
3171 2000-02-18  Dan Harkless  <wget@harkless.org>
3172
3173         * init.c (backup_converted): Added this new option.
3174
3175         * main.c (-K / --backup-converted): Added this new option.
3176
3177         * options.h (backup_converted): Added this new option.
3178
3179         * url.c (convert_links): When backup_converted is specified, save
3180         file X as X.orig before converting.
3181
3182         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
3183
3184 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3185
3186         * version.c: Wget 1.5.3 is released.
3187
3188 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3189
3190         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
3191         address doesn't yield FQDN.
3192
3193 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3194
3195         * cmpt.c (strerror): Fix declaration of sys_errlist.
3196
3197 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3198
3199         * main.c (main): Don't use an array subscript as the first
3200         argument to STRDUP_ALLOCA.
3201         From Kaveh R. Ghazi.
3202
3203 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
3204
3205         * html.c (htmlfindurl): Download table background.
3206
3207 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
3208
3209         * init.c (parse_line): Would free *com before allocating it.
3210         (parse_line): Would free com instead of *com.
3211
3212 1998-09-10  Howard Gayle  <howard@fjst.com>
3213
3214         * url.c (get_urls_html): Would drop the last character of the
3215         link.
3216
3217 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3218
3219         * http.c (http_loop): Don't print status code if quiet.
3220
3221 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3222
3223         * log.c: Use <stdarg.h> only when __STDC__.
3224
3225 1998-09-10  Adam D. Moss  <adam@foxbox.org>
3226
3227         * html.c (htmlfindurl): Download <layer src=...>.
3228
3229 1998-09-10  Howard Gayle  <howard@fjst.com>
3230
3231         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
3232         not retrieved.
3233
3234 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3235
3236         * utils.c: Include <libc.h> on NeXT.
3237
3238 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
3239
3240         * url.c (get_urls_html): Fix calculation of URL position.
3241
3242 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3243
3244         * version.c: Wget 1.5.2 is released.
3245
3246 1998-06-23  Dave Love  <d.love@dl.ac.uk>
3247
3248         * ftp.c, init.c, netrc.c: Include errno.h.
3249
3250         * http.c: Include errno.h and time header.
3251
3252         * Makefile.in (exext): Define.
3253         (install.bin, uninstall.bin): Use it.
3254
3255 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3256
3257         * http.c (http_loop): Don't attempt to compare local and remote
3258         sizes if the remote size is unknown.
3259
3260 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
3261
3262         * url.c (get_urls_html): Use malloc() instead of alloca in the
3263         loop.
3264
3265 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3266
3267         * version.c: Wget 1.5.2-b4 is released.
3268
3269 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3270
3271         * url.c (get_urls_html): Ignore spaces before and after the URI.
3272
3273 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
3274
3275         * ftp.c (getftp): Translate `done'.
3276
3277 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3278
3279         * version.c: Wget 1.5.2-b3 is released.
3280
3281 1998-06-06  Alexander Kourakos  <awk@bnt.com>
3282
3283         * init.c (cleanup): Close dfp, don't free it.
3284
3285 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3286
3287         * utils.c (make_directory): Twiddle.
3288
3289         * config.h.in: Added template for access().
3290
3291 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
3292
3293         * html.c (htmlfindurl): Download <input src=...>
3294
3295 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
3296
3297         * utils.c (file_exists_p): Use access() with two arguments.
3298
3299 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
3300
3301         * netrc.c (parse_netrc): Correct logic.
3302
3303 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
3304
3305         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
3306         <ljm@ljm.wownet.net>.
3307
3308 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3309
3310         * version.c: Wget 1.5.2-b2 is released.
3311
3312 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3313
3314         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3315
3316 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3317
3318         * retr.c (elapsed_time): Return correct value when
3319         HAVE_GETTIMEOFDAY is undefined.
3320
3321 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3322
3323         * version.c: Wget 1.5.2-b1 is released.
3324
3325 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3326
3327         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3328         (_getopt_internal): Don't translate `#if 0'-ed strings.
3329
3330 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3331
3332         * mswindows.c (ws_handler): Use fork_to_background().
3333
3334 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3335
3336         * version.c: Wget 1.5.1 is released.
3337
3338 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3339
3340         * http.c (parse_http_status_line): Avoid `minor' and `major'
3341         names.
3342
3343 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3344
3345         * utils.c (mkdirhier): Renamed to make_directory.
3346
3347 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3348
3349         * mswindows.c (fork_to_background): Define under Windows.
3350
3351         * utils.c (fork_to_background): New function.
3352
3353         * html.c (htmlfindurl): Removed rerdundant casts.
3354
3355 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3356
3357         * mswindows.c (ws_mypath): Cache the path.
3358
3359 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3360
3361         * ftp.h: Prefix enum ftype members with FT_.
3362
3363         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3364
3365         * mswindows.h: Use stat under Borland, _stat under MSVC.
3366
3367 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3368
3369         * http.c (known_authentication_scheme_p): New function.
3370         (gethttp): Handle authorization more correctly.
3371
3372         * ftp-basic.h: Removed.
3373
3374         * cmpt.h: Removed.
3375
3376         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
3377         with gcc 2.8.
3378         (numdigit): Use `while' loop.
3379
3380         * http.c (create_authorization_line): Detect authentication
3381         schemes case-insensitively.
3382
3383         * http.c (extract_header_attr): Use strdupdelim().
3384         (digest_authentication_encode): Move declaration of local
3385         variables to smaller scope.
3386         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
3387         (create_authorization_line): Detect authentication schemes
3388         case-insensitively.
3389
3390         * utils.c (touch): Constify.
3391
3392         * http.c (gethttp): Report a nicer error when no data is received.
3393
3394         * rbuf.h (RBUF_READCHAR): Ditto.
3395
3396         * ftp-basic.c (ftp_response): Use sizeof.
3397
3398 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
3399
3400         * retr.c (print_percentage): EXPECTED is long, not int.
3401         (print_percentage): Use floating-point arithmetic to avoid
3402         overflow with large files' sizes multiplied with 100.
3403
3404 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
3405
3406         * config.h.in: Added pid_t stub.
3407
3408         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
3409         define it).
3410
3411 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
3412
3413         * version.c: Wget 1.5.0 is released.
3414
3415 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
3416
3417         * url.c (str_url): Ditto.
3418
3419         * ftp-basic.c (ftp_rest): Use new name.
3420
3421         * utils.c (long_to_string): Renamed from prnum().
3422
3423 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
3424
3425         * version.c: Wget 1.5-b17 is released.
3426
3427 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3428
3429         * headers.c (header_get): New argument FLAGS.
3430
3431         * http.c (gethttp): If request is malformed, bail out of the
3432         header loop.
3433         (gethttp): Check for empty header *after* the status line checks.
3434         (gethttp): Disallow continuations for status line.
3435
3436 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3437
3438         * version.c: Wget 1.5-b16 is released.
3439
3440 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
3441
3442         * init.c (commands): Renamed `always_rest' to `continue'.
3443
3444 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
3445
3446         * all: Use it.
3447
3448         * log.c (logputs): New argument.
3449         (logvprintf): Ditto.
3450         (logprintf): Ditto.
3451
3452 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3453
3454         * http.c (http_atotm): Update comment.
3455
3456         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
3457
3458         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
3459
3460         * main.c (i18n_initialize): New function.
3461         (main): Use it.
3462
3463         * log.c: Include <unistd.h>.
3464
3465         * retr.c (show_progress): Cast alloca to char *.
3466
3467 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3468
3469         * version.c: Wget 1.5-b15 is released.
3470
3471 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
3472
3473         * utils.h: Declare file_non_directory_p().
3474
3475 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
3476
3477         * main.c (main): It's `tries', not `numtries' now.
3478
3479 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3480
3481         * init.c (getperms): Removed.
3482
3483 1998-04-01  Tim Charron  <tcharron@interlog.com>
3484
3485         * log.c (logvprintf): Don't use ARGS twice.
3486
3487 1998-04-01  John  <john@futuresguide.com>
3488
3489         * mswindows.c: Cleaned up.
3490
3491 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3492
3493         * version.c: Wget 1.5-b14 is released.
3494
3495 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3496
3497         * ftp-opie.c (STRLEN4): New macro.
3498         (btoe): Use it.
3499
3500 1998-04-01  Junio Hamano  <junio@twinsun.com>
3501
3502         * http.c: Document all the Digest functions.
3503
3504 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
3505
3506         * utils.c (file_non_directory_p): Renamed from isfile().
3507
3508         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
3509
3510 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3511
3512         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
3513
3514         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
3515         style.
3516         (cmd_permissions): Removed.
3517
3518         * config.h.in: Add template for WORDS_BIGENDIAN.
3519
3520 1998-03-31  Junio Hamano  <junio@twinsun.com>
3521
3522         * http.c (HEXD2asc): New macro.
3523         (dump_hash): Use it.
3524
3525 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3526
3527         * version.c: Wget 1.5-b13 is released.
3528
3529 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3530
3531         * main.c (main): Don't try to use `com'.
3532
3533 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3534
3535         * init.c (cmd_permissions): New function.
3536
3537 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3538
3539         * version.c: Wget 1.5-b12 is released.
3540
3541 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
3542
3543         * init.c (commands): Renamed `numtries' to `tries'.
3544         (cmd_spec_debug): Removed.
3545         (home_dir): Under Windows, return `C:\' if HOME is undefined.
3546
3547 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3548
3549         * config.h.in: Define _XOPEN_SOURCE.
3550
3551         * init.c (check_user_specified_header): New function.
3552         (cmd_spec_header): Use it.
3553         (cmd_spec_useragent): New function.
3554
3555 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
3556
3557         * version.c: Wget 1.5-b11 is released.
3558
3559 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
3560
3561         * wget.h: Include <libintl.h> only if NLS is enabled.
3562
3563 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
3564
3565         * options.h (struct options): Made `wait' a long.
3566         (struct options): Ditto for `timeout'.
3567
3568 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
3569
3570         * utils.c (exists): Renamed to file_exists_p.
3571         (file_exists_p): Use access() if available.
3572
3573 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
3574
3575         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
3576         infloop.
3577
3578         * log.c: do_logging -> save_log_p.
3579
3580         * config.h.in: Added template for HAVE_VSNPRINTF.
3581
3582 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3583
3584         * init.c: Ditto.
3585
3586         * http.c: Protect declaration against non-ANSI compiler.
3587
3588         * log.c (logvprintf): Use vsnprintf() if available.
3589
3590         * getopt.c (main): Don't translate test stuff.
3591
3592 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
3593
3594         * version.c: Wget 1.5-b10 is released.
3595
3596 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
3597
3598         * ftp.c (getftp): Don't translate "CWD %s".
3599
3600         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
3601
3602 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3603
3604         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
3605
3606         * log.c (logputs): New function.
3607         (logvprintf): Renamed from vlogmsg; use logputs().
3608
3609         * retr.c (show_progress): Print `[100%]' when the retrieval is
3610         finished.
3611
3612         * init.c (run_wgetrc): Use FILE, not PATH.
3613         (wgetrc_file_name): Ditto.
3614
3615 1998-03-07  Tim Adam  <tma@osa.com.au>
3616
3617         * recur.c (parse_robots): Correctly reset `entries' on empty
3618         disallow.
3619
3620 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
3621
3622         * init.c (cmd_spec_debug): Use cmd_boolean().
3623
3624 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
3625
3626         * http.c (gethttp): Create proxy-authorization correctly.
3627
3628 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3629
3630         * md5.c: Ditto.
3631
3632         * getopt.c: Use ANSI function definitions.
3633
3634         * ftp-opie.c: New file.
3635
3636         * options.h: Don't redefine EXTERN.
3637
3638         * init.c: Sort it correctly.
3639
3640 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3641
3642         * version.c: Wget 1.5-b9 is released.
3643
3644 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
3645
3646         * recur.c (recursive_retrieve): Reset `first_time'.
3647
3648         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
3649
3650         * rbuf.c (rbuf_peek): Simplified.
3651         (rbuf_flush): Use MINVAL.
3652
3653         * wget.h (MINVAL): Moved from url.h.
3654
3655         * rbuf.h (RBUF_FD): New macro.
3656
3657         * url.c (add_url): Add to the head of the list.
3658
3659         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
3660         file.
3661         (getftp): Set the default permissions to 0600.
3662
3663 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
3664
3665         * url.c (get_urls_html): Ditto.
3666         (convert_links): Ditto.
3667
3668         * recur.c (parse_robots): Ditto.
3669
3670         * html.c (ftp_index): Ditto.
3671
3672         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
3673
3674         * init.c (defaults): Initialize `opt' to zero via memset.
3675
3676         * http.c (digest_authentication_encode): goto considered harmful.
3677
3678 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
3679
3680         * ftp.c (delelement): Simplify and fix leak.
3681
3682 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
3683
3684         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
3685
3686         * url.h (HEXD2ASC): Removed warning.
3687
3688         * init.c (comind): Use binary search.
3689         (commands): Reorganized.
3690         (setval): Ditto.
3691         (cmd_boolean): New function.
3692         (cmd_number): Ditto.
3693         (cmd_number_inf): Ditto.
3694         (cmd_string): Ditto.
3695         (cmd_vector): Ditto.
3696         (cmd_directory_vector): Ditto.
3697         (cmd_bytes): Ditto.
3698         (cmd_time): Ditto.
3699         (cmd_spec_debug): Ditto.
3700         (cmd_spec_dirmode): Ditto.
3701         (cmd_spec_dirstruct): Ditto.
3702         (cmd_spec_dotstyle): Ditto.
3703         (cmd_spec_header): Ditto.
3704         (cmd_spec_htmlify): Ditto.
3705         (cmd_spec_mirror): Ditto.
3706         (cmd_spec_outputdocument): Ditto.
3707         (cmd_spec_recursive): Ditto.
3708         (settime): Merged with cmd_time().
3709         (setbytes): Merged with cmd_bytes().
3710         (setonoff): Merged with cmd_boolean().
3711         (onoff): Ditto.
3712
3713 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3714
3715         * Makefile.in (distclean): Remove `config.h'.
3716
3717 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3718
3719         * version.c: Wget 1.5-b8 is released.
3720
3721 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
3722
3723         * http.c (digest_authentication_encode): New function.
3724         (create_authorization_line): Use it.
3725         (dump_hash): New function.
3726         (digest_authentication_encode): Use it.
3727
3728         * fnmatch.c: Renamed from `mtch.c'.
3729
3730 1998-02-15  Karl Eichwalder  <ke@suse.de>
3731
3732         * main.c (main): Tag "Written by..." string as translatable.
3733
3734 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3735
3736         * wget.h (FREE_MAYBE): New macro.
3737
3738         * http.c (create_authorization_line): Don't use ANSI C string
3739         concatenation feature.
3740         (basic_authentication_encode): Use alloca() for temporary
3741         variables.
3742
3743         * recur.h: Ditto.
3744
3745         * http.c: Ditto.
3746
3747         * headers.h: Ditto.
3748
3749         * ftp-basic.c: Protect declaration against non-ANSI compiler.
3750
3751         * http.c (create_authorization_line): Cast `unsigned char *' to
3752         `char *' for sprintf, to shut up the noisy Digital Unix cc.
3753
3754 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3755
3756         * version.c: Wget 1.5-b7 is released.
3757
3758 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
3759
3760         * cmpt.c (strstr): Synched with glibc-2.0.6.
3761
3762         * ftp-basic.c (calculate_skey_response): Ditto.
3763         (calculate_skey_response): Use alloca().
3764
3765         * http.c (create_authorization_line): Work with FSF's version of
3766         md5.c.
3767
3768         * md5.c: New file, from GNU libc.
3769
3770 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
3771
3772         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
3773
3774 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
3775
3776         * http.c (basic_authentication_encode): New function, instead of
3777         the macro.
3778
3779 1998-02-13  Junio Hamano  <junio@twinsun.com>
3780
3781         * http.c: Add HTTP-DA support.
3782         * ftp-basic.c: Add Opie/S-key support.
3783         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
3784         * md5.c, md5.h: New files.
3785
3786 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
3787
3788         * http.c (http_process_range): Renamed from hprocrange().
3789         (http_process_range): Parse the whole header.
3790
3791         * headers.c: New file.
3792         (header_process): New function.
3793         (header_get): Renamed from fetch_next_header.
3794
3795         * all: Include utils.h only where necessary.
3796
3797         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
3798
3799         * wget.h: Add provisions for dmalloc.
3800
3801 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
3802
3803         * version.c: Wget 1.5-b6 is released.
3804
3805 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
3806
3807         * ftp.c (ftp_loop): Determine `filename' more precisely.
3808
3809         * init.c (setval): Don't set `opt.quiet' if output-document is
3810         `-'.
3811
3812         * log.c (log_init): Print to STDERR instead of STDOUT.
3813         (vlogmsg): Use STDERR by default.
3814         (logflush): Ditto.
3815
3816 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
3817
3818         * host.c: Use addr_in again.
3819
3820 1998-02-08  Karl Eichwalder  <karl@suse.de>
3821
3822         * http.c (gethttp): Fixed typo.
3823
3824 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3825
3826         * version.c: Wget 1.5-b5 is released.
3827
3828 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3829
3830         * retr.c (show_progress): Use it.
3831
3832         * log.c (logflush): New function.
3833
3834         * wget.h: Utilize __attribute__ if on gcc.
3835
3836 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
3837
3838         * http.c (base64_encode_line): New argument LENGTH.
3839         (BASIC_AUTHENTICATION_ENCODE): Use it.
3840         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
3841
3842         * main.c (main): Fixed fprintf() format mismatch.
3843
3844 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
3845
3846         * version.c: Wget 1.5-b4 is released.
3847
3848 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
3849
3850         * host.c: use sockaddr_in instead of addr_in.
3851
3852 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
3853
3854         * init.c (cleanup): Use it.
3855
3856         * recur.c (recursive_cleanup): New function.
3857
3858         * retr.c (retrieve_from_file): Ditto.
3859
3860         * main.c (main): Use it.
3861
3862         * recur.c (recursive_reset): New function.
3863
3864         * retr.c (retrieve_from_file): Ditto.
3865
3866         * main.c (main): Simplify call to recursive_retrieve().
3867
3868         * recur.c (recursive_retrieve): Removed FLAGS argument.
3869
3870         * http.c (gethttp): Changed call to iwrite().
3871
3872 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
3873
3874         * url.c (get_urls_html): Ditto.
3875         (free_urlpos): Ditto.
3876         (mkstruct): Ditto.
3877         (construct): Ditto.
3878
3879         * retr.c (retrieve_url): Move declaration of local variables to
3880         smaller scope.
3881
3882         * url.c (urlproto): Use it.
3883         (parseurl): Ditto.
3884         (str_url): Ditto.
3885         (get_urls_html): Ditto.
3886
3887         * utils.h (ARRAY_SIZE): New macro.
3888
3889         * url.c (proto): Moved from url.h.
3890
3891         * url.h (URL_CLEANSE): Reformatted.
3892         (USE_PROXY_P): Renamed from USE_PROXY.
3893
3894         * ftp-basic.c: Adjust to the new interface of iwrite().
3895
3896         * ftp-basic.c (ftp_port): Use alloca().
3897
3898 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
3899
3900         * version.c: Wget 1.5-b3 is released.
3901
3902         * host.c (ftp_getaddress): Don't print to stderr directly.
3903
3904         * init.c (setbytes): Support `g' for gigabytes.
3905         (cmdtype): New specification CTIME.
3906         (setval): Use it with settime().
3907         (commands): Use it for WAIT and TIMEOUT.
3908
3909 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
3910
3911         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
3912         (gethttp): Use it.
3913
3914         * utils.c (unique_name_1): Moved from url.c.
3915         (unique_name): Ditto.
3916
3917         * url.c (url_filename): Ditto.
3918
3919         * log.c (redirect_output): Changed call to unique_name().
3920
3921         * url.c (unique_name_1): Renamed from unique_name().
3922         (unique_name): Changed interface.
3923
3924         * init.c (enum cmdid): Moved from init.h.
3925         (cmdtype): Ditto.
3926         (struct cmd): Ditto.
3927
3928         * main.c (main): Use it.
3929         (main): Moved `--backups' to not have a short option.
3930
3931         * options.h (struct options): New member BACKGROUND.
3932
3933         * main.c (print_help): Rearranged.
3934         (main): New long options for -n* short options: --no-directories,
3935         --no-host-directories, --non-verbose, --no-host-lookup and
3936         --dont-remove-listing.
3937
3938 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
3939
3940         * main.c (main): Use log_close().
3941
3942         * log.c: New variable LOGFP.
3943         (vlogmsg): Use it.
3944         (redirect_output): Don't open /dev/null; set LOGFP to stdin
3945         instead.
3946         (log_close): New function.
3947
3948         * options.h (struct options): Removed LFILE.
3949
3950         * log.c (log_enable): Removed.
3951
3952         * main.c (main): Use it.
3953
3954         * log.c (log_init): New function.
3955
3956         * url.c (get_urls_html): Removed needless assignment to BASE.
3957
3958         * host.c (add_hlist): Don't set CMP needlessly.
3959
3960         * utils.c (match_backwards): Ditto.
3961         (in_acclist): Ditto.
3962
3963         * url.c (findurl): Ditto.
3964
3965         * netrc.c (parse_netrc): Ditto.
3966
3967         * log.c (log_dump): Ditto.
3968
3969         * html.c (html_quote_string): Ditto.
3970
3971         * ftp-basic.c (ftp_request): Made static.
3972
3973         * connect.c: Made global variables static.
3974
3975         * url.c (construct): Ditto.
3976
3977         * init.c (init_path): Avoid assignment inside `if'-condition.
3978
3979         * ftp.c: Don't include in.h or winsock.h.
3980
3981         * ftp.c (ftp_loop): Use SZ.
3982
3983         * connect.c (bindport): Cast &addrlen to int *.
3984         (conaddr): Ditto.
3985
3986         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
3987
3988 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3989
3990         * ftp.c (getftp): Initialize opt.ftp_pass here.
3991         (ftp_retrieve_dirs): Use alloca().
3992
3993         * init.c (defaults): Don't initialize opt.ftp_pass.
3994
3995         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
3996         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
3997
3998 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
3999
4000         * recur.c (parse_robots): Check for comments more correctly.
4001
4002         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4003         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4004         hostname.
4005
4006 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4007
4008         * version.c: Wget 1.5-b2 is released.
4009
4010         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4011
4012         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4013
4014         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4015         char.
4016
4017         * log.c: Don't attempt to hide arguments from ansi2knr.
4018
4019         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4020
4021         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4022
4023         * ftp.c (getftp): Ditto.
4024
4025         * http.c (gethttp): Use it.
4026
4027         * retr.c (get_contents): New argument EXPECTED; pass it to
4028         show_progress().
4029         (show_progress): New argument EXPECTED; use it to display
4030         percentages.
4031
4032         * init.c (setval): Ditto.
4033
4034         * http.c (gethttp): Ditto.
4035         (http_loop): Ditto.
4036
4037         * ftp.c (getftp): Ditto.
4038         (ftp_loop_internal): Ditto.
4039
4040         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4041
4042         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4043
4044         * netrc.c (search_netrc): Use alloca().
4045
4046         * init.c (defaults): Initialize no_flush.
4047
4048         * log.c (vlogmsg): Don't flush if no_flush.
4049
4050         * options.h (struct options): New variable no_flush.
4051
4052         * main.c (main): Don't play games with buffering.
4053
4054         * log.c (vlogmsg): Flush the output after every message.
4055
4056 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4057
4058         * init.c (parse_line): Ditto.
4059
4060         * url.c (get_urls_html): Ditto.
4061
4062         * main.c (main): Don't cast to unsigned char.
4063
4064         * init.c (run_wgetrc): Don't cast to unsigned char.
4065         (parse_line): Accept char instead of unsigned char.
4066
4067         * html.c (htmlfindurl): Use char instead of unsigned char.
4068
4069         * all: Use them.
4070
4071         * sysdep.h: Add wrappers to ctype macros to make them
4072         eight-bit-clean:
4073
4074 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4075
4076         * html.c (htmlfindurl): Download <img lowsrc=...>
4077
4078         * main.c (main): Ignore SIGPIPE.
4079
4080         * connect.c (select_fd): New argument WRITEP.
4081         (iwrite): Call select_fd().
4082
4083 1997-02-27  Fila Kolodny <fila@ibi.com>
4084
4085         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4086         one already exists, just skip it.
4087
4088 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4089
4090         * http.c (gethttp): Cosmetic changes.
4091
4092         * http.c (check_end): Allow `+D...' instead of `GMT'.
4093         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4094
4095         * url.c (process_ftp_type): New function.
4096         (parseurl): Use it.
4097
4098         * connect.c (iwrite): Allow writing in a few chunks.
4099         (bindport): Made SRV static, so addr can point to it.
4100         (select_fd): Removed HPUX kludge.
4101
4102         * host.c (free_hlist): Incorporated into clean_hosts().
4103
4104 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4105
4106         * host.c (hlist): Made static.
4107         (search_address): Cosmetic change.
4108
4109 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4110
4111         * version.c: Wget v1.5-b1 is released.
4112
4113         * http.c (hgetlen): Use sizeof() to get the header length.
4114         (hgetrange): Ditto.
4115         (hgettype): Ditto.
4116         (hgetlocation): Ditto.
4117         (hgetmodified): Ditto.
4118         (haccepts_none): Ditto.
4119
4120         * main.c (main): Updated `--version' and `--help' output, as per
4121         Francois Pinard's suggestions.
4122
4123         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
4124         textdomain().
4125
4126         * config.h.in: Define stubs for I18N3.
4127
4128         * wget.h: Include libintl.h.
4129
4130 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4131
4132         * url.c (mkstruct): Check for opt.cut_dirs.
4133         (mkstruct): alloca()-te more, xmalloc() less.
4134
4135         * utils.c (load_file): Check for ferror().
4136
4137         * url.c (get_urls_file): Close only the files we opened.
4138         (get_urls_html): Ditto.
4139         (count_slashes): New function.
4140
4141         * http.h: Removed.
4142
4143         * http.c (gethttp): Respect username and password provided by
4144         proxy URL.
4145         (base64_encode_line): Write into an existing buffer instead of
4146         malloc-ing a new one.
4147         (struct http_stat): Moved from http.h
4148
4149         * retr.c (retrieve_url): Free SUF.
4150
4151         * all: Removed lots of unnecessary .h dependencies.
4152
4153         * html.c (global_state): Made static.
4154
4155         * utils.h (ALLOCA_ARRAY): New macro.
4156
4157         * main.c (main): New option `--cut-dirs'.
4158
4159         * url.c (construct): Use alloca() for T.
4160
4161         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
4162
4163         * host.c (_host_t): Moved from host.h.
4164         (struct host): Renamed from _host_t.
4165         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
4166         (realhost): Ditto.
4167
4168         * host.h: Don't include url.h.
4169
4170         * ftp.c (LIST_FILENAME): Moved from ftp.h.
4171
4172         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
4173
4174         * main.c (main): Enable log if the output goes to a TTY.
4175
4176         * connect.h: Removed unused constant `BACKLOG'.
4177
4178         * config.h.in: Check for isatty().
4179
4180         * Makefile.in (LINK): Use CFLAGS when linking.
4181
4182 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4183
4184         * mswindows.c (ws_hangup): Use redirect_output().
4185
4186         * main.c (redirect_output_signal): New function; use
4187         redirect_output().
4188
4189         * log.c (redirect_output): New function, based on hangup(), which
4190         is deleted.
4191
4192         * log.c (vlogmsg): New function.
4193
4194         * wget.h (DEBUGP): Use debug_logmsg().
4195
4196         * main.c (hangup): Use it.
4197
4198         * log.c (log_dump): New function.
4199
4200         * utils.h (DO_REALLOC): Use `long' for various sizes.
4201
4202         * http.c (hskip_lws): Use `while', for clarity.
4203         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
4204         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
4205
4206         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
4207         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
4208
4209         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
4210         (LEGIBLE_SEPARATOR): Ditto.
4211         (FILE_BUFFER_SIZE): Ditto.
4212
4213         * retr.c (BUFFER_SIZE): Moved from retr.h.
4214
4215         * log.c: New file.
4216         (logmsg): Moved from utils.c.
4217         (debug_logmsg): New function.
4218
4219         * mswindows.h: Include it here.
4220
4221         * init.c: Ditto.
4222
4223         * utils.c: Don't include <windows.h>.
4224
4225 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
4226
4227         * host.c (ftp_getaddress): Ditto.
4228
4229         * main.c (main): Use it.
4230
4231         * utils.h (STRDUP_ALLOCA): New macro.
4232
4233         * init.c: Prepend `wget: ' to error messages printed on stderr.
4234
4235         * utils.c (mkdirhier): Renamed from mymkdir.
4236         (touch): Renamed from my_touch.
4237         (pwd_cuserid): Renamed from my_cuserid().
4238
4239 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
4240
4241         * utils.c (accdir): Process wildcards.
4242         (proclist): New function.
4243         (accdir): Use it to avoid code repetition.
4244
4245 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4246
4247         * recur.c (parse_robots): Respect opt.useragent; use alloca().
4248
4249         * http.c (gethttp): Construct useragent accordingly.
4250
4251         * version.c: Changed version string to numbers-only.
4252
4253         * main.c (print_help): List all the options.
4254
4255         * mswindows.c (windows_main_junk): Initialize argv0 here.
4256
4257 1998-01-24  Karl Heuer  <kwzh@gnu.org>
4258
4259         * netrc.c (search_netrc): Initialize `l' only after processing
4260         netrc.
4261
4262         * main.c (main): Don't trap SIGHUP if it's being ignored.
4263
4264 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4265
4266         * all: Use logmsg().
4267
4268         * utils.c (time_str): Moved from retr.c.
4269         (logmsg): New function.
4270         (logmsg_noflush): Ditto.
4271
4272         * rbuf.c: New file, moved buf_* functions here.
4273
4274         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
4275
4276         * ftp-basic.c (ftp_rest): Use prnum().
4277
4278         * ftp-basic.c: Ditto.
4279
4280         * ftp.c: Use the new reading functions and macros.
4281
4282         * retr.c (buf_initialize): New function.
4283         (buf_initialized_p): Ditto.
4284         (buf_uninitialize): Ditto.
4285         (buf_fd): Ditto.
4286
4287         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
4288         efficiency.
4289         (gethttp): Use alloca() where appropriate.
4290
4291         * retr.c (buf_readchar): Use it.
4292         (buf_peek): Use rstreams.
4293
4294         * retr.h (BUF_READCHAR): New macro.
4295
4296         * init.c (home_dir): Rewritten for clarity.
4297         (init_path): Ditto.
4298
4299         * mswindows.c (ws_backgnd): Made static.
4300         (read_registry): Ditto.
4301         (ws_cleanup): Ditto.
4302         (ws_handler): Ditto.
4303
4304 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4305
4306         * alloca.c: New file.
4307
4308         * Makefile.in (ALLOCA): Define.
4309
4310         * mswindows.c (ws_help): Constify.
4311         (ws_help): Use alloca.
4312
4313         * mswindows.c: Reformat.
4314
4315         * all: Added _(...) annotations for I18N snarfing and translation.
4316
4317         * host.c (ftp_getaddress): Nuke SYSINFO.
4318         (ftp_getaddress): Don't use getdomainname().
4319         (ftp_getaddress): Use uname(), where available.
4320
4321         * http.c (gethttp): Protect a stray fprintf().
4322
4323         * init.c (settime): New function.
4324         (setval): Treat WAIT specially, allowing suffixes like `m' for
4325         minutes, etc.
4326
4327 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4328
4329         * url.c (get_urls_html): Use alloca() for TEMP.
4330
4331 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4332
4333         * url.c (rotate_backups): New function.
4334
4335         * http.c (gethttp): Ditto.
4336
4337         * ftp.c (getftp): Rotate backups.
4338
4339 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4340
4341         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4342         xrealloc() and xstrdup().  Use the new functions.
4343
4344         * url.c (decode_string): Made static.
4345         (has_proto): Ditto.
4346         (parse_dir): Ditto.
4347         (parse_uname): Ditto.
4348         (mkstruct): Ditto.
4349         (construct): Ditto.
4350         (construct_relative): Ditto.
4351
4352         * retr.c (show_progress): Made static.
4353
4354         * recur.c (robots_url): Made static.
4355         (retrieve_robots): Ditto.
4356         (parse_robots): Ditto.
4357         (robots_match): Ditto.
4358
4359         * main.h: Removed.
4360
4361         * main.c (printhelp): Made static.
4362         (hangup): Ditto.
4363
4364         * init.c (comind): Made static.
4365         (defaults): Ditto.
4366         (init_path): Ditto.
4367         (run_wgetrc): Ditto.
4368         (onoff): Ditto.
4369         (setonoff): Ditto.
4370         (setnum): Ditto.
4371         (myatoi): Ditto.
4372         (getperms): Ditto.
4373         (setbytes): Ditto.
4374
4375         * http.c (fetch_next_header): Made static.
4376         (hparsestatline): Ditto.
4377         (hskip_lws): Ditto.
4378         (hgetlen): Ditto.
4379         (hgetrange): Ditto.
4380         (hgettype): Ditto.
4381         (hgetlocation): Ditto.
4382         (hgetmodified): Ditto.
4383         (haccepts_none): Ditto.
4384         (gethttp): Ditto.
4385         (base64_encode_line): Ditto.
4386         (mktime_from_utc): Ditto.
4387         (http_atotm): Ditto.
4388
4389         * html.c (idmatch): Made static.
4390
4391         * host.c (search_host): Made static.
4392         (search_address): Ditto.
4393         (free_hlist): Ditto.
4394
4395         * ftp.c (getftp): Made static.
4396         (ftp_loop_internal): Ditto.
4397         (ftp_get_listing): Ditto.
4398         (ftp_retrieve_list): Ditto.
4399         (ftp_retrieve_dirs): Ditto.
4400         (ftp_retrieve_glob): Ditto.
4401         (freefileinfo): Ditto.
4402         (delelement): Ditto.
4403
4404         * ftp-ls.c (symperms): Made static.
4405         (ftp_parse_unix_ls): Ditto.
4406
4407         * connect.c (select_fd): Made static.
4408
4409         * utils.c (xmalloc): Renamed from nmalloc.
4410         (xrealloc): Renamed from nrealloc.
4411         (xstrdup): Renamed from nstrdup.
4412
4413         * getopt.c (exchange): Use alloca.
4414
4415         * mswindows.c (mycuserid): Use strncpy.
4416
4417         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
4418         systhings.h, windecl.h and winjunk.h removed.
4419
4420         * mswindows.c (sleep): New function.
4421
4422         * utils.c: Include <windows.h> under Windows.
4423
4424 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
4425
4426         * url.h (URL_UNSAFE): Change default under Windows.
4427
4428         * retr.c (retrieve_from_file): Respect opt.delete_after.
4429
4430         * main.c (main): Call ws_help on Windows.
4431
4432         * winjunk.c (windows_main_junk): New function.
4433
4434         * main.c (main): Junk-process argv[0].
4435
4436         * http.c (mktime_from_utc): Return -1 if mktime failed.
4437
4438         * http.c (http_loop): Ditto.
4439
4440         * ftp.c (ftp_loop_internal): Change title on Windows when using a
4441         new URL.
4442
4443         * winjunk.c (getdomainname): Lots of functions.
4444
4445 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
4446
4447         * cmpt.c (strptime_internal): Handle years more correctly for
4448         `%y'.
4449
4450 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
4451
4452         * http.c (gethttp): Allocate enough space for
4453         `Proxy-Authorization' header.
4454
4455 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4456
4457         * version.c: Wget/1.4.5 is released.
4458
4459 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
4460
4461         * retr.c (get_contents): Check return value of fwrite more
4462         carefully.
4463
4464 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
4465
4466         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
4467         year, regardless of century.
4468
4469 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4470
4471         * utils.c (isfile): Use `lstat' instead of `stat'.
4472
4473 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4474
4475         * utils.c (numdigit): Use explicit test.
4476
4477 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
4478
4479         * http.c (http_loop): Always use `url_filename' to get u->local.
4480
4481 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
4482
4483         * url.c: Recognize https.
4484
4485 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
4486
4487         * recur.c (recursive_retrieve): Lowercase just the host name.
4488
4489 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
4490
4491         * url.c (get_urls_file): Use the correct test.
4492         (get_urls_html): Ditto.
4493
4494 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4495
4496         * connect.c: Reverted addrlen to int.
4497
4498         * init.c (parse_line): Check for -1 instead of NONE.
4499
4500         * version.c: Changed version to 1.4.5.
4501
4502 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4503
4504         * init.c: New option netrc.
4505         (initialize): Don't parse .netrc.
4506
4507         * cmpt.c (recursive): Return rp.
4508         (strptime_internal): Match the long strings first, the abbreviated
4509         second.
4510
4511 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
4512
4513         * http.c (check_end): New function.
4514         (http_atotm): Use it.
4515  
4516 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
4517
4518         * http.c (gethttp): Use them.
4519
4520         * init.c: New options proxy_user and proxy_passwd.
4521
4522 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4523
4524         * ftp.c (ftp_retrieve_list): Create links even if not relative.
4525
4526 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
4527
4528         * recur.c (recursive_retrieve): Lowercase the host name, if the
4529         URL is not "optimized".
4530
4531         * host.c (realhost): Return l->hostname, even if it matches with
4532         host.
4533
4534 1997-02-10  Marin Purgar  <pmc@asgard.hr>
4535
4536         * connect.c: Make addrlen size_t instead of int.
4537         (conaddr): Ditto.
4538
4539 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4540
4541         * systhings.h: Define S_ISLNK on NeXT too.
4542
4543 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
4544
4545         * version.c: Released 1.4.3.
4546
4547         * url.c: Futher update to list of protostrings.
4548         (skip_proto): Skip `//' correctly for FTP and HTTP.
4549
4550         * url.c (get_urls_html): Handle bogus `http:' things a little
4551         different.
4552
4553         * main.c (main): Removed `follow-ftp' from `f'.
4554         (main): Dumped the `prefix-files' and `file-prefix' options and
4555         features; old and bogus.
4556         (main): Exit on failed setval() in `-e'.
4557
4558         * http.c (fetch_next_header): Use it to detect header continuation
4559         correctly.
4560
4561         * retr.c (buf_peek): New function.
4562
4563 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4564
4565         * wget.h: Include time.h and stuff.
4566
4567 1997-02-08  Roger Beeman  <beeman@cisco.com>
4568
4569         * ftp.c: Include <time.h>
4570
4571 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4572
4573         * url.c (findurl): Would read over buffer limits.
4574
4575 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4576
4577         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
4578
4579 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
4580
4581         * http.c (http_atotm): Initialize tm.is_dst.
4582
4583 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4584
4585         * http.c (gethttp): Don't print the number of retrieved headers.
4586
4587         * main.c (main): New option `--no-clobber', alias for `-nc'.
4588
4589         * url.c: Recognize `https://'.
4590
4591 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4592
4593         * host.c (herrmsg): Don't use h_errno.
4594
4595 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4596
4597         * host.c (accept_domain): Use it.
4598
4599         * main.c (main): New option `--exclude-domains'.
4600
4601         * retr.c (retrieve_url): Use it.
4602         (retrieve_url): Bail out when an URL is redirecting to itself.
4603
4604         * url.c (url_equal): New function.
4605
4606 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4607
4608         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
4609
4610         * http.c (mk_utc_time): New function.
4611         (http_atotm): Use it; handle time zones correctly.
4612
4613 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4614
4615         * http.c: Ditto.
4616
4617         * ftp-basic.c: Use it instead of WRITE.
4618
4619         * connect.c (iwrite): New function.
4620
4621 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4622
4623         * cmpt.c (mktime): New function.
4624
4625         * netrc.c: Include <sys/types.h>.
4626
4627         * main.c (main): Wouldn't recognize --spider.
4628
4629         * retr.c (rate): Use `B', `KB' and `MB'.
4630         (reset_timer,elapsed_time): Moved from utils.c.
4631
4632         * ftp.c (ftp_retrieve_list): Ditto.
4633
4634         * http.c (http_loop): Don't touch the file if opt.dfp.
4635
4636 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4637
4638         * cmpt.c: New file.
4639
4640         * ftp.c (ftp_retrieve_glob): New argument semantics.
4641         (ftp_retrieve_dirs): Use it.
4642         (ftp_loop): Ditto.
4643
4644         * html.c (htmlfindurl): Recognize `'' as the quote char.
4645
4646 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4647
4648         * ftp.c (ftp_loop_internal): Use it.
4649
4650         * utils.c (remove_link): New function.
4651
4652 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
4653
4654         * retr.c (retrieve_url): Require STRICT redirection URL.
4655
4656         * url.c (parseurl): New argument STRICT.
4657
4658         * http.c (hparsestatline): Be a little-bit less strict about
4659         status line format.
4660
4661 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4662
4663         * http.c (gethttp): Use it.
4664
4665         * main.c (main): Don't use '<digit>' as options.
4666
4667         * init.c: New option ignore_length.
4668
4669         * http.c (gethttp): Ditto.
4670         (http_loop): Check for redirection without Location:.
4671         (gethttp): Don't print Length unless RETROKF.
4672
4673         * ftp.c (getftp): Use it.
4674
4675         * url.c (mkalldirs): New function.
4676
4677         * utils.c (mymkdir): Don't check for existing non-directory.
4678
4679         * url.c (mkstruct): Don't create the directory.
4680
4681 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
4682
4683         * init.c (setval): Removed NO_RECURSION checks.
4684
4685 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
4686
4687         * version.c: "Released" 1.4.3-pre2.
4688
4689         * recur.c (recursive_retrieve): Bypass host checking only if URL
4690         is ftp AND parent URL is not ftp.
4691
4692         * ftp-basic.c (ftp_request): Print out Turtle Power.
4693
4694         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
4695         wildcard.
4696         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
4697         not glob.
4698
4699         * http.c (gethttp): Be a little bit smarter about status codes.
4700
4701         * recur.c (recursive_retrieve): Always reset opt.recursive when
4702         dealing with FTP.
4703
4704 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
4705
4706         * retr.c (retrieve_url): New variable location_changed; use it for
4707         tests instead of mynewloc.
4708         (retrieve_url): Allow heuristic adding of html.
4709
4710         * url.c (url_filename): Don't use the `%' in Windows file names.
4711
4712         * http.c (http_loop): Always time-stamp the local file.
4713
4714         * http.c (http_loop): Ditto.
4715
4716         * ftp.c (ftp_retrieve_list): Use it.
4717
4718         * utils.c (my_touch): New function.
4719
4720         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
4721         instead of #ifndef NeXT.
4722
4723         * utils.c (strptime): New version, by Ulrich Drepper.
4724
4725 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
4726
4727         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
4728         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
4729         (http_loop): Would remove ACCEPTRANGES.
4730
4731         * ftp.c (getftp): Call ftp_list with NULL.
4732
4733 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
4734
4735         * html.c (ftp_index): Don't print minutes and seconds if we don't
4736         know them; beautify the output.
4737
4738         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
4739
4740 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
4741
4742         * utils.c (strptime): New function.
4743         (strptime): Don't use get_alt_number.
4744         (strptime): Don't use locale.
4745         (match_string): Made it a function.
4746
4747 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
4748
4749         * http.c (http_atotm): New function.
4750         (http_loop): Use it.
4751
4752         * atotm.c: Removed from the distribution.
4753
4754         * http.c (base64_encode_line): Rewrite.
4755
4756 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
4757
4758         * ftp.c (getftp): Use ftp_expected_bytes; print size.
4759
4760         * ftp-basic.c (ftp_response): Use ftp_last_respline.
4761         (ftp_expected_bytes): New function.
4762
4763         * ftp.c (getftp): Print the unauthoritative file length.
4764
4765         * ftp-ls.c: Renamed from ftp-unix.c.
4766         (ftp_parse_ls): Moved from ftp.c.
4767         (ftp_parse_unix_ls): Recognize seconds in time spec.
4768         (ftp_parse_unix_ls): Recognize year-less dates of the previous
4769         year.
4770
4771 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
4772
4773         * ftp-basic.c: Don't declare errno if #defined.
4774
4775         * host.c (ftp_getaddress): Check for sysinfo legally.
4776
4777 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
4778
4779         * connect.c (iread): Use READ.
4780
4781 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
4782
4783         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
4784         schemes.
4785
4786 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
4787
4788         * host.c (ftp_getaddress): Allow `.' in hostname.
4789
4790 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
4791
4792         * wget.h: READ and WRITE macros for use instead of read and write
4793         on sockets, grep READ *.c, grep WRITE *.c
4794
4795         * wsstartup.c: new file - startup for winsock
4796
4797         * wsstartup.h: new file
4798
4799         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
4800
4801         * configure.bat: Configure utility for MSVC
4802
4803         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
4804
4805 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
4806
4807         * version.c: Released 1.4.3-pre.
4808
4809         * utils.c (prnum): Accept long.
4810         (legible): Use prnum().
4811
4812         * connect.c (make_connection): Accept port as short.
4813         (bindport): Ditto.
4814
4815         * http.c (gethttp): Use search_netrc.
4816
4817 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
4818
4819         * ftp.c (getftp): Use search_netrc.
4820
4821         * netrc.c (free_netrc): New function.
4822
4823         * init.c (home_dir): New function.
4824
4825         * url.c (convert_links): Allow REL2ABS changes.
4826
4827 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
4828
4829         * netrc.c: New file.
4830         (parse_netrc, maybe_add_to_list): New functions.
4831
4832 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
4833
4834         * retr.c (retrieve_url): Reset opt.recursion before calling
4835         ftp_loop if it is reached through newloc.
4836
4837         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
4838         error; don't use "Syntax error", since we don't know if it is
4839         really a syntax error.
4840
4841 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
4842
4843         * utils.c (acceptable): Extract the filename part of the path.
4844
4845         * recur.c (recursive_retrieve): Call acceptable() with the right
4846         argument; would bug out on wildcards.
4847
4848         * init.c (parse_line): Likewise.
4849
4850         * html.c (htmlfindurl): Cast to char * when calling stuff.
4851
4852 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
4853
4854         * ftp.c (getftp): Use ftp_pasv.
4855
4856         * ftp-basic.c (ftp_request): Accept NULL value.
4857         (ftp_pasv): New function.
4858
4859         * options.h (struct options): Add passive FTP option.
4860
4861 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
4862
4863         * url.c (parseurl): Debug output.
4864
4865         * utils.c (path_simplify): New one, adapted from bash's
4866         canonicalize_pathname().
4867
4868 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
4869
4870         * ftp.c (getftp): Don't discard the buffer.
4871
4872         * retr.c (get_contents): New parameter nobuf.
4873
4874 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
4875
4876         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
4877
4878         * init.c (setval): Strip the trailing slashes on CVECDIR.
4879
4880 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
4881
4882         * init.c: Make excludes and includes under CVECDIR instead of
4883         CVEC.
4884
4885 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
4886
4887         * url.c (get_urls_html): Skip "http:".
4888
4889 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
4890
4891         * utils.c (strcasecmp): From glibc.
4892         (strncasecmp): Also.
4893         (strstr): Also.
4894
4895         * url.c: Added javascript: to the list of URLs prefixes.
4896
4897 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
4898
4899         * recur.c (retrieve_robots): Print the warning message only if
4900         verbose.
4901
4902 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
4903
4904         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
4905
4906 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
4907
4908         * systhings.h: New file.
4909
4910         * ../configure.in: Check for utime.h
4911
4912         * ftp.c: Check whether we have unistd.h.
4913
4914 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
4915
4916         * recur.c (recursive_retrieve): Send the canonical URL as referer.
4917         (recursive_retrieve): Call get_urls_html with the canonical URL.
4918
4919 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
4920
4921         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
4922         ansi2knr support for compilers which don't support ANSI style
4923         function prototypes and signatures.
4924
4925         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
4926
4927 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
4928
4929         * url.c: Use it; Recognize paths ending with "." and ".." as
4930         directories.
4931         (url_filename): Append .n whenever file exists and could be a
4932         directory.
4933
4934         * url.h (ISDDOT): New macro.
4935
4936         * init.c (parse_line): Use unsigned char.
4937
4938         * url.c (get_urls_html): Cast to unsigned char * when calling
4939         htmlfindurl.
4940
4941         * html.c (htmlfindurl): Use unsigned char.
4942
4943         * version.c: Changed version to 1.4.3.
4944
4945 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
4946
4947         * version.c: Released 1.4.2.
4948
4949         * ftp.c (getftp): Simplified assertion.
4950         (ftp_loop_internal): Remove symlink before downloading.
4951         (ftp_retrieve_list): Unlink the symlink name before attempting to
4952         create a symlink!
4953
4954         * options.h (struct options): Renamed print_server_response to
4955         server_response.
4956
4957         * ftp.c (rel_constr): Removed.
4958         (ftp_retrieve_list): Don't use it.
4959         (ftp_retrieve_list): Use opt.retr_symlinks.
4960
4961 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
4962
4963         * main.c (main): New option retr_symlinks.
4964
4965         * url.c (convert_links): Print verbose message.
4966
4967 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
4968
4969         * http.c (http_loop): Reset newloc in the beginning of function;
4970         would cause FMR in retrieve_url.
4971
4972 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
4973
4974         * recur.c (convert_all_links): Find the URL of each HTML document,
4975         and feed it to get_urls_html; would bug out.
4976         (convert_all_links): Check for l2 instead of dl; removed dl.
4977
4978         * url.c (convert_links): Don't refer to freed newname.
4979
4980         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
4981
4982         * main.c (main): Print the OS_TYPE in the debug output, too.
4983
4984         * recur.c (recursive_retrieve): Check for opt.delete_after.
4985
4986         * main.c (main): New option delete-after.
4987
4988         * init.c (setval): Cleaned up.
4989
4990 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
4991
4992         * Makefile.in (wget): Make `wget' the default target.
4993
4994         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
4995         loop.
4996         (ftp_retrieve_list): Warn about non-matching sizes.
4997
4998         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
4999
5000         * init.c (setnum): Renamed from setnuminf; New argument flags.
5001         (setval): Use it.
5002
5003         * main.c (main): Sorted the options.
5004         (main): New option --wait.
5005
5006 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5007
5008         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5009         quotes.
5010
5011 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5012
5013         * version.c: Changed version to 1.4.2.
5014
5015 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5016
5017         * version.c: Released 1.4.1.
5018
5019         * html.c (html_quote_string): New function.
5020         (ftp_index): Use it.
5021         (htmlfindurl): A more gentle ending debug message.
5022
5023         * ftp.c (ftp_loop): Check for opt.htmlify.
5024
5025         * init.c: New command htmlify.
5026
5027         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5028         strings.
5029         (ftp_loop): Print size of index.html.
5030
5031         * init.c (setval): Implement "styles".
5032
5033         * main.c (main): New option dotstyle.
5034
5035 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5036
5037         * ftp.c (getftp): Close the master socket in case of errors, after
5038         bindport().
5039
5040         * connect.c (bindport): Initialize msock to -1.
5041
5042         * ftp.c (getftp): Initialize dtsock to -1.
5043
5044         * connect.c (closeport): Don't close sock if sock == -1.
5045
5046 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5047
5048         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5049         (setval): Don't send default values.
5050         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5051
5052         * options.h (struct options): Use long for dot_bytes.
5053
5054         * init.c (setquota): Renamed to setbytes.
5055         (setval): Use setbytes on DOTBYTES.
5056
5057 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5058
5059         * ftp.c (getftp): Initialize con->dltime.
5060
5061         * recur.c (recursive_retrieve): Use same_host instead of
5062         try_robots; simply load robots_txt whenever the host is changed.
5063         (recursive_retrieve): Free forbidden before calling parse_robots.
5064
5065 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5066
5067         * retr.c (show_progress): Use them.
5068
5069         * options.h (struct options): New options dot_bytes, dots_on_line
5070         and dot_spacing.
5071
5072 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5073
5074         * recur.c (recursive_retrieve): Retrieve directories regardless of
5075         acc/rej rules; check for empty u->file.
5076
5077 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5078
5079         * init.c (setval): Use it.
5080
5081         * utils.c (merge_vecs): New function.
5082
5083         * init.c (setval): Reset the list-type functions when encountering
5084         "".
5085
5086 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5087
5088         * recur.c (recursive_retrieve): Use base_url instead of this_url
5089         for no_parent.
5090
5091 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5092
5093         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5094
5095 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5096
5097         * utils.c (sepstring): Rewrote; don't use strtok.
5098
5099         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5100         when running the first time.
5101         (retrieve_robots): Warn to ignore errors when robots are loaded.
5102
5103         * utils.c (load_file): Moved from url.c.
5104
5105         * http.c: Made static variables const too in h* functions.
5106
5107         * main.c (main): Renamed --continue-ftp to --continue.
5108
5109         * recur.c (recursive_retrieve): Use it.
5110
5111         * utils.c (frontcmp): New function.
5112
5113         * url.c (accdir): New function.
5114
5115         * html.c (htmlfindurl): Recognize <area href=...>.
5116
5117         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5118
5119         * init.c (setval): Free the existing opt.excludes and
5120         opt.includes, if available.
5121
5122         * main.c (main): New option -I.
5123
5124 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5125
5126         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5127
5128         * version.c: Changed version to 1.4.1.
5129
5130 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5131
5132         * version.c: Released 1.4.0.
5133
5134 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5135
5136         * main.c (main): Free com and val after parse_line.
5137         (printhelp): Reorder the listing.
5138
5139         * http.c: More robust header parsing.
5140
5141         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5142         (hskip_lws): New function.
5143         (haccepts_bytes): New function.
5144         (gethttp): Use it.
5145
5146         * init.c (setval): Check header sanity.
5147         (setval): Allow resetting of headers.
5148
5149 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5150
5151         * http.c (http_loop): Don't use has_wildcards.
5152
5153         * http.c (gethttp): Free all_headers -- would leak.
5154
5155         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
5156         0 -- this fixes a long-standing bug in -rl.
5157
5158 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
5159
5160         * ftp.c: Use -1 as "impossible" value for con->fd.
5161
5162         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
5163
5164         * init.c (parse_line): Use isalpha.
5165
5166         * ftp-unix.c: Use HAVE_UNISTD_H.
5167
5168         * mtch.c (has_wildcards): Don't match \.
5169
5170         * http.c (http_loop): Warn on HTTP wildcard usage.
5171
5172 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
5173
5174         * url.c (url_filename): Do not create numbered suffixes if
5175         opt.noclobber -- would bug out on -nc.
5176
5177 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
5178
5179         * recur.c (parse_robots): Don't chuck out the commands without
5180         arguments (`Disallow:<empty>' didn't work).
5181         (parse_robots): Compare versions lowercase.
5182         (parse_robots): Match on base_version, not version_string!
5183         (parse_robots): Handle comments properly.
5184         (parse_robots): Match versions in a sane way.
5185
5186         * init.c: Print nicer error messages.
5187
5188         * version.c: Changed version to 1.4.0.
5189
5190 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5191
5192         * version.c: Released 1.4.0-test2.
5193
5194         * init.c (run_wgetrc): Close fp.
5195
5196         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
5197         u->dir.
5198
5199 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5200
5201         * init.c (setquota): Allow inf as quota specification.
5202
5203 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
5204
5205         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
5206         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
5207
5208         * main.c (main): Check for quota by comparison with downloaded
5209         stuff, not from status.
5210
5211         * connect.c (select_fd): Should compile on HPUX without warnings now.
5212
5213         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
5214         returned RETROK.
5215
5216 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
5217
5218         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
5219         (getftp): Return FTPRETRINT on control connection error.
5220
5221         * html.c (htmlfindurl): Recognize <embed src=...> and
5222         <bgsound src=...>.
5223         (ftp_index): Handle username and password correctly.
5224
5225         * main.c (main): Made `-np' a synonim for --no-parent.
5226
5227 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5228
5229         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
5230         ftp_retrieve_glob.
5231
5232         * version.c: Changed version to 1.4.0-test2.
5233
5234 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5235
5236         * version.c: Released 1.4.0-test1.
5237
5238         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
5239         directory.
5240         (convert_links): Removed definition of make_backup.
5241
5242         * http.h: Removed definition of MAX_ERROR_LENGTH.
5243
5244         * host.c (ftp_getaddress): Check for "(none)" domains.
5245
5246         * ftp.c (ftp_retrieve_dirs): Docfix.
5247
5248         * http.c (gethttp): Use ou->referer instead of u->referer.
5249
5250         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
5251         this was known to cause coredumps on Linux.
5252
5253         * html.c (ftp_index): Cast the argument to local_time to time_t *.
5254
5255 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
5256
5257         * connect.c (select_fd): Use exceptfds -- once and for all.
5258
5259         * retr.c (retrieve_from_file): Free filename after
5260         recursive_retrieve.
5261         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
5262         first-time retrieval.
5263         (retrieve_from_file): Return uerr_t; new argument, count.
5264         (retrieve_from_file): Break on QUOTEXC.
5265
5266         * init.c (setquota): Fixed a bug that caused rejection of
5267         non-postfixed values..
5268
5269 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
5270
5271         * version.c: Changed name to wget.
5272
5273         * connect.c (iread): Smarter use of select.
5274         (select_fd): Set errno on timeout.  If not timeout, return 1
5275         instead of 0.
5276
5277 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
5278
5279         * ftp.c (ftp_loop_internal): Don't use con->cmd before
5280         establishing it.
5281
5282 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
5283
5284         * http.c (gethttp): Send correct referer when using proxy.
5285         (gethttp): Use struct urlinfo ou to access the relevant data; send
5286         correct authorization in all cases.
5287
5288         * host.c (same_host): Use skip_uname to skip username and
5289         password.
5290
5291         * url.c (skip_uname): New function.
5292         (parseurl): Use it.
5293
5294         * host.c (same_host): Do not assume HTTP -- same_host should now
5295         be totally foolproof.
5296
5297         * url.c (skip_proto): New function.
5298         (parse_uname): Use it.
5299
5300         * http.c (gethttp): Create local user and passwd from what is
5301         given.
5302
5303         * url.c (parseurl): Check for HTTP username and password too.
5304
5305 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
5306
5307         * config.h.in: Removed #define gethostbyname R...
5308
5309 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5310
5311         * version.c: Changed version to 1.4.0-test1.
5312
5313 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5314
5315         * version.c: "Released" 1.4b29.
5316
5317         * recur.c (recursive_retrieve): Check for no_parent.
5318
5319         * init.c (setval): Option update.
5320
5321         * main.c (main): New option no-parent.
5322
5323         * options.h (struct options): New variable no_parent.
5324
5325         * recur.c (recursive_retrieve): Only files are checked for
5326         opt.accepts and opt.rejects.
5327         (recursive_retrieve): Check directories for opt.excludes.
5328         (recursive_retrieve): Make the dir absolute when checking
5329         opt.excludes.
5330
5331         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5332         src=...>
5333
5334 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5335
5336         * ftp.c (getftp): Do not line-break assert entries at all.
5337         (ftp_retrieve_dirs): docfix.
5338
5339         * connect.c (select_fd): Use fd + 1 as nfds.
5340
5341         * version.c: Changed version to 1.4b29.
5342
5343 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5344
5345         * version.c: "Released" 1.4b28.
5346
5347         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5348         don't continue the loop if it is.
5349         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5350
5351 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5352
5353         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5354         (getftp): Do not use multiline assert.
5355
5356         * http.c (hparsestatline): Use mjr and mnr instead of major and
5357         minor, which don't compile on Ultrix.
5358         (http_loop): Use strcpy() to initialize tmp.
5359
5360         * all: Geturl -> Fetch
5361
5362 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5363
5364         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5365         ':'.
5366
5367         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5368         moving `bufsize &&' to the beginning of each check in for-loops.
5369
5370         * recur.c (parse_robots): Close fp on exit.
5371
5372         * url.c (mymkdir): Check for each directory before creating.
5373
5374 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5375
5376         * version.c: Changed version to 1.4b28.
5377
5378 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
5379
5380         * version.c: "Released" 1.4b27.
5381
5382         * init.c (parse_line): Use isspace.
5383         (parse_line): Free *com on all errors.
5384
5385         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
5386         (delelement): Use next instead of f->next and prev instead of
5387         f->prev.
5388         (delelement): Free the members of the deleted element.
5389
5390         * http.c (http_loop): Do not return RETROK on code != 20x.
5391
5392         * init.c (cleanup): Free opt.user_header.
5393         (cleanup): Free opt.domains.
5394
5395         * url.c (freelists): Moved to cleanup().
5396
5397         * http.c (hparsestatline): Docfix.
5398
5399         * main.c (main): Return with error status on unsuccesful
5400         retrieval.
5401
5402         * init.c (setval): Do not remove listing when mirroring.
5403
5404         * url.c (url_filename): Use opt.fileprefix.
5405
5406         * ftp.c (ftp_get_listing): Use url_filename to get filename for
5407         .listing.
5408
5409         * main.c (main): New option: -rn.
5410
5411 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
5412
5413         * Makefile.in (RM): Added RM = rm -f.
5414
5415         * host.c (clean_hosts): New function.
5416         (free_hlist): Just free the list, no reset.
5417
5418         * version.c: Changed version to 1.4b27.
5419
5420 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
5421
5422         * version.c: "Released" 1.4b26.
5423
5424         * retr.c (retrieve_from_file): If call get_urls_html with
5425         opt.spider to make it silent in spider mode.
5426
5427         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
5428
5429         * url.h (CLEANDUP): New macro.
5430
5431         * http.c (gethttp): Fixed a bug that freed location only when it
5432         was NULL.
5433
5434         * retr.c (retrieve_url): Free url if it will not be stored,
5435         i.e. newloc is NULL.
5436
5437         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
5438         old version would bug out on <a href="x#a"href="y">.
5439
5440         * html.h (state_t): New member in_quote.
5441
5442         * html.c (htmlfindurl): Free s->attr at the beginning of
5443         attr-loop.
5444
5445         * recur.c (recursive_retrieve): Recognize RCLEANUP.
5446         (tried_robots): Make hosts a global variable.
5447         (recursive_retrieve): Free constr after URL host optimization.
5448         (tried_robots): Free urlinfo before exiting.
5449
5450         * utils.c (free_slist): New function.
5451
5452         * recur.c (recursive_retrieve): Use flags to add cleanup
5453         possibility.
5454
5455         * main.c (main): Free filename after recursive_retrieve.
5456
5457         * http.c (gethttp): Store successful responses too.
5458
5459 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
5460
5461         * all: Constified the whole source.  This required some minor
5462         changes in many functions in url.c, possibly introducing bugs -- I
5463         hope not.
5464
5465         * ftp-basic.c: Removed last_respline.
5466
5467         * http.c (gethttp): Free type.
5468
5469         * host.c (same_host): Free real1 and real2.
5470
5471         * main.c (main): New option --spider.
5472
5473         * retr.c (get_contents): Don't reset errno.
5474
5475         * main.c (main): Sorted the options.
5476
5477         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
5478         uninitialized by select().
5479
5480         * http.c (http_loop): Print the time when the connection is
5481         closed.
5482         (gethttp): Debug-print the HTTP request.
5483
5484 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
5485
5486         * connect.c (iread): Do not try reading after timeout.
5487
5488         * main.c (main): Would bug out on -T.
5489
5490         * connect.c (select_fd): Do not use exceptfds.
5491         (iread): Set ETIMEDOUT on select_fd <= 0.
5492
5493         * version.c: Changed version to 1.4b26.
5494
5495 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
5496
5497         * version.c: "Released" 1.4b25.
5498
5499         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
5500         or link name.
5501
5502         * http.c (gethttp): Add errcode to struct hstat.
5503         (http_loop): Use it.
5504
5505         * url.c (no_proxy_match): Simplify using char** for no_proxy.
5506
5507         * options.h (struct options): Make opt.no_proxy a vector.
5508
5509         * utils.c (sepstring): Use !*s instead of !strlen(s).
5510
5511         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
5512         (getperms): Use ISODIGIT instead of isdigit.
5513
5514         * ftp.c (getftp): Print time.
5515
5516         * main.c (main): Use legible output of downloaded quantity.
5517
5518         * ftp.c (getftp): Use elapsed_time().
5519         (ftp_loop_internal): Use rate().
5520
5521         * http.c (http_loop): Add download ratio output; Use rate().
5522
5523         * utils.c (rate): New function.
5524
5525 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
5526
5527         * http.c (http_loop): Use timer.
5528
5529         * ftp.c: Split to ftp-basic.c and ftp.c
5530
5531         * utils.c (reset_timer): New function.
5532         (elapsed_time): New function.
5533
5534         * retr.c (show_progress): Make bytes_in_line and offs long; should
5535         work on 16-bit machines.
5536
5537 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
5538
5539         * url.c (in_acclist): New argument backward.
5540
5541         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
5542         a file should be retrieved according to suffix.
5543         (ftp_get_listing): Check the return value of unlink; Do not call
5544         ftp_retrieve_dirs if depth reached maxreclevel.
5545         (ftp_retrieve_dirs): Check whether the directory is in
5546         exclude-list.
5547
5548         * main.c (main): Print the version number at the beginning of
5549         DEBUG output.
5550         (main): Use strrchr when creating exec_name.
5551
5552         * ftp.c (ftp_retrieve_glob): Do not close control connection.
5553
5554         * version.c: Changed version to 1.4b25.
5555
5556 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
5557
5558         * version.c: "Released" 1.4b24.
5559
5560         * Makefile.in: Rewrite.
5561
5562         * ftp.c (ftp_loop_internal): Likewise.
5563
5564         * retr.c (time_str): Check for failed time().
5565
5566         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
5567         HTML3.0.
5568
5569         * retr.c (time_str): Return time_t *.
5570
5571         * connect.c (bindport): Close msock on unsuccesful bind.
5572         (bindport): The same for getsockname and listen.
5573
5574         * retr.c (retrieve_url): Allow any number of retries on
5575         proxy.
5576
5577         * http.c (gethttp): Do not treat errno == 0 as timeout.
5578         (http_loop): Likewise.
5579         (http_loop): Cosmetic changes.
5580
5581         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
5582
5583         * retr.c (get_contents): Reset errno.
5584
5585         * ftp.c (getftp): Minor fixes.
5586
5587 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5588
5589         * http.c: Do not use backups.
5590
5591         * geturl.1 (WARNING): Warn that man-page could be obsolete.
5592
5593         * getopt.c (getopt_long): Moved to getopt.c
5594
5595         * geturl.texi: Enhanced.
5596
5597         * main.c (main): Use it.
5598
5599         * recur.c (convert_all_links): New function.
5600
5601         * utils.c (add_slist): New argument flags.
5602
5603         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
5604         (parse_robots): Do not chuck out empty value fields.
5605         (parse_robots): Make yourself welcome on empty Disallow.
5606
5607         * version.c: Changed version to 1.4b24.
5608
5609 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
5610
5611         * version.c: "Released" 1.4b23.
5612
5613         * ftp.c (ftp_loop_internal): Get the time after getftp.
5614
5615         * Makefile.in (install.info): New target.
5616         (install): Use it.
5617
5618         * http.c (http_loop): Fix output when doing -O.
5619
5620 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5621
5622         * geturl.texi: New file.
5623
5624         * main.c (main): Do not print the warnings and download summary if
5625         opt.quiet is set.
5626
5627         * version.c: Changed version to 1.4b23.
5628
5629 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
5630
5631         * "Released" 1.4b22.
5632
5633         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
5634         to avoid redefinition warnings.
5635
5636         * host.c (store_hostaddress): Use memcpy() to copy the address
5637         returned by inet_addr.
5638
5639         * version.c: Changed version to 1.4b22.
5640
5641 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
5642
5643         * version.c: "Released" 1.4b21.
5644
5645         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
5646
5647         * ftp.c (ftp_port): Use conaddr.
5648         (getftp): Print the file length.
5649         (ftp_retrieve_list): Check the stamps of plain files only.
5650
5651         * connect.c (closeport): Do not call shutdown().
5652         (conaddr): New function.
5653
5654         * html.c (ftp_index): Made it dfp-aware.
5655
5656         * init.c (cleanup): New name of freemem. Close opt.dfp.
5657
5658         * ftp.c (getftp): Use opt.dfp if it is set.
5659
5660         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
5661
5662         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
5663         CWDs to be sent with recursive FTP retrievals.
5664
5665 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
5666
5667         * recur.c (parse_robots): Made it more compliant with "official"
5668         specifications.
5669
5670         * http.c: New function.
5671
5672         * ftp-unix.c (ftp_parse_ls): Added better debug output.
5673
5674         * ftp.c (getftp): Print out the LIST in case of
5675         opt.print_server_response.
5676
5677         * version.c: Changed version to 1.4b21.
5678
5679 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
5680
5681         * version.c: "Released" 1.4b20.
5682
5683         * README: Update.
5684
5685         * http.c (gethttp): Preset lengths of various headers instead of
5686         calculating them dynamically.
5687         (gethttp): Check for 206 partial contents.
5688
5689 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
5690
5691         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
5692
5693         * http.c (gethttp): Send the port number in the Host: header.
5694
5695 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
5696
5697         * http.c (gethttp): Send host: header.
5698         (gethttp): Add the possibility of user-defined headers.
5699         (gethttp): Move decision about pragma: no-cache to http_loop,
5700         where it belongs.
5701         (gethttp): Pass a struct instead of enormous argument list.
5702         (http_loop): Use a new, fancier display format.
5703         (ftp_loop): Likewise.
5704
5705         * main.c: (hangup): Turn off buffering of the new log file.
5706
5707         * install-sh: Likewise.
5708
5709         * config.sub: Replace with the one in autoconf-2.10
5710
5711         * geturl.1: Update.
5712
5713         * init.c: New options httpuser and httppasswd.
5714
5715         * http.c: (base64_encode_line): New function.
5716         (gethttp): Send authentication.
5717
5718         * connect.c (make_connection): Use store_hostaddress.
5719
5720 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
5721
5722         * host.c (store_hostaddress): New function.
5723
5724         * NEWS: Update.
5725
5726         * http.c (hgetrange): New function.
5727         (gethttp): Use ranges.
5728
5729         * utils.c (numdigit): Accept long instead of int.
5730
5731         * http.c (http_loop): Add restart capabilities.
5732
5733         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
5734         being used uninitialized.
5735         (ftp_retrieve_list): Similar fix.
5736
5737         * host.c (add_hlist): Fixed a bug that could cause cmp being used
5738         uninitialized.
5739
5740         * url.c (construct_relative): New function.
5741
5742         * recur.c (recursive_retrieve): Use it.
5743
5744         * retr.c (convert_links): New function.
5745
5746 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
5747
5748         * url.c (free_urlpos): New function.
5749
5750         * recur.c (recursive_retrieve): Adapt.
5751
5752         * url.c (get_urls_html): Return a linked list instead of a vector.
5753
5754         * url.c (get_urls_file): Return a linked list instead of a vector.
5755
5756         * geturl.1: Update.
5757
5758         * http.c (gethttp): Implement it.
5759
5760         * init.c (setval): New option: SAVEHEADERS
5761
5762         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
5763         be retrieved. Lack of this test caused bugs when the connection
5764         was lost during listing.
5765
5766         * retr.c (retrieve_url): Fixed a bug that caused
5767         coredumps. *newloc is now reset by default.
5768         (retrieve_url): Lift the twenty-tries limit on proxies.
5769
5770         * version.c: Changed version to 1.4b20.
5771
5772 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
5773
5774         * version.c: "Released" 1.4b19.
5775
5776 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
5777
5778         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
5779         (getftp): Changed prototype to accept ccon *.
5780
5781 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
5782
5783         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
5784         incorrect values to files pointed to by symbolic links.
5785         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
5786
5787 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
5788
5789         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
5790
5791         * main.c (main): New option: --user-agent.
5792
5793         * geturl.1: Ditto.
5794
5795         * init.h: Ditto.
5796
5797         * init.c (setval): Ditto.
5798
5799         * main.c (main): Rename "server-headers" to "server-response".
5800
5801         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
5802         executables in 'ls -F' listings.
5803
5804 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
5805
5806         * url.c (parseurl): Remove realloc() and sprintf().
5807         (str_url): Get rid of sprintf().
5808
5809         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
5810         servers.
5811
5812         * url.h (URL_CLEANSE): Made it else-resistant.
5813         (USE_PROXY): New macro.
5814
5815 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
5816
5817         * NEWS: Update.
5818
5819         * version.c: Changed version to 1.4b19.
5820
5821 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
5822
5823         * version.c: "Released" 1.4b18.
5824
5825         * url.c: Made it reallocate space exponentially.
5826
5827 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
5828
5829         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
5830         the list of stuff to fetch.
5831
5832 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
5833
5834         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
5835         -Fi.
5836
5837         * html.c (htmlfindurl): Rewrite.
5838
5839         * http.c (gethttp): Use opt.proxy_cache.
5840
5841         * main.c (main): Added --cache option.
5842
5843         * ftp.c (ftp_response): Print server response if opt.print_server
5844         response is set.
5845         (getftp): Print newlines after each request if the server response
5846         is to be printed.
5847         (ftp_response): Copy the last response line to last_respline.
5848
5849         * http.c (gethttp): Add Pragma: nocache for retried
5850         proxy-retrievals.
5851
5852         * ftp.c (getftp): Use it.
5853
5854         * retr.c (buf_discard): New function.
5855
5856         * ftp.c (ftp_response): Use buf_readchar().
5857         (getftp): Flush the control connection buffer before calling
5858         get_contents().
5859
5860         * retr.c (buf_readchar): New function.
5861         (buf_flush): New function.
5862         (get_contents): Use buf_readchar() instead of read(x, x, 1).
5863         (get_contents): Use buf_flush.
5864
5865 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
5866
5867         * ftp.c: Incorporate changes to ftp_response.
5868
5869         * ftp.c (ftp_response): Allocate the server response dynamically,
5870         as in read_whole_line and fetch_next_header.
5871
5872         * utils.c (read_whole_line): Fixed a bug that prevented reading
5873         the last line if it is not \n-terminated. Also fixed a possible
5874         memory overflow.
5875
5876         * http.c (fetch_next_header): Return malloc-ed string as large as
5877         needed.
5878         (gethttp): Use new fetch_next_header.
5879
5880 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
5881
5882         * http.c (hgetlen): Compute the header length the first time only.
5883         (hgettype): Ditto.
5884         (hgetlocation): Ditto.
5885         (hgetmodified): Ditto.
5886
5887 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
5888
5889         * sample.geturlrc: Update.
5890
5891 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
5892
5893         * http.c (http_loop): Ditto.
5894
5895         * ftp.c (getftp): Open the output file as binary.
5896
5897         * version.c: Changed version to 1.4b18.
5898
5899 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
5900
5901         * version.c: "Released" 1.4b17.
5902
5903         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
5904         instead of failed assertion.
5905
5906 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
5907
5908         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
5909         if a file of that name already exists.
5910
5911 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
5912
5913         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
5914
5915         * config.h.in: Define gethostbyname as Rgethostbyname when using
5916         Socks.
5917
5918         * configure.in: Check for -lresolv if using Socks.
5919
5920         * version.c: Changed version to 1.4b17.
5921
5922 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
5923
5924         * version.c: "Released" 1.4b16.
5925
5926         * http.c (gethttp): More intelligent check for first line of HTTP
5927         response.
5928         (gethttp): Would bug out on time-stamping.
5929
5930         * version.c: Changed version to 1.4b16.
5931
5932 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
5933
5934         * version.c: Released 1.4b15.
5935
5936         * http.c (http_loop): Print \n after the loop entry, not before.
5937
5938         * url.c (url_filename): Use ISDOT.
5939
5940         * url.h (ISDOT): New macro.
5941
5942         * recur.c (recursive_retrieve): Change only opt.recursive for
5943         following FTP.
5944
5945 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
5946
5947         * socks/geturl.cgi: Fixed version No.
5948
5949         * socks/download-netscape.html: Ditto.
5950
5951         * socks/download.html: Changed socks.html to download.html.
5952
5953 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
5954
5955         * url.c (url_filename): Check for opt.dirstruct instead for
5956         opt.recursive && opt.dirstruct.
5957
5958         * init.c (defaults): Ditto.
5959         (defaults): Reset dirstruct by default.
5960         (setval): Set opt.dirstruct whenever setting recursive.
5961
5962         * init.h: Removed FORCEDIRHIER.
5963
5964         * INSTALL: Added -L to socks-description.
5965
5966         * version.c: Changed version to 1.4b15.
5967
5968 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
5969
5970         * version.c: "Released" 1.4b14.
5971
5972         * geturl.1: Update AUTHOR to include Rosella as contributor.
5973
5974         * NEWS: Update.
5975
5976         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
5977
5978         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
5979         (cal_time): Fix == to eq.
5980
5981         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
5982
5983         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
5984
5985         * Makefile.in: Use @VERSION@.
5986
5987         * configure.in: Check version from version.c.
5988
5989         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
5990
5991         * socks/download.html: Created from download-netscape.html, made
5992         HTML-2.0 compliant.
5993
5994         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
5995         following FTP links from recursions.
5996
5997 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
5998
5999         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6000         absolute directories correctly.
6001
6002         * version.c: Changed version to 1.4b14.
6003
6004 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6005
6006         * version.c: "Released" 1.4b13.
6007
6008         * url.c (make_backup): New function.
6009
6010         * http.c (http_loop): Make a backup copy of the local file (using
6011         rename(2)) before opening it.
6012
6013         * main.c (main): Added --backups.
6014
6015         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6016         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6017         (ftp_getaddress): Check for empty, null or (null) domain.
6018
6019         * url.c (get_urls_html): If this_url is NULL, the base must have a
6020         protocol.
6021         (parseurl): Use has_proto.
6022
6023         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6024         retries.
6025
6026         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6027         if it is not already there.
6028         (has_proto): New function.
6029         (get_urls_html): Eliminate the remaining call to findurl -- use
6030         has_proto.
6031
6032         * geturl.1: Ditto.
6033
6034         * main.c: Change -X to -x.
6035
6036         * url.c (url_filename): Simplify creation of filename if
6037         prefix_files is set.
6038         (url_filename): Simplify everything. And I do mean *everything*.
6039         (mkstruct): Add dir_prefix before hostname.
6040         (path_simplify): Fixed a bug that caused writing outside the path
6041         string in case of "." and ".." path strings.
6042
6043 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6044
6045         * init.c: Added --mirror.
6046
6047         * main.c (main): Added -X to force saving of directory hierarchy.
6048
6049         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6050         (ftp_retrieve_list): Check whether quota is exceeded.
6051
6052         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6053
6054         * http.c (gethttp): Use referer if present.
6055
6056         * recur.c (recursive_retrieve): Set u->referer before calling
6057         retrieve_url.
6058
6059         * url.c (newurl): Use memset to nullify the struct members.
6060         (freeurl): Free the referer field too.
6061
6062         * url.h: Added referer to urlinfo.
6063
6064         * geturl.1: Updated the manual to document some of the new features.
6065
6066         * utils.c (numdigit): Moved from url.c.
6067
6068         * README: Rewritten.
6069
6070         * config.h.in: Add the support for socks.
6071
6072         * configure.in: Add the support for socks.
6073
6074         * url.c (url_filename): If the dir_prefix is ".", work with just
6075         the file name.
6076         (url_filename): Do not look for .n extensions if timestamping if
6077         turned on.
6078
6079         * retr.c (show_progress): Skip the over-abundant restval data, and
6080         print the rest of it with ',' instead of '.'.
6081
6082 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6083
6084         * retr.c (show_progress): Changed second arg. to long (as it
6085         should be).
6086         (show_progress): Moved to retr.c.
6087         (get_contents): Moved to retr.c.
6088
6089         * version.c: Change version to 1.4b13.
6090
6091 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6092
6093         * url.c (in_acclist): Would return after the first suffix.
6094
6095 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6096
6097         * version.c: "Released" 1.4b12.
6098
6099         * url.c (path_simplify): More kludgifications.
6100         (get_urls_html): Use new parameters for htmlfindurl.
6101
6102         * html.c: Removed memorizing "parser states", since the new
6103         organization does not require them.
6104
6105         * init.c (run_geturlrc): Use read_whole_line.
6106
6107         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6108
6109         * recur.c (parse_robots): Use read_whole_line.
6110
6111         * utils.c (read_whole_line): New function.
6112
6113         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6114
6115         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6116         tested on OSF and Ultrix.
6117         (add_hlist): New function.
6118         (free_hlist): New function.
6119         (search_host): New function.
6120         (search_address): New function.
6121         (realhost): Use search_host, search_address and add_hlist.
6122         (same_host): Replaced realloc() with strdupdelim(), made
6123         case-insensitive, fixed a memory leak.
6124
6125         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6126         tm_min, like intended.
6127
6128         * version.c: Change user agent information to
6129         Geturl/version.
6130
6131 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6132
6133         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6134
6135         * url.c (acceptable): Always accept directories.
6136
6137         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6138         servers by stripping trailing @ from symlinks and trailing / from
6139         directories.
6140
6141         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6142
6143         * url.c (skip_url): Use toupper instead of UCASE.
6144
6145         * host.c (sufmatch): Made it case-insensitive.
6146
6147         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6148         (match_backwards): New function, instead of
6149         match_backwards_or_pattern.
6150
6151         * recur.c (recursive_retrieve): Increased performance by
6152         introducing inl, which reduces number of calls to in_slist to only
6153         one.
6154
6155         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
6156         routine to use.
6157
6158         * main.c (printhelp): Removed the warranty stuff.
6159
6160 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
6161
6162         * url.c (add_slist): Simplify.
6163         (match_backwards_or_pattern): New function.
6164         (in_acclist): Use match_backwards_or_pattern.
6165         (matches): Remove.
6166
6167 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
6168
6169         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
6170         recursive.
6171
6172         * html.c (ftp_index): Fixed to work. Beautified the output.
6173
6174         * ftp.c (ftp_retrieve_glob): Another argument to control whether
6175         globbing is to be used.
6176         (ftp_retrieve_list): Compare the time-stamps of local and remote
6177         files to determine whether to download.
6178
6179 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
6180
6181         * ftp.c (rel_constr): New function.
6182
6183         * retr.c (retrieve_from_file): Check for text/html before
6184         retrieving recursively.
6185
6186         * main.c (main): Check whether the file is HTML before going into
6187         recursive HTML retrieving.
6188
6189         * ftp.c (ftp_retrieve_list): Manage directories.
6190         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
6191         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
6192         initialized, causing bugchecks in getftp to fail.
6193
6194         * configure.in: Check for symlink.
6195
6196         * ftp.c (ftp_retrieve_list): Added support for symlinks.
6197
6198         * version.c: "Released" 1.4b10.
6199
6200         * atotm.c (atotm): Redeclared as time_t.
6201
6202         * init.c: New variable "timestamping".
6203
6204         * main.c (main): New option 'N'.
6205
6206         * http.c (hgetlocation): Case-insensitive match.
6207         (hgetmodified): New function.
6208         (http_loop): Implement time-stamping.
6209
6210 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
6211
6212         * version.c: Changed version to 1.4b10
6213
6214         * atotm.c: New file, from phttpd.
6215
6216         * options.h (struct options): New parameter timestamping.
6217
6218         * version.c: 1.4b9 "released".
6219
6220         * recur.c (recursive_retrieve): Used linked list (ulist) for
6221         faster storing of URLs.
6222
6223         * url.c (get_urls_html): Removed the old kludge with comparing the
6224         outputs of htmlfindurl and findurl.
6225         (get_urls_html): Added better protocol support here.
6226         (create_hash): Removed, as well as add_hash and in_hash.
6227         (addslist): New function.
6228         (in_slist): ditto
6229
6230         * version.c: Released 1.4b8, changed version to b9.
6231
6232 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6233
6234         * ftp.c (freefileinfo): New function.
6235         (delelement): New function.
6236
6237         * everywhere: GPL!
6238
6239         * ftp.c (ftp_loop): Use ccon.
6240         (ftp_retrieve_glob): Likewise.
6241
6242         * ftp.h: Define ccon, to define status of control connection.
6243
6244         * ftp.c (ftp_get_listing): New function.
6245         (ftp_retrieve_more): New function.
6246         (ftp_retrieve_glob): New function.
6247
6248 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
6249
6250         * configure.in: Removed the search for cuserid().
6251
6252         * init.c (getmode): Renamed to getperms.
6253
6254 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
6255
6256         * version.c: New version.
6257
6258         * main.c (hangup): New function, that handles hangup. Hangup
6259         signal now causes geturl to stop writing on stdout, and to write
6260         to a log file.
6261
6262         * ftp.c (getftp): "Released" 1.4b7.
6263
6264         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
6265         (ftp_index): Use fileinfo/urlinfo.
6266
6267         * ftp-unix.c (ftp_parse_ls): New function.
6268         (symperms): New function.
6269
6270         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
6271
6272         * retr.c (retrieve_url): Added FTP support.
6273
6274 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6275
6276         * geturl.h: Removed NOTFTP2HTML enum.
6277         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
6278
6279         * ftp.c (getftp): Resynched with urlinfo.
6280         (getftp): Removed HMTL-ization of index.html from getftp.
6281
6282         * version.c: 1.4b6 "released".
6283
6284         * options.h (options): New struct, to keep options in.
6285
6286         * http.c (http_loop,gethttp): Synched with proxy.
6287
6288         * retr.c (retrieve_url): Implemented proxy retrieval.
6289
6290         * main.c (main): Use retrieve_from_file.
6291
6292 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
6293
6294         * retr.c (retrieve_from_file): New function.
6295
6296         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
6297         can be found in u->proto.
6298
6299         * ftp.c (ftp_response): Fixed to accept multi-line responses as
6300         per RFC 959.
6301
6302         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
6303
6304         * url.c (mymkdir): Removed the file of the same name, if one
6305         exists.
6306         (isfile): New function.
6307         (mkstruct): Fixed the '/' glitches.
6308         (path_simplify): Hacked to treat something/.. correctly.
6309
6310 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6311
6312         * http.c (gethttp): Close the socket after error in headers.
6313         (http_loop): HEOF no longer a fatal header.
6314
6315         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6316         simplifies the syntax of calling retrieve_url.
6317
6318         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6319
6320         * url.c (get_urls_file): New function.
6321         (get_urls_html): New function.
6322
6323         * recr.c (recursive_retrieve): Patched up to conform to the
6324         standards.
6325
6326         * http.c (gethttp): Synched with the rest...
6327         (gethttp): Treat only CONREFUSED specially, with connection
6328         errors.
6329
6330         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6331
6332 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6333
6334         * http.c (http_loop): New function.
6335
6336         * loop.c: Removed *lots* of stuff from retrieve_url.
6337
6338         * url.c (parseurl): Changed to work with urlinfo. Integrated
6339         username finding and path parsing.
6340         (newurl): New function.
6341         (freeurl): New function.
6342         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6343         (url_filename): Likewise.
6344         (path_simplify): Accept relative paths too.
6345         (opt_url): Made urlinfo-compliant, removed bogosities.
6346         (path_simplify): Expanded to accept relative paths.
6347         (str_url): A replacement for hide_url
6348         (decode_string): Fixed a bug that caused malfunctioning when
6349         encountering an illegal %.. combination.
6350         (opt_url): Removed the argument. Dot-optimizations are now default.
6351
6352         * nmalloc.c (strdupdelim): New function.
6353
6354         * url.h: Added the urlinfo structure
6355
6356 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6357
6358         * url.c (hide_url): Thrown out the protocol assertion. Do not
6359         change the URL if the protocol if not recognized.
6360         (findurl): Put continue instead of break.
6361
6362 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6363
6364         * sample.geturlrc: Changed the defaults to be commented out and
6365         harmless (previous defaults caused pains if copied to
6366         ~/.geturlrc).
6367
6368         * http.c (gethttp): Print the HTTP request in debug mode.
6369
6370         * connect.c (iread): Added EINTR check loop to select-ing
6371         too. EINTR is now correctly handled with select().
6372
6373         * TODO: new file
6374
6375 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
6376
6377         * host.c (same_host): Made the function a little bit more
6378         intelligent regarding diversified URL syntaxes.
6379
6380         * url.c (skip_url): Spaces are now skipped after URL:
6381
6382         * Released 1.3.1 with the patch to prevent crashing when sending
6383         NULL to robot* functions and the patch to compile "out of the box"
6384         on AIX.
6385
6386         * recr.c (recursive_retrieve): Added checking whether this_url is
6387         NULL when calling the robot functions.
6388
6389         * ChangeLog: New file.