]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Fix broken cast of BIT to unsigned char.
[wget] / src / ChangeLog
1 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
2
3         * safe-ctype.h (_sch_test): The cast of BIT to unsigned char was
4         broken -- _sch_istable bitmasks are 16-bit, not 8-bit!  Cast BIT
5         to unsigned short instead.
6
7 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
8
9         * url.c (path_simplify): Instead of calls to memmove, handle "./"
10         and "../" by advancing pointers.
11
12 2003-09-22  Hrvoje Niksic  <hniksic@xemacs.org>
13
14         * retr.c (getproxy): Moved from url.c.
15
16         * convert.c: Split off link conversion from url.c into separate
17         file.  Also included the book-keeping stuff from recur.c.
18
19 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
20
21         * init.c: Improved documentation of functions.
22         (cmd_boolean): Attempt to make code that tries to avoid calling
23         strcmp for "speed" a bit more readable.
24
25         * init.c (simple_atof): Report error on encountering non-digit,
26         non-"." character.
27         (simple_atoi): Replacement for myatoi(), calling interface
28         compatible with simple_atof.  Updated myatoi's callers.
29
30 2003-09-21  Bertrand Demiddelaer  <bert@b3rt.org>
31
32         * url.c (path_simplify): Would read two bytes past the end of the
33         string in the "./" case.
34
35 2003-09-21  Matthew J. Mellon  <mellon@tymenet.com>
36
37         * http.c (gethttp): Recognize content-type "application/xhtml+xml"
38         as what Wget considers "text/html".
39
40 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
41
42         * connect.c (connect_with_timeout): Made timeout type double.
43
44         * options.h (struct options): New members read_timeout,
45         dns_timeout, and connect_timeout.
46         Use them.
47
48 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
49
50         * init.c (simple_atof): New function.
51         (cmd_time): Use it.
52         (cmd_bytes): Accept things like "1.5k" and such.  Use simple_atof
53         to parse decimals.
54
55         * retr.c (limit_bandwidth): Adjust each sleep by the error of the
56         previous one.
57
58 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
59
60         * main.c (main): Use setoptval() for setting the options.  Use
61         run_command for `-e'.
62
63         * init.c (parse_line): Rewritten to return COMIND right away.
64         Changed linkage to static.
65         (run_wgetrc): Use the available comind when calling setval, so it
66         doesn't have to be computed twice.
67         (setval_internal): New function, runs the command's action without
68         any error checking.
69         (setoptval): New function, does what setval used to do, but exits
70         in case of error.
71         (run_command): New function.
72
73 2003-09-21  Hrvoje Niksic  <hniksic@xemacs.org>
74
75         * connect.c (select_fd): Change MAXTIME's type to double.  Handle
76         its decimal part.
77
78         * retr.c (sleep_between_retrievals): In the random-wait case, use
79         random_float() to wait between 0 and 2*opt.wait seconds.
80
81         * utils.c (run_with_timeout): Accept `double' timeouts.  Correctly
82         handle timeout values in (0, 1) range.
83         (random_float): New function.
84
85         * options.h (struct options): Change the types of wait, waitretry,
86         and timeout to double.
87
88         * init.c (cmd_time): Accept floating point time.
89
90 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
91
92         * retr.c (get_contents): Cosmetic fixes.
93
94 2003-09-20  Hrvoje Niksic  <hniksic@xemacs.org>
95
96         * url.c (uri_merge): Get rid of uri_merge_1.
97         (uri_merge): Merge "foo//", "bar" as "foo//bar", not "foo///bar",
98         i.e. don't add an extra slash merely because BASE ends with two
99         slashes.
100         (parse_credentials): Renamed from parse_uname.  Rewrittern in
101         standard [beg, end) calling style.
102         (url_skip_credentials): Renamed from url_skip_uname.  Made static.
103         (url_skip_credentials): Include # and ; as terminators.  Old code
104         would mistakenly consider "http://foo.com#hniksic@iskon.hr" to
105         contain a username.
106         (url_skip_scheme): Removed because it was unused.
107         (url_has_scheme): Require "scheme" to be at least one char long.
108
109 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
110
111         * url.c (url_file_name): Expect NULL dir_prefix.
112
113         * init.c (cmd_file): Use a macro to prevent multiple #ifdef
114         WINDOWS.
115         (defaults): Set dir_prefix to NULL by default.
116
117 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
118
119         * safe-ctype.h (_sch_test): Cast BIT to unsigned char, like latest
120         gcc does.
121
122 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
123
124         * wget.h (BOUNDED_TO_ALLOCA): Evaluate PLACE only once.
125         (ARRAY_SIZE): Renamed to countof.  All callers updated.
126
127 2003-09-19  Hrvoje Niksic  <hniksic@xemacs.org>
128
129         * main.c (main): New option --strict-comments.
130
131         * html-parse.c (find_comment_end): New function: simple BM search
132         for "-->".
133         (map_html_tags): Use it if looking at a comment and not in strict
134         comments mode.
135
136 2003-09-17  Aurelien Marchand  <artaxerxes@users.sf.net>
137
138         * ftp.h: Added OS400 system in enum
139         * ftp-basic.c: recognize OS400 systems
140         * ftp.c: don't prepend the CWD if talking to OS400, since it
141         breaks the change in library
142
143 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
144
145         * retr.c (get_contents): Pass the correct argument to ssl_iread.
146
147 2003-09-18  Hrvoje Niksic  <hniksic@xemacs.org>
148
149         * safe-ctype.h: Don't #define ctype.h macros to errors because
150         that loses when someone #include's ctype.h after safe-ctype.h.
151
152 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
153
154         * url.c: Undef U, W, C after use.
155
156 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
157
158         * init.c (cmd_spec_restrict_file_names): Allow the OS setting to
159         be augmented by ",nocontrol" which means don't escape the control
160         characters, but otherwise keep OS settings.
161
162         * url.c (file_unsafe_char): Deleted.
163         (append_uri_pathel): Query filechr_table directly.
164         (filechr_table): Separated Unix, Windows, and control-unsafe
165         characters.
166
167 2003-09-17  Hrvoje Niksic  <hniksic@xemacs.org>
168
169         * url.c (url_escape_1): New function.
170         (url_escape): Use it.
171         (sync_path): Handle pathological cases where u->file and u->dir
172         contain really strange characters.
173         (ENCODE): Deleted.
174         (REENCODE): Deleted.
175
176 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
177
178         * url.c (url_file_name): Don't reallocate FNAME if the file
179         doesn't exist, as is usually the case.
180
181         * utils.c (unique_name): New flag allow_passthrough.
182
183 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
184
185         * utils.c (wtimer_sys_diff): Convert the time difference to signed
186         __int64, then to double.  This works around MS VC++ 6 which can't
187         convert unsigned __int64 to double directly.
188
189 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
190
191         * Makefile.in (clean): Also remove the core.<number> files
192         produced by recent Linux systems.
193
194 2003-09-16  Hrvoje Niksic  <hniksic@xemacs.org>
195
196         * http.c (post_file): Don't pad the file if it's not large
197         enough.  Bail out instead.
198
199 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
200
201         * retr.c (get_contents): Reduce the buffer size to the amount of
202         data that may pass through for one second.  This prevents long
203         sleeps when limiting bandwidth.
204
205         * connect.c (connect_to_one): Reduce the socket's RCVBUF when
206         bandwidth limitation to small values is requested.
207
208 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
209
210         * progress.c (update_speed_ring): Moved the speed ring update to a
211         separate function and documented it better.
212
213         * progress.c: Use `double' for most timers to support granularity
214         smaller than 1ms.
215
216 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
217
218         * wget.h (XDIGIT_TO_XCHAR): Implement as index into a literal
219         string.
220         (XDIGIT_TO_xchar): Ditto.
221
222 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
223
224         * utils.c: Change the type of timer-related functions from long to
225         double, for better precision.  On machines supporting gettimeofday
226         the timers now work with granularity of less than one millisecond.
227
228 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
229
230         * cookies.c (parse_set_cookies): Fixed the parser to handle more
231         edge conditions.
232         (test_cookies): New function, contains a test suite for
233         parse_set_cookies.
234
235 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
236
237         * url.c (strpbrk_or_eos): Implement as a macro under Gcc.
238
239 2003-09-15  Hrvoje Niksic  <hniksic@xemacs.org>
240
241         * cookies.c (parse_set_cookies): Allow trailing space in
242         set-cookies header.  Also, allow any amount of whitespace, not
243         only one character.  Allow empty set-cookies header without
244         spewing an error.
245
246 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
247
248         * url.c (append_uri_pathel): Use opt.restrict_file_names when
249         calling file_unsafe_char.
250
251         * init.c: New command restrict_file_names.
252
253         * main.c (main): New option --restrict-file-names[=windows,unix].
254
255         * url.c (url_file_name): Renamed from url_filename.
256         (url_file_name): Add directory and hostdir prefix here, not in
257         mkstruct.
258         (append_dir_structure): New function, does part of the work that
259         used to be in mkstruct.  Iterates over path elements in u->path,
260         calling append_uri_pathel on each one to append it to the file
261         name.
262         (append_uri_pathel): URL-unescape a path element and reencode it
263         with a different set of rules, more appropriate for handling of
264         files.
265         (file_unsafe_char): New function, uses a lookup table to decide
266         whether a character should be escaped for use in file name.
267         (append_string): New utility function.
268         (append_char): Ditto.
269         (file_unsafe_char): New argument restrict_for_windows, decide
270         whether Windows file names should be escaped in run-time.
271
272         * connect.c: Include <stdlib.h> to get prototype for abort().
273
274 2003-09-14  Hrvoje Niksic  <hniksic@xemacs.org>
275
276         * utils.c (wtimer_sys_set): Extracted the code that sets the
277         current time here.
278         (wtimer_reset): Call it.
279         (wtimer_sys_diff): Extracted the code that calculates the
280         difference between two system times here.
281         (wtimer_elapsed): Call it.
282         (wtimer_elapsed): Don't return a value smaller than the previous
283         one, which could previously happen when system time is set back.
284         Instead, reset start time to current time and note the elapsed
285         offset for future calculations.  The returned times are now
286         guaranteed to be monotonically nondecreasing.
287
288 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
289
290         * host.c (lookup_host): Print the result of the DNS lookup.
291
292 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
293
294         * init.c (cmd_boolean): Accept yes/no along with on/off.
295         (cmd_lockable_boolean): Ditto.
296
297 2003-09-10  Hrvoje Niksic  <hniksic@xemacs.org>
298
299         * init.c: New command dns_cache.
300
301         * main.c (main): New option --dns-cache[=off].
302
303 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
304
305         * config.h.in: Initialize HAVE_GETADDRINFO and ENABLE_IPV6.
306
307         * all: Use #ifdef ENABLE_IPV6 instead of the older INET6.  Use
308         HAVE_GETADDRINFO for getaddrinfo-related stuff.
309
310 2003-09-09  Hrvoje Niksic  <hniksic@xemacs.org>
311
312         * url.c (url_parse): Return an error if the URL contains a [...]
313         IPv6 numeric address and we don't support IPv6.
314
315 2003-09-05  Hrvoje Niksic  <hniksic@xemacs.org>
316
317         * url.c (is_valid_ipv6_address): Modified to not require
318         zero-terminated strings.
319         (is_valid_ipv4_address): Ditto.
320
321 2003-09-05  Mauro Tortonesi <mauro@deepspace6.net>
322
323         src/url.c: added RFC 2732 compliance for URL parsing. The
324         functions is_*_address valid are a modified version of
325         glibc 2.3.2 inet_pton's code.
326
327 2003-09-03  Ahmon Dancy  <dancy@dancysoft.com>
328
329         * main.c init.c options.h: Added --retry-connrefused option so
330         that Connection Refused failures are treated as non-fatal (when
331         trying to retrieve from busy servers).
332
333         * wget.h: New CONNECT_ERROR macro for encapsulating this
334         modification.
335
336         * ftp.c http.c : Use CONNECT_ERROR macro in places where
337         ECONNREFUSED was checked.
338
339 2003-01-11  Ian Abbott  <abbotti@mev.co.uk>
340
341         * ftp.c (ftp_retrieve_glob): Reject insecure filenames as determined
342         by calling new function has_insecure_name_p.  This is based on a
343         patch by Red Hat.
344
345         * fnmatch.c (has_insecure_name_p): New function: returns non-zero
346         if filename starts with `/' or contains `../' and is therefore
347         considered insecure.
348
349         * fnmatch.h: Declare has_insecure_name_p().
350
351 2002-08-03  Hrvoje Niksic  <hniksic@xemacs.org>
352
353         * init.c (cmd_file): Allocate RESULT correctly.
354
355 2002-07-24  Hrvoje Niksic  <hniksic@xemacs.org>
356
357         * recur.c (retrieve_tree): Check whether downloaded_html_set is
358         non-NULL before using it.
359
360 2002-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
361
362         * html-parse.c (NAME_CHAR_P): Allow almost any character here.
363
364 2002-05-24  Hrvoje Niksic  <hniksic@arsdigita.com>
365
366         * progress.c (bar_set_params): Fall back to dot progress if the
367         terminal type is "emacs".
368
369 2002-05-20  Hrvoje Niksic  <hniksic@arsdigita.com>
370
371         * log.c: Don't #undef WGET_USE_STDARG.
372
373 2002-05-16  Hrvoje Niksic  <hniksic@arsdigita.com>
374
375         * hash.c (prime_size): Store the offset of the prime number in the
376         prime table.  When searching, start with the given offset.
377         (hash_table_new): Pass the pointer to ht->prime_offset to
378         prime_size.
379         (grow_hash_table): Ditto.
380         (prime_size): Make 13 the first prime to make empty hash tables
381         slightly smaller.
382
383 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
384
385         * recur.c (download_child_p): Minor optimization to avoid an
386         unnecessary additional call to schemes_are_similar_p function.
387
388 2002-05-16  Ian Abbott  <abbotti@mev.co.uk>
389
390         * url.c (schemes_are_similar_p): New function to test enumerated
391         scheme codes for similarity.
392
393         * url.h: Declare it.
394
395         * recur.c (download_child_p): Use it to compare schemes.  This
396         also fixes a bug that allows hosts to be spanned (without the
397         -H option) when the parent scheme is https and the child's is
398         http or vice versa.
399
400 2002-05-14  Bill Richardson  <bill@riverstonenet.com>
401
402         * ftp.c (getftp): Don't ftruncate stdout.
403
404         * http.c (gethttp): Don't ftruncate stdout.
405
406 2002-05-09  Ian Abbott  <abbotti@mev.co.uk>
407
408         * cmpt.c (strptime_internal): Synched with glibc-2.1.3.
409         (get_number): Ditto.
410         (get_alt_number): Ditto.
411         (__isleap): New function-like macro used by strptime.
412         (day_of_the_week): New function used by strptime.
413         (day_of_the_year): Ditto.
414         (__mon_yday): Now shared by mktime and strptime implementations.
415
416 2002-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
417
418         * cookies.c (check_domain_match): Use match_tail in case
419         insensitive mode.
420
421         * utils.c (match_tail): Allow the caller to specify case
422         insensitive mode.
423
424         * cookies.c (store_cookie): When expiry_time is 0, print it as
425         undefined, not indefinite.
426
427 2002-05-07  Ian Abbott  <abbotti@mev.co.uk>
428
429         * cookies.c (cookie_jar_process_set_cookie): Do not store
430         discarded cookie.
431
432 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
433
434         * cookies.c (check_domain_match): Allow cookies to be set for
435         subdomains of unknown top-level domains under some circumstances.
436
437 2002-04-21  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
438
439         * gen_ssl.c:
440         - allow checking of server cert
441         - allow defining client cert type
442         - allow limit of ssl protocol
443         - check more return values
444         - added debug message on break
445
446 2002-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
447
448         * recur.c (download_child_p): Revert order of items in check
449         number 6 for clarity.
450
451 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
452
453         * init.c: Ditto.
454
455         * main.c: Ditto.
456
457         * http.c: Use the new interface.
458
459         * cookies.c: Provide an OO-style "cookie jar" interface to enable
460         separate cookie jars.
461
462         * http.c (http_atotm): Declare argument as const.
463
464 2002-04-20  Hrvoje Niksic  <hniksic@arsdigita.com>
465
466         * cookies.c (cookie_new): Default to PORT_ANY.
467         (find_cookie_chain_exact): Only search by DOMAIN.
468         (find_matching_cookie): Also check that PORT matches.
469         (store_cookie): Only match the domain.
470         (set_cookie_header_cb): When a cookie "fakes" a domain, assume it
471         is valid for that host rather than discarding it completely.
472         (find_matching_chains): Don't search by PORT.
473         (matching_cookie): Also match PORT.
474         (load_cookies): Set the port if specified, otherwise leave it as
475         ANY.
476         (save_cookies_mapper): Save the port if specified, otherwise leave
477         it empty.
478
479 2002-04-19  Thomas Lussnig  <thomas.lussnig@bewegungsmelder.de>
480
481         * init.c: The option `egdfile' was not in sort order.
482
483 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
484
485         * ftp.c (getftp): Treat directories that begin with <letter>: as
486         absolute.
487         (getftp): Strip trailing slashes from con->id before merging it
488         with TARGET.
489
490 2002-04-16  Hrvoje Niksic  <hniksic@arsdigita.com>
491
492         * http.c (gethttp): If Content-Type is not given, assume
493         text/html.
494
495 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
496
497         * recur.c (download_child_p): Don't ignore rejection of HTML
498         documents that are themselves leaves of recursion.
499
500 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
501
502         Makefile.in: Updated several dependencies for object files to take
503         account of nested include files.
504
505 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
506
507         Makefile.in: The target `connect$o' (connect.o) now depends on
508         `utils.h'
509
510 2002-04-15  Ian Abbott  <abbotti@mev.co.uk>
511
512         * host.c (SET_H_ERRNO): New function-like macro to set `h_errno'.
513         (gethostbyname_with_timeout): Use it.
514
515         * utils.c: Don't define `SETJMP()', `run_with_timeout_env' or
516         `abort_run_with_timeout()' when `USE_SIGNAL_TIMEOUT' is undefined.
517
518 2002-04-15  Hrvoje Niksic  <hniksic@arsdigita.com>
519
520         * host.c (getaddrinfo_with_timeout): New function.
521         (gethostbyname_with_timeout): Ditto.
522         (lookup_host): Use them.
523
524 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
525
526         * utils.c (number_to_string): Handle the case when n < -INT_MAX.
527
528 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
529
530         * init.c (comind): Use a marginally faster implementation of
531         binary search.  To quote Martin Buchholz, "a nanosecond saved is a
532         nanosecond earned."
533
534 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
535
536         * main.c (print_help): Document `--post-data' and `--post-file'.
537
538 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
539
540         * http.c (gethttp): Ditto.
541
542         * retr.c (retrieve_url): Initialize variables to appease the
543         compiler.
544
545         * gen_sslfunc.c (ssl_iread): Don't handle EINTR when calling
546         select_fd.
547         (ssl_iwrite): Ditto.
548
549         * connect.c (select_fd): Rewrite to handle EINTR.  Set errno to
550         ETIMEDOUT in case of timeout.
551         (iread): No need to handle EINTR when calling select_fd.
552         (iwrite): Ditto.
553
554 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
555
556         * retr.c (retrieve_url): Make sure that POST is not honored for
557         redirections.
558
559         * http.c (gethttp): Send the POST data when requested.
560         (post_file): New function.
561         (gethttp): Use it.
562
563         * main.c (main): Ditto.
564
565         * init.c: Add new options.
566
567         * options.h (struct options): New options post_data and
568         post_file_name.
569
570 2002-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
571
572         * connect.c (connect_with_timeout): Firing SIGALRM can result in
573         connect() exiting with EINTR.  Treat EINTR the same as ETIMEDOUT.
574
575 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
576
577         * connect.c (connect_with_timeout): Use it.
578
579         * utils.c (run_with_timeout): New function.
580
581 2002-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
582
583         * url.c (getproxy): Accept a struct url argument.  This obviates
584         the need for USE_PROXY_P.
585
586         * retr.c (retrieve_url): Allow proxy to be a non-FTP URL.
587
588         * ftp.c (getftp): Recognize FWTK-style proxy.
589
590 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
591
592         * config.h.in: Only define _VA_LIST when compiled with gcc.
593
594 2002-04012  Ian Abbott  <abbotti@mev.co.uk>
595
596         * http.c (http_loop): Compensate for MS Windows two-second
597         granularity of file modification time when comparing timestamps.
598
599         * ftp.c (ftp_retrieve_list): Ditto.
600
601 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
602
603         * utils.c (has_html_suffix_p): New function to test filename for
604         common html extensions.
605
606         * utils.h: Declare it.
607
608         * http.c (http_loop): Use it instead of previous test.
609
610         * retr.c (retrieve_url): Ditto.
611
612         * recur.c (download_child_p): Ditto.
613
614 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
615
616         * config.h.in: Define _VA_LIST on Solaris to prevent stdio.h from
617         declaring va_list.
618         From Kevin Rodgers <kevinr@ihs.com>.
619
620 2002-04-12  Ian Abbott  <abbotti@mev.co.uk>
621
622         * Makefile.in: Specify libtool mode explicitly when linking.
623
624 2002-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
625
626         * connect.c (connect_with_timeout): New function.
627         (connect_to_one): Use it.
628
629         * config.h.in: Add stubs for HAVE_SIGSETJMP, HAVE_SIGBLOCK, and
630         HAVE_SETJMP_H.
631
632 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
633
634         * log.c: Set WGET_USE_STDARG if __STDC__ is defined and stdarg.h
635         is present.
636
637 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
638
639         * progress.c (bar_create): If INITIAL is larger than TOTAL, fix
640         TOTAL.
641         (bar_finish): Likewise.
642
643 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
644
645         * html-url.c (tag_handle_form): New function.  Pick up form
646         actions and mark them for conversion only.
647
648 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
649
650         * progress.c (struct progress_implementation): Use PARAMS when
651         declaring the parameters of *create, *update, *finish, and
652         *set_params.
653
654         * netrc.c: Ditto.
655
656         * http.c: Reformat some function definitions so that ansi2knr can
657         read them.
658
659         * hash.c (struct hash_table): Use the PARAMS macro around
660         parameters in the declaration of hash_function and test_function.
661         (prime_size): Spell 2580823717UL and 3355070839UL as (unsigned
662         long)0x99d43ea5 and (unsigned long)0xc7fa5177 respectively, so
663         that pre-ANSI compilers can read them.
664         (find_mapping): Use PARAMS when declaring EQUALS.
665         (hash_table_put): Ditto.
666
667         * ftp.h: Wrap the parameters of ftp_index declaration in PARAMS.
668
669         * cookies.c (cookie_new): Use (unsigned long)0 instead of 0UL,
670         which was unsupported by pre-ANSI compilers.
671
672         From Nelson H. F. Beebe <beebe@math.utah.edu>, for the most part.
673
674 2002-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
675
676         * url.c (url_filename): Use compose_file_name regardless of
677         whether opt.dirstruct is set.
678         (mkstruct): Don't handle the query and the reencoding of DIR; that
679         is done in compose_file_name.
680
681 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
682
683         * wget.h: Ditto for extern char *exec_name.
684
685         * options.h: Don't guard against OPTIONS_DEFINED_HERE -- it is
686         perfectly legal to follow an `extern' with a non-`extern' ones,
687         provided the types match.
688
689         * main.c: Don't define OPTIONS_DEFINED_HERE.
690
691 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
692
693         * progress.c (create_image): Revert to calculating ETA based on
694         average download speed.
695         (create_image): Don't print ETA until the download has been active
696         for at least 3 seconds.
697         (create_image): When ETA is not available, don't print anything.
698         The previous version would print --:--.
699
700 2002-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
701
702         * progress.c (bar_update): Keep updating a subinterval until it
703         reaches or exceeds a watermark.  That way the measurement will be
704         guaranteed to span a configurable minimum of time.  The current
705         default is 3s in 30 100ms intervals.
706
707 2002-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
708
709         * progress.c (bar_update): Maintain an array of the time it took
710         to perform previous 30 network reads.
711         (create_image): Calculate the download speed and ETA based on the
712         last 30 reads, not the entire download.
713         (create_image): Make sure that the ETA is not changed more than
714         once per second.
715
716 2002-04-09  Ian Abbott  <abbotti@mev.co.uk>
717
718         * mswindows.c (borland_utime): New function conditionally defined
719         when `HACK_BCC_UTIME_BUG' is defined.  A reimplementation of
720         `utime()' as Borland's `utime()' function is broken on Windows 9x
721         systems.  (Original patch by Chin-yuan Kuo <sr1111111@yahoo.com.tw>.)
722
723 2002-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
724
725         * ftp.c (ftp_loop): Propagate the result of ftp_retrieve_glob.
726
727 2002-03-26  Ian Abbott  <abbotti@mev.co.uk>
728
729         * Makefile.in: Updated several dependencies for object files.
730
731 2002-03-20  Ian Abbott  <abbotti@mev.co.uk>
732
733         * mswindows.c: Include "utils.h".
734
735 2002-03-18  Ian Abbott  <abbotti@mev.co.uk>
736
737         * host.h: Don't include netdb.h on windows.
738
739 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
740
741         * recur.c (retrieve_tree): Handle the case when start_url doesn't
742         parse.
743
744 2002-02-19  Andreas Damm  <andreas-sourceforge@radab.org>
745
746         * wget.h (DO_REALLOC_FROM_ALLOCA): Multiply with sizeof(type) when
747         calling xmalloc and memcpy.
748
749 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
750
751         * host.h: Include Unix-specific includes #ifndef WINDOWS.
752         Patch originally provided by Christian Lackas.
753
754 2002-02-11  Christian Lackas  <delta@lackas.net>
755
756         * recur.c: recurive downloading for https fixed.
757
758 2002-02-19  Alan Eldridge  <alane@geeksrus.net>
759
760         * host.h: Also include <netinet/in.h> and <sys/socket.h>.
761
762         * ftp-basic.c: Also include <netinet/in.h>.
763
764 2002-02-05  Ian Abbott  <abbotti@mev.co.uk>
765
766         * http.c (gethttp): when -c used, mark already fully retrieved
767         file as successfully retrieved.
768
769 2002-02-19  Hrvoje Niksic  <hniksic@arsdigita.com>
770
771         * url.c (url_parse): Don't treat '?' as query string separator
772         when parsing FTP URLs.
773
774 2002-02-01  Hrvoje Niksic  <hniksic@arsdigita.com>
775
776         * html-url.c (tag_handle_meta): Don't crash on <meta
777         http-equiv=refresh> where content is missing.
778
779 2002-01-31  Herold Heiko  <Heiko.Herold@previnet.it>
780
781         * ftp-basic.c, host.c: don't include sys/socket.h, arpa/inet.h,
782         netdb.h on windows.
783
784 2002-01-30  Hrvoje Niksic  <hniksic@arsdigita.com>
785
786         * retr.c (retrieve_url): Remove redirection cycle detection.  This
787         is because some sites legitimately redirect the user back to the
788         same location, e.g. after an authorization check performed by
789         another page.  MAX_REDIRECTIONS is still used to prevent infinite
790         redirection loops.
791
792 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
793
794         * http.c (gethttp): Wrap host name in square brackets if it
795         contains a colon.
796
797 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
798
799         * url.c (url_parse): Allow all hex digits, not only decimal ones,
800         to form an IP address.
801
802 2002-01-26  Hrvoje Niksic  <hniksic@arsdigita.com>
803
804         * url.c (urlchr_table): Make square braces reserved, so we can
805         parse http://[::1]/.
806         (url_parse): Handle host in braces.
807         (url_string): If url->host contains colons, wrap it in braces.
808
809 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
810
811         * connect.c (resolve_bind_address): New function.
812         (connect_to_one): Use it.
813         (bindport): Ditto.
814
815         * init.c: Don't resolve bind-address here.
816
817         * host.c (wget_sockaddr_set_address): Would bug out with ADDR == NULL.
818
819 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
820
821         * host.c (lookup_host): Use sizeof(ip4_address) to calculate the
822         offset.
823         (address_list_new): Use map_ipv4_to_ip.
824         (wget_sockaddr_set_address): Convert ADDR to IPv4 before using it
825         in IPv4 context.
826
827 2002-01-24  Hrvoje Niksic  <hniksic@arsdigita.com>
828
829         * source: Integrated IPv6 support.
830         Written by Thomas Lussnig <thomas.lussnig@bewegungsmelder.de>.
831
832 2002-01-15  Ian Abbott  <abbotti@mev.co.uk>
833
834         * init.c (cmd_file): Change `\' to `/' for Windows (yes, really!)
835         (cmd_directory): New function. Like cmd_file(), but strips
836         trailing directory separators.
837         (commands): Change action for "dirprefix" from `cmd_file' to
838         `cmd_directory'.
839
840         * utils.c (make_directory): Allow intermediate `mkdir' calls to
841         fail, as not all path components that do not exist should be
842         directory components, especially under Windows.
843
844 2002-01-17  Hrvoje Niksic  <hniksic@arsdigita.com>
845
846         * netrc.c (parse_netrc): Skip leading whitespace before testing
847         whether the line is empty.  Empty lines still contain the line
848         terminator.
849
850 2002-01-15  Hrvoje Niksic  <hniksic@arsdigita.com>
851
852         * gen_sslfunc.c (ssl_iread): Call select on the file descriptor
853         only if no data is pending in SSL buffers.
854         From tony@bluetail.com.
855
856 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
857
858         * headers.c (header_get): Strip trailing whitespace from the
859         header.
860
861 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
862
863         * url.c (parse_uname): URL-decode *USER and *PASSWD.
864
865 2002-01-07  Ian Abbott <abbotti@mev.co.uk>
866
867         * url.c (uri_merge_1): Deal with "net path" relative URL (one that
868         starts with "//").
869
870 2002-01-14  Hrvoje Niksic  <hniksic@arsdigita.com>
871
872         * http.c (gethttp): Invalidate SOCK if get_contents encountered an
873         error.
874
875 2001-12-24  Hrvoje Niksic  <hniksic@arsdigita.com>
876
877         * version.c: Wget 1.8.1 is released.
878
879 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
880
881         * version.c: Wget 1.8.1-pre3 is released.
882
883 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
884
885         * recur.c (retrieve_tree): Enqueue the canonical representation of
886         start_url, so that the test against dl_url_file_map works.
887
888 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
889
890         * log.c (logputs): Check for requested verbosity before printing
891         anything.
892
893 2001-12-19  Hrvoje Niksic  <hniksic@arsdigita.com>
894
895         * html-url.c (tag_handle_link): Treat the "shortcut icon" link as
896         inline.
897
898 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
899
900         * recur.c (retrieve_tree): Make a copy of file obtained from
901         dl_url_file_map because the code calls xfree(file) later.
902
903 2001-12-18  Hrvoje Niksic  <hniksic@arsdigita.com>
904
905         * recur.c (register_html): Maintain a hash table of HTML files
906         along with the list.  Disallow duplicates.
907         (retrieve_tree): Use downloaded_html_set to check whether the file
908         found in dl_url_file_map is an HTML file, and descend into it if
909         so.
910         (convert_all_links): Don't guard against duplicates in
911         downloaded_html_list, since they are no longer possible.
912
913 2001-12-18  Ian Abbott  <abbotti@mev.co.uk>
914
915         * recur.c (retrieve_tree): Pass on referring URL when retrieving
916         recursed URL.
917
918 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
919
920         * version.c: Wget 1.8.1-pre2 is released.
921
922 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
923
924         * retr.c (sleep_between_retrievals): Simplify indentation.
925
926 2001-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
927
928         * gen_sslfunc.c (ssl_init_prng): Use random_number to get a byte
929         of "randomness" at a time.
930         (ssl_init_prng): Don't seed the PRNG; random_number will do that.
931
932         * retr.c (sleep_between_retrievals): Use it.  Make sure that the
933         random amount averages in opt.wait.
934         (sleep_between_retrievals): Don't seed the PRNG; random_number
935         will do that.
936
937         * utils.c (random_number): New function.
938
939 2001-12-14  Hrvoje Niksic  <hniksic@arsdigita.com>
940
941         * url.c (path_simplify): Move here from utils.c, and make static.
942
943 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
944
945         * init.c (wgetrc_file_name): Print correct message when loading
946         getenv("WGETRC") fails.
947
948 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
949
950         * recur.c (register_download): Don't abort when one URL references
951         two different files.
952
953 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
954
955         * http.c (gethttp): Check for conn->scheme, not u->scheme, before
956         calling ssl_iwrite.
957
958 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
959
960         * version.c: Wget 1.8.1-pre1 is released.
961
962 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
963
964         * res.c (matches): Fix broken URL in the docstring.
965
966 2001-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
967
968         * html-url.c (tag_url_attributes): Mark <embed href=...> as
969         external.
970
971 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
972
973         * url.c (get_urls_file): Cosmetic changes.
974
975 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
976
977         * html-url.c (append_one_url): Resurrect warning when unable to
978         resolve a relative link.
979
980 2001-12-12  Hrvoje Niksic  <hniksic@arsdigita.com>
981
982         * html-url.c (collect_tags_mapper): Break into several functions.
983         (tag_url_attributes): Collect <embed href=...>.
984
985 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
986
987         * host.c: New type ipv4_address.  Use it consistently instead of
988         `unsigned char[4]' and `unsigned char *'.
989         (pretty_print_address): Accept a `const void *', to require even
990         less casting.
991
992 2001-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
993
994         * ftp-ls.c (ftp_parse_vms_ls): Fix obvious memory leaks.
995
996 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
997
998         * main.c (main): Initialize progress after fork_to_background, so
999         that it knows when to use dots.
1000
1001         * mswindows.c (ws_hangup): Call log_request_redirect_output.
1002
1003         * utils.c (fork_to_background): Print the PID of the child
1004         process.
1005
1006         * log.c (log_request_redirect_output): Set a flag that output
1007         redirection has been requested.  Doing anything else in a signal
1008         handler is unsafe.
1009         (check_redirect_output): New function: check whether redirection
1010         has been requested and, if so, call redirect_output().
1011         (logputs): Call check_redirect_output.
1012         (logprintf): Ditto.
1013         (debug_logprintf): Ditto.
1014         (redirect_output): Print clearer messages.
1015
1016         * main.c (redirect_output_signal): Don't call
1017         redirect_output_signal directly.  Instead, call
1018         log_request_redirect_output.
1019
1020         * utils.c (memfatal): Ditto.
1021
1022         * progress.c (display_image): Use it.
1023
1024         * log.c (log_set_save_context): New function: allow the caller to
1025         turn off saving log context lines.
1026
1027 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1028
1029         * host.c (address_list_set_faulty): Uncomment a sanity check.
1030
1031 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1032
1033         * utils.c (long_to_string): Return a pointer after where the
1034         number ends.
1035         (long_to_string): Rename to number_to_string.
1036
1037 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1038
1039         * utils.c (path_simplify): Correctly handle the unlikely case that
1040         b starts out as path + 1.
1041
1042 2001-12-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1043
1044         * utils.c (path_simplify): Rewrite, with better comments, and
1045         without the use of strcpy to move overlapping blocks.
1046
1047 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1048
1049         * init.c (cmd_spec_progress): Resurrect.  Check whether VAL is a
1050         valid progress type before setting it.
1051
1052 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1053
1054         * main.c (main): Remove stray debugging message.
1055
1056 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1057
1058         * progress.c (create_image): Fix ETA padding when hours are prined.
1059
1060 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1061
1062         * version.c: Wget 1.8 is released.
1063
1064 2001-12-09  Hrvoje Niksic  <hniksic@arsdigita.com>
1065
1066         * url.c (reencode_string): Declare static.
1067
1068         * res.c (registered_specs): Declare static.
1069
1070         * progress.c (current_impl_locked): Declare static.
1071
1072         * log.c (flush_log_p): Declare static.
1073         (needs_flushing): Ditto.
1074
1075         * http.c (digest_authentication_encode): Declare static.
1076
1077         * html-url.c (init_interesting): Declare static.
1078
1079         * host.c (host_name_addresses_map): Declare static.
1080
1081         * cookies.c (find_matching_chains): Declare static.
1082
1083         * ftp-ls.c (ftp_parse_vms_ls): Warn about the memory leak
1084         indicated by lint.
1085
1086         * utils.c (path_simplify): Remove unused variable STUB_CHAR.
1087
1088         * host.c (address_list_set_faulty): Document that INDEX is
1089         currently unused.
1090
1091         * url.c (rewrite_shorthand_url): Remove unused variable PATH.
1092
1093 2001-12-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1094
1095         * version.c: Wget 1.8-pre2 is released.
1096
1097 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1098
1099         * progress.c (progress_handle_sigwinch): Set up the signal again.
1100
1101         * utils.c: Include <sys/termios.h>, where Solaris defines
1102         TIOCGWINSZ.
1103
1104         * progress.c (bar_create): Don't use the last column on the screen.
1105         (create_image): Pad ETA to constant size.  Pad SIZE to nine digits
1106         only until it exceeded them.
1107
1108 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1109
1110         * version.c: Wget 1.8-pre1 is released.
1111
1112 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1113
1114         * progress.c (progress_create): Make sure that, when the output is
1115         redirected, the progress implementation gets changed to the
1116         fallback one.
1117         (bar_set_params): Set current_impl_locked to 1 when "force" is
1118         specified.
1119         (progress_create): Don't change the progress implementation if
1120         current_impl_locked is non-zero.
1121
1122         * main.c (redirect_output_signal): Call
1123         progress_schedule_redirect.
1124
1125         * progress.c (progress_schedule_redirect): New function.
1126
1127 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1128
1129         * log.c (logvprintf): Restructure to allow being called multiple
1130         times.
1131         (logprintf): Call logvprintf in a loop.
1132         (debug_logprintf): Ditto.
1133
1134 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1135
1136         * gen_sslfunc.c (ssl_init_prng): Allow the user to disable EGD by
1137         setting egd_file it to empty string.
1138
1139         * main.c (main): Change the option name from --sslegdsock to
1140         --egd-file.
1141
1142 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1143
1144         * gen_sslfunc.c (ssl_init_prng): Make the printed message
1145         translatable.
1146
1147 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1148
1149         * url.c (scheme_disable): New function.
1150
1151         * main.c (main): Call ssl_init_prng from here rather than from
1152         init_ssl, so that it has a chance to disable support for https
1153         before a URL has been resolved.
1154
1155         * gen_sslfunc.c (ssl_init_prng): Seed with rand() if all else
1156         failed.
1157         (ssl_init_prng): Disable support for https if seeding the PRNG
1158         fails.
1159
1160 2001-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1161
1162         * utils.c (read_whole_line): Handle lines beginning with \0.
1163
1164 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1165
1166         * recur.c (convert_all_links): Guard against duplicates in
1167         downloaded_html_files.
1168         (register_download): Don't invalidate similar-looking URLs.
1169         (match_except_index): New function.
1170
1171 2001-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1172
1173         * utils.c (path_simplify): Document with test cases.
1174
1175 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1176
1177         * gen_sslfunc.c: Ditto.
1178
1179         * rbuf.c: Include <string.h>.
1180
1181 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1182
1183         * recur.c (retrieve_tree): Check whether the URL was already
1184         downloaded before downloading it again.
1185         (descend_child_p): Renamed to download_child_p.
1186         (register_download): When one URL is downloaded to a file already
1187         "owned" by another URL, delete all references that map any URL to
1188         that file.
1189         (register_delete_file): New function.
1190         (retrieve_tree): Use it after deleting a file.
1191
1192         * url.c (url_parse): Re-canonicalize the URL also if the path is
1193         empty, so that e.g. "http://www.server.com" ->
1194         "http://www.server.com/".
1195         (lowercase_str): Use ISUPPER instead of !ISLOWER.
1196
1197         * retr.c (retrieve_url): Use the canonical URL form when calling
1198         register_download().
1199
1200 2001-12-04  Ian Abbott <abbotti@mev.co.uk>
1201
1202         * snprintf.c (dopr): Use `unsigned int' as the second argument to
1203         va_arg when casting to `unsigned short' is intended.
1204
1205 2001-12-04  Herold Heiko  <Heiko.Herold@previnet.it>
1206
1207         * gen_sslfunc.c: on windows provide ssl crypto random 
1208           initialization through RAND_screen(); could possibly
1209           be not enough for strong ssl communication (see the 
1210           relevant manual page from the openssl package).
1211
1212 2001-12-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1213
1214         * url.c (local_quote_string): Reenable quoting of question marks,
1215         but only when `--html-extension' is used.
1216
1217 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1218
1219         * version.c: Wget 1.8-beta3 is released.
1220
1221 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1222
1223         * snprintf.c (dopr): Cast the result of va_arg to short int and
1224         short unsigned int where these types are expected to be used.
1225
1226 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1227
1228         * snprintf.c (dopr): Replace `short int' and `unsigned short int'
1229         with `int' when using it as the second argument to `va_arg'.
1230
1231 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1232
1233         * host.c (address_list_new_one): New function.
1234         (lookup_host): Use it.
1235
1236 2001-12-03  Andre Majorel  <amajorel@teaser.fr>
1237
1238         * host.c (lookup_host): Don't initialize TMPSTORE directly because
1239         it's not legal C.
1240
1241 2001-12-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1242
1243         * ftp-basic.c (ftp_port): Don't return HOSTERR if we fail getting
1244         the socket data.
1245
1246         * ftp.c: Ditto.
1247
1248         * http.c: No need to declare h_errno.
1249
1250         * host.c: Declare h_errno.
1251
1252 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1253
1254         * utils.c (file_merge): If BASE doesn't contain a slash, just
1255         return a copy of FILE.
1256
1257 2001-12-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1258
1259         * version.c: Wget 1.8-beta2 is released.
1260
1261 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1262
1263         * ftp.c (getftp): When PWD fails, assume "/".
1264
1265         * ftp-basic.c (ftp_syst): Fix indentation.
1266
1267 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1268
1269         * url.c (get_urls_file): If opt.base_href is specified, merge each
1270         URL with the base.
1271
1272 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1273
1274         * main.c (print_help): Don't document the removed `-nh'.
1275
1276 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1277
1278         * url.c (url_full_path): Document better.
1279
1280         * http.c (gethttp): Use the full path when creating digest
1281         authorization.
1282
1283 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1284
1285         * cookies.c (path_matches): Return 0 if PREFIX doesn't begin with
1286         '/'.
1287
1288 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1289
1290         * cookies.c (path_matches): FULL_PATH doesn't begin with '/', but
1291         PREFIX does.
1292
1293 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1294
1295         * cookies.c (check_domain_match): Reimplement to match Netscape's
1296         "preliminary specification" for cookies.
1297
1298 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1299
1300         * url.c (replace_attr_refresh_hack): New function.
1301         (convert_links): Call replace_attr_refresh_hack for Refresh
1302         links.  It will add the "TMOUT; URL=" junk before the link.
1303
1304         * html-url.c (collect_tags_mapper): Set ID to the ID of the
1305         "content" attribute, not "http-equiv".
1306         (collect_tags_mapper): Don't use OFFSET to hack the raw_* values;
1307         instead, store the information that this entry belongs to a
1308         "refresh" link.
1309
1310 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1311
1312         * version.c: Wget 1.8-beta1 is released.
1313
1314 2001-12-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1315
1316         * recur.c (retrieve_tree): Allow -p retrievals to exceed maximum
1317         depth by more than one.
1318
1319 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1320
1321         * retr.c (retrieve_url): Don't allow more than 20 redirections.
1322
1323 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1324
1325         * recur.c (retrieve_tree): Skip the non-inline entries when
1326         enqueuing the children of a leaf HTML node in -p mode.
1327         (descend_url_p): Ignore opt.no_parent when in -p mode and UPOS is
1328         "inline".
1329
1330         * html-url.c (get_urls_html): Don't accept dash_p_leaf_HTML.
1331         (collect_tags_mapper): When an entry is "inline", mark it as such.
1332
1333         * recur.c (descend_url_p): Fix test when checking for
1334         acceptance/rejection rules.
1335
1336 2001-10-31 Daniel BODEA <dali@dali-designs.com>
1337
1338         * netrc.c (search_netrc): When slack_default is 0, still look for
1339         an account with matching password, just not the "default account".
1340         HTTP Authorization using .netrc should now work as expected.
1341
1342 2001-11-30  T. Bharath  <TBharath@responsenetworks.com>
1343
1344         * http.c (persistent_available_p): Call SHUTDOWN_SSL if
1345         test_socket_open fails.
1346
1347 2001-11-30  Hrvoje Niksic  <hniksic@arsdigita.com>
1348
1349         * progress.c (display_image): Just print one CR to reset the
1350         cursor position.
1351
1352 2001-11-30  Christian Fraenkel  <c.fraenkel@gmx.net>
1353
1354         * init.c: New command `ssl_egd_sock'.
1355
1356         * main.c (main): New option `--sslegdsock'.
1357
1358         * gen_sslfunc.c (ssl_init_prng): Seed the RNG using EGD.
1359
1360 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1361
1362         * cmpt.c (memmove): Include a simple memmove implementation.
1363
1364 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1365
1366         * headers: Guard against header files being included twice.
1367
1368 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1369
1370         * gen-md5.c: Use unsigned char * as the buffer argument to
1371         gen_md5_update.
1372
1373 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1374
1375         * connect.h: Declare select_fd.
1376
1377 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1378
1379         * recur.c (descend_url_p): When resolving no_parent, compare with
1380         start_url, not parent url.  Otherwise link from /a/b/ to /a/c/
1381         wouldn't be followed, although the download started from /a/.
1382
1383 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
1384
1385         * config.h.ms, mswindows.h: defined HAVE_ISATTY, use _isatty for
1386         MS VC; somebody with Borland compiler please check and provide
1387         patch if possible;
1388
1389         * cmpt.c: provided a usleep emulation.
1390
1391 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1392
1393         * host.c (address_list_new): Initialize al->faulty.
1394
1395 2001-11-29  Hrvoje Niksic  <hniksic@arsdigita.com>
1396
1397         * http.c (http_process_range): Accept the broken output of
1398         "JavaWebServer/1.1.1".
1399
1400 2001-11-28  Hrvoje Niksic  <hniksic@arsdigita.com>
1401
1402         * progress.c (dot_set_params): If PARAMS is unspecified, use
1403         dot_style, if available.
1404
1405         * init.c: Ditto.
1406
1407         * main.c (main): Resurect --dot-style.
1408
1409         * progress.c (dot_finish): Print the quantity if we're left at the
1410         beginning of a row.
1411
1412 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1413
1414         * cmpt.c (random): Removed.
1415
1416         * retr.c (sleep_between_retrievals): Use the more portable rand()
1417         instead of random().
1418
1419 2001-11-27  Ian Abbott <abbotti@mev.co.uk>
1420
1421         * retr.c (retrieve_from_file): Initialize `new_file' to NULL to
1422         prevent seg fault.
1423
1424 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1425
1426         * connect.c (connect_to_many): Use address_list_set_faulty to
1427         prevent the faulty address from being reused.
1428
1429         * host.c (address_list_set_faulty): New function.
1430         (address_list_get_bounds): New function, instead of
1431         address_list_count.
1432
1433 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1434
1435         * url.c (convert_links): Don't translate %d-%d.
1436
1437         * main.c (print_help): Remove stray HAVE_RANDOM code.
1438
1439 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1440
1441         * ftp.c (getftp): Improve output after sending PASV.  Don't
1442         attempt to "look up" the IP address we already know; call
1443         connect_to_one directly.
1444
1445 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1446
1447         * progress.c: Change the default progress implementation to "bar".
1448
1449 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1450
1451         * progress.c (bar_create): Print two newlines.
1452
1453 2001-11-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1454
1455         * cmpt.c (random): New function, a simple-minded replacement for
1456         random() on systems that don't have it.
1457
1458 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1459
1460         * config.h.in: Put a HAVE_USLEEP stub.
1461
1462         * cmpt.c (usleep): Replacement implementation of usleep using
1463         select.
1464
1465         * init.c: New option init_rate.
1466
1467         * main.c (main): New option --limit-rate.
1468
1469         * retr.c (limit_bandwidth): New function.
1470         (get_contents): Call it to limit the bandwidth used when
1471         downloading.
1472
1473         * progress.c (dot_update): Would print the wrong download speed on
1474         rows other than the first one when the download was continued.
1475         (dot_finish): Ditto.
1476
1477 2001-11-26  Ian Abbott <abbotti@mev.co.uk>
1478
1479         * http.c (gethttp): fix undeclared variable 'err' when compiled
1480         with HAVE_SSL.
1481
1482 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1483
1484         * progress.c: Don't allocate new timers; use the timing data
1485         propagated from the caller.
1486
1487         * retr.c (get_contents): Allocate and use a timer.
1488
1489 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1490
1491         * http.c (last_host_ip): Made into an address_list.
1492         (invalidate_persistent): Release pc_last_host_ip.
1493         (register_persistent): Use lookup_host.
1494         (persistent_available_p): Check for equality of hosts using
1495         address_list_match_all.  Call address_list_release.
1496         (http_cleanup): New function.
1497
1498         * ftp.c (getftp): Use lookup_host and connect_to_many.
1499
1500         * http.c (gethttp): Use lookup_host and connect_to_many.
1501
1502         * connect.c (make_connection): Removed.
1503         (connect_to_one): New function.
1504         (connect_to_many): Ditto.
1505         (set_connection_host_name): Ditto.
1506
1507         * host.c (lookup_host): New function; new return type.
1508         (address_list_new): New function.
1509         (address_list_count): Ditto.
1510         (address_list_copy_one): Ditto.
1511         (address_list_delete): Ditto.
1512         (address_list_release): Ditto.
1513         (pretty_print_address): Ditto.
1514
1515 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1516
1517         * recur.c (retrieve_tree): In case of followed redirection,
1518         blacklist the pre-redirection URL.
1519
1520 2001-11-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1521
1522         * recur.c (descend_redirect_p): New function.
1523         (retrieve_tree): Make sure redirections are not blindly followed.
1524
1525 2001-11-04  Alan Eldridge  <alane@geeksrus.net>
1526
1527         * config.h.in: added HAVE_RANDOM.
1528
1529         * options.h: added random_wait to struct options.
1530
1531         * main.c (print_help [HAVE_RANDOM], main): added arg parsing, help
1532         for --random-wait.
1533
1534         * retr.c (sleep_between_retrievals) [HAVE_RANDOM]: added
1535         implementation of random wait times.
1536
1537         * init.c (commands): added "randomwait" keyword.
1538
1539 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1540
1541         * recur.c (descend_url_p): Be more conservative with blacklisting
1542         URLs.
1543         (convert_all_links): Print how many files have been converted, and
1544         how long it took.
1545
1546         * progress.c (create_image): Place the number of downloaded bytes
1547         right after the progress bar.
1548
1549         * utils.c (suffix): Return a pointer into the string.
1550
1551 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1552
1553         * url.c (convert_links): Handle CO_NULLIFY_BASE.
1554
1555         * recur.c (retrieve_tree): Ignore download-ignorable children.
1556         (convert_all_links): Specify CO_NULLIFY_BASE when link_base_p.
1557
1558         * html-url.c (handle_link): Return the newly created urlpos.
1559         (collect_tags_mapper): When dealing with BASE, store the base
1560         reference and mark it as download-ignorable.
1561
1562 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1563
1564         * url.c (convert_links): Attempt to quote '?' as "%3F" when
1565         linking to local files.  Given up on the attempt, as it breaks
1566         local browsing.
1567
1568 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1569
1570         * main.c (private_initialize): Removed.
1571         (main): Don't call private_initialize.
1572
1573         * http.c: Call lookup_host.
1574
1575         * host.c (host_init): Removed.
1576         (add_host_to_cache): Initialize host_name_address_map here, on
1577         demand.
1578         (ngethostbyname): Commented out.
1579
1580         * connect.c (make_connection): Remove dead code; use lookup_host.
1581
1582         * host.c (store_hostaddress): Renamed to lookup_host and reversed
1583         the args.
1584         Removed host_address_name_map and host_slave_master_map.
1585
1586 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1587
1588         * progress.c (dot_create): Align the "[ skipping ... ]" string
1589         with the dots.
1590
1591         * retr.c (rate): Split into two functions: calc_rate and
1592         retr_rate.
1593
1594         * progress.c (create_image): Draw a dummy progress bar even when
1595         total size is unknown.
1596         (display_image): Place the text cursor at the end of the "image".
1597
1598 2001-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
1599
1600         * url.c (reencode_string): Use unsigned char, not char --
1601         otherwise the hex digits come out wrong for 8-bit chars such as
1602         nbsp.
1603         (lowercase_str): New function.
1604         (url_parse): Canonicalize u->url if needed.
1605         (get_urls_file): Parse each URL, and return only the valid ones.
1606         (free_urlpos): Call url_free.
1607         (mkstruct): Add :port if the port is non-standard.
1608         (mkstruct): Append the query string to the file name, if any.
1609         (urlpath_length): Use strpbrk_or_eos.
1610         (uri_merge_1): Handle the cases where LINK is an empty string,
1611         where LINK consists only of query, and where LINK consists only of
1612         fragment.
1613         (convert_links): Count and report both kinds of conversion.
1614         (downloaded_file): Use a hash table, not a list.
1615         (downloaded_files_free): Free the hash table.
1616
1617         * retr.c (retrieve_from_file): Ditto.
1618
1619         * main.c (main): Call either retrieve_url or retrieve_tree
1620         for each URL, not both.
1621
1622         * retr.c (register_all_redirections): New function.
1623         (register_redirections_mapper): Ditto.
1624         (retrieve_url): Register the redirections.
1625         (retrieve_url): Make the string "Error parsing proxy ..." 
1626         translatable.
1627
1628         * res.c (add_path): Strip leading slash from robots.txt paths so
1629         that the path representations are "compatible".
1630         (free_specs): Free each individual path, too.
1631         (res_cleanup): New function.
1632         (cleanup_hash_table_mapper): Ditto.
1633
1634         * recur.c (url_queue_new): New function.
1635         (url_queue_delete): Ditto.
1636         (url_enqueue): Ditto.
1637         (url_dequeue): Ditto.
1638         (retrieve_tree): New function, replacement for recursive_retrieve.
1639         (descend_url_p): New function.
1640         (register_redirection): New function.
1641
1642         * progress.c (create_image): Cosmetic changes.
1643
1644         * init.c (cleanup): Do all those complex cleanups only if
1645         DEBUG_MALLOC is defined.
1646
1647         * main.c: Removed --simple-check and the corresponding
1648         simple_host_check in init.c.
1649
1650         * html-url.c (handle_link): Parse the URL here, and propagate the
1651         parsed URL to the caller, who would otherwise have to parse it
1652         again.
1653
1654         * host.c (xstrdup_lower): Moved to utils.c.
1655         (realhost): Removed.
1656         (same_host): Ditto.
1657
1658 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1659
1660         * utils.c (path_simplify): Preserver the (non-)existence of
1661         leading slash.  Return non-zero if changes were made.
1662
1663 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1664
1665         * progress.c (bar_update): Don't modify bp->total_length if it is
1666         zero.
1667
1668 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1669
1670         * retr.c (retrieve_url): When the redirection URL doesn't parse,
1671         print the correct error message rather than "UNKNOWN".
1672
1673 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1674
1675         * progress.c (bar_finish): If the timer didn't record any time
1676         since the download beginning, fake 1ms.
1677
1678 2001-11-24  Hrvoje Niksic  <hniksic@arsdigita.com>
1679
1680         * recur.c (recursive_retrieve): Fix typo.
1681
1682 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1683
1684         * progress.c (create_image): Don't translate "%ld ".
1685
1686 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1687
1688         * progress.c (bar_set_params): Allow the user to force the use of
1689         the bar.
1690
1691 2001-11-23  Lemble Gregory  <gregory.lemble@st.com>
1692
1693         * gen_sslfunc.c (ssl_init_prng): New function; seed the SSL RNG.
1694
1695 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1696
1697         * progress.c: Renamed dp_* functions to dot_* for greater clarity
1698         and consistency with bar_*.
1699         (print_download_speed): Get rid of the unneeded '@' character.
1700         (create_image): Fix download rate geometry.
1701
1702         * progress.c (print_elapsed): Remove spurious space.
1703         (print_elapsed): Renamed to print_download_speed, since that's
1704         what it does.
1705
1706 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1707
1708         * progress.c (bar_update): If the downloaded amount becomes larger
1709         than the expected amount, adjust the expected amount accordingly.
1710
1711 2001-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
1712
1713         * utils.c (determine_screen_width): New function.
1714
1715         * main.c (main): New option `--progress=TYPE'.
1716         (main): Implement compatibility with the old option `--dot-style'.
1717
1718         * init.c: Removed cmd_spec_dotstyle -- that logic is now in
1719         dp_set_params.
1720         (cmd_spec_progress): New function.
1721
1722         * retr.c (get_contents): Use the progress_* functions instead of
1723         the old show_progress().
1724         (show_progress): Removed.
1725         (rate): Print "xxxx.xx K/s" instead of "KB/s".  Ditto for MB/s,
1726         etc.
1727
1728         * progress.c (set_progress_implementation): New function.
1729         (valid_progress_implementation_p): Ditto.
1730         (progress_create): Ditto.
1731         (progress_update): Ditto.
1732         (progress_finish): Ditto.
1733         (dp_create): Ditto.
1734         (dp_update): Ditto.
1735         (dp_finish): Ditto.
1736         (dp_set_params): Ditto.
1737         (print_elapsed): Ditto.
1738
1739 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1740
1741         * retr.c (show_progress): Use it.
1742
1743         * log.c (log_set_flush): New function.
1744
1745 2001-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
1746
1747         * utils.c (path_simplify): Don't remove trailing slashes.
1748
1749         * ftp.c (ftp_get_listing): Use it.
1750
1751         * utils.c (file_merge): New function.
1752
1753         * url.c (opt_url): Removed.
1754
1755         * recur.c (recursive_retrieve): Inline "opt_url" logic.
1756
1757         * main.c (main): Use xfree(), not free().
1758
1759         * url.c (rewrite_url_maybe): Renamed to rewrite_shorthand_url.
1760
1761         * ftp.c (ccon): Move `ccon' typedef here, since it's only used
1762         internally.
1763
1764         * config.h.in: Include a stub for HAVE_STRPBRK.
1765
1766         * cmpt.c (strpbrk): Include a replacement for systems without
1767         strpbrk().
1768
1769         * ftp.c: Use url_set_dir and url_set_file when modifying the URL.
1770
1771         * url.c (url_set_dir): New function.
1772         (url_set_file): Ditto.
1773
1774         * ftp-basic.c (ftp_process_type): Process FTP type here; the URL
1775         parser makes the URL "params" available, so we can do that in this
1776         function.
1777
1778         * retr.c: Ditto.
1779
1780         * ftp.c: Ditto; pass the local file information in `ccon'.
1781
1782         * http.c: Get rid of the ugly kludge that had URL being replaced
1783         with the proxy URL when proxy retrieval was requested.  Use a
1784         separate parameter to http_loop and gethttp for the proxy URL.
1785
1786         * http.c: Changed to reflect the fact that local file, proxy, and
1787         referer information are no longer stored in struct url.  The local
1788         file information is passed in `struct hstat' now.
1789
1790         * url.c: Reworked URL parsing to be more regular.  Reencode the
1791         URL using reencode_string.
1792         Removed non-URL-related information from struct url.  This
1793         includes fields `proxy', `local', and `referer'.
1794
1795 2001-11-22  Jochen Hein  <jochen@jochen.org>
1796
1797         * main.c (main): Split the copyright notice for easier
1798         translation.
1799
1800 2001-08-21  Dave Turner <dct25@hermes.cam.ac.uk>
1801
1802         * ftp-basic.c (ftp_size): New function to send non-standard SIZE
1803           command to server to request file size.
1804         * ftp.h (ftp_size): Export it.
1805         * ftp.c (getftp): Use new ftp_size function if restoring
1806           transfer of a file with unknown size.
1807
1808 2001-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
1809
1810         * url.c (parseurl): Don't depend on the now-obsolete TYPE.
1811
1812 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1813
1814         * url.c (getproxy): Handle URL shorthands.
1815
1816 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1817
1818         * main.c: Remove --wait / --waitretry backwards compatibility
1819         code.
1820         
1821 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1822
1823         * main.c (main): Use it.
1824
1825         * url.c (rewrite_url_maybe): New function.
1826
1827 2001-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
1828
1829         * url.c: Clean up handling of URL schemes.
1830
1831 2001-05-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1832
1833         * url.c: Get rid of `protostrings'.
1834         (skip_proto): Don't use protostrings.
1835         (has_proto): Ditto.
1836
1837 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1838
1839         * Makefile.in: Conditionally compile getopt.o.
1840
1841 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1842
1843         * md5.h: Renamed to gnu-md5.h.
1844
1845         * md5.c: Renamed to gnu-md5.c.
1846
1847         * http.c: Ditto.
1848
1849         * ftp-opie.c: Use the new macros.
1850
1851         * sysdep.h: Define md5-related macros.
1852
1853         * config.h.in: Define HAVE_SOLARIS_MD5 or HAVE_BUILTIN_MD5
1854         depending on which md5 implementation is used.
1855
1856 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1857
1858         * res.c (res_register_specs): Initialize OLD and HP_OLD to appease
1859         the compiler.
1860
1861 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1862
1863         * http.c (gethttp): Print the whole response line when printing
1864         headers is requested.
1865
1866 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1867
1868         * res.c: New file.  Implement all RES-related code here.
1869
1870 2001-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1871
1872         * version.c: Wget 1.7.1 is released.
1873
1874 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1875
1876         * headers.c (header_extract_number): Ignore trailing whitespace.
1877
1878 2001-08-24  Ian Abbott  <abbotti@mev.co.uk>
1879
1880         * html-url.c (collect_tags_mapper): Fix bug converting links
1881         with -k option for tags with multiple link attributes by
1882         handling links in the order they appear.
1883
1884 2001-08-15  Ian Abbott  <abbotti@mev.co.uk>
1885
1886         * ftp.c (ftp_loop_internal): Avoid a potential buffer overflow in
1887           the call to the 'rate' function by moving it past the error
1888           checking for the 'getftp' function return value.
1889
1890 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1891
1892         * html-parse.c (advance_declaration): Use 0x22 instead of '"' or
1893         '\"'.  Different compilers' assert macros are broken in different
1894         ways.
1895
1896 2001-09-29  Christian Fraenkel  <c.fraenkel@gmx.net>
1897
1898         * http.c (gethttp): print debug output for errors occuring during
1899         the ssl handshake.
1900
1901 2001-11-16  Chris Seawood  <cls@seawood.org>
1902
1903         * init.c: Ditto.
1904
1905         * host.c: Ditto.
1906
1907         * connect.c: Ditto.
1908
1909         * sysdep.h: Support compilation under BEOS.
1910
1911 2001-06-08  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1912
1913         * url.c (url_equal): Fix a memory leak when parseurl returns an
1914         error on the second URL. Also, since url_equal is not used at the
1915         moment, do not compile it.
1916
1917         * url.h: Ditto for the prototype of url_equal.
1918
1919 2001-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1920
1921         * html-parse.c (map_html_tags): Support XML-style empty tags.
1922
1923 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1924
1925         * wget.h (DO_REALLOC_FROM_ALLOCA): Check for do_realloc_newsize in
1926         loop condition because we're no longer setting SIZEVAR here.
1927
1928 2001-06-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1929
1930         * wget.h (DO_REALLOC_FROM_ALLOCA): Set SIZEVAR after the memcpy()
1931         call because it needs the old value.
1932
1933 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1934
1935         * cookies.c (ATTR_NAME_CHAR): Allow almost any character to be in
1936         an attribute name.
1937
1938 2001-06-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1939
1940         * url.c (url_filename): Make sure that slashes that sneak in to
1941         u->file via query string get protected.
1942         (file_name_protect_query_string): New function.
1943
1944 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1945
1946         * recur.c (recursive_retrieve): Also check undesirable_urls with
1947         canonicalized URL.
1948
1949 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1950
1951         * http.c (gethttp): Search `.netrc' with real host, not the proxy
1952         one.
1953
1954 2001-06-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1955
1956         * sysdep.h (MAP_FAILED): Provide MAP_FAILED for systems that don't
1957         define it.
1958
1959 2001-06-09  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1960
1961         * ftp.h: Provide correct prototype for ftp_parse_ls().
1962
1963 2001-06-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1964
1965         * version.c: Wget 1.7 is released.
1966
1967 2001-06-03  Karl Eichwalder  <ke@suse.de>
1968
1969         * ftp-ls.c (ftp_parse_ls): Fix typo.
1970
1971 2001-05-27  Hrvoje Niksic  <hniksic@arsdigita.com>
1972
1973         * all: Update copyright information.
1974
1975 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1976
1977         * http.c (gethttp): Indicate that the continued download failed
1978         for *this* file.
1979
1980 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1981
1982         * version.c: Wget 1.7-pre1 is released.
1983
1984 2001-05-26  Hrvoje Niksic  <hniksic@arsdigita.com>
1985
1986         * version.c: Updated version to 1.7-pre1.
1987
1988 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1989
1990         * gen_sslfunc.c: Don't include <sys/time.h> directly.
1991
1992 2001-05-14  Hrvoje Niksic  <hniksic@arsdigita.com>
1993
1994         * http.c (gethttp): Use real URL data for cookies, not the proxy
1995         stuff.
1996
1997 2001-05-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1998
1999         * main.c (print_help): Document `--no-http-keep-alive'.
2000
2001         * utils.c (numdigit): Handle negative numbers *correctly*.
2002
2003         * hash.c (make_nocase_string_hash_table): Use term "nocase" rather
2004         than the confusing "unsigned".
2005
2006         * utils.c (string_set_contains): Renamed from string_set_exists.
2007
2008         * hash.c (hash_table_contains): Renamed from hash_table_exists.
2009
2010         * cookies.c: Move case-insensitive hash tables to hash.c.
2011
2012 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2013
2014         * http.c (gethttp): Before concluding that the file is already
2015         fully retrieved, make sure that the file existed and `Range' was
2016         actually requested.
2017
2018 2001-05-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2019
2020         * cookies.c (eliminate_dups): New function.
2021         (build_cookies_request): Use it.
2022         (build_cookies_request): Set chain_store_size after reallocating
2023         all_chains.
2024         (check_domain_match): Annotated for easier future debugging.
2025         (store_cookie): In the debug message, print whether the cookie is
2026         permanent.
2027
2028 2001-05-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2029
2030         * http.c (http_loop): Reset no_truncate before deciding whether to
2031         set it.
2032         (gethttp): Further clarify "-c conflicts with existing file" error
2033         message, based on input from Herold Heiko.
2034
2035 2001-05-07  Hrvoje Niksic  <hniksic@arsdigita.com>
2036
2037         * http.c (http_loop): If restval is set, set no_truncate to 1
2038         unconditionally.
2039
2040 2001-05-02  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2041
2042         * ftp-ls.c (ftp_parse_winnt_ls): Assure months are being correctly
2043         converted. Pointed out by <Stefan.Weil@de.heidelberg.com>.
2044         (ftp_parse_vms_ls): Ditto.
2045
2046 2001-04-30  Hrvoje Niksic  <hniksic@arsdigita.com>
2047
2048         * init.c (cmd_address): Zero SIN before using it; apparently
2049         needed on *BSD.
2050
2051 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2052
2053         * ftp.c (ftp_loop_internal): Don't set NO_TRUNCATE if the file is
2054         empty.
2055
2056 2001-04-29  Hrvoje Niksic  <hniksic@arsdigita.com>
2057
2058         * main.c (main): Make `--cookies' respect its argument.
2059
2060 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2061
2062         * main.c (main): Removed undocumented option `--email-address'.
2063
2064         * netrc.c: Use the latest read_whole_line.
2065
2066         * init.c (defaults): Set opt.ftp_pass to "-wget@".
2067
2068         * mswindows.c (pwd_cuserid): Ditto.
2069
2070         * utils.c (pwd_cuserid): Removed.
2071
2072         * host.c (ftp_getaddress): Removed.
2073
2074 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2075
2076         (http_loop): Allocate space for filename_plus_orig_suffix with
2077         alloca; this is more efficient and removes the need to free it
2078         before each and every return.
2079
2080 2001-04-28  Hrvoje Niksic  <hniksic@arsdigita.com>
2081
2082         * http.c (gethttp): Return RETRUNNEEDED when the retrieval is
2083         unneeded because the file is already there and fully downloaded,
2084         and -c is specified.
2085         (http_loop): Handle RETRUNNEEDED.
2086
2087         * wget.h (uerr_t): New value RETRUNNEEDED.
2088
2089         * http.c (http_loop): Set no_truncate for files that both exist
2090         and are non-empty.
2091         (gethttp): Consider the download finished when restval >= contlen,
2092         not only when restval==contlen.
2093         (gethttp): Handle redirection before giving up due to -c.
2094         (gethttp): Clarify error message which explains that -c will not
2095         truncate the file.
2096         (gethttp): When returning CONTNOTSUPPORTED, don't forget to free
2097         the stuff that needs freeing and release the socket.
2098
2099 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2100
2101         * main.c (print_help): Wget booleans accept "off", not "no".
2102
2103 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2104
2105         * http.c (http_loop): If allow_cache is zero, always disable
2106         caching, not only when retrieving through proxy.
2107
2108         * init.c: Ditto.
2109
2110         * options.h (struct options): Rename proxy_cache to allow_cache.
2111
2112 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2113
2114         * http.c (mktime_from_utc): Improve documentation.
2115         (http_atotm): Put format strings into a separate array.
2116
2117 2001-04-27  Hrvoje Niksic  <hniksic@arsdigita.com>
2118
2119         * safe-ctype.h: Instead of throwing #error when isalpha is
2120         defined, redefine it to something that will throw a compile-time
2121         error if actually *used*.  Do the same for the rest of the
2122         standard C macros.
2123
2124 2001-04-26  Hrvoje Niksic  <hniksic@arsdigita.com>
2125
2126         * url.c (getproxy): Ignore empty proxy vars.
2127
2128 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2129
2130         * http.c (http_loop): Would load cookies every time.
2131
2132         * cookies.c (load_cookies): Handle cookies whose values contain
2133         embedded spaces.
2134
2135 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2136
2137         * utils.c: Define each DIGITS_* in one line.
2138
2139 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
2140
2141         * http.c (http_atotm): Initialize t.tm_isdst to 0.
2142         (mktime_from_utc): Prevent mktime() from having discontinuities at
2143         DST transition points.
2144
2145 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2146
2147         * html-url.c (get_urls_html): Fix documentation.
2148
2149 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2150
2151         * url.c (UNSAFE_CHAR): Reimplement using a static table.
2152         (url_init): Removed.
2153         (init_unsafe_char_table): Removed.
2154
2155 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2156
2157         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
2158
2159 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2160
2161         * utils.c: Document timer functions.
2162
2163         * retr.c (rate): Use it.
2164         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
2165
2166         * utils.c (wtimer_granularity): New function.
2167
2168 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2169
2170         * retr.c (show_progress): Ditto.
2171
2172         * ftp.c (getftp): Ditto.
2173
2174         * http.c (gethttp): Use new timer functions.
2175
2176         * utils.c (wtimer_allocate): New function.
2177         (wtimer_new): Ditto.
2178         (wtimer_delete): Ditto.
2179         (wtimer_reset): Ditto.
2180         (wtimer_elapsed): Ditto.
2181
2182 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2183
2184         * utils.c (long_to_string): New, faster version.  Favors smaller
2185         numbers; much of the calculation is now done at compile-time.
2186
2187 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
2188
2189         * utils.c (numdigit): Handle negative numbers.
2190
2191 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2192
2193         * retr.c (show_progress): Print the download rate even when the
2194         percentages are not available.
2195
2196 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2197
2198         * ftp.c (getftp): Adjust expected_bytes if the length is
2199         authoritative.
2200
2201 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2202
2203         * url.c: Don't declare `construct'.
2204
2205         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
2206         mappings to new locations.
2207         (hash_table_new): Make resize_threshold a field in the hash table,
2208         so we don't have to recalculate it in each hash_table_put.
2209         (grow_hash_table): Update resize_threshold.
2210         (MAX): Remove unused macro.
2211         (prime_size): Made static.
2212
2213 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
2214
2215         * retr.c (retrieve_url): Call uri_merge, not url_concat.
2216
2217         * html-url.c (collect_tags_mapper): Call uri_merge, not
2218         url_concat.
2219
2220         * url.c (mkstruct): Use encode_string instead of xstrdup followed
2221         by URL_CLEANSE.
2222         (path_simplify_with_kludge): Deleted.
2223         (contains_unsafe): Deleted.
2224         (construct): Renamed to uri_merge_1.
2225         (url_concat): Renamed to uri_merge.
2226
2227 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2228
2229         * url.c (str_url): Use encode_string instead of the unnecessary
2230         CLEANDUP.
2231         (encode_string_maybe): New function, returns input string if no
2232         encoding is needed.
2233         (encode_string): Call encode_string_maybe to do the dirty work,
2234         xstrdup if no work needed.
2235
2236 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2237
2238         * wget.h (XDIGIT_TO_xchar): Define here.
2239
2240         * url.c (decode_string): Use new name.
2241         (encode_string): Ditto.
2242
2243         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
2244         (dump_hash): Use new name.
2245
2246         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
2247         XDIGIT_TO_XCHAR respectively.
2248
2249 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2250
2251         * init.c: Include cookies.h.
2252
2253         * cookies.h: Declare cookies_cleanup.
2254
2255         * cookies.c (check_domain_match): Remove unused variable.
2256         (save_cookies): Remove extraneous argument from debug statement.
2257
2258         * host.c (same_host): Don't call skip_url.
2259
2260         * url.c (skip_url): Removed.  Removed its calls from various
2261         functions in url.c.
2262
2263 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2264
2265         * cookies.c (unsigned_string_hash): Use the new code in
2266         string_hash as reference.
2267
2268         * hash.c (hash_table_map): Allow deletion and change of the
2269         element processed by MAPFUN.
2270         (string_hash): Use the function from glib.
2271
2272 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2273
2274         * config.h.in: Include #undef stub.
2275
2276         * hash.c (hash_table_remove): Rewrite to actually clear deleted
2277         entries instead of just marking them as deleted.
2278
2279 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2280
2281         * hash.h: Declare hash_table_get_pair and hash_table_count.
2282
2283 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2284
2285         * cookies.c: Declare http_atotm.
2286
2287 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2288
2289         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
2290         permissions.  A compiler that doesn't accept octal constants is
2291         seriously broken and shouldn't be used -- octal constants were
2292         present in K&R C!
2293
2294 2001-01-20  Karl Eichwalder  <ke@suse.de>
2295
2296         * Makefile.in: Provide and use DESTDIR according to the Coding
2297         Standards.
2298
2299 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
2300
2301         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
2302         specification.
2303
2304 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2305
2306         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
2307         because that strips the *leading* slash, thus forcing relative
2308         FTP retrieval.
2309
2310 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2311
2312         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
2313         notation for VMS servers. 
2314         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
2315         odir is an empty string.
2316
2317 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2318
2319         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
2320         effective. Suggested by Edward J. Sabol.
2321
2322 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2323
2324         * cookies.c (build_cookies_request): Use and sort cookies from all
2325         matching domains.
2326         (build_cookies_request): Check for duplicates before generating
2327         the `Cookies' header.
2328
2329         * main.c (main): Don't load cookies here.
2330         (main): Make loadcookies and savecookies call the correct command.
2331
2332         * http.c (http_loop): Load cookies on-demand.
2333
2334 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2335
2336         * http.c (gethttp): Fix indentation of SSL ifdef.
2337
2338 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2339
2340         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
2341         that hack is no longer necessary.
2342         (getftp): Prepend initial directory to *non*-absolute u->dir's.
2343
2344 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
2345
2346         * init.c (cmd_file): New function.
2347         (enable_tilde_expansion): New variable.
2348         (run_wgetrc): Use it.
2349         (cmd_file): Use it.
2350
2351 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2352
2353         * init.c: Include cookie-related options.
2354
2355         * main.c (main): Include cookie-specific options.
2356         (main): Load cookies before download is finished.
2357         (main): Save cookies when done.
2358
2359         * http.c (gethttp): Process the `Set-Cookie' header.
2360         (gethttp): Include cookies in the response.
2361
2362         * cookies.c: New file.
2363
2364 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2365
2366         * utils.c (datetime_str): New function.
2367
2368 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2369
2370         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
2371         12:01PM == 00:01, which was obviously wrong. Taken care of this
2372         anomaly.
2373
2374         * ChangeLog: Removed an excess conflict marker. Reformatted the
2375         entry by Philipp Thomas from 2001-03-09.
2376
2377         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
2378         between 0 and 23. Elminate unused variable `sec'.
2379
2380 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
2381
2382         * hash.c (hash_table_count): New function.
2383
2384 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2385
2386         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
2387         Digital Unix cc.
2388
2389 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2390
2391         * config.h.in: Oops, do the namespace tweaks only on systems we
2392         know about.
2393
2394 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2395
2396         * hash.c: Include <string.h>.
2397
2398 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2399
2400         * config.h.in: Define "compilation environment" options that work
2401         under Linux and Solaris.  To be reviewed on other OS'es.
2402
2403 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2404
2405         * http.c (gethttp): Prepend literal newline with `\n\'.
2406
2407 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2408
2409         * sysdep.h: Don't define VERY_LONG_FORMAT.
2410
2411         * utils.c (very_long_to_string): New function.
2412         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
2413
2414 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
2415
2416         * url.c (parse_uname): Would run past the end of the string if the
2417         username was present, but the URL did not contain a slash, e.g.
2418         http://foo:bar@myhost.
2419
2420 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
2421
2422         * http.c (http_atotm): Use %A instead of %a to match full
2423         weekday.  (On most systems there is no difference.)
2424
2425 2001-04-03  Paul Bludov  <paul@ozero.net>
2426
2427         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
2428         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
2429         leak.
2430         (ws_mypath): Use GetModuleFileName instead of argv[0].
2431         (ws_startup): Use data.wVersion for comparison.
2432
2433 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2434
2435         * http.c (http_loop): Ditto.
2436
2437         * ftp.c (ftp_loop_internal): Made the check whether to continue
2438         retrieval `-O'-friendly.
2439
2440 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2441
2442         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
2443         they will be handled as whitespace.
2444         (parse_netrc): Correctly handle lines that end with whitespace.
2445
2446 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2447
2448         * retr.c (retrieve_url): New variable global_download_count used
2449         to identify first retrieval.
2450
2451         * ftp.c (getftp): Ditto.
2452
2453         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
2454
2455 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
2456
2457         * init.c (cmd_address): Heap-allocate the address that gets stored
2458         to CLOSURE.  Old code would simply assign an address on the stack.
2459
2460 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2461
2462         * ftp.c (ftp_get_listing): Propagate error status.
2463         (ftp_retrieve_glob): Use it.
2464         (ftp_loop): Ditto.
2465
2466 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
2467
2468         * main.c (main): Add -C to the string that is the third arg to
2469         getopt_long().
2470
2471 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
2472
2473         * ftp.c (getftp): Don't start the download from scratch if `-c'
2474         was specified, but the file is already fully downloaded.
2475
2476         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
2477         specified and the server doesn't support continued download.
2478         (gethttp): Don't start the download from scratch if `-c' was
2479         specified, but the file is already fully downloaded.
2480
2481 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2482
2483         (recursive_retrieve): Don't clear the hash tables at this point at
2484         all; it interferes with the normal operation of register_download.
2485
2486 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2487
2488         * recur.c (recursive_retrieve): Clear the hash tables only when
2489         they are defined.
2490
2491 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2492
2493         * http.c (gethttp): Make sure the socket is closed with
2494         CLOSE_INVALIDATE before we have drained the body.
2495
2496 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2497
2498         * retr.c (retrieve_url): Call register_download() for downloaded
2499         files and register_html() for downloaded HTML files.
2500
2501         * recur.c (register_download): New function; register here that a
2502         file has been downloaded, rather than in recursive_retrieve().
2503         (register_html): New function; enqueue the location of HTML files
2504         here rather than in recursive_retrieve().
2505
2506 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
2507
2508         * main.c (print_help): Use multiple fputs instead of a single ugly
2509         printf().
2510         (main): Consistently assign numbers >128 to options without a
2511         corresponding character.
2512
2513 2001-03-09  Philipp Thomas  <pthomas@suse.de>
2514
2515         * safe-ctype.h: New file. Locale independent ctype.h replacement
2516         taken from libiberty.
2517
2518         * safe-ctype.c: New file. Tables for above.
2519
2520         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
2521         safe-ctype$o.
2522
2523         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
2524         isspace.
2525
2526         * ftp-basic.c: Don't include ctype.h.
2527
2528         * ftp-ls.c: Likewise.
2529
2530         * ftp.c: Likewise.
2531
2532         * headers.c: Likewise.
2533
2534         * host.c: Likewise.
2535
2536         * html-parse.c: Likewise.
2537
2538         * html-url.c: Likewise.
2539
2540         * http.c: Likewise.
2541
2542         * init.c: Likewise.
2543
2544         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
2545
2546         * netrc.c: Likewise.
2547
2548         * recur.c: Likewise.
2549
2550         * retr.c: Likewise.
2551
2552         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
2553         instead of isdigit.
2554
2555         * sysdep.h: Remove defines of ctype macros as they aren't needed
2556         for safe-ctype-h.
2557
2558         * url.c: Don't include ctype.h.
2559
2560         * utils.c: Likewise.
2561
2562         * wget.h: Include safe-ctype.h.
2563
2564 2001-03-27  Dan Harkless  <wget@harkless.org>
2565
2566         * Makefile.in: Moved top_builddir out of "User configuration
2567         section" of top Makefile and analogous spot in this one.
2568
2569 2001-03-17  Dan Harkless  <wget@harkless.org>
2570
2571         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
2572         Define top_builddir.  Link wget with libtool so the user doesn't
2573         have to supply a bunch of custom environment variables to 
2574         correctly link with the OpenSSL shared libraries.
2575
2576 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
2577
2578         * http.c (gethttp): skip :port in host header if it is the
2579         DEFAULT_HTTPS_PORT when using SSL.
2580
2581         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
2582         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
2583         rest of the code. 
2584         * url.h: Ditto
2585
2586 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
2587
2588         * retr.c (show_progress): Correctly calculate the number of bytes
2589         in the first line of the download that have been actually
2590         downloaded in this run.
2591
2592 2001-02-23  Dan Harkless  <wget@harkless.org>
2593
2594         * main.c (print_help): --help documentation for -N said it would
2595         re-download files if they had the _same_ timestamp on server.
2596         (print_help): -nr belongs in "FTP options" section of --help
2597         output, not "Recursive retrieval" section.  Alphabetized FTP
2598         options by long option name.
2599
2600 2001-02-16  Dan Harkless  <wget@harkless.org>
2601
2602         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
2603         that "httpsproxy" had been inserted into commands[] out of
2604         alphabetical order, causing "BUG: unknown command `httpuser'".
2605
2606 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2607
2608         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
2609         listing without correct permissons).
2610
2611         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
2612         FTP server. 
2613
2614         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
2615         shall be donwloaded only when it's newer than the local copy or
2616         when it has the same timeestamp but its size is different. ST_VMS
2617         and ST_MACOS as special cases that lie about file size. 
2618
2619         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
2620
2621         * Makefile.in: Removed dependency on ftpparse library due to unclear
2622         copyright issues and absence of any feedback to our queries. 
2623
2624         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
2625         copyright issues and absence of any feedback to our queries.   
2626         (ftp_parse_ls): Added a warning message when remote server system
2627         does not seem to be suported by wget. 
2628         (ftp_parse_vms_ls): New function for parsing VMS ftp
2629         server listing output.
2630         (clean_line): New function responsible for removing
2631         end-of-line characters from FTP listing texts.
2632
2633         * ftp.c (getftp): Global variables pwd and host_type are now
2634         member of the ccon structure under names ccon.id and ccon.rs. 
2635
2636         * ftp.h (struct ccon): Added formed global variables from ftp.c,
2637         enum stype rs (remote system identification) and char *id (initial
2638         working directory), as suggested by Hrvoje.
2639
2640         * url.c (parse_uname): Added support for passwords containing '@'
2641         characters.
2642         (skip_uname): Ditto.
2643
2644 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2645
2646         * ftp.c (ftp_loop): Reset con.
2647
2648 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2649
2650         * url.c (parse_uname): Added support for passwords containing '@'
2651         characters.
2652         (skip_uname): Ditto.
2653
2654 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
2655
2656         * url.c (parseurl): Debug-print u->ftp_type.
2657
2658 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2659
2660         * ftp.c (ftp_loop_internal): Disable padding.
2661         (getftp): Ditto.
2662
2663         * http.c (http_loop): Disable padding.
2664
2665         * retr.c (show_progress): Use it to enable padding.
2666
2667         * retr.c (rate): Optional parameter PAD for padding the rate.
2668
2669 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
2670
2671         * retr.c (show_progress): Make sure that the last output line
2672         includes progress.
2673
2674 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
2675
2676         * retr.c (show_progress): Print the download rate along with the
2677         percentages.
2678         Along with Anders Thorsby <anders@thorsby.dk>.
2679
2680 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
2681
2682         * ftp.h: Rename enums `command' to `wget_ftp_command' and
2683         `fstatus' to `wget_ftp_status' because old names clash with Tru64
2684         net/if.h.
2685
2686 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
2687
2688         * gen_sslfunc.c: verify_callback is now static
2689
2690         * gen_sslfunc.c (init_ssl): load certificate if specified
2691
2692         * gen_sslfunc.c (ssl_printerr): new function
2693
2694         * init.c: added new --sslcertfile and --sslcertkey switches
2695
2696         * main.c: ditto
2697
2698         * options.h: ditto
2699
2700         * http.c (gethttp): abort when init_ssl fails
2701
2702 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
2703
2704         * mswindows.h: Include <malloc.h>; it's needed for alloca().
2705
2706 2001-01-10  Dan Harkless  <wget@harkless.org>
2707
2708         * url.c (str_url): Clarified this function's comment header after
2709         Hrvoje answered my question on the list as to when hide != 1.
2710         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
2711
2712 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2713
2714         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
2715         Drazen Kacar <dave@arsdigita.com>.
2716         (conaddr): Ditto.
2717
2718 2001-01-09  Dan Harkless  <wget@harkless.org>
2719
2720         * html-url.c: A bunch of fixup of `--page-requisites'-related
2721         comments to reflect Hrvoje's changes to my code when transplanting
2722         it into this new file, to fix spelling mistakes, to clarify, etc.
2723
2724         * url.c (write_backup_file): Clarified a comment.
2725         (str_url): Henrik van Ginhoven pointed out on the list that we
2726         shouldn't give away the number of characters in the password by
2727         replacing each character with a 'x'.  Use "<password>" instead.
2728
2729         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
2730         directories didn't work if logging in put you in a directory other
2731         than "/" is fixed now.  Removed the comment here warning of the bug.
2732
2733         * main.c (print_help): --continue's description was misleading.
2734         We don't "restart", we "resume".  Also, better to say
2735         "partially-downloaded file" rather than just "existing file".
2736
2737 2001-01-06  Dan Harkless  <wget@harkless.org>
2738
2739         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
2740         the best way to go about my aim.  Removed them in favor of:
2741
2742         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
2743
2744 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
2745
2746         * url.c (replace_attr): New function, to be used by both
2747         TO_COMPLETE and TO_RELATIVE case in convert_links.
2748         (find_fragment): New function for finding URL fragments.
2749         (replace_attr): Better handle the case where the original string
2750         is not quoted.  Use find_fragment.
2751         (convert_links): Use replace_attr().
2752
2753 2000-12-31  Dan Harkless  <wget@harkless.org>
2754
2755         * ChangeLog: Since this flat file doesn't have multiple branches,
2756         looking at the dates would make you think that things went into
2757         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
2758         in 1.6 branch.]" where appropriate to clarify.
2759         
2760 2000-12-30  Dan Harkless  <wget@harkless.org>
2761
2762         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
2763         patch to deal with h_errno not being defined in netdb.h under Cygwin.
2764
2765 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
2766
2767         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
2768
2769 2000-12-17  Igor Khristophorov  <igor@atdot.org>
2770
2771         * http.c (check_end): Fix test for '+' or '-'.
2772
2773 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2774
2775         * url.c (parseurl): Rename inner loop var from i to ind to avoid
2776         clash with the function top-level-declared variable i.
2777         (str_url): Likewise, rename inner-loop i to j.
2778
2779         * recur.c (parse_robots): Don't declare LEN at top of function.
2780         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
2781         global variable.
2782
2783         * main.c (main): Change erroneous use of bitwise and to logical.
2784
2785         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
2786         the stack because it will be copied to closure.
2787
2788         Thanks to Csaba Raduly's run of PC-LINT over the sources.
2789
2790 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2791
2792         * http.c (basic_authentication_encode): Use xmalloc(), not
2793         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
2794         sources.
2795
2796 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
2797
2798         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
2799         compilation.
2800
2801 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
2802
2803         * mswindows.c: Include <errno.h>.
2804
2805         * gen_sslfunc.c: Include <errno.h>.
2806
2807         * ftp-basic.c: Don't attempt to declare errno or h_errno because
2808         they're not used.
2809
2810         * main.c: Include <errno.h> because errno is used.
2811
2812         * ftp.c: Ditto.
2813
2814         * http.c: Include <netdb.h> for h_errno.
2815
2816 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
2817
2818         * html-parse.c (advance_declaration): MSVC assert() chokes on
2819         '\"'.  Use '"' instead.
2820
2821 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2822
2823         * utils.c (xfree_real): Removed.
2824         (xfree_debug): Just call free().
2825
2826         * wget.h (xfree): Make it an alias for free.
2827
2828 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2829
2830         * http.c (http_loop): Furthermore, touch output_document only if
2831         it is known to be an existing regular file.
2832
2833 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
2834
2835         * ftp.c (ftp_retrieve_list): Ditto.
2836
2837         * http.c (http_loop): Touch output_document if that is used for
2838         output.
2839
2840 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2841
2842         * http.c: Include gen_sslfunc.h after including Wget's headers.
2843         (persistent_available_p): Needed coma before `int ssl'.
2844
2845 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2846
2847         * ftp.c (ftp_loop_internal): Ditto.
2848
2849         * http.c (http_loop): Use it.
2850
2851         * retr.c (sleep_between_retrievals): New function that handles the
2852         logic of opt.wait and opt.waitretry.
2853
2854 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2855
2856         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
2857         rbuf_read_bufferful when the buffer is depleted.
2858
2859         * rbuf.c (rbuf_read_bufferful): New function.
2860
2861 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
2862
2863         * gen_sslfunc.h: Use ansi2knr style function declarations.
2864
2865         * gen_sslfunc.c: Reformat according to the GNU coding standards.
2866         More should be done.
2867
2868         * http.c (persistent_available_p): Place the cheap SSL test nearer
2869         the top of the function.
2870         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
2871
2872 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
2873
2874         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
2875         char.
2876
2877 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
2878
2879         * Makefile.in: added gen_sslfunc object
2880         * config.h.in: added HAVE_SSL define
2881         * connect.c: changed select_fd from static int to int
2882         * connect.h: ditto
2883         * gen_sslfunc.h: New file
2884         * gen_sslfunc.c: ditto
2885         * http.c: added HTTPS fuctionality
2886         * retrc.c: ditto
2887         * url.c: ditto
2888         * init.c: added opt.httpsproxy
2889         * options.h: ditto
2890         * rbuf.h: added alternate rbuf struct
2891         * wget.h: added CONSSLERR
2892         * rbuf.c: ditto
2893
2894         * http.c: Added HTTPS fuctionality.
2895
2896         * retrc.c: Ditto.
2897
2898         * url.c: Ditto.
2899
2900         * init.c: Added opt.httpsproxy.
2901
2902         * options.h: Ditto.
2903
2904         * rbuf.h: Added alternate rbuf struct.
2905
2906         * wget.h: Added CONSSLERR.
2907
2908         * rbuf.c: Ditto.
2909
2910 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2911
2912         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2913         "ignore_perms" to ignore file and directory permissions for
2914         Windows NT FTP server listings.
2915         (ftp_parse_winnt_ls): New function.
2916         (ftp_parse_ls): Parses UNIX and Windows NT listings
2917         separately. Simple heuristics for distinguishing between UNIX and
2918         MS-DOS-like FTP listing provided by Windows NT FTP service.
2919
2920 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2921
2922         * ftpparse.c, ftpparse.h: New files.
2923
2924         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
2925         only. Use ftp_parse_nonunix_ls otherwise.
2926         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
2927         exotic FTP servers.
2928
2929         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
2930         FTP servers.
2931
2932         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
2933         (getftp): Support for VMS. Support for FTP servers that do not
2934         place you in the root directory after login.
2935         (ftp_retrieve_list): VMS is silent about the real file size, issue
2936         a more appropriate message.
2937         (ftp_get_listing): Pass host_type to ftp_parse_ls.
2938
2939         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
2940
2941 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
2942
2943         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
2944         "ignore_perms" to ignore file and directory permissions for
2945         Windows NT FTP server listings.
2946         (ftp_parse_winnt_ls): New function.
2947         (ftp_parse_ls): Parses UNIX and Windows NT listings
2948         separately. Simple heuristics for distinguishing between UNIX
2949         and MS-DOS-like FTP listing provided by Windows NT FTP service.
2950
2951 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
2952
2953         * netrc.c (parse_netrc): Get rid of line ending.
2954
2955 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
2956
2957         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
2958         Dan.
2959
2960 2000-11-24  Karl Eichwalder  <ke@suse.de>
2961
2962         * main.c (print_help): Untabify.
2963
2964 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
2965
2966         * utils.c (xrealloc_debug): Do the unregister/register thing only
2967         if the pointer has actually changed.
2968         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
2969         (xfree_real): Ditto.
2970         (xrealloc_real): Ditto.
2971         (xstrdup_real): Ditto.
2972
2973 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2974
2975         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
2976         string; no need to strdup() it.
2977         (getftp): Make pwd_len a local variable.
2978         (ftp_loop): Free PWD before returning.
2979
2980         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
2981
2982 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
2983
2984         * all: Use xfree() instead of free.
2985
2986         * utils.c (xfree): New function.
2987
2988 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2989
2990         * url.c (convert_links): HTML-quote the converted string.
2991
2992         * utils.c (html_quote_string): Move here from ftp-ls.c
2993         (html_quote_string): Make non-static; declare in utils.h.
2994         (html_quote_string): Convert SP to &#32;.
2995
2996 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
2997
2998         * ftp.c (getftp): Reformat Jan's code according to GNU coding
2999         standards; remove (debugging?) printf's; use '\0' for the ASCII
3000         zero character.  Use alloca() instead of malloc() for
3001         inter-function temporary allocations.
3002
3003 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3004
3005         * ftpparse.c, ftpparse.h: New files.
3006
3007         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
3008         only. Use ftp_parse_nonunix_ls otherwise.
3009         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
3010         exotic FTP servers.
3011
3012         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
3013         FTP servers.
3014
3015         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
3016         (getftp): Support for VMS. Support for FTP servers that do not
3017         place you in the root directory after login.
3018         (ftp_retrieve_list): VMS is silent about the real file size, issue
3019         a more appropriate message.
3020         (ftp_get_listing): Pass host_type to ftp_parse_ls.
3021
3022         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
3023
3024 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3025
3026         * hash.c (hash_table_put): Don't overwrite deleted mappings.
3027
3028 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
3029
3030         * hash.c (find_mapping): New function.
3031         (hash_table_get): Use it.
3032         (hash_table_get_pair): Ditto.
3033         (hash_table_exists): Ditto.
3034         (hash_table_remove): Ditto.
3035         (hash_table_remove): Really delete the entry if the mapping
3036         following LOCATION is empty.
3037
3038         * utils.c (string_set_add): Check whether the element has existed
3039         before.
3040
3041         * hash.c (hash_table_get_pair): New function.
3042
3043 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3044
3045         * http.c (http_process_type): Ignore trailing whitespace; use
3046         strdupdelim().
3047
3048         * recur.c (recursive_retrieve): Use the new `convert' field.
3049         (convert_all_links): Ditto.
3050         (convert_all_links): Don't respect meta_disallow_follow.
3051
3052         * html-url.c (handle_link): Fill out link_relative_p and
3053         link_complete_p.
3054
3055         * url.h (struct _urlpos): Make elements more readable.
3056
3057         * recur.c (recursive_retrieve): Call slist_prepend instead of
3058         slist_append.
3059         (convert_all_links): Call slist_nreverse before iterating through
3060         urls_html.
3061
3062         * utils.c (slist_prepend): New function.
3063         (slist_nreverse): Ditto.
3064
3065 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3066
3067         * http.c (check_end): Constify.
3068
3069 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3070
3071         * http.c (http_loop): If username and password are known, try the
3072         `Basic' authentication scheme by default.
3073
3074         * connect.h: Declare test_socket_open.
3075
3076 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3077
3078         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
3079
3080 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3081
3082         * http.c (gethttp): Don't use the return value of sprintf().
3083         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
3084
3085 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
3086
3087         * recur.c (recursive_retrieve): Print the "so we don't load"
3088         debugging message only if we really don't load.
3089
3090         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
3091         (gethttp): Don't request keep-alive if keep-alive is inhibited.
3092
3093 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3094
3095         * http.c (gethttp): Make the HTTP persistent connections more
3096         robust.
3097
3098 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3099
3100         * retr.c (get_contents): If use_expected, make sure that the
3101         appropriate amount of data is being read.
3102
3103         * http.c (gethttp): Check for both `Keep-Alive: ...' and
3104         `Connection: Keep-Alive'.
3105
3106         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
3107         turned on.
3108
3109 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3110
3111         * http.c (connection_available_p): Use it.
3112
3113         * connect.c (test_socket_open): New function.
3114
3115         * http.c (gethttp): Support persistent connections.  Based on the
3116         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
3117         (register_persistent): New function.
3118         (connection_available_p): Ditto.
3119         (invalidate_connection): Ditto.
3120
3121 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
3122
3123         * url.c (convert_links): Handle UREL2ABS case.
3124
3125         * recur.c (recursive_retrieve): Instead of the list
3126         urls_downloaded, use hash tables dl_file_url_map and
3127         dl_url_file_map.
3128         (convert_all_links): Use them to retrieve data.
3129
3130         * host.c (clean_hosts): Free the hash tables.
3131
3132         * main.c (private_initialize): Call host_init().
3133
3134         * host.c (store_hostaddress): Use a saner, hash table-based data
3135         model.
3136         (realhost): Ditto.
3137         (host_init): Initialize the hash tables.
3138
3139 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
3140
3141         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
3142         used for what the sorted slists used to be used for.
3143         (slist_contains): Don't rely on the list being sorted.
3144         (slist_append): Simplify the code.
3145
3146         * recur.c (recursive_cleanup): Use free_string_set.
3147
3148         * utils.c (string_set_add, string_set_exists, string_set_free):
3149         New functions for easier freeing of hash tables whose keys are
3150         strdup'ed strings.
3151
3152         * recur.c (recursive_retrieve): Use the hash table functions for
3153         storing undesirable URLs.
3154
3155         * hash.c: New file.
3156
3157 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
3158
3159         * main.c (private_initialize): Call url_init.
3160         (main): Call private_initialize.
3161
3162         * url.c (unsafe_char_table): New table.
3163         (UNSAFE_CHAR): Use it.
3164         (init_unsafe_char_table): New function.
3165         (url_init): New function; call init_unsafe_char_table.
3166
3167 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
3168
3169         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
3170         _vsnprintf respectively.
3171
3172 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3173
3174         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
3175         on Linux.
3176
3177 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
3178
3179         * html-url.c (handle_link): Handle HTML fragment identifiers.
3180
3181         * recur.c (recursive_retrieve): If norobot info is respected and
3182         the file is specified not to be followed by robots, respect that.
3183
3184         * html-url.c (collect_tags_mapper): Handle <meta name=robots
3185         content=X>.  For us the important cases are where X is NONE or
3186         where X contains NOFOLLOW.
3187         (get_urls_html): Propagate that information to the caller.
3188
3189 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
3190
3191         * url.c (convert_links): Unlink the file we might be reading from
3192         before writing to it.
3193         (convert_links): Use alloca instead of malloc for
3194         filename_plus_orig_suffix.
3195
3196 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
3197
3198         * host.c (realhost): Add HOST to the list with quality==0 only if
3199         it wasn't already there.
3200         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
3201
3202 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3203
3204         * url.c (get_urls_file): Ditto.
3205         (convert_links): Ditto.
3206
3207         * html-url.c (get_urls_html): Use read_file() instead of
3208         load_file().
3209
3210         * utils.c (read_file): New function, instead of the old
3211         load_file().
3212         (read_file_free): Ditto.
3213
3214         * url.c (findurl): Search only for the supported protocols.
3215         (convert_links): Use fwrite() when writing out a region of
3216         characters.
3217
3218 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3219
3220         * ftp-ls.c: Move html_quote_string and ftp_index here.
3221
3222         * url.c: Remove get_urls_html, since that's now in html-url.c.
3223
3224         * html-url.c: New file.
3225
3226         * html-parse.c: New file.
3227
3228 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3229
3230         * init.c (run_wgetrc): Don't bother killing off '\r' since
3231         pars_line() skips whitespace at end of line anyway.
3232         (parse_line): Oops, it didn't.  Now it does.
3233
3234         * recur.c (parse_robots): Ditto here.
3235
3236         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
3237         manually because read_whole_line no longer does.
3238
3239         * utils.c (read_whole_line): Rewrite to: a) use less memory
3240         (reallocates to needed size after work), b) work faster -->
3241         fgets() instead of getc, c) be more correct --> doesn't kill the
3242         newline character at the end of line.
3243
3244 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
3245
3246         * init.c (comind): Initialize MAX to array size - 1.
3247
3248 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3249
3250         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
3251         Suggested by Edward J. Sabol.
3252
3253 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
3254
3255         * url.c (construct): Handle the case where host name is not
3256         followed by a slash.
3257
3258 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
3259
3260         * init.c: commands[] need to be sorted!  ("base" wasn't.)
3261
3262 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3263
3264         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
3265         `if'.
3266
3267 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3268
3269         * url.c (construct): Insert unneeded initialization for the
3270         compiler to shut up.
3271
3272         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
3273         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
3274         otherwise gets lost when you define _XOPEN_SOURCE.
3275
3276         * utils.c (touch): Include the file name in the error message.
3277         From Debian.
3278
3279 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3280
3281         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
3282         resize the buffer to fit the formated message.  That way, messages
3283         of arbitrary size may be printed.
3284         (logvprintf): Use saved_append() to optionally log the last
3285         several lines of output.
3286         (logputs): Ditto.
3287         (log_close): Adapt to new data structures.
3288         (log_dump): Ditto.
3289         (redirect_output): Print messages to stderr, not to stdout.
3290
3291         * log.c (saved_append_1): New function.  Replaces the old logging
3292         system ("log all output until 10M characters") with a new, much
3293         more reasonable one ("log last screenful of text").
3294         (saved_append): New function; call saved_append_1.
3295         (free_log_line): New function.
3296
3297 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
3298
3299         * url.c (construct): Fix comment.
3300         (find_last_char): Document.
3301
3302 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
3303
3304         * snprintf.c: New file.
3305
3306 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
3307
3308         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
3309         types to logprintf() and debug_logprintf().
3310
3311 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3312
3313         * ftp.c (ftp_loop_internal): Hide the password from the URL when
3314         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
3315         <darekm@bydg.lomac.com.pl>.
3316
3317 2000-11-02  Junio Hamano  <junio@twinsun.com>
3318
3319         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
3320
3321 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
3322
3323         * http.c (known_authentication_scheme_p): Recognize NTML
3324         authentication.
3325         (create_authorization_line): Treat NTML the same as `Basic'.
3326
3327 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3328
3329         * retr.c (retrieve_url): Free url before returning.
3330         (retrieve_url): Free mynewloc before returning.
3331         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3332
3333 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
3334
3335         * url.c (parseurl): Remove possible reading past the end of
3336         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
3337
3338 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3339
3340         * main.c (main): In case of opt.downloaded overflowing, print
3341         <overflow> instead of a totally bogus random value.
3342
3343         * retr.c (retrieve_from_file): Ditto.
3344
3345         * recur.c (recursive_retrieve): Ditto.
3346
3347         * main.c (main): Ditto.
3348
3349         * http.c (http_loop): Ditto.
3350
3351         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
3352         `+=', and downloaded_exceeds_quota() instead of the simple-minded
3353         check.
3354         (ftp_retrieve_list): Ditto.
3355         (ftp_retrieve_dirs): Ditto.
3356         (ftp_retrieve_glob): Ditto.
3357
3358         * retr.c (downloaded_increase): New function.  Notice overflows of
3359         opt.downloaded.
3360         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
3361         used if it overflowed.
3362
3363         * options.h (struct options): New member downloaded_overflow.
3364
3365 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3366
3367         * wget.h (enum): Remove extra space after last enumeration.
3368
3369 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3370
3371         * main.c (main): Use legible_very_long() for printing
3372         opt.downloaded.
3373
3374         * utils.c (legible_1): New function that operates on strings and
3375         does the brunt of legible()'s work.
3376         (legible): Use legible_1().
3377         (legible_very_long): New function; dump the argument with
3378         sprintf(), and call legible_1().
3379
3380         * options.h (struct options): Use VERY_LONG_TYPE for
3381         opt.downloaded.
3382
3383         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
3384         type.
3385
3386         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
3387         defined.  Define HAVE_LONG_LONG if long long is available.
3388
3389 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3390
3391         * utils.c (long_to_string): Update with a later, better version.
3392
3393 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3394
3395         * url.c (path_simplify_with_kludge): New function.
3396         (path_simplify_with_kludge): Disable it.  Instead...
3397         (parse_dir): ...make sure that at this point the right thing is
3398         done, i.e. that "query" part of the URL (?...) is always assigned
3399         to the file, never to the directory portion of the path.
3400
3401 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3402
3403         * retr.c (retrieve_url): Detect redirection cycles.
3404
3405 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3406
3407         * url.c (get_urls_html): Decode HTML entities using
3408         html_decode_entities.
3409
3410         * html.c (htmlfindurl): Don't count the `#' in numeric entities
3411         (&#NNN;) as an HTML fragemnt.
3412         (html_decode_entities): New function.
3413
3414 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3415
3416         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
3417
3418 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
3419
3420         * url.c (construct): Rewritten for clarity.  Avoids the
3421         unnecessary copying and stack-allocation the old version
3422         performed.
3423
3424 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3425
3426         * ftp.c (getftp): Ditto.
3427
3428         * http.c (gethttp): Rewind the stream when retrying from scratch.
3429
3430 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
3431
3432         * retr.c (retrieve_url): Use url_concat() to handle relative
3433         redirections instead of /ad hoc/ code.
3434
3435         * url.c (url_concat): New function encapsulating weird
3436         construct().
3437         (urllen_http_hack): New function.
3438         (construct): When constructing new URLs, recognize that `?' does
3439         not form part of the file name in HTTP.
3440
3441 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
3442
3443         * retr.c: Add msec timing support for WINDOWS.
3444         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
3445         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
3446
3447 2000-10-27  Dan Harkless  <wget@harkless.org>
3448
3449         * retr.c (retrieve_url): Manually applied T. Bharath
3450         <TBharath@responsenetworks.com>'s patch to get wget to grok
3451         illegal relative URL redirects.  Reformatted and re-commented it.
3452
3453 2000-10-23  Dan Harkless  <wget@harkless.org>
3454
3455         * connect.c (make_connection and bindport): Manually applied Rob
3456         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
3457         changing coding style to GNU's.
3458
3459         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
3460         files downloaded via FTP.  Per a comment, .listing files were not
3461         counted towards number of bytes and files downloaded because they're 
3462         deleted anyway.  Well, they aren't under -nr, so count them then.
3463
3464         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
3465         --bind-address, alphabetizing, changing coding style to GNU's,
3466         commenting, and renaming cmd_ip_address() to cmd_address() to
3467         imply hostnames also okay.
3468                 
3469         * main.c (main): --delete-after didn't delete the root of the
3470         tree.  Ignore --convert-links if --delete-after was specified.
3471         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
3472         fixing duplicate use of added-since-1.5.3 case value.
3473         (print_help): Clarified that --delete-after deletes local files.
3474         Rob forgot to add a line for his new --bind-address option.
3475                 
3476         * options.h (struct options): Manually applied Rob Mayoff's patch
3477         to add --bind-address (bind_address structure member).
3478                 
3479         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
3480         Ignore --convert-links if --delete-after was specified.
3481                 
3482         * retr.c (retrieve_from_file): Just added a DEBUGP().
3483                 
3484 2000-10-19  Dan Harkless  <wget@harkless.org>
3485
3486         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
3487         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
3488         patch to work around FTP servers that incorrectly respond to the
3489         "REST" command with the remaining size rather than the total file size.
3490                 
3491         * http.c (gethttp): Improved a comment and added code to tack on
3492         ".html" to text/html files without that extension when -E specified.
3493         (http_loop): Use new downloaded_file() enumerators and deal with
3494         the case of gethttp() called xrealloc() on u->local.
3495
3496         * init.c (commands): Added new "htmlextension" command.
3497         Also renamed John Daily's cmd_quad() to the more descriptive
3498         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
3499         removed duplicate cmd_boolean() declaration.
3500
3501         * main.c (print_help): Added my new -E / --html-extension option.
3502         (main): Undocumented --email-address option previously used -E synonym.
3503         Stole it away for the much more deserving --html-extension's use.
3504
3505         * options.h (struct options): Added html_extension field.
3506
3507         * url.c (convert_links): URL X that we saved as X.html locally due
3508         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
3509         (downloaded_file): Now remembers if we added .html extension to a file.
3510
3511         * url.h (downloaded_file_t): Added extra enumerators to support above.
3512         (downloaded_file): Now takes and returns a downloaded_file_t.
3513
3514         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
3515         
3516 2000-10-09  Dan Harkless  <wget@harkless.org>
3517
3518         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
3519                 
3520         * main.c (print_help): Clarified what --retr-symlinks does.
3521         
3522 2000-09-15  John Daily  <jdaily@cyberdude.com>
3523
3524         * init.c: Add support for "always" and "never" values to allow
3525         .wgetrc to override commandline (useful e.g. with .pm files
3526         calling `wget --passive-ftp' when your firewall doesn't allow that).
3527
3528         * ftp.c (getftp): passive_ftp is first option to support always/never.
3529
3530 2000-08-30  Dan Harkless  <wget@harkless.org>
3531
3532         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
3533         
3534         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
3535         Wrapped some > 80-column lines.  When -p is specified and we're at a 
3536         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
3537         <LINK REL="stylesheet">.
3538         
3539         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
3540         
3541         * init.c: Added new -p / --page-requisites / page_requisites option.
3542
3543         * main.c (print_help): Clarified that -l inf and -l 0 both allow
3544         infinite recursion.  Changed the unhelpful --mirrior description
3545         to simply give the options it's equivalent to.  Added new -p option.
3546         (main): Added some comments; handle new -p / --page-requisites.
3547         
3548         * options.h (struct options): Added new page_requisites field.
3549
3550         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
3551         Calculate and pass down new `dash_p_leaf_HTML' parameter to
3552         get_urls_html().  Use new INFINITE_RECURSION #define.
3553
3554         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
3555         final `dash_p_leaf_HTML' parameter.
3556
3557         * url.c: get_urls_html() and htmlfindurl() now take final
3558         `dash_p_leaf_HTML' parameter.
3559
3560         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
3561
3562         * wget.h: Added some comments and new INFINITE_RECURSION #define.
3563         
3564 2000-08-23  Dan Harkless  <wget@harkless.org>
3565
3566         * main.c (print_help): -B / --base was not mentioned.
3567
3568 2000-08-22  Dan Harkless  <wget@harkless.org>
3569
3570         * main.c (print_help): Modified -nc description to mention that it
3571         also prevents the creation of multiple versions of the same file
3572         with ".<number>" suffixes.
3573
3574 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
3575
3576         * retr.c (retrieve_url): Consistently strdup opt.referer when
3577         setting u->referer.
3578
3579 2000-06-09  Dan Harkless  <wget@harkless.org>
3580
3581         * main.c (print_help): --help output for --waitretry was over 80 cols.
3582
3583 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
3584
3585         * url.c (encode_string): Fix comment.
3586         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
3587
3588 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
3589
3590         * ftp.c (ftp_retrieve_list): Change permissions only on plain
3591         files.
3592
3593 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
3594
3595         * url.c (str_url): Print the port number only if it's different
3596         from the default port number for that protocol.
3597
3598 2000-05-22  Dan Harkless  <wget@harkless.org>
3599
3600         * main.c (print_help): Added --help line for Damir Dzeko
3601         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
3602         Removed comments that --referer and --waitretry were undocumented.
3603         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
3604         line for --execute.
3605
3606 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
3607
3608         * ftp.c (getftp): Ditto.
3609
3610         * http.c (gethttp): Check for return value of fclose/fflush.
3611
3612 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3613
3614         * host.c (store_hostaddress): Instead of shifting ADDR, start
3615         copying from the correct address.
3616
3617 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
3618
3619         * http.c (gethttp): Don't free REQUEST -- it was allocated with
3620         alloca().
3621         Pointed out by Gisle Vanem <gvanem@eunet.no>.
3622
3623 2000-04-04  Dan Harkless  <wget@harkless.org>
3624
3625         * host.c (store_hostaddress): R. K. Owen's patch introduces a
3626         "left shift count >= width of type" warning on 32-bit
3627         architectures.  Got rid of it by tricking the compiler w/ a variable.
3628         
3629         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
3630         characters per RFC1738, namely everything above '~'.  It also
3631         generated a warning on OSes where char =~ unsigned char.  Fixed.
3632         
3633 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3634
3635         * http.c (http_process_type): Removed needless strdup(), a memory
3636         leak.
3637
3638 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
3639
3640         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
3641
3642 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
3643
3644         * init.c (wgetrc_file_name): Don't free HOME under Windows.
3645
3646 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
3647
3648         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
3649
3650 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3651
3652         * url.c (UNSAFE_CHAR): New macro.
3653         (contains_unsafe): Use it.
3654         (encode_string): Ditto.
3655
3656 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
3657
3658         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
3659
3660 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
3661
3662         * Use TOUPPER/TOLOWER.
3663
3664 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
3665
3666         * ftp-opie.c (btoe): Zero-terminate OSTORE.
3667
3668 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
3669
3670         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
3671
3672         * sysdep.h (ISALNUM): New macro.
3673         (TOLOWER): Ditto.
3674         (TOUPPER): Ditto.
3675
3676 2000-03-10  Dan Harkless  <wget@harkless.org>
3677
3678         * html.c (idmatch): Implemented checking of my new --follow-tags
3679         and --ignore-tags options.
3680         
3681         * init.c (commands): Added comment reminding people adding new
3682         entries doing allocation to add corresponding freeing in cleanup().
3683         (commands): Added new followtags and ignoretags commands.
3684         (cleanup): Free storage for new followtags and ignoretags.
3685         
3686         * main.c: Use of "comma-separated list" was random -- normalized
3687         it.  Did some alphabetization.  Added comments pointing out
3688         "Options without arguments" and "Options accepting an argument"
3689         sections of long_options[].  Added new options --follow-tags and
3690         -G / --ignore-tags.  Added comment that Damir's --referer is
3691         currently undocumented.  Added comment that Heiko's --waitretry is
3692         partially undocumented (mentioned in --help but not in
3693         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
3694         
3695         * options.h (struct options): Added new fields follow_tags and
3696         ignore_tags. 
3697         
3698         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
3699         
3700 2000-03-02  Dan Harkless  <wget@harkless.org>
3701
3702         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
3703         braces to avoid ambiguous `else'" warnings.  Eliminated them.
3704         
3705         * http.c (gethttp): Dan Berger's query string patch is totally
3706         bogus.  If you have two different URLs, gen_page.cgi?page1 and
3707         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
3708         second will overwrite the first.  Also, parameters to implicit
3709         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
3710         be printed with trailing garbage characters, and could seg fault.
3711         Backing out the patch, which Dan B. informed me by email was just
3712         a kludge to download StarOffice from Sun made necessary due to
3713         wget's unconditional escaping of certain characters (room for an
3714         option there?).
3715         (http_loop): Heiko introduced "suggest explicit braces to avoid
3716         ambiguous `else'" warnings.  Eliminated them.
3717         
3718         * main.c: Heiko's --wait / --waitretry backwards compatibility
3719         code looks to have been totally untested -- automatic variable
3720         'wr' was used without being initialized, and a long int was passed
3721         into setval()'s char* val parameter.
3722         
3723         * recur.c (parse_robots): Applied Edward J. Sabol
3724         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
3725         problem with "User-agent:<space>*<space>" lines in robots.txt.
3726         
3727         * url.c (parseurl, str_url): Removing Dan Berger's code (see
3728         http.c above for explanation).
3729         
3730 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
3731
3732         * ftp.c: Respect new option waitretry.
3733
3734 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
3735
3736         * http.c (gethttp): Send custom Referer, if required.
3737
3738 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
3739
3740         * netrc.c (parse_netrc): Allow passwords to contain spaces.
3741
3742         * netrc.c (parse_netrc): New function.
3743
3744 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
3745
3746         * http.c (gethttp): Send it.
3747
3748         * url.c (parseurl): Detect query string in HTTP URL-s.
3749         (str_url): Print it.
3750
3751 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
3752
3753         * html.c (html_allow): Add <link href=...> and <script src=...>.
3754
3755 1999-05-02  andrew deryabin  <djsf@softhome.net>
3756
3757         * http.c (gethttp): Specify port in `Host' header only if it's
3758         different from 80.
3759
3760 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
3761
3762         * recur.c (recursive_retrieve): If a finite maximum depth is
3763         specified, and we're are already at that depth, don't download the
3764         HTML file for parsing.
3765
3766 2000-03-01  Dan Harkless  <wget@harkless.org>
3767
3768         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
3769         even though we don't do conversion on HTML files retrieved via
3770         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
3771         (ftp_retrieve_list): Added a comment saying where we need to
3772         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
3773         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
3774         a lie -- reworded as "Server file no newer than local file '%s' --".
3775         
3776         * http.c (http_loop): Fixed a typo and clarified a comment.
3777         (http_loop): When -K and -N are specified together, compare size
3778         and timestamp of server file X against local file X.orig (if
3779         extant) rather than converted local file X.
3780         (http_loop): "Local file '%s' is more recent," is sometimes a lie
3781         -- reworded as "Server file no newer than local file '%s' --".
3782         (http_loop): Call new downloaded_file() function to prevent
3783         wrongful overwriting of .orig file when -N is specified.
3784         
3785         * url.c (convert_links): When -K specified, only rename X to
3786         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
3787         file X due to -N, we clobber an X.orig from a previous invocation.
3788         (convert_links): Call the failsafe xstrdup(), not the real strdup().
3789         (convert_links): Added a note asking anyone who understands how
3790         multiple URLs can correspond to a single file to comment it.
3791         (downloaded_file): Added this new function.
3792         
3793         * url.h (downloaded_file): Added prototype for this new function
3794         as well as its downloaded_file_t enum type.
3795
3796         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
3797
3798 2000-02-29  Dan Harkless  <wget@harkless.org>
3799
3800         * version.c: Upped version to developer-only "1.5.3+dev".
3801
3802 2000-02-18  Dan Harkless  <wget@harkless.org>
3803
3804         * init.c (backup_converted): Added this new option.
3805
3806         * main.c (-K / --backup-converted): Added this new option.
3807
3808         * options.h (backup_converted): Added this new option.
3809
3810         * url.c (convert_links): When backup_converted is specified, save
3811         file X as X.orig before converting.
3812
3813         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
3814
3815 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3816
3817         * version.c: Wget 1.5.3 is released.
3818
3819 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
3820
3821         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
3822         address doesn't yield FQDN.
3823
3824 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
3825
3826         * cmpt.c (strerror): Fix declaration of sys_errlist.
3827
3828 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
3829
3830         * main.c (main): Don't use an array subscript as the first
3831         argument to STRDUP_ALLOCA.
3832         From Kaveh R. Ghazi.
3833
3834 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
3835
3836         * html.c (htmlfindurl): Download table background.
3837
3838 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
3839
3840         * init.c (parse_line): Would free *com before allocating it.
3841         (parse_line): Would free com instead of *com.
3842
3843 1998-09-10  Howard Gayle  <howard@fjst.com>
3844
3845         * url.c (get_urls_html): Would drop the last character of the
3846         link.
3847
3848 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
3849
3850         * http.c (http_loop): Don't print status code if quiet.
3851
3852 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3853
3854         * log.c: Use <stdarg.h> only when __STDC__.
3855
3856 1998-09-10  Adam D. Moss  <adam@foxbox.org>
3857
3858         * html.c (htmlfindurl): Download <layer src=...>.
3859
3860 1998-09-10  Howard Gayle  <howard@fjst.com>
3861
3862         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
3863         not retrieved.
3864
3865 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
3866
3867         * utils.c: Include <libc.h> on NeXT.
3868
3869 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
3870
3871         * url.c (get_urls_html): Fix calculation of URL position.
3872
3873 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
3874
3875         * version.c: Wget 1.5.2 is released.
3876
3877 1998-06-23  Dave Love  <d.love@dl.ac.uk>
3878
3879         * ftp.c, init.c, netrc.c: Include errno.h.
3880
3881         * http.c: Include errno.h and time header.
3882
3883         * Makefile.in (exext): Define.
3884         (install.bin, uninstall.bin): Use it.
3885
3886 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
3887
3888         * http.c (http_loop): Don't attempt to compare local and remote
3889         sizes if the remote size is unknown.
3890
3891 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
3892
3893         * url.c (get_urls_html): Use malloc() instead of alloca in the
3894         loop.
3895
3896 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3897
3898         * version.c: Wget 1.5.2-b4 is released.
3899
3900 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
3901
3902         * url.c (get_urls_html): Ignore spaces before and after the URI.
3903
3904 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
3905
3906         * ftp.c (getftp): Translate `done'.
3907
3908 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3909
3910         * version.c: Wget 1.5.2-b3 is released.
3911
3912 1998-06-06  Alexander Kourakos  <awk@bnt.com>
3913
3914         * init.c (cleanup): Close dfp, don't free it.
3915
3916 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
3917
3918         * utils.c (make_directory): Twiddle.
3919
3920         * config.h.in: Added template for access().
3921
3922 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
3923
3924         * html.c (htmlfindurl): Download <input src=...>
3925
3926 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
3927
3928         * utils.c (file_exists_p): Use access() with two arguments.
3929
3930 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
3931
3932         * netrc.c (parse_netrc): Correct logic.
3933
3934 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
3935
3936         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
3937         <ljm@ljm.wownet.net>.
3938
3939 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
3940
3941         * version.c: Wget 1.5.2-b2 is released.
3942
3943 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
3944
3945         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
3946
3947 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
3948
3949         * retr.c (elapsed_time): Return correct value when
3950         HAVE_GETTIMEOFDAY is undefined.
3951
3952 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
3953
3954         * version.c: Wget 1.5.2-b1 is released.
3955
3956 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
3957
3958         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
3959         (_getopt_internal): Don't translate `#if 0'-ed strings.
3960
3961 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3962
3963         * mswindows.c (ws_handler): Use fork_to_background().
3964
3965 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3966
3967         * version.c: Wget 1.5.1 is released.
3968
3969 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
3970
3971         * http.c (parse_http_status_line): Avoid `minor' and `major'
3972         names.
3973
3974 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
3975
3976         * utils.c (mkdirhier): Renamed to make_directory.
3977
3978 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
3979
3980         * mswindows.c (fork_to_background): Define under Windows.
3981
3982         * utils.c (fork_to_background): New function.
3983
3984         * html.c (htmlfindurl): Removed rerdundant casts.
3985
3986 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3987
3988         * mswindows.c (ws_mypath): Cache the path.
3989
3990 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
3991
3992         * ftp.h: Prefix enum ftype members with FT_.
3993
3994         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
3995
3996         * mswindows.h: Use stat under Borland, _stat under MSVC.
3997
3998 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
3999
4000         * http.c (known_authentication_scheme_p): New function.
4001         (gethttp): Handle authorization more correctly.
4002
4003         * ftp-basic.h: Removed.
4004
4005         * cmpt.h: Removed.
4006
4007         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
4008         with gcc 2.8.
4009         (numdigit): Use `while' loop.
4010
4011         * http.c (create_authorization_line): Detect authentication
4012         schemes case-insensitively.
4013
4014         * http.c (extract_header_attr): Use strdupdelim().
4015         (digest_authentication_encode): Move declaration of local
4016         variables to smaller scope.
4017         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
4018         (create_authorization_line): Detect authentication schemes
4019         case-insensitively.
4020
4021         * utils.c (touch): Constify.
4022
4023         * http.c (gethttp): Report a nicer error when no data is received.
4024
4025         * rbuf.h (RBUF_READCHAR): Ditto.
4026
4027         * ftp-basic.c (ftp_response): Use sizeof.
4028
4029 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
4030
4031         * retr.c (print_percentage): EXPECTED is long, not int.
4032         (print_percentage): Use floating-point arithmetic to avoid
4033         overflow with large files' sizes multiplied with 100.
4034
4035 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
4036
4037         * config.h.in: Added pid_t stub.
4038
4039         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
4040         define it).
4041
4042 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
4043
4044         * version.c: Wget 1.5.0 is released.
4045
4046 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
4047
4048         * url.c (str_url): Ditto.
4049
4050         * ftp-basic.c (ftp_rest): Use new name.
4051
4052         * utils.c (long_to_string): Renamed from prnum().
4053
4054 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
4055
4056         * version.c: Wget 1.5-b17 is released.
4057
4058 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4059
4060         * headers.c (header_get): New argument FLAGS.
4061
4062         * http.c (gethttp): If request is malformed, bail out of the
4063         header loop.
4064         (gethttp): Check for empty header *after* the status line checks.
4065         (gethttp): Disallow continuations for status line.
4066
4067 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4068
4069         * version.c: Wget 1.5-b16 is released.
4070
4071 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
4072
4073         * init.c (commands): Renamed `always_rest' to `continue'.
4074
4075 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
4076
4077         * all: Use it.
4078
4079         * log.c (logputs): New argument.
4080         (logvprintf): Ditto.
4081         (logprintf): Ditto.
4082
4083 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4084
4085         * http.c (http_atotm): Update comment.
4086
4087         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
4088
4089         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
4090
4091         * main.c (i18n_initialize): New function.
4092         (main): Use it.
4093
4094         * log.c: Include <unistd.h>.
4095
4096         * retr.c (show_progress): Cast alloca to char *.
4097
4098 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4099
4100         * version.c: Wget 1.5-b15 is released.
4101
4102 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
4103
4104         * utils.h: Declare file_non_directory_p().
4105
4106 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
4107
4108         * main.c (main): It's `tries', not `numtries' now.
4109
4110 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4111
4112         * init.c (getperms): Removed.
4113
4114 1998-04-01  Tim Charron  <tcharron@interlog.com>
4115
4116         * log.c (logvprintf): Don't use ARGS twice.
4117
4118 1998-04-01  John  <john@futuresguide.com>
4119
4120         * mswindows.c: Cleaned up.
4121
4122 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4123
4124         * version.c: Wget 1.5-b14 is released.
4125
4126 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4127
4128         * ftp-opie.c (STRLEN4): New macro.
4129         (btoe): Use it.
4130
4131 1998-04-01  Junio Hamano  <junio@twinsun.com>
4132
4133         * http.c: Document all the Digest functions.
4134
4135 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
4136
4137         * utils.c (file_non_directory_p): Renamed from isfile().
4138
4139         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
4140
4141 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4142
4143         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
4144
4145         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
4146         style.
4147         (cmd_permissions): Removed.
4148
4149         * config.h.in: Add template for WORDS_BIGENDIAN.
4150
4151 1998-03-31  Junio Hamano  <junio@twinsun.com>
4152
4153         * http.c (HEXD2asc): New macro.
4154         (dump_hash): Use it.
4155
4156 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4157
4158         * version.c: Wget 1.5-b13 is released.
4159
4160 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
4161
4162         * main.c (main): Don't try to use `com'.
4163
4164 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4165
4166         * init.c (cmd_permissions): New function.
4167
4168 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4169
4170         * version.c: Wget 1.5-b12 is released.
4171
4172 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
4173
4174         * init.c (commands): Renamed `numtries' to `tries'.
4175         (cmd_spec_debug): Removed.
4176         (home_dir): Under Windows, return `C:\' if HOME is undefined.
4177
4178 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4179
4180         * config.h.in: Define _XOPEN_SOURCE.
4181
4182         * init.c (check_user_specified_header): New function.
4183         (cmd_spec_header): Use it.
4184         (cmd_spec_useragent): New function.
4185
4186 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
4187
4188         * version.c: Wget 1.5-b11 is released.
4189
4190 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
4191
4192         * wget.h: Include <libintl.h> only if NLS is enabled.
4193
4194 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
4195
4196         * options.h (struct options): Made `wait' a long.
4197         (struct options): Ditto for `timeout'.
4198
4199 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
4200
4201         * utils.c (exists): Renamed to file_exists_p.
4202         (file_exists_p): Use access() if available.
4203
4204 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
4205
4206         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
4207         infloop.
4208
4209         * log.c: do_logging -> save_log_p.
4210
4211         * config.h.in: Added template for HAVE_VSNPRINTF.
4212
4213 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4214
4215         * init.c: Ditto.
4216
4217         * http.c: Protect declaration against non-ANSI compiler.
4218
4219         * log.c (logvprintf): Use vsnprintf() if available.
4220
4221         * getopt.c (main): Don't translate test stuff.
4222
4223 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
4224
4225         * version.c: Wget 1.5-b10 is released.
4226
4227 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
4228
4229         * ftp.c (getftp): Don't translate "CWD %s".
4230
4231         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
4232
4233 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4234
4235         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
4236
4237         * log.c (logputs): New function.
4238         (logvprintf): Renamed from vlogmsg; use logputs().
4239
4240         * retr.c (show_progress): Print `[100%]' when the retrieval is
4241         finished.
4242
4243         * init.c (run_wgetrc): Use FILE, not PATH.
4244         (wgetrc_file_name): Ditto.
4245
4246 1998-03-07  Tim Adam  <tma@osa.com.au>
4247
4248         * recur.c (parse_robots): Correctly reset `entries' on empty
4249         disallow.
4250
4251 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
4252
4253         * init.c (cmd_spec_debug): Use cmd_boolean().
4254
4255 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
4256
4257         * http.c (gethttp): Create proxy-authorization correctly.
4258
4259 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4260
4261         * md5.c: Ditto.
4262
4263         * getopt.c: Use ANSI function definitions.
4264
4265         * ftp-opie.c: New file.
4266
4267         * options.h: Don't redefine EXTERN.
4268
4269         * init.c: Sort it correctly.
4270
4271 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4272
4273         * version.c: Wget 1.5-b9 is released.
4274
4275 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
4276
4277         * recur.c (recursive_retrieve): Reset `first_time'.
4278
4279         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
4280
4281         * rbuf.c (rbuf_peek): Simplified.
4282         (rbuf_flush): Use MINVAL.
4283
4284         * wget.h (MINVAL): Moved from url.h.
4285
4286         * rbuf.h (RBUF_FD): New macro.
4287
4288         * url.c (add_url): Add to the head of the list.
4289
4290         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
4291         file.
4292         (getftp): Set the default permissions to 0600.
4293
4294 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
4295
4296         * url.c (get_urls_html): Ditto.
4297         (convert_links): Ditto.
4298
4299         * recur.c (parse_robots): Ditto.
4300
4301         * html.c (ftp_index): Ditto.
4302
4303         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
4304
4305         * init.c (defaults): Initialize `opt' to zero via memset.
4306
4307         * http.c (digest_authentication_encode): goto considered harmful.
4308
4309 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
4310
4311         * ftp.c (delelement): Simplify and fix leak.
4312
4313 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
4314
4315         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
4316
4317         * url.h (HEXD2ASC): Removed warning.
4318
4319         * init.c (comind): Use binary search.
4320         (commands): Reorganized.
4321         (setval): Ditto.
4322         (cmd_boolean): New function.
4323         (cmd_number): Ditto.
4324         (cmd_number_inf): Ditto.
4325         (cmd_string): Ditto.
4326         (cmd_vector): Ditto.
4327         (cmd_directory_vector): Ditto.
4328         (cmd_bytes): Ditto.
4329         (cmd_time): Ditto.
4330         (cmd_spec_debug): Ditto.
4331         (cmd_spec_dirmode): Ditto.
4332         (cmd_spec_dirstruct): Ditto.
4333         (cmd_spec_dotstyle): Ditto.
4334         (cmd_spec_header): Ditto.
4335         (cmd_spec_htmlify): Ditto.
4336         (cmd_spec_mirror): Ditto.
4337         (cmd_spec_outputdocument): Ditto.
4338         (cmd_spec_recursive): Ditto.
4339         (settime): Merged with cmd_time().
4340         (setbytes): Merged with cmd_bytes().
4341         (setonoff): Merged with cmd_boolean().
4342         (onoff): Ditto.
4343
4344 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4345
4346         * Makefile.in (distclean): Remove `config.h'.
4347
4348 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4349
4350         * version.c: Wget 1.5-b8 is released.
4351
4352 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
4353
4354         * http.c (digest_authentication_encode): New function.
4355         (create_authorization_line): Use it.
4356         (dump_hash): New function.
4357         (digest_authentication_encode): Use it.
4358
4359         * fnmatch.c: Renamed from `mtch.c'.
4360
4361 1998-02-15  Karl Eichwalder  <ke@suse.de>
4362
4363         * main.c (main): Tag "Written by..." string as translatable.
4364
4365 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4366
4367         * wget.h (FREE_MAYBE): New macro.
4368
4369         * http.c (create_authorization_line): Don't use ANSI C string
4370         concatenation feature.
4371         (basic_authentication_encode): Use alloca() for temporary
4372         variables.
4373
4374         * recur.h: Ditto.
4375
4376         * http.c: Ditto.
4377
4378         * headers.h: Ditto.
4379
4380         * ftp-basic.c: Protect declaration against non-ANSI compiler.
4381
4382         * http.c (create_authorization_line): Cast `unsigned char *' to
4383         `char *' for sprintf, to shut up the noisy Digital Unix cc.
4384
4385 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4386
4387         * version.c: Wget 1.5-b7 is released.
4388
4389 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
4390
4391         * cmpt.c (strstr): Synched with glibc-2.0.6.
4392
4393         * ftp-basic.c (calculate_skey_response): Ditto.
4394         (calculate_skey_response): Use alloca().
4395
4396         * http.c (create_authorization_line): Work with FSF's version of
4397         md5.c.
4398
4399         * md5.c: New file, from GNU libc.
4400
4401 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
4402
4403         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
4404
4405 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4406
4407         * http.c (basic_authentication_encode): New function, instead of
4408         the macro.
4409
4410 1998-02-13  Junio Hamano  <junio@twinsun.com>
4411
4412         * http.c: Add HTTP-DA support.
4413         * ftp-basic.c: Add Opie/S-key support.
4414         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
4415         * md5.c, md5.h: New files.
4416
4417 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
4418
4419         * http.c (http_process_range): Renamed from hprocrange().
4420         (http_process_range): Parse the whole header.
4421
4422         * headers.c: New file.
4423         (header_process): New function.
4424         (header_get): Renamed from fetch_next_header.
4425
4426         * all: Include utils.h only where necessary.
4427
4428         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
4429
4430         * wget.h: Add provisions for dmalloc.
4431
4432 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4433
4434         * version.c: Wget 1.5-b6 is released.
4435
4436 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
4437
4438         * ftp.c (ftp_loop): Determine `filename' more precisely.
4439
4440         * init.c (setval): Don't set `opt.quiet' if output-document is
4441         `-'.
4442
4443         * log.c (log_init): Print to STDERR instead of STDOUT.
4444         (vlogmsg): Use STDERR by default.
4445         (logflush): Ditto.
4446
4447 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
4448
4449         * host.c: Use addr_in again.
4450
4451 1998-02-08  Karl Eichwalder  <karl@suse.de>
4452
4453         * http.c (gethttp): Fixed typo.
4454
4455 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4456
4457         * version.c: Wget 1.5-b5 is released.
4458
4459 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
4460
4461         * retr.c (show_progress): Use it.
4462
4463         * log.c (logflush): New function.
4464
4465         * wget.h: Utilize __attribute__ if on gcc.
4466
4467 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
4468
4469         * http.c (base64_encode_line): New argument LENGTH.
4470         (BASIC_AUTHENTICATION_ENCODE): Use it.
4471         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
4472
4473         * main.c (main): Fixed fprintf() format mismatch.
4474
4475 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
4476
4477         * version.c: Wget 1.5-b4 is released.
4478
4479 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
4480
4481         * host.c: use sockaddr_in instead of addr_in.
4482
4483 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
4484
4485         * init.c (cleanup): Use it.
4486
4487         * recur.c (recursive_cleanup): New function.
4488
4489         * retr.c (retrieve_from_file): Ditto.
4490
4491         * main.c (main): Use it.
4492
4493         * recur.c (recursive_reset): New function.
4494
4495         * retr.c (retrieve_from_file): Ditto.
4496
4497         * main.c (main): Simplify call to recursive_retrieve().
4498
4499         * recur.c (recursive_retrieve): Removed FLAGS argument.
4500
4501         * http.c (gethttp): Changed call to iwrite().
4502
4503 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4504
4505         * url.c (get_urls_html): Ditto.
4506         (free_urlpos): Ditto.
4507         (mkstruct): Ditto.
4508         (construct): Ditto.
4509
4510         * retr.c (retrieve_url): Move declaration of local variables to
4511         smaller scope.
4512
4513         * url.c (urlproto): Use it.
4514         (parseurl): Ditto.
4515         (str_url): Ditto.
4516         (get_urls_html): Ditto.
4517
4518         * utils.h (ARRAY_SIZE): New macro.
4519
4520         * url.c (proto): Moved from url.h.
4521
4522         * url.h (URL_CLEANSE): Reformatted.
4523         (USE_PROXY_P): Renamed from USE_PROXY.
4524
4525         * ftp-basic.c: Adjust to the new interface of iwrite().
4526
4527         * ftp-basic.c (ftp_port): Use alloca().
4528
4529 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
4530
4531         * version.c: Wget 1.5-b3 is released.
4532
4533         * host.c (ftp_getaddress): Don't print to stderr directly.
4534
4535         * init.c (setbytes): Support `g' for gigabytes.
4536         (cmdtype): New specification CTIME.
4537         (setval): Use it with settime().
4538         (commands): Use it for WAIT and TIMEOUT.
4539
4540 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
4541
4542         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
4543         (gethttp): Use it.
4544
4545         * utils.c (unique_name_1): Moved from url.c.
4546         (unique_name): Ditto.
4547
4548         * url.c (url_filename): Ditto.
4549
4550         * log.c (redirect_output): Changed call to unique_name().
4551
4552         * url.c (unique_name_1): Renamed from unique_name().
4553         (unique_name): Changed interface.
4554
4555         * init.c (enum cmdid): Moved from init.h.
4556         (cmdtype): Ditto.
4557         (struct cmd): Ditto.
4558
4559         * main.c (main): Use it.
4560         (main): Moved `--backups' to not have a short option.
4561
4562         * options.h (struct options): New member BACKGROUND.
4563
4564         * main.c (print_help): Rearranged.
4565         (main): New long options for -n* short options: --no-directories,
4566         --no-host-directories, --non-verbose, --no-host-lookup and
4567         --dont-remove-listing.
4568
4569 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
4570
4571         * main.c (main): Use log_close().
4572
4573         * log.c: New variable LOGFP.
4574         (vlogmsg): Use it.
4575         (redirect_output): Don't open /dev/null; set LOGFP to stdin
4576         instead.
4577         (log_close): New function.
4578
4579         * options.h (struct options): Removed LFILE.
4580
4581         * log.c (log_enable): Removed.
4582
4583         * main.c (main): Use it.
4584
4585         * log.c (log_init): New function.
4586
4587         * url.c (get_urls_html): Removed needless assignment to BASE.
4588
4589         * host.c (add_hlist): Don't set CMP needlessly.
4590
4591         * utils.c (match_backwards): Ditto.
4592         (in_acclist): Ditto.
4593
4594         * url.c (findurl): Ditto.
4595
4596         * netrc.c (parse_netrc): Ditto.
4597
4598         * log.c (log_dump): Ditto.
4599
4600         * html.c (html_quote_string): Ditto.
4601
4602         * ftp-basic.c (ftp_request): Made static.
4603
4604         * connect.c: Made global variables static.
4605
4606         * url.c (construct): Ditto.
4607
4608         * init.c (init_path): Avoid assignment inside `if'-condition.
4609
4610         * ftp.c: Don't include in.h or winsock.h.
4611
4612         * ftp.c (ftp_loop): Use SZ.
4613
4614         * connect.c (bindport): Cast &addrlen to int *.
4615         (conaddr): Ditto.
4616
4617         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
4618
4619 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4620
4621         * ftp.c (getftp): Initialize opt.ftp_pass here.
4622         (ftp_retrieve_dirs): Use alloca().
4623
4624         * init.c (defaults): Don't initialize opt.ftp_pass.
4625
4626         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
4627         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
4628
4629 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4630
4631         * recur.c (parse_robots): Check for comments more correctly.
4632
4633         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
4634         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
4635         hostname.
4636
4637 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4638
4639         * version.c: Wget 1.5-b2 is released.
4640
4641         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
4642
4643         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
4644
4645         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
4646         char.
4647
4648         * log.c: Don't attempt to hide arguments from ansi2knr.
4649
4650         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
4651
4652         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
4653
4654         * ftp.c (getftp): Ditto.
4655
4656         * http.c (gethttp): Use it.
4657
4658         * retr.c (get_contents): New argument EXPECTED; pass it to
4659         show_progress().
4660         (show_progress): New argument EXPECTED; use it to display
4661         percentages.
4662
4663         * init.c (setval): Ditto.
4664
4665         * http.c (gethttp): Ditto.
4666         (http_loop): Ditto.
4667
4668         * ftp.c (getftp): Ditto.
4669         (ftp_loop_internal): Ditto.
4670
4671         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
4672
4673         * sysdep.h (CLOSE): Simplify; use DEBUGP.
4674
4675         * netrc.c (search_netrc): Use alloca().
4676
4677         * init.c (defaults): Initialize no_flush.
4678
4679         * log.c (vlogmsg): Don't flush if no_flush.
4680
4681         * options.h (struct options): New variable no_flush.
4682
4683         * main.c (main): Don't play games with buffering.
4684
4685         * log.c (vlogmsg): Flush the output after every message.
4686
4687 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
4688
4689         * init.c (parse_line): Ditto.
4690
4691         * url.c (get_urls_html): Ditto.
4692
4693         * main.c (main): Don't cast to unsigned char.
4694
4695         * init.c (run_wgetrc): Don't cast to unsigned char.
4696         (parse_line): Accept char instead of unsigned char.
4697
4698         * html.c (htmlfindurl): Use char instead of unsigned char.
4699
4700         * all: Use them.
4701
4702         * sysdep.h: Add wrappers to ctype macros to make them
4703         eight-bit-clean:
4704
4705 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4706
4707         * html.c (htmlfindurl): Download <img lowsrc=...>
4708
4709         * main.c (main): Ignore SIGPIPE.
4710
4711         * connect.c (select_fd): New argument WRITEP.
4712         (iwrite): Call select_fd().
4713
4714 1997-02-27  Fila Kolodny <fila@ibi.com>
4715
4716         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
4717         one already exists, just skip it.
4718
4719 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
4720
4721         * http.c (gethttp): Cosmetic changes.
4722
4723         * http.c (check_end): Allow `+D...' instead of `GMT'.
4724         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
4725
4726         * url.c (process_ftp_type): New function.
4727         (parseurl): Use it.
4728
4729         * connect.c (iwrite): Allow writing in a few chunks.
4730         (bindport): Made SRV static, so addr can point to it.
4731         (select_fd): Removed HPUX kludge.
4732
4733         * host.c (free_hlist): Incorporated into clean_hosts().
4734
4735 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4736
4737         * host.c (hlist): Made static.
4738         (search_address): Cosmetic change.
4739
4740 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
4741
4742         * version.c: Wget v1.5-b1 is released.
4743
4744         * http.c (hgetlen): Use sizeof() to get the header length.
4745         (hgetrange): Ditto.
4746         (hgettype): Ditto.
4747         (hgetlocation): Ditto.
4748         (hgetmodified): Ditto.
4749         (haccepts_none): Ditto.
4750
4751         * main.c (main): Updated `--version' and `--help' output, as per
4752         Francois Pinard's suggestions.
4753
4754         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
4755         textdomain().
4756
4757         * config.h.in: Define stubs for I18N3.
4758
4759         * wget.h: Include libintl.h.
4760
4761 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
4762
4763         * url.c (mkstruct): Check for opt.cut_dirs.
4764         (mkstruct): alloca()-te more, xmalloc() less.
4765
4766         * utils.c (load_file): Check for ferror().
4767
4768         * url.c (get_urls_file): Close only the files we opened.
4769         (get_urls_html): Ditto.
4770         (count_slashes): New function.
4771
4772         * http.h: Removed.
4773
4774         * http.c (gethttp): Respect username and password provided by
4775         proxy URL.
4776         (base64_encode_line): Write into an existing buffer instead of
4777         malloc-ing a new one.
4778         (struct http_stat): Moved from http.h
4779
4780         * retr.c (retrieve_url): Free SUF.
4781
4782         * all: Removed lots of unnecessary .h dependencies.
4783
4784         * html.c (global_state): Made static.
4785
4786         * utils.h (ALLOCA_ARRAY): New macro.
4787
4788         * main.c (main): New option `--cut-dirs'.
4789
4790         * url.c (construct): Use alloca() for T.
4791
4792         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
4793
4794         * host.c (_host_t): Moved from host.h.
4795         (struct host): Renamed from _host_t.
4796         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
4797         (realhost): Ditto.
4798
4799         * host.h: Don't include url.h.
4800
4801         * ftp.c (LIST_FILENAME): Moved from ftp.h.
4802
4803         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
4804
4805         * main.c (main): Enable log if the output goes to a TTY.
4806
4807         * connect.h: Removed unused constant `BACKLOG'.
4808
4809         * config.h.in: Check for isatty().
4810
4811         * Makefile.in (LINK): Use CFLAGS when linking.
4812
4813 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
4814
4815         * mswindows.c (ws_hangup): Use redirect_output().
4816
4817         * main.c (redirect_output_signal): New function; use
4818         redirect_output().
4819
4820         * log.c (redirect_output): New function, based on hangup(), which
4821         is deleted.
4822
4823         * log.c (vlogmsg): New function.
4824
4825         * wget.h (DEBUGP): Use debug_logmsg().
4826
4827         * main.c (hangup): Use it.
4828
4829         * log.c (log_dump): New function.
4830
4831         * utils.h (DO_REALLOC): Use `long' for various sizes.
4832
4833         * http.c (hskip_lws): Use `while', for clarity.
4834         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
4835         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
4836
4837         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
4838         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
4839
4840         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
4841         (LEGIBLE_SEPARATOR): Ditto.
4842         (FILE_BUFFER_SIZE): Ditto.
4843
4844         * retr.c (BUFFER_SIZE): Moved from retr.h.
4845
4846         * log.c: New file.
4847         (logmsg): Moved from utils.c.
4848         (debug_logmsg): New function.
4849
4850         * mswindows.h: Include it here.
4851
4852         * init.c: Ditto.
4853
4854         * utils.c: Don't include <windows.h>.
4855
4856 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
4857
4858         * host.c (ftp_getaddress): Ditto.
4859
4860         * main.c (main): Use it.
4861
4862         * utils.h (STRDUP_ALLOCA): New macro.
4863
4864         * init.c: Prepend `wget: ' to error messages printed on stderr.
4865
4866         * utils.c (mkdirhier): Renamed from mymkdir.
4867         (touch): Renamed from my_touch.
4868         (pwd_cuserid): Renamed from my_cuserid().
4869
4870 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
4871
4872         * utils.c (accdir): Process wildcards.
4873         (proclist): New function.
4874         (accdir): Use it to avoid code repetition.
4875
4876 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4877
4878         * recur.c (parse_robots): Respect opt.useragent; use alloca().
4879
4880         * http.c (gethttp): Construct useragent accordingly.
4881
4882         * version.c: Changed version string to numbers-only.
4883
4884         * main.c (print_help): List all the options.
4885
4886         * mswindows.c (windows_main_junk): Initialize argv0 here.
4887
4888 1998-01-24  Karl Heuer  <kwzh@gnu.org>
4889
4890         * netrc.c (search_netrc): Initialize `l' only after processing
4891         netrc.
4892
4893         * main.c (main): Don't trap SIGHUP if it's being ignored.
4894
4895 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
4896
4897         * all: Use logmsg().
4898
4899         * utils.c (time_str): Moved from retr.c.
4900         (logmsg): New function.
4901         (logmsg_noflush): Ditto.
4902
4903         * rbuf.c: New file, moved buf_* functions here.
4904
4905         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
4906
4907         * ftp-basic.c (ftp_rest): Use prnum().
4908
4909         * ftp-basic.c: Ditto.
4910
4911         * ftp.c: Use the new reading functions and macros.
4912
4913         * retr.c (buf_initialize): New function.
4914         (buf_initialized_p): Ditto.
4915         (buf_uninitialize): Ditto.
4916         (buf_fd): Ditto.
4917
4918         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
4919         efficiency.
4920         (gethttp): Use alloca() where appropriate.
4921
4922         * retr.c (buf_readchar): Use it.
4923         (buf_peek): Use rstreams.
4924
4925         * retr.h (BUF_READCHAR): New macro.
4926
4927         * init.c (home_dir): Rewritten for clarity.
4928         (init_path): Ditto.
4929
4930         * mswindows.c (ws_backgnd): Made static.
4931         (read_registry): Ditto.
4932         (ws_cleanup): Ditto.
4933         (ws_handler): Ditto.
4934
4935 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
4936
4937         * alloca.c: New file.
4938
4939         * Makefile.in (ALLOCA): Define.
4940
4941         * mswindows.c (ws_help): Constify.
4942         (ws_help): Use alloca.
4943
4944         * mswindows.c: Reformat.
4945
4946         * all: Added _(...) annotations for I18N snarfing and translation.
4947
4948         * host.c (ftp_getaddress): Nuke SYSINFO.
4949         (ftp_getaddress): Don't use getdomainname().
4950         (ftp_getaddress): Use uname(), where available.
4951
4952         * http.c (gethttp): Protect a stray fprintf().
4953
4954         * init.c (settime): New function.
4955         (setval): Treat WAIT specially, allowing suffixes like `m' for
4956         minutes, etc.
4957
4958 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
4959
4960         * url.c (get_urls_html): Use alloca() for TEMP.
4961
4962 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
4963
4964         * url.c (rotate_backups): New function.
4965
4966         * http.c (gethttp): Ditto.
4967
4968         * ftp.c (getftp): Rotate backups.
4969
4970 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
4971
4972         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
4973         xrealloc() and xstrdup().  Use the new functions.
4974
4975         * url.c (decode_string): Made static.
4976         (has_proto): Ditto.
4977         (parse_dir): Ditto.
4978         (parse_uname): Ditto.
4979         (mkstruct): Ditto.
4980         (construct): Ditto.
4981         (construct_relative): Ditto.
4982
4983         * retr.c (show_progress): Made static.
4984
4985         * recur.c (robots_url): Made static.
4986         (retrieve_robots): Ditto.
4987         (parse_robots): Ditto.
4988         (robots_match): Ditto.
4989
4990         * main.h: Removed.
4991
4992         * main.c (printhelp): Made static.
4993         (hangup): Ditto.
4994
4995         * init.c (comind): Made static.
4996         (defaults): Ditto.
4997         (init_path): Ditto.
4998         (run_wgetrc): Ditto.
4999         (onoff): Ditto.
5000         (setonoff): Ditto.
5001         (setnum): Ditto.
5002         (myatoi): Ditto.
5003         (getperms): Ditto.
5004         (setbytes): Ditto.
5005
5006         * http.c (fetch_next_header): Made static.
5007         (hparsestatline): Ditto.
5008         (hskip_lws): Ditto.
5009         (hgetlen): Ditto.
5010         (hgetrange): Ditto.
5011         (hgettype): Ditto.
5012         (hgetlocation): Ditto.
5013         (hgetmodified): Ditto.
5014         (haccepts_none): Ditto.
5015         (gethttp): Ditto.
5016         (base64_encode_line): Ditto.
5017         (mktime_from_utc): Ditto.
5018         (http_atotm): Ditto.
5019
5020         * html.c (idmatch): Made static.
5021
5022         * host.c (search_host): Made static.
5023         (search_address): Ditto.
5024         (free_hlist): Ditto.
5025
5026         * ftp.c (getftp): Made static.
5027         (ftp_loop_internal): Ditto.
5028         (ftp_get_listing): Ditto.
5029         (ftp_retrieve_list): Ditto.
5030         (ftp_retrieve_dirs): Ditto.
5031         (ftp_retrieve_glob): Ditto.
5032         (freefileinfo): Ditto.
5033         (delelement): Ditto.
5034
5035         * ftp-ls.c (symperms): Made static.
5036         (ftp_parse_unix_ls): Ditto.
5037
5038         * connect.c (select_fd): Made static.
5039
5040         * utils.c (xmalloc): Renamed from nmalloc.
5041         (xrealloc): Renamed from nrealloc.
5042         (xstrdup): Renamed from nstrdup.
5043
5044         * getopt.c (exchange): Use alloca.
5045
5046         * mswindows.c (mycuserid): Use strncpy.
5047
5048         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
5049         systhings.h, windecl.h and winjunk.h removed.
5050
5051         * mswindows.c (sleep): New function.
5052
5053         * utils.c: Include <windows.h> under Windows.
5054
5055 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
5056
5057         * url.h (URL_UNSAFE): Change default under Windows.
5058
5059         * retr.c (retrieve_from_file): Respect opt.delete_after.
5060
5061         * main.c (main): Call ws_help on Windows.
5062
5063         * winjunk.c (windows_main_junk): New function.
5064
5065         * main.c (main): Junk-process argv[0].
5066
5067         * http.c (mktime_from_utc): Return -1 if mktime failed.
5068
5069         * http.c (http_loop): Ditto.
5070
5071         * ftp.c (ftp_loop_internal): Change title on Windows when using a
5072         new URL.
5073
5074         * winjunk.c (getdomainname): Lots of functions.
5075
5076 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
5077
5078         * cmpt.c (strptime_internal): Handle years more correctly for
5079         `%y'.
5080
5081 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
5082
5083         * http.c (gethttp): Allocate enough space for
5084         `Proxy-Authorization' header.
5085
5086 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
5087
5088         * version.c: Wget/1.4.5 is released.
5089
5090 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
5091
5092         * retr.c (get_contents): Check return value of fwrite more
5093         carefully.
5094
5095 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
5096
5097         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
5098         year, regardless of century.
5099
5100 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
5101
5102         * utils.c (isfile): Use `lstat' instead of `stat'.
5103
5104 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
5105
5106         * utils.c (numdigit): Use explicit test.
5107
5108 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
5109
5110         * http.c (http_loop): Always use `url_filename' to get u->local.
5111
5112 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
5113
5114         * url.c: Recognize https.
5115
5116 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
5117
5118         * recur.c (recursive_retrieve): Lowercase just the host name.
5119
5120 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
5121
5122         * url.c (get_urls_file): Use the correct test.
5123         (get_urls_html): Ditto.
5124
5125 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
5126
5127         * connect.c: Reverted addrlen to int.
5128
5129         * init.c (parse_line): Check for -1 instead of NONE.
5130
5131         * version.c: Changed version to 1.4.5.
5132
5133 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
5134
5135         * init.c: New option netrc.
5136         (initialize): Don't parse .netrc.
5137
5138         * cmpt.c (recursive): Return rp.
5139         (strptime_internal): Match the long strings first, the abbreviated
5140         second.
5141
5142 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
5143
5144         * http.c (check_end): New function.
5145         (http_atotm): Use it.
5146  
5147 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
5148
5149         * http.c (gethttp): Use them.
5150
5151         * init.c: New options proxy_user and proxy_passwd.
5152
5153 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
5154
5155         * ftp.c (ftp_retrieve_list): Create links even if not relative.
5156
5157 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
5158
5159         * recur.c (recursive_retrieve): Lowercase the host name, if the
5160         URL is not "optimized".
5161
5162         * host.c (realhost): Return l->hostname, even if it matches with
5163         host.
5164
5165 1997-02-10  Marin Purgar  <pmc@asgard.hr>
5166
5167         * connect.c: Make addrlen size_t instead of int.
5168         (conaddr): Ditto.
5169
5170 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5171
5172         * systhings.h: Define S_ISLNK on NeXT too.
5173
5174 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
5175
5176         * version.c: Released 1.4.3.
5177
5178         * url.c: Futher update to list of protostrings.
5179         (skip_proto): Skip `//' correctly for FTP and HTTP.
5180
5181         * url.c (get_urls_html): Handle bogus `http:' things a little
5182         different.
5183
5184         * main.c (main): Removed `follow-ftp' from `f'.
5185         (main): Dumped the `prefix-files' and `file-prefix' options and
5186         features; old and bogus.
5187         (main): Exit on failed setval() in `-e'.
5188
5189         * http.c (fetch_next_header): Use it to detect header continuation
5190         correctly.
5191
5192         * retr.c (buf_peek): New function.
5193
5194 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
5195
5196         * wget.h: Include time.h and stuff.
5197
5198 1997-02-08  Roger Beeman  <beeman@cisco.com>
5199
5200         * ftp.c: Include <time.h>
5201
5202 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
5203
5204         * url.c (findurl): Would read over buffer limits.
5205
5206 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
5207
5208         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
5209
5210 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
5211
5212         * http.c (http_atotm): Initialize tm.is_dst.
5213
5214 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
5215
5216         * http.c (gethttp): Don't print the number of retrieved headers.
5217
5218         * main.c (main): New option `--no-clobber', alias for `-nc'.
5219
5220         * url.c: Recognize `https://'.
5221
5222 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
5223
5224         * host.c (herrmsg): Don't use h_errno.
5225
5226 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
5227
5228         * host.c (accept_domain): Use it.
5229
5230         * main.c (main): New option `--exclude-domains'.
5231
5232         * retr.c (retrieve_url): Use it.
5233         (retrieve_url): Bail out when an URL is redirecting to itself.
5234
5235         * url.c (url_equal): New function.
5236
5237 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
5238
5239         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
5240
5241         * http.c (mk_utc_time): New function.
5242         (http_atotm): Use it; handle time zones correctly.
5243
5244 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
5245
5246         * http.c: Ditto.
5247
5248         * ftp-basic.c: Use it instead of WRITE.
5249
5250         * connect.c (iwrite): New function.
5251
5252 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
5253
5254         * cmpt.c (mktime): New function.
5255
5256         * netrc.c: Include <sys/types.h>.
5257
5258         * main.c (main): Wouldn't recognize --spider.
5259
5260         * retr.c (rate): Use `B', `KB' and `MB'.
5261         (reset_timer,elapsed_time): Moved from utils.c.
5262
5263         * ftp.c (ftp_retrieve_list): Ditto.
5264
5265         * http.c (http_loop): Don't touch the file if opt.dfp.
5266
5267 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
5268
5269         * cmpt.c: New file.
5270
5271         * ftp.c (ftp_retrieve_glob): New argument semantics.
5272         (ftp_retrieve_dirs): Use it.
5273         (ftp_loop): Ditto.
5274
5275         * html.c (htmlfindurl): Recognize `'' as the quote char.
5276
5277 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
5278
5279         * ftp.c (ftp_loop_internal): Use it.
5280
5281         * utils.c (remove_link): New function.
5282
5283 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
5284
5285         * retr.c (retrieve_url): Require STRICT redirection URL.
5286
5287         * url.c (parseurl): New argument STRICT.
5288
5289         * http.c (hparsestatline): Be a little-bit less strict about
5290         status line format.
5291
5292 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
5293
5294         * http.c (gethttp): Use it.
5295
5296         * main.c (main): Don't use '<digit>' as options.
5297
5298         * init.c: New option ignore_length.
5299
5300         * http.c (gethttp): Ditto.
5301         (http_loop): Check for redirection without Location:.
5302         (gethttp): Don't print Length unless RETROKF.
5303
5304         * ftp.c (getftp): Use it.
5305
5306         * url.c (mkalldirs): New function.
5307
5308         * utils.c (mymkdir): Don't check for existing non-directory.
5309
5310         * url.c (mkstruct): Don't create the directory.
5311
5312 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
5313
5314         * init.c (setval): Removed NO_RECURSION checks.
5315
5316 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
5317
5318         * version.c: "Released" 1.4.3-pre2.
5319
5320         * recur.c (recursive_retrieve): Bypass host checking only if URL
5321         is ftp AND parent URL is not ftp.
5322
5323         * ftp-basic.c (ftp_request): Print out Turtle Power.
5324
5325         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
5326         wildcard.
5327         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
5328         not glob.
5329
5330         * http.c (gethttp): Be a little bit smarter about status codes.
5331
5332         * recur.c (recursive_retrieve): Always reset opt.recursive when
5333         dealing with FTP.
5334
5335 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
5336
5337         * retr.c (retrieve_url): New variable location_changed; use it for
5338         tests instead of mynewloc.
5339         (retrieve_url): Allow heuristic adding of html.
5340
5341         * url.c (url_filename): Don't use the `%' in Windows file names.
5342
5343         * http.c (http_loop): Always time-stamp the local file.
5344
5345         * http.c (http_loop): Ditto.
5346
5347         * ftp.c (ftp_retrieve_list): Use it.
5348
5349         * utils.c (my_touch): New function.
5350
5351         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
5352         instead of #ifndef NeXT.
5353
5354         * utils.c (strptime): New version, by Ulrich Drepper.
5355
5356 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
5357
5358         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
5359         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
5360         (http_loop): Would remove ACCEPTRANGES.
5361
5362         * ftp.c (getftp): Call ftp_list with NULL.
5363
5364 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
5365
5366         * html.c (ftp_index): Don't print minutes and seconds if we don't
5367         know them; beautify the output.
5368
5369         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
5370
5371 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
5372
5373         * utils.c (strptime): New function.
5374         (strptime): Don't use get_alt_number.
5375         (strptime): Don't use locale.
5376         (match_string): Made it a function.
5377
5378 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
5379
5380         * http.c (http_atotm): New function.
5381         (http_loop): Use it.
5382
5383         * atotm.c: Removed from the distribution.
5384
5385         * http.c (base64_encode_line): Rewrite.
5386
5387 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
5388
5389         * ftp.c (getftp): Use ftp_expected_bytes; print size.
5390
5391         * ftp-basic.c (ftp_response): Use ftp_last_respline.
5392         (ftp_expected_bytes): New function.
5393
5394         * ftp.c (getftp): Print the unauthoritative file length.
5395
5396         * ftp-ls.c: Renamed from ftp-unix.c.
5397         (ftp_parse_ls): Moved from ftp.c.
5398         (ftp_parse_unix_ls): Recognize seconds in time spec.
5399         (ftp_parse_unix_ls): Recognize year-less dates of the previous
5400         year.
5401
5402 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
5403
5404         * ftp-basic.c: Don't declare errno if #defined.
5405
5406         * host.c (ftp_getaddress): Check for sysinfo legally.
5407
5408 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
5409
5410         * connect.c (iread): Use READ.
5411
5412 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
5413
5414         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
5415         schemes.
5416
5417 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5418
5419         * host.c (ftp_getaddress): Allow `.' in hostname.
5420
5421 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
5422
5423         * wget.h: READ and WRITE macros for use instead of read and write
5424         on sockets, grep READ *.c, grep WRITE *.c
5425
5426         * wsstartup.c: new file - startup for winsock
5427
5428         * wsstartup.h: new file
5429
5430         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
5431
5432         * configure.bat: Configure utility for MSVC
5433
5434         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
5435
5436 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
5437
5438         * version.c: Released 1.4.3-pre.
5439
5440         * utils.c (prnum): Accept long.
5441         (legible): Use prnum().
5442
5443         * connect.c (make_connection): Accept port as short.
5444         (bindport): Ditto.
5445
5446         * http.c (gethttp): Use search_netrc.
5447
5448 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
5449
5450         * ftp.c (getftp): Use search_netrc.
5451
5452         * netrc.c (free_netrc): New function.
5453
5454         * init.c (home_dir): New function.
5455
5456         * url.c (convert_links): Allow REL2ABS changes.
5457
5458 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
5459
5460         * netrc.c: New file.
5461         (parse_netrc, maybe_add_to_list): New functions.
5462
5463 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
5464
5465         * retr.c (retrieve_url): Reset opt.recursion before calling
5466         ftp_loop if it is reached through newloc.
5467
5468         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
5469         error; don't use "Syntax error", since we don't know if it is
5470         really a syntax error.
5471
5472 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
5473
5474         * utils.c (acceptable): Extract the filename part of the path.
5475
5476         * recur.c (recursive_retrieve): Call acceptable() with the right
5477         argument; would bug out on wildcards.
5478
5479         * init.c (parse_line): Likewise.
5480
5481         * html.c (htmlfindurl): Cast to char * when calling stuff.
5482
5483 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5484
5485         * ftp.c (getftp): Use ftp_pasv.
5486
5487         * ftp-basic.c (ftp_request): Accept NULL value.
5488         (ftp_pasv): New function.
5489
5490         * options.h (struct options): Add passive FTP option.
5491
5492 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
5493
5494         * url.c (parseurl): Debug output.
5495
5496         * utils.c (path_simplify): New one, adapted from bash's
5497         canonicalize_pathname().
5498
5499 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
5500
5501         * ftp.c (getftp): Don't discard the buffer.
5502
5503         * retr.c (get_contents): New parameter nobuf.
5504
5505 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5506
5507         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
5508
5509         * init.c (setval): Strip the trailing slashes on CVECDIR.
5510
5511 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5512
5513         * init.c: Make excludes and includes under CVECDIR instead of
5514         CVEC.
5515
5516 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
5517
5518         * url.c (get_urls_html): Skip "http:".
5519
5520 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
5521
5522         * utils.c (strcasecmp): From glibc.
5523         (strncasecmp): Also.
5524         (strstr): Also.
5525
5526         * url.c: Added javascript: to the list of URLs prefixes.
5527
5528 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
5529
5530         * recur.c (retrieve_robots): Print the warning message only if
5531         verbose.
5532
5533 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
5534
5535         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
5536
5537 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
5538
5539         * systhings.h: New file.
5540
5541         * ../configure.in: Check for utime.h
5542
5543         * ftp.c: Check whether we have unistd.h.
5544
5545 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
5546
5547         * recur.c (recursive_retrieve): Send the canonical URL as referer.
5548         (recursive_retrieve): Call get_urls_html with the canonical URL.
5549
5550 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
5551
5552         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
5553         ansi2knr support for compilers which don't support ANSI style
5554         function prototypes and signatures.
5555
5556         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
5557
5558 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
5559
5560         * url.c: Use it; Recognize paths ending with "." and ".." as
5561         directories.
5562         (url_filename): Append .n whenever file exists and could be a
5563         directory.
5564
5565         * url.h (ISDDOT): New macro.
5566
5567         * init.c (parse_line): Use unsigned char.
5568
5569         * url.c (get_urls_html): Cast to unsigned char * when calling
5570         htmlfindurl.
5571
5572         * html.c (htmlfindurl): Use unsigned char.
5573
5574         * version.c: Changed version to 1.4.3.
5575
5576 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
5577
5578         * version.c: Released 1.4.2.
5579
5580         * ftp.c (getftp): Simplified assertion.
5581         (ftp_loop_internal): Remove symlink before downloading.
5582         (ftp_retrieve_list): Unlink the symlink name before attempting to
5583         create a symlink!
5584
5585         * options.h (struct options): Renamed print_server_response to
5586         server_response.
5587
5588         * ftp.c (rel_constr): Removed.
5589         (ftp_retrieve_list): Don't use it.
5590         (ftp_retrieve_list): Use opt.retr_symlinks.
5591
5592 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5593
5594         * main.c (main): New option retr_symlinks.
5595
5596         * url.c (convert_links): Print verbose message.
5597
5598 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
5599
5600         * http.c (http_loop): Reset newloc in the beginning of function;
5601         would cause FMR in retrieve_url.
5602
5603 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
5604
5605         * recur.c (convert_all_links): Find the URL of each HTML document,
5606         and feed it to get_urls_html; would bug out.
5607         (convert_all_links): Check for l2 instead of dl; removed dl.
5608
5609         * url.c (convert_links): Don't refer to freed newname.
5610
5611         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
5612
5613         * main.c (main): Print the OS_TYPE in the debug output, too.
5614
5615         * recur.c (recursive_retrieve): Check for opt.delete_after.
5616
5617         * main.c (main): New option delete-after.
5618
5619         * init.c (setval): Cleaned up.
5620
5621 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
5622
5623         * Makefile.in (wget): Make `wget' the default target.
5624
5625         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
5626         loop.
5627         (ftp_retrieve_list): Warn about non-matching sizes.
5628
5629         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
5630
5631         * init.c (setnum): Renamed from setnuminf; New argument flags.
5632         (setval): Use it.
5633
5634         * main.c (main): Sorted the options.
5635         (main): New option --wait.
5636
5637 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
5638
5639         * html.c (htmlfindurl): Reset s->in_quote after getting out of
5640         quotes.
5641
5642 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5643
5644         * version.c: Changed version to 1.4.2.
5645
5646 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
5647
5648         * version.c: Released 1.4.1.
5649
5650         * html.c (html_quote_string): New function.
5651         (ftp_index): Use it.
5652         (htmlfindurl): A more gentle ending debug message.
5653
5654         * ftp.c (ftp_loop): Check for opt.htmlify.
5655
5656         * init.c: New command htmlify.
5657
5658         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
5659         strings.
5660         (ftp_loop): Print size of index.html.
5661
5662         * init.c (setval): Implement "styles".
5663
5664         * main.c (main): New option dotstyle.
5665
5666 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
5667
5668         * ftp.c (getftp): Close the master socket in case of errors, after
5669         bindport().
5670
5671         * connect.c (bindport): Initialize msock to -1.
5672
5673         * ftp.c (getftp): Initialize dtsock to -1.
5674
5675         * connect.c (closeport): Don't close sock if sock == -1.
5676
5677 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
5678
5679         * init.c (setnuminf): Nuked default value -- just leave unchanged.
5680         (setval): Don't send default values.
5681         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
5682
5683         * options.h (struct options): Use long for dot_bytes.
5684
5685         * init.c (setquota): Renamed to setbytes.
5686         (setval): Use setbytes on DOTBYTES.
5687
5688 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
5689
5690         * ftp.c (getftp): Initialize con->dltime.
5691
5692         * recur.c (recursive_retrieve): Use same_host instead of
5693         try_robots; simply load robots_txt whenever the host is changed.
5694         (recursive_retrieve): Free forbidden before calling parse_robots.
5695
5696 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
5697
5698         * retr.c (show_progress): Use them.
5699
5700         * options.h (struct options): New options dot_bytes, dots_on_line
5701         and dot_spacing.
5702
5703 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
5704
5705         * recur.c (recursive_retrieve): Retrieve directories regardless of
5706         acc/rej rules; check for empty u->file.
5707
5708 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
5709
5710         * init.c (setval): Use it.
5711
5712         * utils.c (merge_vecs): New function.
5713
5714         * init.c (setval): Reset the list-type functions when encountering
5715         "".
5716
5717 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5718
5719         * recur.c (recursive_retrieve): Use base_url instead of this_url
5720         for no_parent.
5721
5722 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
5723
5724         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
5725
5726 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
5727
5728         * utils.c (sepstring): Rewrote; don't use strtok.
5729
5730         * recur.c (recursive_retrieve): Enter assorted this_url to slist
5731         when running the first time.
5732         (retrieve_robots): Warn to ignore errors when robots are loaded.
5733
5734         * utils.c (load_file): Moved from url.c.
5735
5736         * http.c: Made static variables const too in h* functions.
5737
5738         * main.c (main): Renamed --continue-ftp to --continue.
5739
5740         * recur.c (recursive_retrieve): Use it.
5741
5742         * utils.c (frontcmp): New function.
5743
5744         * url.c (accdir): New function.
5745
5746         * html.c (htmlfindurl): Recognize <area href=...>.
5747
5748         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
5749
5750         * init.c (setval): Free the existing opt.excludes and
5751         opt.includes, if available.
5752
5753         * main.c (main): New option -I.
5754
5755 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
5756
5757         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
5758
5759         * version.c: Changed version to 1.4.1.
5760
5761 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
5762
5763         * version.c: Released 1.4.0.
5764
5765 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5766
5767         * main.c (main): Free com and val after parse_line.
5768         (printhelp): Reorder the listing.
5769
5770         * http.c: More robust header parsing.
5771
5772         * http.c: Allow any number of spaces, or no spaces, precede ':'.
5773         (hskip_lws): New function.
5774         (haccepts_bytes): New function.
5775         (gethttp): Use it.
5776
5777         * init.c (setval): Check header sanity.
5778         (setval): Allow resetting of headers.
5779
5780 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
5781
5782         * http.c (http_loop): Don't use has_wildcards.
5783
5784         * http.c (gethttp): Free all_headers -- would leak.
5785
5786         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
5787         0 -- this fixes a long-standing bug in -rl.
5788
5789 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
5790
5791         * ftp.c: Use -1 as "impossible" value for con->fd.
5792
5793         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
5794
5795         * init.c (parse_line): Use isalpha.
5796
5797         * ftp-unix.c: Use HAVE_UNISTD_H.
5798
5799         * mtch.c (has_wildcards): Don't match \.
5800
5801         * http.c (http_loop): Warn on HTTP wildcard usage.
5802
5803 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
5804
5805         * url.c (url_filename): Do not create numbered suffixes if
5806         opt.noclobber -- would bug out on -nc.
5807
5808 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
5809
5810         * recur.c (parse_robots): Don't chuck out the commands without
5811         arguments (`Disallow:<empty>' didn't work).
5812         (parse_robots): Compare versions lowercase.
5813         (parse_robots): Match on base_version, not version_string!
5814         (parse_robots): Handle comments properly.
5815         (parse_robots): Match versions in a sane way.
5816
5817         * init.c: Print nicer error messages.
5818
5819         * version.c: Changed version to 1.4.0.
5820
5821 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5822
5823         * version.c: Released 1.4.0-test2.
5824
5825         * init.c (run_wgetrc): Close fp.
5826
5827         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
5828         u->dir.
5829
5830 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
5831
5832         * init.c (setquota): Allow inf as quota specification.
5833
5834 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
5835
5836         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
5837         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
5838
5839         * main.c (main): Check for quota by comparison with downloaded
5840         stuff, not from status.
5841
5842         * connect.c (select_fd): Should compile on HPUX without warnings now.
5843
5844         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
5845         returned RETROK.
5846
5847 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
5848
5849         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
5850         (getftp): Return FTPRETRINT on control connection error.
5851
5852         * html.c (htmlfindurl): Recognize <embed src=...> and
5853         <bgsound src=...>.
5854         (ftp_index): Handle username and password correctly.
5855
5856         * main.c (main): Made `-np' a synonim for --no-parent.
5857
5858 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5859
5860         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
5861         ftp_retrieve_glob.
5862
5863         * version.c: Changed version to 1.4.0-test2.
5864
5865 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
5866
5867         * version.c: Released 1.4.0-test1.
5868
5869         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
5870         directory.
5871         (convert_links): Removed definition of make_backup.
5872
5873         * http.h: Removed definition of MAX_ERROR_LENGTH.
5874
5875         * host.c (ftp_getaddress): Check for "(none)" domains.
5876
5877         * ftp.c (ftp_retrieve_dirs): Docfix.
5878
5879         * http.c (gethttp): Use ou->referer instead of u->referer.
5880
5881         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
5882         this was known to cause coredumps on Linux.
5883
5884         * html.c (ftp_index): Cast the argument to local_time to time_t *.
5885
5886 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
5887
5888         * connect.c (select_fd): Use exceptfds -- once and for all.
5889
5890         * retr.c (retrieve_from_file): Free filename after
5891         recursive_retrieve.
5892         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
5893         first-time retrieval.
5894         (retrieve_from_file): Return uerr_t; new argument, count.
5895         (retrieve_from_file): Break on QUOTEXC.
5896
5897         * init.c (setquota): Fixed a bug that caused rejection of
5898         non-postfixed values..
5899
5900 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
5901
5902         * version.c: Changed name to wget.
5903
5904         * connect.c (iread): Smarter use of select.
5905         (select_fd): Set errno on timeout.  If not timeout, return 1
5906         instead of 0.
5907
5908 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
5909
5910         * ftp.c (ftp_loop_internal): Don't use con->cmd before
5911         establishing it.
5912
5913 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
5914
5915         * http.c (gethttp): Send correct referer when using proxy.
5916         (gethttp): Use struct urlinfo ou to access the relevant data; send
5917         correct authorization in all cases.
5918
5919         * host.c (same_host): Use skip_uname to skip username and
5920         password.
5921
5922         * url.c (skip_uname): New function.
5923         (parseurl): Use it.
5924
5925         * host.c (same_host): Do not assume HTTP -- same_host should now
5926         be totally foolproof.
5927
5928         * url.c (skip_proto): New function.
5929         (parse_uname): Use it.
5930
5931         * http.c (gethttp): Create local user and passwd from what is
5932         given.
5933
5934         * url.c (parseurl): Check for HTTP username and password too.
5935
5936 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
5937
5938         * config.h.in: Removed #define gethostbyname R...
5939
5940 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
5941
5942         * version.c: Changed version to 1.4.0-test1.
5943
5944 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
5945
5946         * version.c: "Released" 1.4b29.
5947
5948         * recur.c (recursive_retrieve): Check for no_parent.
5949
5950         * init.c (setval): Option update.
5951
5952         * main.c (main): New option no-parent.
5953
5954         * options.h (struct options): New variable no_parent.
5955
5956         * recur.c (recursive_retrieve): Only files are checked for
5957         opt.accepts and opt.rejects.
5958         (recursive_retrieve): Check directories for opt.excludes.
5959         (recursive_retrieve): Make the dir absolute when checking
5960         opt.excludes.
5961
5962         * html.c (htmlfindurl): Recognize <applet code=...> and <script
5963         src=...>
5964
5965 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5966
5967         * ftp.c (getftp): Do not line-break assert entries at all.
5968         (ftp_retrieve_dirs): docfix.
5969
5970         * connect.c (select_fd): Use fd + 1 as nfds.
5971
5972         * version.c: Changed version to 1.4b29.
5973
5974 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
5975
5976         * version.c: "Released" 1.4b28.
5977
5978         * ftp.c (ftp_loop_internal): Check whether f->size == len and
5979         don't continue the loop if it is.
5980         (ftp_get_listing): Remove list_filename on unsuccesful loop.
5981
5982 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5983
5984         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
5985         (getftp): Do not use multiline assert.
5986
5987         * http.c (hparsestatline): Use mjr and mnr instead of major and
5988         minor, which don't compile on Ultrix.
5989         (http_loop): Use strcpy() to initialize tmp.
5990
5991         * all: Geturl -> Fetch
5992
5993 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
5994
5995         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
5996         ':'.
5997
5998         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
5999         moving `bufsize &&' to the beginning of each check in for-loops.
6000
6001         * recur.c (parse_robots): Close fp on exit.
6002
6003         * url.c (mymkdir): Check for each directory before creating.
6004
6005 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
6006
6007         * version.c: Changed version to 1.4b28.
6008
6009 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
6010
6011         * version.c: "Released" 1.4b27.
6012
6013         * init.c (parse_line): Use isspace.
6014         (parse_line): Free *com on all errors.
6015
6016         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
6017         (delelement): Use next instead of f->next and prev instead of
6018         f->prev.
6019         (delelement): Free the members of the deleted element.
6020
6021         * http.c (http_loop): Do not return RETROK on code != 20x.
6022
6023         * init.c (cleanup): Free opt.user_header.
6024         (cleanup): Free opt.domains.
6025
6026         * url.c (freelists): Moved to cleanup().
6027
6028         * http.c (hparsestatline): Docfix.
6029
6030         * main.c (main): Return with error status on unsuccesful
6031         retrieval.
6032
6033         * init.c (setval): Do not remove listing when mirroring.
6034
6035         * url.c (url_filename): Use opt.fileprefix.
6036
6037         * ftp.c (ftp_get_listing): Use url_filename to get filename for
6038         .listing.
6039
6040         * main.c (main): New option: -rn.
6041
6042 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
6043
6044         * Makefile.in (RM): Added RM = rm -f.
6045
6046         * host.c (clean_hosts): New function.
6047         (free_hlist): Just free the list, no reset.
6048
6049         * version.c: Changed version to 1.4b27.
6050
6051 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
6052
6053         * version.c: "Released" 1.4b26.
6054
6055         * retr.c (retrieve_from_file): If call get_urls_html with
6056         opt.spider to make it silent in spider mode.
6057
6058         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
6059
6060         * url.h (CLEANDUP): New macro.
6061
6062         * http.c (gethttp): Fixed a bug that freed location only when it
6063         was NULL.
6064
6065         * retr.c (retrieve_url): Free url if it will not be stored,
6066         i.e. newloc is NULL.
6067
6068         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
6069         old version would bug out on <a href="x#a"href="y">.
6070
6071         * html.h (state_t): New member in_quote.
6072
6073         * html.c (htmlfindurl): Free s->attr at the beginning of
6074         attr-loop.
6075
6076         * recur.c (recursive_retrieve): Recognize RCLEANUP.
6077         (tried_robots): Make hosts a global variable.
6078         (recursive_retrieve): Free constr after URL host optimization.
6079         (tried_robots): Free urlinfo before exiting.
6080
6081         * utils.c (free_slist): New function.
6082
6083         * recur.c (recursive_retrieve): Use flags to add cleanup
6084         possibility.
6085
6086         * main.c (main): Free filename after recursive_retrieve.
6087
6088         * http.c (gethttp): Store successful responses too.
6089
6090 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
6091
6092         * all: Constified the whole source.  This required some minor
6093         changes in many functions in url.c, possibly introducing bugs -- I
6094         hope not.
6095
6096         * ftp-basic.c: Removed last_respline.
6097
6098         * http.c (gethttp): Free type.
6099
6100         * host.c (same_host): Free real1 and real2.
6101
6102         * main.c (main): New option --spider.
6103
6104         * retr.c (get_contents): Don't reset errno.
6105
6106         * main.c (main): Sorted the options.
6107
6108         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
6109         uninitialized by select().
6110
6111         * http.c (http_loop): Print the time when the connection is
6112         closed.
6113         (gethttp): Debug-print the HTTP request.
6114
6115 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
6116
6117         * connect.c (iread): Do not try reading after timeout.
6118
6119         * main.c (main): Would bug out on -T.
6120
6121         * connect.c (select_fd): Do not use exceptfds.
6122         (iread): Set ETIMEDOUT on select_fd <= 0.
6123
6124         * version.c: Changed version to 1.4b26.
6125
6126 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
6127
6128         * version.c: "Released" 1.4b25.
6129
6130         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
6131         or link name.
6132
6133         * http.c (gethttp): Add errcode to struct hstat.
6134         (http_loop): Use it.
6135
6136         * url.c (no_proxy_match): Simplify using char** for no_proxy.
6137
6138         * options.h (struct options): Make opt.no_proxy a vector.
6139
6140         * utils.c (sepstring): Use !*s instead of !strlen(s).
6141
6142         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
6143         (getperms): Use ISODIGIT instead of isdigit.
6144
6145         * ftp.c (getftp): Print time.
6146
6147         * main.c (main): Use legible output of downloaded quantity.
6148
6149         * ftp.c (getftp): Use elapsed_time().
6150         (ftp_loop_internal): Use rate().
6151
6152         * http.c (http_loop): Add download ratio output; Use rate().
6153
6154         * utils.c (rate): New function.
6155
6156 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
6157
6158         * http.c (http_loop): Use timer.
6159
6160         * ftp.c: Split to ftp-basic.c and ftp.c
6161
6162         * utils.c (reset_timer): New function.
6163         (elapsed_time): New function.
6164
6165         * retr.c (show_progress): Make bytes_in_line and offs long; should
6166         work on 16-bit machines.
6167
6168 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
6169
6170         * url.c (in_acclist): New argument backward.
6171
6172         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
6173         a file should be retrieved according to suffix.
6174         (ftp_get_listing): Check the return value of unlink; Do not call
6175         ftp_retrieve_dirs if depth reached maxreclevel.
6176         (ftp_retrieve_dirs): Check whether the directory is in
6177         exclude-list.
6178
6179         * main.c (main): Print the version number at the beginning of
6180         DEBUG output.
6181         (main): Use strrchr when creating exec_name.
6182
6183         * ftp.c (ftp_retrieve_glob): Do not close control connection.
6184
6185         * version.c: Changed version to 1.4b25.
6186
6187 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
6188
6189         * version.c: "Released" 1.4b24.
6190
6191         * Makefile.in: Rewrite.
6192
6193         * ftp.c (ftp_loop_internal): Likewise.
6194
6195         * retr.c (time_str): Check for failed time().
6196
6197         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
6198         HTML3.0.
6199
6200         * retr.c (time_str): Return time_t *.
6201
6202         * connect.c (bindport): Close msock on unsuccesful bind.
6203         (bindport): The same for getsockname and listen.
6204
6205         * retr.c (retrieve_url): Allow any number of retries on
6206         proxy.
6207
6208         * http.c (gethttp): Do not treat errno == 0 as timeout.
6209         (http_loop): Likewise.
6210         (http_loop): Cosmetic changes.
6211
6212         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
6213
6214         * retr.c (get_contents): Reset errno.
6215
6216         * ftp.c (getftp): Minor fixes.
6217
6218 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6219
6220         * http.c: Do not use backups.
6221
6222         * geturl.1 (WARNING): Warn that man-page could be obsolete.
6223
6224         * getopt.c (getopt_long): Moved to getopt.c
6225
6226         * geturl.texi: Enhanced.
6227
6228         * main.c (main): Use it.
6229
6230         * recur.c (convert_all_links): New function.
6231
6232         * utils.c (add_slist): New argument flags.
6233
6234         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
6235         (parse_robots): Do not chuck out empty value fields.
6236         (parse_robots): Make yourself welcome on empty Disallow.
6237
6238         * version.c: Changed version to 1.4b24.
6239
6240 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
6241
6242         * version.c: "Released" 1.4b23.
6243
6244         * ftp.c (ftp_loop_internal): Get the time after getftp.
6245
6246         * Makefile.in (install.info): New target.
6247         (install): Use it.
6248
6249         * http.c (http_loop): Fix output when doing -O.
6250
6251 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6252
6253         * geturl.texi: New file.
6254
6255         * main.c (main): Do not print the warnings and download summary if
6256         opt.quiet is set.
6257
6258         * version.c: Changed version to 1.4b23.
6259
6260 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
6261
6262         * "Released" 1.4b22.
6263
6264         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
6265         to avoid redefinition warnings.
6266
6267         * host.c (store_hostaddress): Use memcpy() to copy the address
6268         returned by inet_addr.
6269
6270         * version.c: Changed version to 1.4b22.
6271
6272 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
6273
6274         * version.c: "Released" 1.4b21.
6275
6276         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
6277
6278         * ftp.c (ftp_port): Use conaddr.
6279         (getftp): Print the file length.
6280         (ftp_retrieve_list): Check the stamps of plain files only.
6281
6282         * connect.c (closeport): Do not call shutdown().
6283         (conaddr): New function.
6284
6285         * html.c (ftp_index): Made it dfp-aware.
6286
6287         * init.c (cleanup): New name of freemem. Close opt.dfp.
6288
6289         * ftp.c (getftp): Use opt.dfp if it is set.
6290
6291         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
6292
6293         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
6294         CWDs to be sent with recursive FTP retrievals.
6295
6296 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
6297
6298         * recur.c (parse_robots): Made it more compliant with "official"
6299         specifications.
6300
6301         * http.c: New function.
6302
6303         * ftp-unix.c (ftp_parse_ls): Added better debug output.
6304
6305         * ftp.c (getftp): Print out the LIST in case of
6306         opt.print_server_response.
6307
6308         * version.c: Changed version to 1.4b21.
6309
6310 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
6311
6312         * version.c: "Released" 1.4b20.
6313
6314         * README: Update.
6315
6316         * http.c (gethttp): Preset lengths of various headers instead of
6317         calculating them dynamically.
6318         (gethttp): Check for 206 partial contents.
6319
6320 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
6321
6322         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
6323
6324         * http.c (gethttp): Send the port number in the Host: header.
6325
6326 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
6327
6328         * http.c (gethttp): Send host: header.
6329         (gethttp): Add the possibility of user-defined headers.
6330         (gethttp): Move decision about pragma: no-cache to http_loop,
6331         where it belongs.
6332         (gethttp): Pass a struct instead of enormous argument list.
6333         (http_loop): Use a new, fancier display format.
6334         (ftp_loop): Likewise.
6335
6336         * main.c: (hangup): Turn off buffering of the new log file.
6337
6338         * install-sh: Likewise.
6339
6340         * config.sub: Replace with the one in autoconf-2.10
6341
6342         * geturl.1: Update.
6343
6344         * init.c: New options httpuser and httppasswd.
6345
6346         * http.c: (base64_encode_line): New function.
6347         (gethttp): Send authentication.
6348
6349         * connect.c (make_connection): Use store_hostaddress.
6350
6351 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
6352
6353         * host.c (store_hostaddress): New function.
6354
6355         * NEWS: Update.
6356
6357         * http.c (hgetrange): New function.
6358         (gethttp): Use ranges.
6359
6360         * utils.c (numdigit): Accept long instead of int.
6361
6362         * http.c (http_loop): Add restart capabilities.
6363
6364         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
6365         being used uninitialized.
6366         (ftp_retrieve_list): Similar fix.
6367
6368         * host.c (add_hlist): Fixed a bug that could cause cmp being used
6369         uninitialized.
6370
6371         * url.c (construct_relative): New function.
6372
6373         * recur.c (recursive_retrieve): Use it.
6374
6375         * retr.c (convert_links): New function.
6376
6377 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
6378
6379         * url.c (free_urlpos): New function.
6380
6381         * recur.c (recursive_retrieve): Adapt.
6382
6383         * url.c (get_urls_html): Return a linked list instead of a vector.
6384
6385         * url.c (get_urls_file): Return a linked list instead of a vector.
6386
6387         * geturl.1: Update.
6388
6389         * http.c (gethttp): Implement it.
6390
6391         * init.c (setval): New option: SAVEHEADERS
6392
6393         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
6394         be retrieved. Lack of this test caused bugs when the connection
6395         was lost during listing.
6396
6397         * retr.c (retrieve_url): Fixed a bug that caused
6398         coredumps. *newloc is now reset by default.
6399         (retrieve_url): Lift the twenty-tries limit on proxies.
6400
6401         * version.c: Changed version to 1.4b20.
6402
6403 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
6404
6405         * version.c: "Released" 1.4b19.
6406
6407 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
6408
6409         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
6410         (getftp): Changed prototype to accept ccon *.
6411
6412 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
6413
6414         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
6415         incorrect values to files pointed to by symbolic links.
6416         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
6417
6418 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
6419
6420         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
6421
6422         * main.c (main): New option: --user-agent.
6423
6424         * geturl.1: Ditto.
6425
6426         * init.h: Ditto.
6427
6428         * init.c (setval): Ditto.
6429
6430         * main.c (main): Rename "server-headers" to "server-response".
6431
6432         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
6433         executables in 'ls -F' listings.
6434
6435 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
6436
6437         * url.c (parseurl): Remove realloc() and sprintf().
6438         (str_url): Get rid of sprintf().
6439
6440         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
6441         servers.
6442
6443         * url.h (URL_CLEANSE): Made it else-resistant.
6444         (USE_PROXY): New macro.
6445
6446 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6447
6448         * NEWS: Update.
6449
6450         * version.c: Changed version to 1.4b19.
6451
6452 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
6453
6454         * version.c: "Released" 1.4b18.
6455
6456         * url.c: Made it reallocate space exponentially.
6457
6458 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
6459
6460         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
6461         the list of stuff to fetch.
6462
6463 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
6464
6465         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
6466         -Fi.
6467
6468         * html.c (htmlfindurl): Rewrite.
6469
6470         * http.c (gethttp): Use opt.proxy_cache.
6471
6472         * main.c (main): Added --cache option.
6473
6474         * ftp.c (ftp_response): Print server response if opt.print_server
6475         response is set.
6476         (getftp): Print newlines after each request if the server response
6477         is to be printed.
6478         (ftp_response): Copy the last response line to last_respline.
6479
6480         * http.c (gethttp): Add Pragma: nocache for retried
6481         proxy-retrievals.
6482
6483         * ftp.c (getftp): Use it.
6484
6485         * retr.c (buf_discard): New function.
6486
6487         * ftp.c (ftp_response): Use buf_readchar().
6488         (getftp): Flush the control connection buffer before calling
6489         get_contents().
6490
6491         * retr.c (buf_readchar): New function.
6492         (buf_flush): New function.
6493         (get_contents): Use buf_readchar() instead of read(x, x, 1).
6494         (get_contents): Use buf_flush.
6495
6496 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6497
6498         * ftp.c: Incorporate changes to ftp_response.
6499
6500         * ftp.c (ftp_response): Allocate the server response dynamically,
6501         as in read_whole_line and fetch_next_header.
6502
6503         * utils.c (read_whole_line): Fixed a bug that prevented reading
6504         the last line if it is not \n-terminated. Also fixed a possible
6505         memory overflow.
6506
6507         * http.c (fetch_next_header): Return malloc-ed string as large as
6508         needed.
6509         (gethttp): Use new fetch_next_header.
6510
6511 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
6512
6513         * http.c (hgetlen): Compute the header length the first time only.
6514         (hgettype): Ditto.
6515         (hgetlocation): Ditto.
6516         (hgetmodified): Ditto.
6517
6518 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
6519
6520         * sample.geturlrc: Update.
6521
6522 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6523
6524         * http.c (http_loop): Ditto.
6525
6526         * ftp.c (getftp): Open the output file as binary.
6527
6528         * version.c: Changed version to 1.4b18.
6529
6530 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
6531
6532         * version.c: "Released" 1.4b17.
6533
6534         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
6535         instead of failed assertion.
6536
6537 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
6538
6539         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
6540         if a file of that name already exists.
6541
6542 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
6543
6544         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
6545
6546         * config.h.in: Define gethostbyname as Rgethostbyname when using
6547         Socks.
6548
6549         * configure.in: Check for -lresolv if using Socks.
6550
6551         * version.c: Changed version to 1.4b17.
6552
6553 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
6554
6555         * version.c: "Released" 1.4b16.
6556
6557         * http.c (gethttp): More intelligent check for first line of HTTP
6558         response.
6559         (gethttp): Would bug out on time-stamping.
6560
6561         * version.c: Changed version to 1.4b16.
6562
6563 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6564
6565         * version.c: Released 1.4b15.
6566
6567         * http.c (http_loop): Print \n after the loop entry, not before.
6568
6569         * url.c (url_filename): Use ISDOT.
6570
6571         * url.h (ISDOT): New macro.
6572
6573         * recur.c (recursive_retrieve): Change only opt.recursive for
6574         following FTP.
6575
6576 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
6577
6578         * socks/geturl.cgi: Fixed version No.
6579
6580         * socks/download-netscape.html: Ditto.
6581
6582         * socks/download.html: Changed socks.html to download.html.
6583
6584 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
6585
6586         * url.c (url_filename): Check for opt.dirstruct instead for
6587         opt.recursive && opt.dirstruct.
6588
6589         * init.c (defaults): Ditto.
6590         (defaults): Reset dirstruct by default.
6591         (setval): Set opt.dirstruct whenever setting recursive.
6592
6593         * init.h: Removed FORCEDIRHIER.
6594
6595         * INSTALL: Added -L to socks-description.
6596
6597         * version.c: Changed version to 1.4b15.
6598
6599 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
6600
6601         * version.c: "Released" 1.4b14.
6602
6603         * geturl.1: Update AUTHOR to include Rosella as contributor.
6604
6605         * NEWS: Update.
6606
6607         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
6608
6609         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
6610         (cal_time): Fix == to eq.
6611
6612         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
6613
6614         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
6615
6616         * Makefile.in: Use @VERSION@.
6617
6618         * configure.in: Check version from version.c.
6619
6620         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
6621
6622         * socks/download.html: Created from download-netscape.html, made
6623         HTML-2.0 compliant.
6624
6625         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
6626         following FTP links from recursions.
6627
6628 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6629
6630         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
6631         absolute directories correctly.
6632
6633         * version.c: Changed version to 1.4b14.
6634
6635 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
6636
6637         * version.c: "Released" 1.4b13.
6638
6639         * url.c (make_backup): New function.
6640
6641         * http.c (http_loop): Make a backup copy of the local file (using
6642         rename(2)) before opening it.
6643
6644         * main.c (main): Added --backups.
6645
6646         * host.c (ftp_getaddress): Bail out on failed mycuserid().
6647         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
6648         (ftp_getaddress): Check for empty, null or (null) domain.
6649
6650         * url.c (get_urls_html): If this_url is NULL, the base must have a
6651         protocol.
6652         (parseurl): Use has_proto.
6653
6654         * retr.c (retrieve_url): Warn when proxy is used with more than 20
6655         retries.
6656
6657         * url.c (mkstruct): Create the directory (calling mymkdir()) only
6658         if it is not already there.
6659         (has_proto): New function.
6660         (get_urls_html): Eliminate the remaining call to findurl -- use
6661         has_proto.
6662
6663         * geturl.1: Ditto.
6664
6665         * main.c: Change -X to -x.
6666
6667         * url.c (url_filename): Simplify creation of filename if
6668         prefix_files is set.
6669         (url_filename): Simplify everything. And I do mean *everything*.
6670         (mkstruct): Add dir_prefix before hostname.
6671         (path_simplify): Fixed a bug that caused writing outside the path
6672         string in case of "." and ".." path strings.
6673
6674 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
6675
6676         * init.c: Added --mirror.
6677
6678         * main.c (main): Added -X to force saving of directory hierarchy.
6679
6680         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
6681         (ftp_retrieve_list): Check whether quota is exceeded.
6682
6683         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
6684
6685         * http.c (gethttp): Use referer if present.
6686
6687         * recur.c (recursive_retrieve): Set u->referer before calling
6688         retrieve_url.
6689
6690         * url.c (newurl): Use memset to nullify the struct members.
6691         (freeurl): Free the referer field too.
6692
6693         * url.h: Added referer to urlinfo.
6694
6695         * geturl.1: Updated the manual to document some of the new features.
6696
6697         * utils.c (numdigit): Moved from url.c.
6698
6699         * README: Rewritten.
6700
6701         * config.h.in: Add the support for socks.
6702
6703         * configure.in: Add the support for socks.
6704
6705         * url.c (url_filename): If the dir_prefix is ".", work with just
6706         the file name.
6707         (url_filename): Do not look for .n extensions if timestamping if
6708         turned on.
6709
6710         * retr.c (show_progress): Skip the over-abundant restval data, and
6711         print the rest of it with ',' instead of '.'.
6712
6713 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
6714
6715         * retr.c (show_progress): Changed second arg. to long (as it
6716         should be).
6717         (show_progress): Moved to retr.c.
6718         (get_contents): Moved to retr.c.
6719
6720         * version.c: Change version to 1.4b13.
6721
6722 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
6723
6724         * url.c (in_acclist): Would return after the first suffix.
6725
6726 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
6727
6728         * version.c: "Released" 1.4b12.
6729
6730         * url.c (path_simplify): More kludgifications.
6731         (get_urls_html): Use new parameters for htmlfindurl.
6732
6733         * html.c: Removed memorizing "parser states", since the new
6734         organization does not require them.
6735
6736         * init.c (run_geturlrc): Use read_whole_line.
6737
6738         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
6739
6740         * recur.c (parse_robots): Use read_whole_line.
6741
6742         * utils.c (read_whole_line): New function.
6743
6744         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
6745
6746         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
6747         tested on OSF and Ultrix.
6748         (add_hlist): New function.
6749         (free_hlist): New function.
6750         (search_host): New function.
6751         (search_address): New function.
6752         (realhost): Use search_host, search_address and add_hlist.
6753         (same_host): Replaced realloc() with strdupdelim(), made
6754         case-insensitive, fixed a memory leak.
6755
6756         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
6757         tm_min, like intended.
6758
6759         * version.c: Change user agent information to
6760         Geturl/version.
6761
6762 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
6763
6764         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
6765
6766         * url.c (acceptable): Always accept directories.
6767
6768         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
6769         servers by stripping trailing @ from symlinks and trailing / from
6770         directories.
6771
6772         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
6773
6774         * url.c (skip_url): Use toupper instead of UCASE.
6775
6776         * host.c (sufmatch): Made it case-insensitive.
6777
6778         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
6779         (match_backwards): New function, instead of
6780         match_backwards_or_pattern.
6781
6782         * recur.c (recursive_retrieve): Increased performance by
6783         introducing inl, which reduces number of calls to in_slist to only
6784         one.
6785
6786         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
6787         routine to use.
6788
6789         * main.c (printhelp): Removed the warranty stuff.
6790
6791 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
6792
6793         * url.c (add_slist): Simplify.
6794         (match_backwards_or_pattern): New function.
6795         (in_acclist): Use match_backwards_or_pattern.
6796         (matches): Remove.
6797
6798 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
6799
6800         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
6801         recursive.
6802
6803         * html.c (ftp_index): Fixed to work. Beautified the output.
6804
6805         * ftp.c (ftp_retrieve_glob): Another argument to control whether
6806         globbing is to be used.
6807         (ftp_retrieve_list): Compare the time-stamps of local and remote
6808         files to determine whether to download.
6809
6810 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
6811
6812         * ftp.c (rel_constr): New function.
6813
6814         * retr.c (retrieve_from_file): Check for text/html before
6815         retrieving recursively.
6816
6817         * main.c (main): Check whether the file is HTML before going into
6818         recursive HTML retrieving.
6819
6820         * ftp.c (ftp_retrieve_list): Manage directories.
6821         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
6822         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
6823         initialized, causing bugchecks in getftp to fail.
6824
6825         * configure.in: Check for symlink.
6826
6827         * ftp.c (ftp_retrieve_list): Added support for symlinks.
6828
6829         * version.c: "Released" 1.4b10.
6830
6831         * atotm.c (atotm): Redeclared as time_t.
6832
6833         * init.c: New variable "timestamping".
6834
6835         * main.c (main): New option 'N'.
6836
6837         * http.c (hgetlocation): Case-insensitive match.
6838         (hgetmodified): New function.
6839         (http_loop): Implement time-stamping.
6840
6841 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
6842
6843         * version.c: Changed version to 1.4b10
6844
6845         * atotm.c: New file, from phttpd.
6846
6847         * options.h (struct options): New parameter timestamping.
6848
6849         * version.c: 1.4b9 "released".
6850
6851         * recur.c (recursive_retrieve): Used linked list (ulist) for
6852         faster storing of URLs.
6853
6854         * url.c (get_urls_html): Removed the old kludge with comparing the
6855         outputs of htmlfindurl and findurl.
6856         (get_urls_html): Added better protocol support here.
6857         (create_hash): Removed, as well as add_hash and in_hash.
6858         (addslist): New function.
6859         (in_slist): ditto
6860
6861         * version.c: Released 1.4b8, changed version to b9.
6862
6863 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
6864
6865         * ftp.c (freefileinfo): New function.
6866         (delelement): New function.
6867
6868         * everywhere: GPL!
6869
6870         * ftp.c (ftp_loop): Use ccon.
6871         (ftp_retrieve_glob): Likewise.
6872
6873         * ftp.h: Define ccon, to define status of control connection.
6874
6875         * ftp.c (ftp_get_listing): New function.
6876         (ftp_retrieve_more): New function.
6877         (ftp_retrieve_glob): New function.
6878
6879 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
6880
6881         * configure.in: Removed the search for cuserid().
6882
6883         * init.c (getmode): Renamed to getperms.
6884
6885 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
6886
6887         * version.c: New version.
6888
6889         * main.c (hangup): New function, that handles hangup. Hangup
6890         signal now causes geturl to stop writing on stdout, and to write
6891         to a log file.
6892
6893         * ftp.c (getftp): "Released" 1.4b7.
6894
6895         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
6896         (ftp_index): Use fileinfo/urlinfo.
6897
6898         * ftp-unix.c (ftp_parse_ls): New function.
6899         (symperms): New function.
6900
6901         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
6902
6903         * retr.c (retrieve_url): Added FTP support.
6904
6905 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
6906
6907         * geturl.h: Removed NOTFTP2HTML enum.
6908         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
6909
6910         * ftp.c (getftp): Resynched with urlinfo.
6911         (getftp): Removed HMTL-ization of index.html from getftp.
6912
6913         * version.c: 1.4b6 "released".
6914
6915         * options.h (options): New struct, to keep options in.
6916
6917         * http.c (http_loop,gethttp): Synched with proxy.
6918
6919         * retr.c (retrieve_url): Implemented proxy retrieval.
6920
6921         * main.c (main): Use retrieve_from_file.
6922
6923 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
6924
6925         * retr.c (retrieve_from_file): New function.
6926
6927         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
6928         can be found in u->proto.
6929
6930         * ftp.c (ftp_response): Fixed to accept multi-line responses as
6931         per RFC 959.
6932
6933         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
6934
6935         * url.c (mymkdir): Removed the file of the same name, if one
6936         exists.
6937         (isfile): New function.
6938         (mkstruct): Fixed the '/' glitches.
6939         (path_simplify): Hacked to treat something/.. correctly.
6940
6941 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
6942
6943         * http.c (gethttp): Close the socket after error in headers.
6944         (http_loop): HEOF no longer a fatal header.
6945
6946         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
6947         simplifies the syntax of calling retrieve_url.
6948
6949         * recr.c (recursive_retrieve): Modified to use get_urls_html.
6950
6951         * url.c (get_urls_file): New function.
6952         (get_urls_html): New function.
6953
6954         * recr.c (recursive_retrieve): Patched up to conform to the
6955         standards.
6956
6957         * http.c (gethttp): Synched with the rest...
6958         (gethttp): Treat only CONREFUSED specially, with connection
6959         errors.
6960
6961         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
6962
6963 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
6964
6965         * http.c (http_loop): New function.
6966
6967         * loop.c: Removed *lots* of stuff from retrieve_url.
6968
6969         * url.c (parseurl): Changed to work with urlinfo. Integrated
6970         username finding and path parsing.
6971         (newurl): New function.
6972         (freeurl): New function.
6973         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
6974         (url_filename): Likewise.
6975         (path_simplify): Accept relative paths too.
6976         (opt_url): Made urlinfo-compliant, removed bogosities.
6977         (path_simplify): Expanded to accept relative paths.
6978         (str_url): A replacement for hide_url
6979         (decode_string): Fixed a bug that caused malfunctioning when
6980         encountering an illegal %.. combination.
6981         (opt_url): Removed the argument. Dot-optimizations are now default.
6982
6983         * nmalloc.c (strdupdelim): New function.
6984
6985         * url.h: Added the urlinfo structure
6986
6987 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
6988
6989         * url.c (hide_url): Thrown out the protocol assertion. Do not
6990         change the URL if the protocol if not recognized.
6991         (findurl): Put continue instead of break.
6992
6993 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
6994
6995         * sample.geturlrc: Changed the defaults to be commented out and
6996         harmless (previous defaults caused pains if copied to
6997         ~/.geturlrc).
6998
6999         * http.c (gethttp): Print the HTTP request in debug mode.
7000
7001         * connect.c (iread): Added EINTR check loop to select-ing
7002         too. EINTR is now correctly handled with select().
7003
7004         * TODO: new file
7005
7006 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
7007
7008         * host.c (same_host): Made the function a little bit more
7009         intelligent regarding diversified URL syntaxes.
7010
7011         * url.c (skip_url): Spaces are now skipped after URL:
7012
7013         * Released 1.3.1 with the patch to prevent crashing when sending
7014         NULL to robot* functions and the patch to compile "out of the box"
7015         on AIX.
7016
7017         * recr.c (recursive_retrieve): Added checking whether this_url is
7018         NULL when calling the robot functions.
7019
7020         * ChangeLog: New file.