]> sjero.net Git - wget/blob - src/ChangeLog
[svn] Applied Roger Beeman's mktime_from_utc fix published in
[wget] / src / ChangeLog
1 2001-04-25  Roger L. Beeman  <beeman@cisco.com>
2
3         * http.c (http_atotm): Initialize t.tm_isdst to 0.
4         (mktime_from_utc): Prevent mktime() from having discontinuities at
5         DST transition points.
6
7 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
8
9         * html-url.c (get_urls_html): Fix documentation.
10
11 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
12
13         * url.c (UNSAFE_CHAR): Reimplement using a static table.
14         (url_init): Removed.
15         (init_unsafe_char_table): Removed.
16
17 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
18
19         * snprintf.c (dopr): Replace ISDIGIT with '0' <= ch && ch <= '9'.
20
21 2001-04-25  Hrvoje Niksic  <hniksic@arsdigita.com>
22
23         * utils.c: Document timer functions.
24
25         * retr.c (rate): Use it.
26         (rate): Print in GB/s if transfer rate exceeds 1 GB/s.
27
28         * utils.c (wtimer_granularity): New function.
29
30 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
31
32         * retr.c (show_progress): Ditto.
33
34         * ftp.c (getftp): Ditto.
35
36         * http.c (gethttp): Use new timer functions.
37
38         * utils.c (wtimer_allocate): New function.
39         (wtimer_new): Ditto.
40         (wtimer_delete): Ditto.
41         (wtimer_reset): Ditto.
42         (wtimer_elapsed): Ditto.
43
44 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
45
46         * utils.c (long_to_string): New, faster version.  Favors smaller
47         numbers; much of the calculation is now done at compile-time.
48
49 2001-04-24  Hrvoje Niksic  <hniksic@arsdigita.com>
50
51         * utils.c (numdigit): Handle negative numbers.
52
53 2001-04-23  Hrvoje Niksic  <hniksic@arsdigita.com>
54
55         * retr.c (show_progress): Print the download rate even when the
56         percentages are not available.
57
58 2001-04-21  Hrvoje Niksic  <hniksic@arsdigita.com>
59
60         * ftp.c (getftp): Adjust expected_bytes if the length is
61         authoritative.
62
63 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
64
65         * url.c: Don't declare `construct'.
66
67         * hash.c (grow_hash_table): Speed up rehashing; inline storing of
68         mappings to new locations.
69         (hash_table_new): Make resize_threshold a field in the hash table,
70         so we don't have to recalculate it in each hash_table_put.
71         (grow_hash_table): Update resize_threshold.
72         (MAX): Remove unused macro.
73         (prime_size): Made static.
74
75 2001-04-14  Hrvoje Niksic  <hniksic@arsdigita.com>
76
77         * retr.c (retrieve_url): Call uri_merge, not url_concat.
78
79         * html-url.c (collect_tags_mapper): Call uri_merge, not
80         url_concat.
81
82         * url.c (mkstruct): Use encode_string instead of xstrdup followed
83         by URL_CLEANSE.
84         (path_simplify_with_kludge): Deleted.
85         (contains_unsafe): Deleted.
86         (construct): Renamed to uri_merge_1.
87         (url_concat): Renamed to uri_merge.
88
89 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
90
91         * url.c (str_url): Use encode_string instead of the unnecessary
92         CLEANDUP.
93         (encode_string_maybe): New function, returns input string if no
94         encoding is needed.
95         (encode_string): Call encode_string_maybe to do the dirty work,
96         xstrdup if no work needed.
97
98 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
99
100         * wget.h (XDIGIT_TO_xchar): Define here.
101
102         * url.c (decode_string): Use new name.
103         (encode_string): Ditto.
104
105         * http.c (XDIGIT_TO_xchar): Rename HEXD2asc to XDIGIT_TO_xchar.
106         (dump_hash): Use new name.
107
108         * wget.h: Rename ASC2HEXD and HEXD2ASC to XCHAR_TO_XDIGIT and
109         XDIGIT_TO_XCHAR respectively.
110
111 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
112
113         * init.c: Include cookies.h.
114
115         * cookies.h: Declare cookies_cleanup.
116
117         * cookies.c (check_domain_match): Remove unused variable.
118         (save_cookies): Remove extraneous argument from debug statement.
119
120         * host.c (same_host): Don't call skip_url.
121
122         * url.c (skip_url): Removed.  Removed its calls from various
123         functions in url.c.
124
125 2001-04-13  Hrvoje Niksic  <hniksic@arsdigita.com>
126
127         * cookies.c (unsigned_string_hash): Use the new code in
128         string_hash as reference.
129
130         * hash.c (hash_table_map): Allow deletion and change of the
131         element processed by MAPFUN.
132         (string_hash): Use the function from glib.
133
134 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
135
136         * config.h.in: Include #undef stub.
137
138         * hash.c (hash_table_remove): Rewrite to actually clear deleted
139         entries instead of just marking them as deleted.
140
141 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
142
143         * hash.h: Declare hash_table_get_pair and hash_table_count.
144
145 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
146
147         * cookies.c: Declare http_atotm.
148
149 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
150
151         * ftp-ls.c (ftp_parse_unix_ls): Use octal constants for
152         permissions.  A compiler that doesn't accept octal constants is
153         seriously broken and shouldn't be used -- octal constants were
154         present in K&R C!
155
156 2001-01-20  Karl Eichwalder  <ke@suse.de>
157
158         * Makefile.in: Provide and use DESTDIR according to the Coding
159         Standards.
160
161 2001-04-12  Hrvoje Niksic  <hniksic@arsdigita.com>
162
163         * ftp-ls.c (ftp_parse_vms_ls): Make seconds optional in time
164         specification.
165
166 2001-04-11  Hrvoje Niksic  <hniksic@arsdigita.com>
167
168         * url.c (parseurl): Don't strip trailing slash when u->dir is "/"
169         because that strips the *leading* slash, thus forcing relative
170         FTP retrieval.
171
172 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
173
174         * ftp.c (getftp): Convert initial FTP directory from VMS to UNIX
175         notation for VMS servers. 
176         (ftp_retrieve_dirs): Do not prepend '/' to f->name when
177         odir is an empty string.
178
179 2001-04-10  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
180
181         * ftp-ls.c (ftp_parse_winnt_ls): Made the fix for AM/PM more
182         effective. Suggested by Edward J. Sabol.
183
184 2001-04-10  Hrvoje Niksic  <hniksic@arsdigita.com>
185
186         * cookies.c (build_cookies_request): Use and sort cookies from all
187         matching domains.
188         (build_cookies_request): Check for duplicates before generating
189         the `Cookies' header.
190
191         * main.c (main): Don't load cookies here.
192         (main): Make loadcookies and savecookies call the correct command.
193
194         * http.c (http_loop): Load cookies on-demand.
195
196 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
197
198         * http.c (gethttp): Fix indentation of SSL ifdef.
199
200 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
201
202         * ftp.c (ftp_retrieve_dirs): Don't forcibly prepend "/" to u->dir;
203         that hack is no longer necessary.
204         (getftp): Prepend initial directory to *non*-absolute u->dir's.
205
206 2001-04-09  Hrvoje Niksic  <hniksic@arsdigita.com>
207
208         * init.c (cmd_file): New function.
209         (enable_tilde_expansion): New variable.
210         (run_wgetrc): Use it.
211         (cmd_file): Use it.
212
213 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
214
215         * init.c: Include cookie-related options.
216
217         * main.c (main): Include cookie-specific options.
218         (main): Load cookies before download is finished.
219         (main): Save cookies when done.
220
221         * http.c (gethttp): Process the `Set-Cookie' header.
222         (gethttp): Include cookies in the response.
223
224         * cookies.c: New file.
225
226 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
227
228         * utils.c (datetime_str): New function.
229
230 2001-04-08  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
231
232         * ftp-ls.c (ftp_parse_winnt_ls): The AM/PM change did assume
233         12:01PM == 00:01, which was obviously wrong. Taken care of this
234         anomaly.
235
236         * ChangeLog: Removed an excess conflict marker. Reformatted the
237         entry by Philipp Thomas from 2001-03-09.
238
239         * ftp-ls.c (ftp_parse_winnt_ls): Ensure that adjusted PM hours lay
240         between 0 and 23. Elminate unused variable `sec'.
241
242 2001-04-08  Hrvoje Niksic  <hniksic@arsdigita.com>
243
244         * hash.c (hash_table_count): New function.
245
246 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
247
248         * utils.c (read_file): Cast MAP_FAILED to char *.  Enforced by
249         Digital Unix cc.
250
251 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
252
253         * config.h.in: Oops, do the namespace tweaks only on systems we
254         know about.
255
256 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
257
258         * hash.c: Include <string.h>.
259
260 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
261
262         * config.h.in: Define "compilation environment" options that work
263         under Linux and Solaris.  To be reviewed on other OS'es.
264
265 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
266
267         * http.c (gethttp): Prepend literal newline with `\n\'.
268
269 2001-04-06  Hrvoje Niksic  <hniksic@arsdigita.com>
270
271         * sysdep.h: Don't define VERY_LONG_FORMAT.
272
273         * utils.c (very_long_to_string): New function.
274         (legible_very_long): Use it; don't use VERY_LONG_FORMAT.
275
276 2001-04-04  Christian Fraenkel  <christian.fraenkel@gmx.net>
277
278         * url.c (parse_uname): Would run past the end of the string if the
279         username was present, but the URL did not contain a slash, e.g.
280         http://foo:bar@myhost.
281
282 2001-04-03  KOJIMA Hajime  <kjm@rins.ryukoku.ac.jp>
283
284         * http.c (http_atotm): Use %A instead of %a to match full
285         weekday.  (On most systems there is no difference.)
286
287 2001-04-03  Paul Bludov  <paul@ozero.net>
288
289         * mswindows.c (sleep): Use SleepEx() instead of Sleep().
290         (ws_changetitle): Use alloca() instead of malloc() to avoid memory
291         leak.
292         (ws_mypath): Use GetModuleFileName instead of argv[0].
293         (ws_startup): Use data.wVersion for comparison.
294
295 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
296
297         * http.c (http_loop): Ditto.
298
299         * ftp.c (ftp_loop_internal): Made the check whether to continue
300         retrieval `-O'-friendly.
301
302 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
303
304         * netrc.c (parse_netrc): Don't trim the line endings explicitly;
305         they will be handled as whitespace.
306         (parse_netrc): Correctly handle lines that end with whitespace.
307
308 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
309
310         * retr.c (retrieve_url): New variable global_download_count used
311         to identify first retrieval.
312
313         * ftp.c (getftp): Ditto.
314
315         * http.c (gethttp): Rewind opt.dfp only on first retrieval.
316
317 2001-04-02  Hrvoje Niksic  <hniksic@arsdigita.com>
318
319         * init.c (cmd_address): Heap-allocate the address that gets stored
320         to CLOSURE.  Old code would simply assign an address on the stack.
321
322 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
323
324         * ftp.c (ftp_get_listing): Propagate error status.
325         (ftp_retrieve_glob): Use it.
326         (ftp_loop): Ditto.
327
328 2001-04-01  Nicolas Lichtmaier <nick@debian.org>
329
330         * main.c (main): Add -C to the string that is the third arg to
331         getopt_long().
332
333 2001-04-01  Hrvoje Niksic  <hniksic@arsdigita.com>
334
335         * ftp.c (getftp): Don't start the download from scratch if `-c'
336         was specified, but the file is already fully downloaded.
337
338         * http.c (gethttp): Don't truncate a pre-existing file if `-c' was
339         specified and the server doesn't support continued download.
340         (gethttp): Don't start the download from scratch if `-c' was
341         specified, but the file is already fully downloaded.
342
343 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
344
345         (recursive_retrieve): Don't clear the hash tables at this point at
346         all; it interferes with the normal operation of register_download.
347
348 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
349
350         * recur.c (recursive_retrieve): Clear the hash tables only when
351         they are defined.
352
353 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
354
355         * http.c (gethttp): Make sure the socket is closed with
356         CLOSE_INVALIDATE before we have drained the body.
357
358 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
359
360         * retr.c (retrieve_url): Call register_download() for downloaded
361         files and register_html() for downloaded HTML files.
362
363         * recur.c (register_download): New function; register here that a
364         file has been downloaded, rather than in recursive_retrieve().
365         (register_html): New function; enqueue the location of HTML files
366         here rather than in recursive_retrieve().
367
368 2001-03-31  Hrvoje Niksic  <hniksic@arsdigita.com>
369
370         * main.c (print_help): Use multiple fputs instead of a single ugly
371         printf().
372         (main): Consistently assign numbers >128 to options without a
373         corresponding character.
374
375 2001-03-09  Philipp Thomas  <pthomas@suse.de>
376
377         * safe-ctype.h: New file. Locale independent ctype.h replacement
378         taken from libiberty.
379
380         * safe-ctype.c: New file. Tables for above.
381
382         * Makefile.in: Add safe-ctype$o to OBJS.  Add dependencies for
383         safe-ctype$o.
384
385         * cmpt.c: Remove include of ctype.h. Use ISSPACE instead of
386         isspace.
387
388         * ftp-basic.c: Don't include ctype.h.
389
390         * ftp-ls.c: Likewise.
391
392         * ftp.c: Likewise.
393
394         * headers.c: Likewise.
395
396         * host.c: Likewise.
397
398         * html-parse.c: Likewise.
399
400         * html-url.c: Likewise.
401
402         * http.c: Likewise.
403
404         * init.c: Likewise.
405
406         * main.c: Likewise. Set LC_CTYPE along with LC_MESSAGES.
407
408         * netrc.c: Likewise.
409
410         * recur.c: Likewise.
411
412         * retr.c: Likewise.
413
414         * snprintf.c: Replace ctype.h with safe-ctype.h. Use ISDIGIT
415         instead of isdigit.
416
417         * sysdep.h: Remove defines of ctype macros as they aren't needed
418         for safe-ctype-h.
419
420         * url.c: Don't include ctype.h.
421
422         * utils.c: Likewise.
423
424         * wget.h: Include safe-ctype.h.
425
426 2001-03-27  Dan Harkless  <wget@harkless.org>
427
428         * Makefile.in: Moved top_builddir out of "User configuration
429         section" of top Makefile and analogous spot in this one.
430
431 2001-03-17  Dan Harkless  <wget@harkless.org>
432
433         * Makefile.in: Include @SSL_INCLUDES@ substition in INCLUDES.
434         Define top_builddir.  Link wget with libtool so the user doesn't
435         have to supply a bunch of custom environment variables to 
436         correctly link with the OpenSSL shared libraries.
437
438 2001-03-06  Hack Kampbjorn  <hack@hackdata.com>
439
440         * http.c (gethttp): skip :port in host header if it is the
441         DEFAULT_HTTPS_PORT when using SSL.
442
443         * url.c: move the #define of DEFAULT_HTTP_PORT, DEFAULT_FTP_PORT
444         and DEFAULT_HTTPS_PORT to the header file so it can be use in the
445         rest of the code. 
446         * url.h: Ditto
447
448 2001-03-01  Jonas Jensen  <bones@huleboer.dk>
449
450         * retr.c (show_progress): Correctly calculate the number of bytes
451         in the first line of the download that have been actually
452         downloaded in this run.
453
454 2001-02-23  Dan Harkless  <wget@harkless.org>
455
456         * main.c (print_help): --help documentation for -N said it would
457         re-download files if they had the _same_ timestamp on server.
458         (print_help): -nr belongs in "FTP options" section of --help
459         output, not "Recursive retrieval" section.  Alphabetized FTP
460         options by long option name.
461
462 2001-02-16  Dan Harkless  <wget@harkless.org>
463
464         * init.c (commands): Hack Kampbjørn <hack@hackdata.com> discovered
465         that "httpsproxy" had been inserted into commands[] out of
466         alphabetical order, causing "BUG: unknown command `httpuser'".
467
468 2001-02-13  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
469
470         * ftp-ls.c (ftp_parse_ls): Added support of ST_MACOS (Unix-like
471         listing without correct permissons).
472
473         * ftp.h (stype): Added ST_MACOS to identify the NetPresenz MacOS
474         FTP server. 
475
476         * ftp.c (ftp_retrieve_list): New mirroring logic: A remote file
477         shall be donwloaded only when it's newer than the local copy or
478         when it has the same timeestamp but its size is different. ST_VMS
479         and ST_MACOS as special cases that lie about file size. 
480
481         * ftp-ls.c (ftp_parse_ls): Support for ST_MACOS.
482
483         * Makefile.in: Removed dependency on ftpparse library due to unclear
484         copyright issues and absence of any feedback to our queries. 
485
486         * ftp-ls.c: Removed dependency on ftpparse library due to unclear
487         copyright issues and absence of any feedback to our queries.   
488         (ftp_parse_ls): Added a warning message when remote server system
489         does not seem to be suported by wget. 
490         (ftp_parse_vms_ls): New function for parsing VMS ftp
491         server listing output.
492         (clean_line): New function responsible for removing
493         end-of-line characters from FTP listing texts.
494
495         * ftp.c (getftp): Global variables pwd and host_type are now
496         member of the ccon structure under names ccon.id and ccon.rs. 
497
498         * ftp.h (struct ccon): Added formed global variables from ftp.c,
499         enum stype rs (remote system identification) and char *id (initial
500         working directory), as suggested by Hrvoje.
501
502         * url.c (parse_uname): Added support for passwords containing '@'
503         characters.
504         (skip_uname): Ditto.
505
506 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
507
508         * ftp.c (ftp_loop): Reset con.
509
510 2001-01-06  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
511
512         * url.c (parse_uname): Added support for passwords containing '@'
513         characters.
514         (skip_uname): Ditto.
515
516 2001-02-11  Hack Kampbjørn  <hack@hackdata.com>
517
518         * url.c (parseurl): Debug-print u->ftp_type.
519
520 2001-02-11  Hrvoje Niksic  <hniksic@arsdigita.com>
521
522         * ftp.c (ftp_loop_internal): Disable padding.
523         (getftp): Ditto.
524
525         * http.c (http_loop): Disable padding.
526
527         * retr.c (show_progress): Use it to enable padding.
528
529         * retr.c (rate): Optional parameter PAD for padding the rate.
530
531 2001-02-10  Hrvoje Niksic  <hniksic@arsdigita.com>
532
533         * retr.c (show_progress): Make sure that the last output line
534         includes progress.
535
536 2001-02-10  Jonas Jensen  <bones@huleboer.dk>
537
538         * retr.c (show_progress): Print the download rate along with the
539         percentages.
540         Along with Anders Thorsby <anders@thorsby.dk>.
541
542 2001-02-10  Tim Mooney  <mooney@dogbert.cc.ndsu.NoDak.edu>
543
544         * ftp.h: Rename enums `command' to `wget_ftp_command' and
545         `fstatus' to `wget_ftp_status' because old names clash with Tru64
546         net/if.h.
547
548 2001-02-08  Christian Fraenkel <christian.fraenkel@gmx.net>
549
550         * gen_sslfunc.c: verify_callback is now static
551
552         * gen_sslfunc.c (init_ssl): load certificate if specified
553
554         * gen_sslfunc.c (ssl_printerr): new function
555
556         * init.c: added new --sslcertfile and --sslcertkey switches
557
558         * main.c: ditto
559
560         * options.h: ditto
561
562         * http.c (gethttp): abort when init_ssl fails
563
564 2001-01-23  Herold Heiko  <Heiko.Herold@previnet.it>
565
566         * mswindows.h: Include <malloc.h>; it's needed for alloca().
567
568 2001-01-10  Dan Harkless  <wget@harkless.org>
569
570         * url.c (str_url): Clarified this function's comment header after
571         Hrvoje answered my question on the list as to when hide != 1.
572         Also Hrvoje pointed out I need to use xstrdup() on the string literal.
573
574 2001-01-06  Hrvoje Niksic  <hniksic@arsdigita.com>
575
576         * connect.c (bindport): Declare addrlen as int.  Diagnosed by
577         Drazen Kacar <dave@arsdigita.com>.
578         (conaddr): Ditto.
579
580 2001-01-09  Dan Harkless  <wget@harkless.org>
581
582         * html-url.c: A bunch of fixup of `--page-requisites'-related
583         comments to reflect Hrvoje's changes to my code when transplanting
584         it into this new file, to fix spelling mistakes, to clarify, etc.
585
586         * url.c (write_backup_file): Clarified a comment.
587         (str_url): Henrik van Ginhoven pointed out on the list that we
588         shouldn't give away the number of characters in the password by
589         replacing each character with a 'x'.  Use "<password>" instead.
590
591         * ftp.c (ftp_retrieve_dirs): The bug where recursion into FTP
592         directories didn't work if logging in put you in a directory other
593         than "/" is fixed now.  Removed the comment here warning of the bug.
594
595         * main.c (print_help): --continue's description was misleading.
596         We don't "restart", we "resume".  Also, better to say
597         "partially-downloaded file" rather than just "existing file".
598
599 2001-01-06  Dan Harkless  <wget@harkless.org>
600
601         * ChangeLog: The '[Not in 1.6 branch.]'s were decided not to be
602         the best way to go about my aim.  Removed them in favor of:
603
604         * ChangeLog-branches/1.6_branch.ChangeLog: New file.
605
606 2001-01-04  Hrvoje Niksic  <hniksic@arsdigita.com>
607
608         * url.c (replace_attr): New function, to be used by both
609         TO_COMPLETE and TO_RELATIVE case in convert_links.
610         (find_fragment): New function for finding URL fragments.
611         (replace_attr): Better handle the case where the original string
612         is not quoted.  Use find_fragment.
613         (convert_links): Use replace_attr().
614
615 2000-12-31  Dan Harkless  <wget@harkless.org>
616
617         * ChangeLog: Since this flat file doesn't have multiple branches,
618         looking at the dates would make you think that things went into
619         1.6 that actually just went into the 1.7-dev branch.  Added "[Not
620         in 1.6 branch.]" where appropriate to clarify.
621         
622 2000-12-30  Dan Harkless  <wget@harkless.org>
623
624         * ftp.c, http.c:  Applied Hack Kampbjørn <hack@hackdata.com>'s
625         patch to deal with h_errno not being defined in netdb.h under Cygwin.
626
627 2000-12-18  Csaba Raduly  <csaba.raduly@sophos.com>
628
629         * sysdep.h: Include <malloc.h> and <io.h> under Watcom.
630
631 2000-12-17  Igor Khristophorov  <igor@atdot.org>
632
633         * http.c (check_end): Fix test for '+' or '-'.
634
635 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
636
637         * url.c (parseurl): Rename inner loop var from i to ind to avoid
638         clash with the function top-level-declared variable i.
639         (str_url): Likewise, rename inner-loop i to j.
640
641         * recur.c (parse_robots): Don't declare LEN at top of function.
642         (robots_match): Renamed parameter FORBIDDEN to avoid hiding of
643         global variable.
644
645         * main.c (main): Change erroneous use of bitwise and to logical.
646
647         * init.c (cmd_address): Don't heap-allocate `sin'; it can be on
648         the stack because it will be copied to closure.
649
650         Thanks to Csaba Raduly's run of PC-LINT over the sources.
651
652 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
653
654         * http.c (basic_authentication_encode): Use xmalloc(), not
655         malloc().  Thanks to Csaba Raduly's run of PC-LINT over the
656         sources.
657
658 2000-12-17  Csaba Raduly  <csaba.raduly@sophos.com>
659
660         * sysdep.h: Test for __EMX__ rather than for EMXOS2 for OS/2
661         compilation.
662
663 2000-12-17  Hrvoje Niksic  <hniksic@arsdigita.com>
664
665         * mswindows.c: Include <errno.h>.
666
667         * gen_sslfunc.c: Include <errno.h>.
668
669         * ftp-basic.c: Don't attempt to declare errno or h_errno because
670         they're not used.
671
672         * main.c: Include <errno.h> because errno is used.
673
674         * ftp.c: Ditto.
675
676         * http.c: Include <netdb.h> for h_errno.
677
678 2000-12-13  Hrvoje Niksic  <hniksic@arsdigita.com>
679
680         * html-parse.c (advance_declaration): MSVC assert() chokes on
681         '\"'.  Use '"' instead.
682
683 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
684
685         * utils.c (xfree_real): Removed.
686         (xfree_debug): Just call free().
687
688         * wget.h (xfree): Make it an alias for free.
689
690 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
691
692         * http.c (http_loop): Furthermore, touch output_document only if
693         it is known to be an existing regular file.
694
695 2000-12-11  Hrvoje Niksic  <hniksic@arsdigita.com>
696
697         * ftp.c (ftp_retrieve_list): Ditto.
698
699         * http.c (http_loop): Touch output_document if that is used for
700         output.
701
702 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
703
704         * http.c: Include gen_sslfunc.h after including Wget's headers.
705         (persistent_available_p): Needed coma before `int ssl'.
706
707 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
708
709         * ftp.c (ftp_loop_internal): Ditto.
710
711         * http.c (http_loop): Use it.
712
713         * retr.c (sleep_between_retrievals): New function that handles the
714         logic of opt.wait and opt.waitretry.
715
716 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
717
718         * rbuf.h: Implement only a single version of RBUF_READCHAR, using
719         rbuf_read_bufferful when the buffer is depleted.
720
721         * rbuf.c (rbuf_read_bufferful): New function.
722
723 2000-12-06  Hrvoje Niksic  <hniksic@arsdigita.com>
724
725         * gen_sslfunc.h: Use ansi2knr style function declarations.
726
727         * gen_sslfunc.c: Reformat according to the GNU coding standards.
728         More should be done.
729
730         * http.c (persistent_available_p): Place the cheap SSL test nearer
731         the top of the function.
732         (CLOSE_FINISH, CLOSE_INVALIDATE): Define only one version of each.
733
734 2000-12-05  Hrvoje Niksic  <hniksic@arsdigita.com>
735
736         * url.c (init_unsafe_char_table): Reinstate space as an unsafe
737         char.
738
739 2000-12-03  Christian Fraenkel <christian.fraenkel@gmx.net>
740
741         * Makefile.in: added gen_sslfunc object
742         * config.h.in: added HAVE_SSL define
743         * connect.c: changed select_fd from static int to int
744         * connect.h: ditto
745         * gen_sslfunc.h: New file
746         * gen_sslfunc.c: ditto
747         * http.c: added HTTPS fuctionality
748         * retrc.c: ditto
749         * url.c: ditto
750         * init.c: added opt.httpsproxy
751         * options.h: ditto
752         * rbuf.h: added alternate rbuf struct
753         * wget.h: added CONSSLERR
754         * rbuf.c: ditto
755
756         * http.c: Added HTTPS fuctionality.
757
758         * retrc.c: Ditto.
759
760         * url.c: Ditto.
761
762         * init.c: Added opt.httpsproxy.
763
764         * options.h: Ditto.
765
766         * rbuf.h: Added alternate rbuf struct.
767
768         * wget.h: Added CONSSLERR.
769
770         * rbuf.c: Ditto.
771
772 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
773
774         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
775         "ignore_perms" to ignore file and directory permissions for
776         Windows NT FTP server listings.
777         (ftp_parse_winnt_ls): New function.
778         (ftp_parse_ls): Parses UNIX and Windows NT listings
779         separately. Simple heuristics for distinguishing between UNIX and
780         MS-DOS-like FTP listing provided by Windows NT FTP service.
781
782 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
783
784         * ftpparse.c, ftpparse.h: New files.
785
786         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
787         only. Use ftp_parse_nonunix_ls otherwise.
788         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
789         exotic FTP servers.
790
791         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
792         FTP servers.
793
794         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
795         (getftp): Support for VMS. Support for FTP servers that do not
796         place you in the root directory after login.
797         (ftp_retrieve_list): VMS is silent about the real file size, issue
798         a more appropriate message.
799         (ftp_get_listing): Pass host_type to ftp_parse_ls.
800
801         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
802
803 2000-11-30  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
804
805         * ftp-ls.c (ftp_parse_unix_ls): Added second parameter
806         "ignore_perms" to ignore file and directory permissions for
807         Windows NT FTP server listings.
808         (ftp_parse_winnt_ls): New function.
809         (ftp_parse_ls): Parses UNIX and Windows NT listings
810         separately. Simple heuristics for distinguishing between UNIX
811         and MS-DOS-like FTP listing provided by Windows NT FTP service.
812
813 2000-11-29  John Summerfield  <summer@OS2.ami.com.au>
814
815         * netrc.c (parse_netrc): Get rid of line ending.
816
817 2000-11-25  Hrvoje Niksic  <hniksic@arsdigita.com>
818
819         * ftp.c (ftp_retrieve_list): Undo typo "fix" until resolution by
820         Dan.
821
822 2000-11-24  Karl Eichwalder  <ke@suse.de>
823
824         * main.c (print_help): Untabify.
825
826 2000-11-23  Hrvoje Niksic  <hniksic@arsdigita.com>
827
828         * utils.c (xrealloc_debug): Do the unregister/register thing only
829         if the pointer has actually changed.
830         (xmalloc_real): Declare `static' in DEBUG_MALLOC builds.
831         (xfree_real): Ditto.
832         (xrealloc_real): Ditto.
833         (xstrdup_real): Ditto.
834
835 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
836
837         * ftp.c (getftp): ftp_getaddress() returns a malloc'ed copy of the
838         string; no need to strdup() it.
839         (getftp): Make pwd_len a local variable.
840         (ftp_loop): Free PWD before returning.
841
842         * init.c (cleanup): Free opt.ftp_pass only if it's non-NULL.
843
844 2000-11-22  Hrvoje Niksic  <hniksic@arsdigita.com>
845
846         * all: Use xfree() instead of free.
847
848         * utils.c (xfree): New function.
849
850 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
851
852         * url.c (convert_links): HTML-quote the converted string.
853
854         * utils.c (html_quote_string): Move here from ftp-ls.c
855         (html_quote_string): Make non-static; declare in utils.h.
856         (html_quote_string): Convert SP to &#32;.
857
858 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
859
860         * ftp.c (getftp): Reformat Jan's code according to GNU coding
861         standards; remove (debugging?) printf's; use '\0' for the ASCII
862         zero character.  Use alloca() instead of malloc() for
863         inter-function temporary allocations.
864
865 2000-11-18  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
866
867         * ftpparse.c, ftpparse.h: New files.
868
869         * ftp-ls.c (ftp_parse_ls): Use ftp_parse_unix_ls for UNIX servers
870         only. Use ftp_parse_nonunix_ls otherwise.
871         (ftp_parse_nonunix_ls): Stub to the ftpparse library handling all
872         exotic FTP servers.
873
874         * ftp.h (stype): New enum, distinguishes UNIX, VMS, and "other"
875         FTP servers.
876
877         * ftp.c: New static wariables host_type, pwd, and pwd_len. 
878         (getftp): Support for VMS. Support for FTP servers that do not
879         place you in the root directory after login.
880         (ftp_retrieve_list): VMS is silent about the real file size, issue
881         a more appropriate message.
882         (ftp_get_listing): Pass host_type to ftp_parse_ls.
883
884         * ftp-basic.c (ftp_pwd, ftp_syst): New functions.
885
886 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
887
888         * hash.c (hash_table_put): Don't overwrite deleted mappings.
889
890 2000-11-21  Hrvoje Niksic  <hniksic@arsdigita.com>
891
892         * hash.c (find_mapping): New function.
893         (hash_table_get): Use it.
894         (hash_table_get_pair): Ditto.
895         (hash_table_exists): Ditto.
896         (hash_table_remove): Ditto.
897         (hash_table_remove): Really delete the entry if the mapping
898         following LOCATION is empty.
899
900         * utils.c (string_set_add): Check whether the element has existed
901         before.
902
903         * hash.c (hash_table_get_pair): New function.
904
905 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
906
907         * http.c (http_process_type): Ignore trailing whitespace; use
908         strdupdelim().
909
910         * recur.c (recursive_retrieve): Use the new `convert' field.
911         (convert_all_links): Ditto.
912         (convert_all_links): Don't respect meta_disallow_follow.
913
914         * html-url.c (handle_link): Fill out link_relative_p and
915         link_complete_p.
916
917         * url.h (struct _urlpos): Make elements more readable.
918
919         * recur.c (recursive_retrieve): Call slist_prepend instead of
920         slist_append.
921         (convert_all_links): Call slist_nreverse before iterating through
922         urls_html.
923
924         * utils.c (slist_prepend): New function.
925         (slist_nreverse): Ditto.
926
927 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
928
929         * http.c (check_end): Constify.
930
931 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
932
933         * http.c (http_loop): If username and password are known, try the
934         `Basic' authentication scheme by default.
935
936         * connect.h: Declare test_socket_open.
937
938 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
939
940         * version.c: Bump version from 1.5.3+dev to 1.7-dev.
941
942 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
943
944         * http.c (gethttp): Don't use the return value of sprintf().
945         (gethttp): Inhibit keep-alive if opt.http_keep_alive is 0.
946
947 2000-11-20  Hrvoje Niksic  <hniksic@arsdigita.com>
948
949         * recur.c (recursive_retrieve): Print the "so we don't load"
950         debugging message only if we really don't load.
951
952         * http.c (gethttp): Inhibit keep-alive if proxy is being used.
953         (gethttp): Don't request keep-alive if keep-alive is inhibited.
954
955 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
956
957         * http.c (gethttp): Make the HTTP persistent connections more
958         robust.
959
960 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
961
962         * retr.c (get_contents): If use_expected, make sure that the
963         appropriate amount of data is being read.
964
965         * http.c (gethttp): Check for both `Keep-Alive: ...' and
966         `Connection: Keep-Alive'.
967
968         * wget.h (DEBUGP): Call debug_logprintf only if opt.debug is
969         turned on.
970
971 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
972
973         * http.c (connection_available_p): Use it.
974
975         * connect.c (test_socket_open): New function.
976
977         * http.c (gethttp): Support persistent connections.  Based on the
978         ideas, and partly on code, by Sam Horrocks <sam@daemoninc.com>.
979         (register_persistent): New function.
980         (connection_available_p): Ditto.
981         (invalidate_connection): Ditto.
982
983 2000-11-19  Hrvoje Niksic  <hniksic@arsdigita.com>
984
985         * url.c (convert_links): Handle UREL2ABS case.
986
987         * recur.c (recursive_retrieve): Instead of the list
988         urls_downloaded, use hash tables dl_file_url_map and
989         dl_url_file_map.
990         (convert_all_links): Use them to retrieve data.
991
992         * host.c (clean_hosts): Free the hash tables.
993
994         * main.c (private_initialize): Call host_init().
995
996         * host.c (store_hostaddress): Use a saner, hash table-based data
997         model.
998         (realhost): Ditto.
999         (host_init): Initialize the hash tables.
1000
1001 2000-11-18  Hrvoje Niksic  <hniksic@arsdigita.com>
1002
1003         * utils.c (slist_append): Eviscerate NOSORT.  Hash tables are now
1004         used for what the sorted slists used to be used for.
1005         (slist_contains): Don't rely on the list being sorted.
1006         (slist_append): Simplify the code.
1007
1008         * recur.c (recursive_cleanup): Use free_string_set.
1009
1010         * utils.c (string_set_add, string_set_exists, string_set_free):
1011         New functions for easier freeing of hash tables whose keys are
1012         strdup'ed strings.
1013
1014         * recur.c (recursive_retrieve): Use the hash table functions for
1015         storing undesirable URLs.
1016
1017         * hash.c: New file.
1018
1019 2000-11-17  Hrvoje Niksic  <hniksic@arsdigita.com>
1020
1021         * main.c (private_initialize): Call url_init.
1022         (main): Call private_initialize.
1023
1024         * url.c (unsafe_char_table): New table.
1025         (UNSAFE_CHAR): Use it.
1026         (init_unsafe_char_table): New function.
1027         (url_init): New function; call init_unsafe_char_table.
1028
1029 2000-11-16  Hrvoje Niksic  <hniksic@arsdigita.com>
1030
1031         * mswindows.h: Define snprintf and vsnprintf to _snprintf and
1032         _vsnprintf respectively.
1033
1034 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1035
1036         * config.h.in: Do the _XOPEN_SOURCE and _SVID_SOURCE things only
1037         on Linux.
1038
1039 2000-11-15  Hrvoje Niksic  <hniksic@arsdigita.com>
1040
1041         * html-url.c (handle_link): Handle HTML fragment identifiers.
1042
1043         * recur.c (recursive_retrieve): If norobot info is respected and
1044         the file is specified not to be followed by robots, respect that.
1045
1046         * html-url.c (collect_tags_mapper): Handle <meta name=robots
1047         content=X>.  For us the important cases are where X is NONE or
1048         where X contains NOFOLLOW.
1049         (get_urls_html): Propagate that information to the caller.
1050
1051 2000-11-13  Hrvoje Niksic  <hniksic@arsdigita.com>
1052
1053         * url.c (convert_links): Unlink the file we might be reading from
1054         before writing to it.
1055         (convert_links): Use alloca instead of malloc for
1056         filename_plus_orig_suffix.
1057
1058 2000-11-12  Hrvoje Niksic  <hniksic@arsdigita.com>
1059
1060         * host.c (realhost): Add HOST to the list with quality==0 only if
1061         it wasn't already there.
1062         Based on analysis by Lu Guohan <feng@public.bjnet.edu.cn>.
1063
1064 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1065
1066         * url.c (get_urls_file): Ditto.
1067         (convert_links): Ditto.
1068
1069         * html-url.c (get_urls_html): Use read_file() instead of
1070         load_file().
1071
1072         * utils.c (read_file): New function, instead of the old
1073         load_file().
1074         (read_file_free): Ditto.
1075
1076         * url.c (findurl): Search only for the supported protocols.
1077         (convert_links): Use fwrite() when writing out a region of
1078         characters.
1079
1080 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1081
1082         * ftp-ls.c: Move html_quote_string and ftp_index here.
1083
1084         * url.c: Remove get_urls_html, since that's now in html-url.c.
1085
1086         * html-url.c: New file.
1087
1088         * html-parse.c: New file.
1089
1090 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1091
1092         * init.c (run_wgetrc): Don't bother killing off '\r' since
1093         pars_line() skips whitespace at end of line anyway.
1094         (parse_line): Oops, it didn't.  Now it does.
1095
1096         * recur.c (parse_robots): Ditto here.
1097
1098         * ftp-ls.c (ftp_parse_unix_ls): Kill off the newline character
1099         manually because read_whole_line no longer does.
1100
1101         * utils.c (read_whole_line): Rewrite to: a) use less memory
1102         (reallocates to needed size after work), b) work faster -->
1103         fgets() instead of getc, c) be more correct --> doesn't kill the
1104         newline character at the end of line.
1105
1106 2000-11-10  Hrvoje Niksic  <hniksic@arsdigita.com>
1107
1108         * init.c (comind): Initialize MAX to array size - 1.
1109
1110 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1111
1112         * url.c (construct): Changed last_slash[-1] to *(last_slash - 1).
1113         Suggested by Edward J. Sabol.
1114
1115 2000-11-08  Hrvoje Niksic  <hniksic@arsdigita.com>
1116
1117         * url.c (construct): Handle the case where host name is not
1118         followed by a slash.
1119
1120 2000-11-06  Hrvoje Niksic  <hniksic@arsdigita.com>
1121
1122         * init.c: commands[] need to be sorted!  ("base" wasn't.)
1123
1124 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1125
1126         * wget.h (DO_REALLOC_FROM_ALLOCA): Use braces to disambiguate
1127         `if'.
1128
1129 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1130
1131         * url.c (construct): Insert unneeded initialization for the
1132         compiler to shut up.
1133
1134         * config.h.in: Define _XOPEN_SOURCE to 500 to get the prototype
1135         for strptime() (*duh*).  Define _SVID_SOURCE to get S_IFLNK which
1136         otherwise gets lost when you define _XOPEN_SOURCE.
1137
1138         * utils.c (touch): Include the file name in the error message.
1139         From Debian.
1140
1141 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1142
1143         * log.c (logvprintf): Use vsnprintf() in all cases.  If necessary,
1144         resize the buffer to fit the formated message.  That way, messages
1145         of arbitrary size may be printed.
1146         (logvprintf): Use saved_append() to optionally log the last
1147         several lines of output.
1148         (logputs): Ditto.
1149         (log_close): Adapt to new data structures.
1150         (log_dump): Ditto.
1151         (redirect_output): Print messages to stderr, not to stdout.
1152
1153         * log.c (saved_append_1): New function.  Replaces the old logging
1154         system ("log all output until 10M characters") with a new, much
1155         more reasonable one ("log last screenful of text").
1156         (saved_append): New function; call saved_append_1.
1157         (free_log_line): New function.
1158
1159 2000-11-05  Hrvoje Niksic  <hniksic@arsdigita.com>
1160
1161         * url.c (construct): Fix comment.
1162         (find_last_char): Document.
1163
1164 2000-11-04  Hrvoje Niksic  <hniksic@arsdigita.com>
1165
1166         * snprintf.c: New file.
1167
1168 2000-11-03  Hrvoje Niksic  <hniksic@arsdigita.com>
1169
1170         * wget.h: If HAVE_STDARG_H is not defined, don't declare argument
1171         types to logprintf() and debug_logprintf().
1172
1173 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1174
1175         * ftp.c (ftp_loop_internal): Hide the password from the URL when
1176         printing non-verbose.  Problem spotted by Dariusz Mlynarczyk
1177         <darekm@bydg.lomac.com.pl>.
1178
1179 2000-11-02  Junio Hamano  <junio@twinsun.com>
1180
1181         * ftp-basic.c (ftp_login): Make comparison case-insensitive.
1182
1183 2000-11-02  Tyler Riddle  <triddle@liquidmarket.com>
1184
1185         * http.c (known_authentication_scheme_p): Recognize NTML
1186         authentication.
1187         (create_authorization_line): Treat NTML the same as `Basic'.
1188
1189 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1190
1191         * retr.c (retrieve_url): Free url before returning.
1192         (retrieve_url): Free mynewloc before returning.
1193         Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
1194
1195 2000-11-02  Hrvoje Niksic  <hniksic@arsdigita.com>
1196
1197         * url.c (parseurl): Remove possible reading past the end of
1198         sup_protos[].  Spotted by Mark A. Mankins <Mankins_Mark@prc.com>.
1199
1200 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1201
1202         * main.c (main): In case of opt.downloaded overflowing, print
1203         <overflow> instead of a totally bogus random value.
1204
1205         * retr.c (retrieve_from_file): Ditto.
1206
1207         * recur.c (recursive_retrieve): Ditto.
1208
1209         * main.c (main): Ditto.
1210
1211         * http.c (http_loop): Ditto.
1212
1213         * ftp.c (ftp_loop_internal): Use downloaded_increase() instead of
1214         `+=', and downloaded_exceeds_quota() instead of the simple-minded
1215         check.
1216         (ftp_retrieve_list): Ditto.
1217         (ftp_retrieve_dirs): Ditto.
1218         (ftp_retrieve_glob): Ditto.
1219
1220         * retr.c (downloaded_increase): New function.  Notice overflows of
1221         opt.downloaded.
1222         (downloaded_exceeds_quota): Make sure that opt.downloaded is not
1223         used if it overflowed.
1224
1225         * options.h (struct options): New member downloaded_overflow.
1226
1227 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1228
1229         * wget.h (enum): Remove extra space after last enumeration.
1230
1231 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1232
1233         * main.c (main): Use legible_very_long() for printing
1234         opt.downloaded.
1235
1236         * utils.c (legible_1): New function that operates on strings and
1237         does the brunt of legible()'s work.
1238         (legible): Use legible_1().
1239         (legible_very_long): New function; dump the argument with
1240         sprintf(), and call legible_1().
1241
1242         * options.h (struct options): Use VERY_LONG_TYPE for
1243         opt.downloaded.
1244
1245         * sysdep.h (VERY_LONG_TYPE): Define it to have a 64-bit or greater
1246         type.
1247
1248         * config.h.in: Make sure that SIZEOF_LONG and SIZEOF_LONG_LONG get
1249         defined.  Define HAVE_LONG_LONG if long long is available.
1250
1251 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1252
1253         * utils.c (long_to_string): Update with a later, better version.
1254
1255 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1256
1257         * url.c (path_simplify_with_kludge): New function.
1258         (path_simplify_with_kludge): Disable it.  Instead...
1259         (parse_dir): ...make sure that at this point the right thing is
1260         done, i.e. that "query" part of the URL (?...) is always assigned
1261         to the file, never to the directory portion of the path.
1262
1263 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1264
1265         * retr.c (retrieve_url): Detect redirection cycles.
1266
1267 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1268
1269         * url.c (get_urls_html): Decode HTML entities using
1270         html_decode_entities.
1271
1272         * html.c (htmlfindurl): Don't count the `#' in numeric entities
1273         (&#NNN;) as an HTML fragemnt.
1274         (html_decode_entities): New function.
1275
1276 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1277
1278         * html.c (htmlfindurl): Fix recognition of # HTML fragments.
1279
1280 2000-11-01  Hrvoje Niksic  <hniksic@arsdigita.com>
1281
1282         * url.c (construct): Rewritten for clarity.  Avoids the
1283         unnecessary copying and stack-allocation the old version
1284         performed.
1285
1286 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1287
1288         * ftp.c (getftp): Ditto.
1289
1290         * http.c (gethttp): Rewind the stream when retrying from scratch.
1291
1292 2000-10-31  Hrvoje Niksic  <hniksic@arsdigita.com>
1293
1294         * retr.c (retrieve_url): Use url_concat() to handle relative
1295         redirections instead of /ad hoc/ code.
1296
1297         * url.c (url_concat): New function encapsulating weird
1298         construct().
1299         (urllen_http_hack): New function.
1300         (construct): When constructing new URLs, recognize that `?' does
1301         not form part of the file name in HTTP.
1302
1303 2000-10-13  Adrian Aichner  <adrian@xemacs.org>
1304
1305         * retr.c: Add msec timing support for WINDOWS.
1306         * retr.c (reset_timer): GetSystemTime() on WINDOWS.
1307         * retr.c (elapsed_time): Calculate delta time to msec on WINDOWS.
1308
1309 2000-10-27  Dan Harkless  <wget@harkless.org>
1310
1311         * retr.c (retrieve_url): Manually applied T. Bharath
1312         <TBharath@responsenetworks.com>'s patch to get wget to grok
1313         illegal relative URL redirects.  Reformatted and re-commented it.
1314
1315 2000-10-23  Dan Harkless  <wget@harkless.org>
1316
1317         * connect.c (make_connection and bindport): Manually applied Rob
1318         Mayoff <mayoff@dqd.com>'s 1.5.3 patch to add --bind-address,
1319         changing coding style to GNU's.
1320
1321         * ftp.c (ftp_loop_internal): --delete-after wasn't implemented for
1322         files downloaded via FTP.  Per a comment, .listing files were not
1323         counted towards number of bytes and files downloaded because they're 
1324         deleted anyway.  Well, they aren't under -nr, so count them then.
1325
1326         * init.c: Manually applied Rob Mayoff's 1.5.3 patch to add
1327         --bind-address, alphabetizing, changing coding style to GNU's,
1328         commenting, and renaming cmd_ip_address() to cmd_address() to
1329         imply hostnames also okay.
1330                 
1331         * main.c (main): --delete-after didn't delete the root of the
1332         tree.  Ignore --convert-links if --delete-after was specified.
1333         Manually applied Rob Mayoff's 1.5.3 patch to add --bind-address,
1334         fixing duplicate use of added-since-1.5.3 case value.
1335         (print_help): Clarified that --delete-after deletes local files.
1336         Rob forgot to add a line for his new --bind-address option.
1337                 
1338         * options.h (struct options): Manually applied Rob Mayoff's patch
1339         to add --bind-address (bind_address structure member).
1340                 
1341         * recur.c (recursive_retrieve): Improved comment; added DEBUGP().
1342         Ignore --convert-links if --delete-after was specified.
1343                 
1344         * retr.c (retrieve_from_file): Just added a DEBUGP().
1345                 
1346 2000-10-19  Dan Harkless  <wget@harkless.org>
1347
1348         * ftp.c (ftp_loop_internal): downloaded_file() enumerators changed.
1349         (getftp): Applied Piotr Sulecki <Piotr.Sulecki@ios.krakow.pl>'s
1350         patch to work around FTP servers that incorrectly respond to the
1351         "REST" command with the remaining size rather than the total file size.
1352                 
1353         * http.c (gethttp): Improved a comment and added code to tack on
1354         ".html" to text/html files without that extension when -E specified.
1355         (http_loop): Use new downloaded_file() enumerators and deal with
1356         the case of gethttp() called xrealloc() on u->local.
1357
1358         * init.c (commands): Added new "htmlextension" command.
1359         Also renamed John Daily's cmd_quad() to the more descriptive
1360         cmd_lockable_boolean(), alpha-sorted the CMD_DECLARE()s and
1361         removed duplicate cmd_boolean() declaration.
1362
1363         * main.c (print_help): Added my new -E / --html-extension option.
1364         (main): Undocumented --email-address option previously used -E synonym.
1365         Stole it away for the much more deserving --html-extension's use.
1366
1367         * options.h (struct options): Added html_extension field.
1368
1369         * url.c (convert_links): URL X that we saved as X.html locally due
1370         to -E needs to be backed up as X.orig, not X.html.orig.  Added comments.
1371         (downloaded_file): Now remembers if we added .html extension to a file.
1372
1373         * url.h (downloaded_file_t): Added extra enumerators to support above.
1374         (downloaded_file): Now takes and returns a downloaded_file_t.
1375
1376         * wget.h (unnamed "dt" enum): Added ADDED_HTML_EXTENSION enumerator.
1377         
1378 2000-10-09  Dan Harkless  <wget@harkless.org>
1379
1380         * html.c (htmlfindurl): Added unneeded initialization to quiet warning.
1381                 
1382         * main.c (print_help): Clarified what --retr-symlinks does.
1383         
1384 2000-09-15  John Daily  <jdaily@cyberdude.com>
1385
1386         * init.c: Add support for "always" and "never" values to allow
1387         .wgetrc to override commandline (useful e.g. with .pm files
1388         calling `wget --passive-ftp' when your firewall doesn't allow that).
1389
1390         * ftp.c (getftp): passive_ftp is first option to support always/never.
1391
1392 2000-08-30  Dan Harkless  <wget@harkless.org>
1393
1394         * ftp.c (ftp_retrieve_list): Use new INFINITE_RECURSION #define.
1395         
1396         * html.c: htmlfindurl() now takes final `dash_p_leaf_HTML' parameter.
1397         Wrapped some > 80-column lines.  When -p is specified and we're at a 
1398         leaf node, do not traverse <A>, <AREA>, or <LINK> tags other than 
1399         <LINK REL="stylesheet">.
1400         
1401         * html.h (htmlfindurl): Now takes final `dash_p_leaf_HTML' parameter.
1402         
1403         * init.c: Added new -p / --page-requisites / page_requisites option.
1404
1405         * main.c (print_help): Clarified that -l inf and -l 0 both allow
1406         infinite recursion.  Changed the unhelpful --mirrior description
1407         to simply give the options it's equivalent to.  Added new -p option.
1408         (main): Added some comments; handle new -p / --page-requisites.
1409         
1410         * options.h (struct options): Added new page_requisites field.
1411
1412         * recur.c: Changed "URL-s" to "URLs" and "HTML-s" to "HTMLs".
1413         Calculate and pass down new `dash_p_leaf_HTML' parameter to
1414         get_urls_html().  Use new INFINITE_RECURSION #define.
1415
1416         * retr.c: Changed "URL-s" to "URLs".  get_urls_html() now takes
1417         final `dash_p_leaf_HTML' parameter.
1418
1419         * url.c: get_urls_html() and htmlfindurl() now take final
1420         `dash_p_leaf_HTML' parameter.
1421
1422         * url.h (get_urls_html): Now takes final `dash_p_leaf_HTML' parameter.
1423
1424         * wget.h: Added some comments and new INFINITE_RECURSION #define.
1425         
1426 2000-08-23  Dan Harkless  <wget@harkless.org>
1427
1428         * main.c (print_help): -B / --base was not mentioned.
1429
1430 2000-08-22  Dan Harkless  <wget@harkless.org>
1431
1432         * main.c (print_help): Modified -nc description to mention that it
1433         also prevents the creation of multiple versions of the same file
1434         with ".<number>" suffixes.
1435
1436 2000-07-14  Jan Prikryl  <prikryl@cg.tuwien.ac.at>
1437
1438         * retr.c (retrieve_url): Consistently strdup opt.referer when
1439         setting u->referer.
1440
1441 2000-06-09  Dan Harkless  <wget@harkless.org>
1442
1443         * main.c (print_help): --help output for --waitretry was over 80 cols.
1444
1445 2000-06-09  Hrvoje Niksic  <hniksic@iskon.hr>
1446
1447         * url.c (encode_string): Fix comment.
1448         Suggested by Herold Heiko <Heiko.Herold@previnet.it>.
1449
1450 2000-06-01  Const Kaplinsky  <const@ce.cctpu.edu.ru>
1451
1452         * ftp.c (ftp_retrieve_list): Change permissions only on plain
1453         files.
1454
1455 2000-06-01  Hrvoje Niksic  <hniksic@iskon.hr>
1456
1457         * url.c (str_url): Print the port number only if it's different
1458         from the default port number for that protocol.
1459
1460 2000-05-22  Dan Harkless  <wget@harkless.org>
1461
1462         * main.c (print_help): Added --help line for Damir Dzeko
1463         <ddzeko@zesoi.fer.hr>'s until-now-undocumented --referer option.
1464         Removed comments that --referer and --waitretry were undocumented.
1465         Changed "`.wgetrc' command" to "`.wgetrc'-style command" on --help
1466         line for --execute.
1467
1468 2000-05-18  Hrvoje Niksic  <hniksic@iskon.hr>
1469
1470         * ftp.c (getftp): Ditto.
1471
1472         * http.c (gethttp): Check for return value of fclose/fflush.
1473
1474 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1475
1476         * host.c (store_hostaddress): Instead of shifting ADDR, start
1477         copying from the correct address.
1478
1479 2000-04-12  Hrvoje Niksic  <hniksic@iskon.hr>
1480
1481         * http.c (gethttp): Don't free REQUEST -- it was allocated with
1482         alloca().
1483         Pointed out by Gisle Vanem <gvanem@eunet.no>.
1484
1485 2000-04-04  Dan Harkless  <wget@harkless.org>
1486
1487         * host.c (store_hostaddress): R. K. Owen's patch introduces a
1488         "left shift count >= width of type" warning on 32-bit
1489         architectures.  Got rid of it by tricking the compiler w/ a variable.
1490         
1491         * url.c (UNSAFE_CHAR): The macro didn't include all the illegal
1492         characters per RFC1738, namely everything above '~'.  It also
1493         generated a warning on OSes where char =~ unsigned char.  Fixed.
1494         
1495 1998-10-17  Hrvoje Niksic  <hniksic@srce.hr>
1496
1497         * http.c (http_process_type): Removed needless strdup(), a memory
1498         leak.
1499
1500 1998-09-25  Hrvoje Niksic  <hniksic@srce.hr>
1501
1502         * html.c (htmlfindurl): Set PH to the first occurrence of `#'.
1503
1504 1998-09-25  Simon Munton  <simonm@m4data.co.uk>
1505
1506         * init.c (wgetrc_file_name): Don't free HOME under Windows.
1507
1508 1998-12-01  "R. K. Owen"  <rkowen@Nersc.GOV>
1509
1510         * host.c (store_hostaddress): Fix for big endian 64-bit machines.
1511
1512 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1513
1514         * url.c (UNSAFE_CHAR): New macro.
1515         (contains_unsafe): Use it.
1516         (encode_string): Ditto.
1517
1518 1998-12-01  Hrvoje Niksic  <hniksic@srce.hr>
1519
1520         * main.c (i18n_initialize): Use LC_MESSAGES only if available.
1521
1522 2000-03-31  Hrvoje Niksic  <hniksic@srce.hr>
1523
1524         * Use TOUPPER/TOLOWER.
1525
1526 1998-12-22  Alexander V. Lukyanov  <lav@yars.free.net>
1527
1528         * ftp-opie.c (btoe): Zero-terminate OSTORE.
1529
1530 2000-03-21  Hrvoje Niksic  <hniksic@iskon.hr>
1531
1532         * wget.h (DO_REALLOC_FROM_ALLOCA): Ditto.
1533
1534         * sysdep.h (ISALNUM): New macro.
1535         (TOLOWER): Ditto.
1536         (TOUPPER): Ditto.
1537
1538 2000-03-10  Dan Harkless  <wget@harkless.org>
1539
1540         * html.c (idmatch): Implemented checking of my new --follow-tags
1541         and --ignore-tags options.
1542         
1543         * init.c (commands): Added comment reminding people adding new
1544         entries doing allocation to add corresponding freeing in cleanup().
1545         (commands): Added new followtags and ignoretags commands.
1546         (cleanup): Free storage for new followtags and ignoretags.
1547         
1548         * main.c: Use of "comma-separated list" was random -- normalized
1549         it.  Did some alphabetization.  Added comments pointing out
1550         "Options without arguments" and "Options accepting an argument"
1551         sections of long_options[].  Added new options --follow-tags and
1552         -G / --ignore-tags.  Added comment that Damir's --referer is
1553         currently undocumented.  Added comment that Heiko's --waitretry is
1554         partially undocumented (mentioned in --help but not in
1555         wget.texi).  Moved improperly sorted 24, 129, and 'G' cases.
1556         
1557         * options.h (struct options): Added new fields follow_tags and
1558         ignore_tags. 
1559         
1560         * wget.h: Added "#define EQ 0" so we can say "strcmp(a, b) == EQ".
1561         
1562 2000-03-02  Dan Harkless  <wget@harkless.org>
1563
1564         * ftp.c (ftp_loop_internal): Heiko introduced "suggest explicit
1565         braces to avoid ambiguous `else'" warnings.  Eliminated them.
1566         
1567         * http.c (gethttp): Dan Berger's query string patch is totally
1568         bogus.  If you have two different URLs, gen_page.cgi?page1 and
1569         get_page.cgi?page2, they'll both be saved as get_page.cgi and the
1570         second will overwrite the first.  Also, parameters to implicit
1571         CGIs, like "http://www.host.com/db/?2000-03-02" cause the URLs to
1572         be printed with trailing garbage characters, and could seg fault.
1573         Backing out the patch, which Dan B. informed me by email was just
1574         a kludge to download StarOffice from Sun made necessary due to
1575         wget's unconditional escaping of certain characters (room for an
1576         option there?).
1577         (http_loop): Heiko introduced "suggest explicit braces to avoid
1578         ambiguous `else'" warnings.  Eliminated them.
1579         
1580         * main.c: Heiko's --wait / --waitretry backwards compatibility
1581         code looks to have been totally untested -- automatic variable
1582         'wr' was used without being initialized, and a long int was passed
1583         into setval()'s char* val parameter.
1584         
1585         * recur.c (parse_robots): Applied Edward J. Sabol
1586         <sabol@alderaan.gsfc.nasa.gov>'s patch for Guan Yang's reported
1587         problem with "User-agent:<space>*<space>" lines in robots.txt.
1588         
1589         * url.c (parseurl, str_url): Removing Dan Berger's code (see
1590         http.c above for explanation).
1591         
1592 1999-08-25  Heiko Herold  <Heiko.Herold@previnet.it>
1593
1594         * ftp.c: Respect new option waitretry.
1595
1596 2000-01-30  Damir Dzeko  <ddzeko@zesoi.fer.hr>
1597
1598         * http.c (gethttp): Send custom Referer, if required.
1599
1600 1999-09-24  Charles G Waldman  <cgw@fnal.gov>
1601
1602         * netrc.c (parse_netrc): Allow passwords to contain spaces.
1603
1604         * netrc.c (parse_netrc): New function.
1605
1606 1999-09-17  Dan Berger  <dberger@ix.netcom.com>
1607
1608         * http.c (gethttp): Send it.
1609
1610         * url.c (parseurl): Detect query string in HTTP URL-s.
1611         (str_url): Print it.
1612
1613 2000-03-02  HIROSE Masaaki  <hirose31@t3.rim.or.jp>
1614
1615         * html.c (html_allow): Add <link href=...> and <script src=...>.
1616
1617 1999-05-02  andrew deryabin  <djsf@softhome.net>
1618
1619         * http.c (gethttp): Specify port in `Host' header only if it's
1620         different from 80.
1621
1622 1998-11-03  Edward J. Sabol  <sabol@alderaan.gsfc.nasa.gov>
1623
1624         * recur.c (recursive_retrieve): If a finite maximum depth is
1625         specified, and we're are already at that depth, don't download the
1626         HTML file for parsing.
1627
1628 2000-03-01  Dan Harkless  <wget@harkless.org>
1629
1630         * ftp.c (ftp_loop_internal): Call new downloaded_file() function,
1631         even though we don't do conversion on HTML files retrieved via
1632         FTP, so _current_ usage of downloaded_file() makes this call unneeded. 
1633         (ftp_retrieve_list): Added a comment saying where we need to
1634         stat() a .orig file if FTP'd HTML file conversion is ever implemented.
1635         (ftp_retrieve_list): "Local file '%s' is more recent," is sometimes
1636         a lie -- reworded as "Server file no newer than local file '%s' --".
1637         
1638         * http.c (http_loop): Fixed a typo and clarified a comment.
1639         (http_loop): When -K and -N are specified together, compare size
1640         and timestamp of server file X against local file X.orig (if
1641         extant) rather than converted local file X.
1642         (http_loop): "Local file '%s' is more recent," is sometimes a lie
1643         -- reworded as "Server file no newer than local file '%s' --".
1644         (http_loop): Call new downloaded_file() function to prevent
1645         wrongful overwriting of .orig file when -N is specified.
1646         
1647         * url.c (convert_links): When -K specified, only rename X to
1648         X.orig if downloaded_file() returns TRUE.  Otherwise when we skip
1649         file X due to -N, we clobber an X.orig from a previous invocation.
1650         (convert_links): Call the failsafe xstrdup(), not the real strdup().
1651         (convert_links): Added a note asking anyone who understands how
1652         multiple URLs can correspond to a single file to comment it.
1653         (downloaded_file): Added this new function.
1654         
1655         * url.h (downloaded_file): Added prototype for this new function
1656         as well as its downloaded_file_t enum type.
1657
1658         * wget.h (boolean): Added this new typedef and TRUE and FALSE #defines.
1659
1660 2000-02-29  Dan Harkless  <wget@harkless.org>
1661
1662         * version.c: Upped version to developer-only "1.5.3+dev".
1663
1664 2000-02-18  Dan Harkless  <wget@harkless.org>
1665
1666         * init.c (backup_converted): Added this new option.
1667
1668         * main.c (-K / --backup-converted): Added this new option.
1669
1670         * options.h (backup_converted): Added this new option.
1671
1672         * url.c (convert_links): When backup_converted is specified, save
1673         file X as X.orig before converting.
1674
1675         * url.h (urlpos): Fixed typo -- said "Rekative" instead of "Relative".
1676
1677 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1678
1679         * version.c: Wget 1.5.3 is released.
1680
1681 1998-09-21  Hrvoje Niksic  <hniksic@srce.hr>
1682
1683         * host.c (ftp_getaddress): Don't warn when reverse-lookup of local 
1684         address doesn't yield FQDN.
1685
1686 1998-09-21  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
1687
1688         * cmpt.c (strerror): Fix declaration of sys_errlist.
1689
1690 1998-09-11  Hrvoje Niksic  <hniksic@srce.hr>
1691
1692         * main.c (main): Don't use an array subscript as the first
1693         argument to STRDUP_ALLOCA.
1694         From Kaveh R. Ghazi.
1695
1696 1998-09-11  Szakacsits Szabolcs  <szaka@sienet.hu>
1697
1698         * html.c (htmlfindurl): Download table background.
1699
1700 1998-09-11  Hans Grobler  <grobh@conde.ee.sun.ac.za>
1701
1702         * init.c (parse_line): Would free *com before allocating it.
1703         (parse_line): Would free com instead of *com.
1704
1705 1998-09-10  Howard Gayle  <howard@fjst.com>
1706
1707         * url.c (get_urls_html): Would drop the last character of the
1708         link.
1709
1710 1998-09-10  Hrvoje Niksic  <hniksic@srce.hr>
1711
1712         * http.c (http_loop): Don't print status code if quiet.
1713
1714 1998-09-10  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
1715
1716         * log.c: Use <stdarg.h> only when __STDC__.
1717
1718 1998-09-10  Adam D. Moss  <adam@foxbox.org>
1719
1720         * html.c (htmlfindurl): Download <layer src=...>.
1721
1722 1998-09-10  Howard Gayle  <howard@fjst.com>
1723
1724         * ftp.c (ftp_retrieve_list): Don't update the time stamp of a file 
1725         not retrieved.
1726
1727 1998-06-27  Hrvoje Niksic  <hniksic@srce.hr>
1728
1729         * utils.c: Include <libc.h> on NeXT.
1730
1731 1998-06-26  Heinz Salzmann  <heinz.salzmann@intermetall.de>
1732
1733         * url.c (get_urls_html): Fix calculation of URL position.
1734
1735 1998-06-23  Hrvoje Niksic  <hniksic@srce.hr>
1736
1737         * version.c: Wget 1.5.2 is released.
1738
1739 1998-06-23  Dave Love  <d.love@dl.ac.uk>
1740
1741         * ftp.c, init.c, netrc.c: Include errno.h.
1742
1743         * http.c: Include errno.h and time header.
1744
1745         * Makefile.in (exext): Define.
1746         (install.bin, uninstall.bin): Use it.
1747
1748 1998-06-21  Hrvoje Niksic  <hniksic@srce.hr>
1749
1750         * http.c (http_loop): Don't attempt to compare local and remote
1751         sizes if the remote size is unknown.
1752
1753 1998-06-16  Hrvoje Niksic  <hniksic@srce.hr>
1754
1755         * url.c (get_urls_html): Use malloc() instead of alloca in the
1756         loop.
1757
1758 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1759
1760         * version.c: Wget 1.5.2-b4 is released.
1761
1762 1998-06-13  Hrvoje Niksic  <hniksic@srce.hr>
1763
1764         * url.c (get_urls_html): Ignore spaces before and after the URI.
1765
1766 1998-06-08  Wanderlei Antonio Cavassin  <cavassin@conectiva.com.br>
1767
1768         * ftp.c (getftp): Translate `done'.
1769
1770 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1771
1772         * version.c: Wget 1.5.2-b3 is released.
1773
1774 1998-06-06  Alexander Kourakos  <awk@bnt.com>
1775
1776         * init.c (cleanup): Close dfp, don't free it.
1777
1778 1998-06-06  Hrvoje Niksic  <hniksic@srce.hr>
1779
1780         * utils.c (make_directory): Twiddle.
1781
1782         * config.h.in: Added template for access().
1783
1784 1998-06-05  Mathieu Guillaume  <mat@cythere.com>
1785
1786         * html.c (htmlfindurl): Download <input src=...>
1787
1788 1998-06-03  Hrvoje Niksic  <hniksic@srce.hr>
1789
1790         * utils.c (file_exists_p): Use access() with two arguments.
1791
1792 1998-05-27  Martin Kraemer  <Martin.Kraemer@mch.sni.de>
1793
1794         * netrc.c (parse_netrc): Correct logic.
1795
1796 1998-05-27  Hrvoje Niksic  <hniksic@srce.hr>
1797
1798         * ftp.c (getftp): Added `break'; suggested by Lin Zhe Min
1799         <ljm@ljm.wownet.net>.
1800
1801 1998-05-24  Hrvoje Niksic  <hniksic@srce.hr>
1802
1803         * version.c: Wget 1.5.2-b2 is released.
1804
1805 1998-05-18  Juan Jose Rodriguez  <jcnsoft@jal1.telmex.net.mx>
1806
1807         * mswindows.h: Don't translate mkdir to _mkdir under Borland.
1808
1809 1998-05-17  Hrvoje Niksic  <hniksic@srce.hr>
1810
1811         * retr.c (elapsed_time): Return correct value when
1812         HAVE_GETTIMEOFDAY is undefined.
1813
1814 1998-05-13  Hrvoje Niksic  <hniksic@srce.hr>
1815
1816         * version.c: Wget 1.5.2-b1 is released.
1817
1818 1998-05-08  Hrvoje Niksic  <hniksic@srce.hr>
1819
1820         * getopt.c (_getopt_internal): Use exec_name instead of argv[0].
1821         (_getopt_internal): Don't translate `#if 0'-ed strings.
1822
1823 1998-05-06  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1824
1825         * mswindows.c (ws_handler): Use fork_to_background().
1826
1827 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1828
1829         * version.c: Wget 1.5.1 is released.
1830
1831 1998-05-05  Hrvoje Niksic  <hniksic@srce.hr>
1832
1833         * http.c (parse_http_status_line): Avoid `minor' and `major'
1834         names.
1835
1836 1998-05-02  Hrvoje Niksic  <hniksic@srce.hr>
1837
1838         * utils.c (mkdirhier): Renamed to make_directory.
1839
1840 1998-05-01  Hrvoje Niksic  <hniksic@srce.hr>
1841
1842         * mswindows.c (fork_to_background): Define under Windows.
1843
1844         * utils.c (fork_to_background): New function.
1845
1846         * html.c (htmlfindurl): Removed rerdundant casts.
1847
1848 1998-05-01  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1849
1850         * mswindows.c (ws_mypath): Cache the path.
1851
1852 1998-04-30  Douglas E. Wegscheid  <wegscd@whirlpool.com>
1853
1854         * ftp.h: Prefix enum ftype members with FT_.
1855
1856         * ftp-ls.c, ftp.c, html.h: Adjust accordingly.
1857
1858         * mswindows.h: Use stat under Borland, _stat under MSVC.
1859
1860 1998-04-28  Hrvoje Niksic  <hniksic@srce.hr>
1861
1862         * http.c (known_authentication_scheme_p): New function.
1863         (gethttp): Handle authorization more correctly.
1864
1865         * ftp-basic.h: Removed.
1866
1867         * cmpt.h: Removed.
1868
1869         * utils.c: Include <unistd.h> before <pwd.h>; needed under SunOS
1870         with gcc 2.8.
1871         (numdigit): Use `while' loop.
1872
1873         * http.c (create_authorization_line): Detect authentication
1874         schemes case-insensitively.
1875
1876         * http.c (extract_header_attr): Use strdupdelim().
1877         (digest_authentication_encode): Move declaration of local
1878         variables to smaller scope.
1879         (digest_authentication_encode): Reset REALM, OPAQUE and NONCE.
1880         (create_authorization_line): Detect authentication schemes
1881         case-insensitively.
1882
1883         * utils.c (touch): Constify.
1884
1885         * http.c (gethttp): Report a nicer error when no data is received.
1886
1887         * rbuf.h (RBUF_READCHAR): Ditto.
1888
1889         * ftp-basic.c (ftp_response): Use sizeof.
1890
1891 1998-04-27  Hrvoje Niksic  <hniksic@srce.hr>
1892
1893         * retr.c (print_percentage): EXPECTED is long, not int.
1894         (print_percentage): Use floating-point arithmetic to avoid
1895         overflow with large files' sizes multiplied with 100.
1896
1897 1998-04-27  Gregor Hoffleit  <flight@mathi.uni-heidelberg.de>
1898
1899         * config.h.in: Added pid_t stub.
1900
1901         * sysdep.h (S_ISREG): Moved here from mswindows.h (NeXT doesn't
1902         define it).
1903
1904 1998-04-20  Hrvoje Niksic  <hniksic@srce.hr>
1905
1906         * version.c: Wget 1.5.0 is released.
1907
1908 1998-04-18  Hrvoje Niksic  <hniksic@srce.hr>
1909
1910         * url.c (str_url): Ditto.
1911
1912         * ftp-basic.c (ftp_rest): Use new name.
1913
1914         * utils.c (long_to_string): Renamed from prnum().
1915
1916 1998-04-16  Hrvoje Niksic  <hniksic@srce.hr>
1917
1918         * version.c: Wget 1.5-b17 is released.
1919
1920 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1921
1922         * headers.c (header_get): New argument FLAGS.
1923
1924         * http.c (gethttp): If request is malformed, bail out of the
1925         header loop.
1926         (gethttp): Check for empty header *after* the status line checks.
1927         (gethttp): Disallow continuations for status line.
1928
1929 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1930
1931         * version.c: Wget 1.5-b16 is released.
1932
1933 1998-04-08  Hrvoje Niksic  <hniksic@srce.hr>
1934
1935         * init.c (commands): Renamed `always_rest' to `continue'.
1936
1937 1998-04-05  Hrvoje Niksic  <hniksic@srce.hr>
1938
1939         * all: Use it.
1940
1941         * log.c (logputs): New argument.
1942         (logvprintf): Ditto.
1943         (logprintf): Ditto.
1944
1945 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1946
1947         * http.c (http_atotm): Update comment.
1948
1949         * main.c (i18n_initialize): Set LC_MESSAGES, not LC_ALL.
1950
1951         * wget.h: Renamed ENABLED_NLS to HAVE_NLS.
1952
1953         * main.c (i18n_initialize): New function.
1954         (main): Use it.
1955
1956         * log.c: Include <unistd.h>.
1957
1958         * retr.c (show_progress): Cast alloca to char *.
1959
1960 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1961
1962         * version.c: Wget 1.5-b15 is released.
1963
1964 1998-04-04  Hrvoje Niksic  <hniksic@srce.hr>
1965
1966         * utils.h: Declare file_non_directory_p().
1967
1968 1998-04-03  Hrvoje Niksic  <hniksic@srce.hr>
1969
1970         * main.c (main): It's `tries', not `numtries' now.
1971
1972 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1973
1974         * init.c (getperms): Removed.
1975
1976 1998-04-01  Tim Charron  <tcharron@interlog.com>
1977
1978         * log.c (logvprintf): Don't use ARGS twice.
1979
1980 1998-04-01  John  <john@futuresguide.com>
1981
1982         * mswindows.c: Cleaned up.
1983
1984 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1985
1986         * version.c: Wget 1.5-b14 is released.
1987
1988 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1989
1990         * ftp-opie.c (STRLEN4): New macro.
1991         (btoe): Use it.
1992
1993 1998-04-01  Junio Hamano  <junio@twinsun.com>
1994
1995         * http.c: Document all the Digest functions.
1996
1997 1998-04-01  Hrvoje Niksic  <hniksic@srce.hr>
1998
1999         * utils.c (file_non_directory_p): Renamed from isfile().
2000
2001         * mswindows.h (S_ISREG): New macro, suggested by Tim Adam.
2002
2003 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2004
2005         * utils.c (mkdirhier): Use 0777 instead of opt.dirmode.
2006
2007         * init.c (cmd_spec_dotstyle): Use 48 dots per line for binary
2008         style.
2009         (cmd_permissions): Removed.
2010
2011         * config.h.in: Add template for WORDS_BIGENDIAN.
2012
2013 1998-03-31  Junio Hamano  <junio@twinsun.com>
2014
2015         * http.c (HEXD2asc): New macro.
2016         (dump_hash): Use it.
2017
2018 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2019
2020         * version.c: Wget 1.5-b13 is released.
2021
2022 1998-03-31  Hrvoje Niksic  <hniksic@srce.hr>
2023
2024         * main.c (main): Don't try to use `com'.
2025
2026 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2027
2028         * init.c (cmd_permissions): New function.
2029
2030 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2031
2032         * version.c: Wget 1.5-b12 is released.
2033
2034 1998-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2035
2036         * init.c (commands): Renamed `numtries' to `tries'.
2037         (cmd_spec_debug): Removed.
2038         (home_dir): Under Windows, return `C:\' if HOME is undefined.
2039
2040 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2041
2042         * config.h.in: Define _XOPEN_SOURCE.
2043
2044         * init.c (check_user_specified_header): New function.
2045         (cmd_spec_header): Use it.
2046         (cmd_spec_useragent): New function.
2047
2048 1998-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2049
2050         * version.c: Wget 1.5-b11 is released.
2051
2052 1998-03-28  Hrvoje Niksic  <hniksic@srce.hr>
2053
2054         * wget.h: Include <libintl.h> only if NLS is enabled.
2055
2056 1998-03-26  Hrvoje Niksic  <hniksic@srce.hr>
2057
2058         * options.h (struct options): Made `wait' a long.
2059         (struct options): Ditto for `timeout'.
2060
2061 1998-03-19  Hrvoje Niksic  <hniksic@srce.hr>
2062
2063         * utils.c (exists): Renamed to file_exists_p.
2064         (file_exists_p): Use access() if available.
2065
2066 1998-03-17  Hrvoje Niksic  <hniksic@srce.hr>
2067
2068         * utils.c (memfatal): Set save_log_p to 0 to avoid potential
2069         infloop.
2070
2071         * log.c: do_logging -> save_log_p.
2072
2073         * config.h.in: Added template for HAVE_VSNPRINTF.
2074
2075 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
2076
2077         * init.c: Ditto.
2078
2079         * http.c: Protect declaration against non-ANSI compiler.
2080
2081         * log.c (logvprintf): Use vsnprintf() if available.
2082
2083         * getopt.c (main): Don't translate test stuff.
2084
2085 1998-03-16  Hrvoje Niksic  <hniksic@srce.hr>
2086
2087         * version.c: Wget 1.5-b10 is released.
2088
2089 1998-03-11  Hrvoje Niksic  <hniksic@srce.hr>
2090
2091         * ftp.c (getftp): Don't translate "CWD %s".
2092
2093         * wget.h (GCC_FORMAT_ATTR): Renamed from FORMAT_ATTR.
2094
2095 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2096
2097         * ftp-opie.c (btoe): Use memcpy() instead of strncat().
2098
2099         * log.c (logputs): New function.
2100         (logvprintf): Renamed from vlogmsg; use logputs().
2101
2102         * retr.c (show_progress): Print `[100%]' when the retrieval is
2103         finished.
2104
2105         * init.c (run_wgetrc): Use FILE, not PATH.
2106         (wgetrc_file_name): Ditto.
2107
2108 1998-03-07  Tim Adam  <tma@osa.com.au>
2109
2110         * recur.c (parse_robots): Correctly reset `entries' on empty
2111         disallow.
2112
2113 1998-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2114
2115         * init.c (cmd_spec_debug): Use cmd_boolean().
2116
2117 1998-02-23  Hrvoje Niksic  <hniksic@srce.hr>
2118
2119         * http.c (gethttp): Create proxy-authorization correctly.
2120
2121 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2122
2123         * md5.c: Ditto.
2124
2125         * getopt.c: Use ANSI function definitions.
2126
2127         * ftp-opie.c: New file.
2128
2129         * options.h: Don't redefine EXTERN.
2130
2131         * init.c: Sort it correctly.
2132
2133 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2134
2135         * version.c: Wget 1.5-b9 is released.
2136
2137 1998-02-22  Hrvoje Niksic  <hniksic@srce.hr>
2138
2139         * recur.c (recursive_retrieve): Reset `first_time'.
2140
2141         * ftp.c (getftp): Added `default' clause to switches of uerr_t.
2142
2143         * rbuf.c (rbuf_peek): Simplified.
2144         (rbuf_flush): Use MINVAL.
2145
2146         * wget.h (MINVAL): Moved from url.h.
2147
2148         * rbuf.h (RBUF_FD): New macro.
2149
2150         * url.c (add_url): Add to the head of the list.
2151
2152         * ftp.c (ftp_retrieve_list): Set the permissions to downloaded
2153         file.
2154         (getftp): Set the default permissions to 0600.
2155
2156 1998-02-21  Hrvoje Niksic  <hniksic@srce.hr>
2157
2158         * url.c (get_urls_html): Ditto.
2159         (convert_links): Ditto.
2160
2161         * recur.c (parse_robots): Ditto.
2162
2163         * html.c (ftp_index): Ditto.
2164
2165         * ftp-ls.c (ftp_parse_unix_ls): Open file as binary.
2166
2167         * init.c (defaults): Initialize `opt' to zero via memset.
2168
2169         * http.c (digest_authentication_encode): goto considered harmful.
2170
2171 1998-02-19  Hrvoje Niksic  <hniksic@srce.hr>
2172
2173         * ftp.c (delelement): Simplify and fix leak.
2174
2175 1998-02-18  Hrvoje Niksic  <hniksic@srce.hr>
2176
2177         * http.c (dump_hash): Use HEXD2ASC instead of home-grown stuff.
2178
2179         * url.h (HEXD2ASC): Removed warning.
2180
2181         * init.c (comind): Use binary search.
2182         (commands): Reorganized.
2183         (setval): Ditto.
2184         (cmd_boolean): New function.
2185         (cmd_number): Ditto.
2186         (cmd_number_inf): Ditto.
2187         (cmd_string): Ditto.
2188         (cmd_vector): Ditto.
2189         (cmd_directory_vector): Ditto.
2190         (cmd_bytes): Ditto.
2191         (cmd_time): Ditto.
2192         (cmd_spec_debug): Ditto.
2193         (cmd_spec_dirmode): Ditto.
2194         (cmd_spec_dirstruct): Ditto.
2195         (cmd_spec_dotstyle): Ditto.
2196         (cmd_spec_header): Ditto.
2197         (cmd_spec_htmlify): Ditto.
2198         (cmd_spec_mirror): Ditto.
2199         (cmd_spec_outputdocument): Ditto.
2200         (cmd_spec_recursive): Ditto.
2201         (settime): Merged with cmd_time().
2202         (setbytes): Merged with cmd_bytes().
2203         (setonoff): Merged with cmd_boolean().
2204         (onoff): Ditto.
2205
2206 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2207
2208         * Makefile.in (distclean): Remove `config.h'.
2209
2210 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2211
2212         * version.c: Wget 1.5-b8 is released.
2213
2214 1998-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2215
2216         * http.c (digest_authentication_encode): New function.
2217         (create_authorization_line): Use it.
2218         (dump_hash): New function.
2219         (digest_authentication_encode): Use it.
2220
2221         * fnmatch.c: Renamed from `mtch.c'.
2222
2223 1998-02-15  Karl Eichwalder  <ke@suse.de>
2224
2225         * main.c (main): Tag "Written by..." string as translatable.
2226
2227 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2228
2229         * wget.h (FREE_MAYBE): New macro.
2230
2231         * http.c (create_authorization_line): Don't use ANSI C string
2232         concatenation feature.
2233         (basic_authentication_encode): Use alloca() for temporary
2234         variables.
2235
2236         * recur.h: Ditto.
2237
2238         * http.c: Ditto.
2239
2240         * headers.h: Ditto.
2241
2242         * ftp-basic.c: Protect declaration against non-ANSI compiler.
2243
2244         * http.c (create_authorization_line): Cast `unsigned char *' to
2245         `char *' for sprintf, to shut up the noisy Digital Unix cc.
2246
2247 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2248
2249         * version.c: Wget 1.5-b7 is released.
2250
2251 1998-02-15  Hrvoje Niksic  <hniksic@srce.hr>
2252
2253         * cmpt.c (strstr): Synched with glibc-2.0.6.
2254
2255         * ftp-basic.c (calculate_skey_response): Ditto.
2256         (calculate_skey_response): Use alloca().
2257
2258         * http.c (create_authorization_line): Work with FSF's version of
2259         md5.c.
2260
2261         * md5.c: New file, from GNU libc.
2262
2263 1998-02-14  Hrvoje Niksic  <hniksic@srce.hr>
2264
2265         * url.h (URL_CLEANSE): Name the temporary variable more carefully.
2266
2267 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
2268
2269         * http.c (basic_authentication_encode): New function, instead of
2270         the macro.
2271
2272 1998-02-13  Junio Hamano  <junio@twinsun.com>
2273
2274         * http.c: Add HTTP-DA support.
2275         * ftp-basic.c: Add Opie/S-key support.
2276         * config.h.in, Makefile.in: Add HTTP-DA and Opie/S-key support.
2277         * md5.c, md5.h: New files.
2278
2279 1998-02-13  Hrvoje Niksic  <hniksic@srce.hr>
2280
2281         * http.c (http_process_range): Renamed from hprocrange().
2282         (http_process_range): Parse the whole header.
2283
2284         * headers.c: New file.
2285         (header_process): New function.
2286         (header_get): Renamed from fetch_next_header.
2287
2288         * all: Include utils.h only where necessary.
2289
2290         * wget.h: Declare xmalloc(), xrealloc() and xstrdup() here.
2291
2292         * wget.h: Add provisions for dmalloc.
2293
2294 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
2295
2296         * version.c: Wget 1.5-b6 is released.
2297
2298 1998-02-12  Hrvoje Niksic  <hniksic@srce.hr>
2299
2300         * ftp.c (ftp_loop): Determine `filename' more precisely.
2301
2302         * init.c (setval): Don't set `opt.quiet' if output-document is
2303         `-'.
2304
2305         * log.c (log_init): Print to STDERR instead of STDOUT.
2306         (vlogmsg): Use STDERR by default.
2307         (logflush): Ditto.
2308
2309 1998-02-11  Simon Josefsson  <jas@pdc.kth.se>
2310
2311         * host.c: Use addr_in again.
2312
2313 1998-02-08  Karl Eichwalder  <karl@suse.de>
2314
2315         * http.c (gethttp): Fixed typo.
2316
2317 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2318
2319         * version.c: Wget 1.5-b5 is released.
2320
2321 1998-02-08  Hrvoje Niksic  <hniksic@srce.hr>
2322
2323         * retr.c (show_progress): Use it.
2324
2325         * log.c (logflush): New function.
2326
2327         * wget.h: Utilize __attribute__ if on gcc.
2328
2329 1998-02-07  Hrvoje Niksic  <hniksic@srce.hr>
2330
2331         * http.c (base64_encode_line): New argument LENGTH.
2332         (BASIC_AUTHENTICATION_ENCODE): Use it.
2333         (BASIC_AUTHENTICATION_ENCODE): Take length of HEADER into account.
2334
2335         * main.c (main): Fixed fprintf() format mismatch.
2336
2337 1998-02-06  Hrvoje Niksic  <hniksic@srce.hr>
2338
2339         * version.c: Wget 1.5-b4 is released.
2340
2341 1998-02-03  Simon Josefsson  <jas@pdc.kth.se>
2342
2343         * host.c: use sockaddr_in instead of addr_in.
2344
2345 1998-02-04  Hrvoje Niksic  <hniksic@srce.hr>
2346
2347         * init.c (cleanup): Use it.
2348
2349         * recur.c (recursive_cleanup): New function.
2350
2351         * retr.c (retrieve_from_file): Ditto.
2352
2353         * main.c (main): Use it.
2354
2355         * recur.c (recursive_reset): New function.
2356
2357         * retr.c (retrieve_from_file): Ditto.
2358
2359         * main.c (main): Simplify call to recursive_retrieve().
2360
2361         * recur.c (recursive_retrieve): Removed FLAGS argument.
2362
2363         * http.c (gethttp): Changed call to iwrite().
2364
2365 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2366
2367         * url.c (get_urls_html): Ditto.
2368         (free_urlpos): Ditto.
2369         (mkstruct): Ditto.
2370         (construct): Ditto.
2371
2372         * retr.c (retrieve_url): Move declaration of local variables to
2373         smaller scope.
2374
2375         * url.c (urlproto): Use it.
2376         (parseurl): Ditto.
2377         (str_url): Ditto.
2378         (get_urls_html): Ditto.
2379
2380         * utils.h (ARRAY_SIZE): New macro.
2381
2382         * url.c (proto): Moved from url.h.
2383
2384         * url.h (URL_CLEANSE): Reformatted.
2385         (USE_PROXY_P): Renamed from USE_PROXY.
2386
2387         * ftp-basic.c: Adjust to the new interface of iwrite().
2388
2389         * ftp-basic.c (ftp_port): Use alloca().
2390
2391 1998-02-03  Hrvoje Niksic  <hniksic@srce.hr>
2392
2393         * version.c: Wget 1.5-b3 is released.
2394
2395         * host.c (ftp_getaddress): Don't print to stderr directly.
2396
2397         * init.c (setbytes): Support `g' for gigabytes.
2398         (cmdtype): New specification CTIME.
2399         (setval): Use it with settime().
2400         (commands): Use it for WAIT and TIMEOUT.
2401
2402 1998-02-02  Hrvoje Niksic  <hniksic@srce.hr>
2403
2404         * http.c (BASIC_AUTHENTICATION_ENCODE): New macro.
2405         (gethttp): Use it.
2406
2407         * utils.c (unique_name_1): Moved from url.c.
2408         (unique_name): Ditto.
2409
2410         * url.c (url_filename): Ditto.
2411
2412         * log.c (redirect_output): Changed call to unique_name().
2413
2414         * url.c (unique_name_1): Renamed from unique_name().
2415         (unique_name): Changed interface.
2416
2417         * init.c (enum cmdid): Moved from init.h.
2418         (cmdtype): Ditto.
2419         (struct cmd): Ditto.
2420
2421         * main.c (main): Use it.
2422         (main): Moved `--backups' to not have a short option.
2423
2424         * options.h (struct options): New member BACKGROUND.
2425
2426         * main.c (print_help): Rearranged.
2427         (main): New long options for -n* short options: --no-directories,
2428         --no-host-directories, --non-verbose, --no-host-lookup and
2429         --dont-remove-listing.
2430
2431 1998-02-01  Hrvoje Niksic  <hniksic@srce.hr>
2432
2433         * main.c (main): Use log_close().
2434
2435         * log.c: New variable LOGFP.
2436         (vlogmsg): Use it.
2437         (redirect_output): Don't open /dev/null; set LOGFP to stdin
2438         instead.
2439         (log_close): New function.
2440
2441         * options.h (struct options): Removed LFILE.
2442
2443         * log.c (log_enable): Removed.
2444
2445         * main.c (main): Use it.
2446
2447         * log.c (log_init): New function.
2448
2449         * url.c (get_urls_html): Removed needless assignment to BASE.
2450
2451         * host.c (add_hlist): Don't set CMP needlessly.
2452
2453         * utils.c (match_backwards): Ditto.
2454         (in_acclist): Ditto.
2455
2456         * url.c (findurl): Ditto.
2457
2458         * netrc.c (parse_netrc): Ditto.
2459
2460         * log.c (log_dump): Ditto.
2461
2462         * html.c (html_quote_string): Ditto.
2463
2464         * ftp-basic.c (ftp_request): Made static.
2465
2466         * connect.c: Made global variables static.
2467
2468         * url.c (construct): Ditto.
2469
2470         * init.c (init_path): Avoid assignment inside `if'-condition.
2471
2472         * ftp.c: Don't include in.h or winsock.h.
2473
2474         * ftp.c (ftp_loop): Use SZ.
2475
2476         * connect.c (bindport): Cast &addrlen to int *.
2477         (conaddr): Ditto.
2478
2479         * init.c (initialize): Don't use SYSTEM_WGETRC unconditionally.
2480
2481 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2482
2483         * ftp.c (getftp): Initialize opt.ftp_pass here.
2484         (ftp_retrieve_dirs): Use alloca().
2485
2486         * init.c (defaults): Don't initialize opt.ftp_pass.
2487
2488         * sysdep.h (S_ISLNK): Declare for OS/2; ditto for lstat.
2489         From Ivan F. Martinez <ivanfm@ecodigit.com.br>.
2490
2491 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2492
2493         * recur.c (parse_robots): Check for comments more correctly.
2494
2495         * host.c (ftp_getaddress): Use STRDUP_ALLOCA.
2496         (ftp_getaddress): Add diagnostics when reverse-lookup yields only
2497         hostname.
2498
2499 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2500
2501         * version.c: Wget 1.5-b2 is released.
2502
2503         * netrc.c (NETRC_FILE_NAME): Moved from netrc.h.
2504
2505         * utils.c (proclist): Pass FNM_PATHNAME to fnmatch().
2506
2507         * ftp-basic.c (ftp_pasv): Avoid unnecessary casting to unsigned
2508         char.
2509
2510         * log.c: Don't attempt to hide arguments from ansi2knr.
2511
2512         * cmpt.c: Synched strptime() and mktime() with glibc-2.0.6.
2513
2514         * ansi2knr.c: Use a later version, from fileutils-3.16l alpha.
2515
2516         * ftp.c (getftp): Ditto.
2517
2518         * http.c (gethttp): Use it.
2519
2520         * retr.c (get_contents): New argument EXPECTED; pass it to
2521         show_progress().
2522         (show_progress): New argument EXPECTED; use it to display
2523         percentages.
2524
2525         * init.c (setval): Ditto.
2526
2527         * http.c (gethttp): Ditto.
2528         (http_loop): Ditto.
2529
2530         * ftp.c (getftp): Ditto.
2531         (ftp_loop_internal): Ditto.
2532
2533         * ftp-ls.c (ftp_parse_unix_ls): Use abort() instead of assert(0).
2534
2535         * sysdep.h (CLOSE): Simplify; use DEBUGP.
2536
2537         * netrc.c (search_netrc): Use alloca().
2538
2539         * init.c (defaults): Initialize no_flush.
2540
2541         * log.c (vlogmsg): Don't flush if no_flush.
2542
2543         * options.h (struct options): New variable no_flush.
2544
2545         * main.c (main): Don't play games with buffering.
2546
2547         * log.c (vlogmsg): Flush the output after every message.
2548
2549 1998-01-31  Hrvoje Niksic  <hniksic@srce.hr>
2550
2551         * init.c (parse_line): Ditto.
2552
2553         * url.c (get_urls_html): Ditto.
2554
2555         * main.c (main): Don't cast to unsigned char.
2556
2557         * init.c (run_wgetrc): Don't cast to unsigned char.
2558         (parse_line): Accept char instead of unsigned char.
2559
2560         * html.c (htmlfindurl): Use char instead of unsigned char.
2561
2562         * all: Use them.
2563
2564         * sysdep.h: Add wrappers to ctype macros to make them
2565         eight-bit-clean:
2566
2567 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2568
2569         * html.c (htmlfindurl): Download <img lowsrc=...>
2570
2571         * main.c (main): Ignore SIGPIPE.
2572
2573         * connect.c (select_fd): New argument WRITEP.
2574         (iwrite): Call select_fd().
2575
2576 1997-02-27  Fila Kolodny <fila@ibi.com>
2577
2578         * ftp.c (ftp_retrieve_list): If retrieving symlink and the proper
2579         one already exists, just skip it.
2580
2581 1998-01-30  Hrvoje Niksic  <hniksic@srce.hr>
2582
2583         * http.c (gethttp): Cosmetic changes.
2584
2585         * http.c (check_end): Allow `+D...' instead of `GMT'.
2586         From Fabrizio Pollastri <pollastri@cstv.to.cnr.it>.
2587
2588         * url.c (process_ftp_type): New function.
2589         (parseurl): Use it.
2590
2591         * connect.c (iwrite): Allow writing in a few chunks.
2592         (bindport): Made SRV static, so addr can point to it.
2593         (select_fd): Removed HPUX kludge.
2594
2595         * host.c (free_hlist): Incorporated into clean_hosts().
2596
2597 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2598
2599         * host.c (hlist): Made static.
2600         (search_address): Cosmetic change.
2601
2602 1998-01-29  Hrvoje Niksic  <hniksic@srce.hr>
2603
2604         * version.c: Wget v1.5-b1 is released.
2605
2606         * http.c (hgetlen): Use sizeof() to get the header length.
2607         (hgetrange): Ditto.
2608         (hgettype): Ditto.
2609         (hgetlocation): Ditto.
2610         (hgetmodified): Ditto.
2611         (haccepts_none): Ditto.
2612
2613         * main.c (main): Updated `--version' and `--help' output, as per
2614         Francois Pinard's suggestions.
2615
2616         * main.c: Include locale.h; call setlocale(), bindtextdomain() and 
2617         textdomain().
2618
2619         * config.h.in: Define stubs for I18N3.
2620
2621         * wget.h: Include libintl.h.
2622
2623 1998-01-28  Hrvoje Niksic  <hniksic@srce.hr>
2624
2625         * url.c (mkstruct): Check for opt.cut_dirs.
2626         (mkstruct): alloca()-te more, xmalloc() less.
2627
2628         * utils.c (load_file): Check for ferror().
2629
2630         * url.c (get_urls_file): Close only the files we opened.
2631         (get_urls_html): Ditto.
2632         (count_slashes): New function.
2633
2634         * http.h: Removed.
2635
2636         * http.c (gethttp): Respect username and password provided by
2637         proxy URL.
2638         (base64_encode_line): Write into an existing buffer instead of
2639         malloc-ing a new one.
2640         (struct http_stat): Moved from http.h
2641
2642         * retr.c (retrieve_url): Free SUF.
2643
2644         * all: Removed lots of unnecessary .h dependencies.
2645
2646         * html.c (global_state): Made static.
2647
2648         * utils.h (ALLOCA_ARRAY): New macro.
2649
2650         * main.c (main): New option `--cut-dirs'.
2651
2652         * url.c (construct): Use alloca() for T.
2653
2654         * utils.c (mkdirhier): Use STRDUP_ALLOCA.
2655
2656         * host.c (_host_t): Moved from host.h.
2657         (struct host): Renamed from _host_t.
2658         (store_hostaddress): Use STRDUP_ALLOCA for INET_S.
2659         (realhost): Ditto.
2660
2661         * host.h: Don't include url.h.
2662
2663         * ftp.c (LIST_FILENAME): Moved from ftp.h.
2664
2665         * init.c (DEFAULT_FTP_ACCT): Moved from ftp.h.
2666
2667         * main.c (main): Enable log if the output goes to a TTY.
2668
2669         * connect.h: Removed unused constant `BACKLOG'.
2670
2671         * config.h.in: Check for isatty().
2672
2673         * Makefile.in (LINK): Use CFLAGS when linking.
2674
2675 1998-01-27  Hrvoje Niksic  <hniksic@srce.hr>
2676
2677         * mswindows.c (ws_hangup): Use redirect_output().
2678
2679         * main.c (redirect_output_signal): New function; use
2680         redirect_output().
2681
2682         * log.c (redirect_output): New function, based on hangup(), which
2683         is deleted.
2684
2685         * log.c (vlogmsg): New function.
2686
2687         * wget.h (DEBUGP): Use debug_logmsg().
2688
2689         * main.c (hangup): Use it.
2690
2691         * log.c (log_dump): New function.
2692
2693         * utils.h (DO_REALLOC): Use `long' for various sizes.
2694
2695         * http.c (hskip_lws): Use `while', for clarity.
2696         (HTTP_DYNAMIC_LINE_BUFFER): New constant.
2697         (fetch_next_header): Use it instead of DYNAMIC_LINE_BUFFER.
2698
2699         * ftp-basic.c (FTP_DYNAMIC_LINE_BUFFER): New constant.
2700         (ftp_response): Use it instead of DYNAMIC_LINE_BUFFER.
2701
2702         * utils.c (DYNAMIC_LINE_BUFFER): Moved from utils.c.
2703         (LEGIBLE_SEPARATOR): Ditto.
2704         (FILE_BUFFER_SIZE): Ditto.
2705
2706         * retr.c (BUFFER_SIZE): Moved from retr.h.
2707
2708         * log.c: New file.
2709         (logmsg): Moved from utils.c.
2710         (debug_logmsg): New function.
2711
2712         * mswindows.h: Include it here.
2713
2714         * init.c: Ditto.
2715
2716         * utils.c: Don't include <windows.h>.
2717
2718 1998-01-25  Hrvoje Niksic  <hniksic@srce.hr>
2719
2720         * host.c (ftp_getaddress): Ditto.
2721
2722         * main.c (main): Use it.
2723
2724         * utils.h (STRDUP_ALLOCA): New macro.
2725
2726         * init.c: Prepend `wget: ' to error messages printed on stderr.
2727
2728         * utils.c (mkdirhier): Renamed from mymkdir.
2729         (touch): Renamed from my_touch.
2730         (pwd_cuserid): Renamed from my_cuserid().
2731
2732 1998-01-24  Andy Eskilsson  <andy.eskilsson@telelogic.se>
2733
2734         * utils.c (accdir): Process wildcards.
2735         (proclist): New function.
2736         (accdir): Use it to avoid code repetition.
2737
2738 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2739
2740         * recur.c (parse_robots): Respect opt.useragent; use alloca().
2741
2742         * http.c (gethttp): Construct useragent accordingly.
2743
2744         * version.c: Changed version string to numbers-only.
2745
2746         * main.c (print_help): List all the options.
2747
2748         * mswindows.c (windows_main_junk): Initialize argv0 here.
2749
2750 1998-01-24  Karl Heuer  <kwzh@gnu.org>
2751
2752         * netrc.c (search_netrc): Initialize `l' only after processing
2753         netrc.
2754
2755         * main.c (main): Don't trap SIGHUP if it's being ignored.
2756
2757 1998-01-24  Hrvoje Niksic  <hniksic@srce.hr>
2758
2759         * all: Use logmsg().
2760
2761         * utils.c (time_str): Moved from retr.c.
2762         (logmsg): New function.
2763         (logmsg_noflush): Ditto.
2764
2765         * rbuf.c: New file, moved buf_* functions here.
2766
2767         * ftp.c (ftp_expected_bytes): Moved from ftp-basic.c.
2768
2769         * ftp-basic.c (ftp_rest): Use prnum().
2770
2771         * ftp-basic.c: Ditto.
2772
2773         * ftp.c: Use the new reading functions and macros.
2774
2775         * retr.c (buf_initialize): New function.
2776         (buf_initialized_p): Ditto.
2777         (buf_uninitialize): Ditto.
2778         (buf_fd): Ditto.
2779
2780         * http.c (fetch_next_header): Use the BUF_READCHAR macro for
2781         efficiency.
2782         (gethttp): Use alloca() where appropriate.
2783
2784         * retr.c (buf_readchar): Use it.
2785         (buf_peek): Use rstreams.
2786
2787         * retr.h (BUF_READCHAR): New macro.
2788
2789         * init.c (home_dir): Rewritten for clarity.
2790         (init_path): Ditto.
2791
2792         * mswindows.c (ws_backgnd): Made static.
2793         (read_registry): Ditto.
2794         (ws_cleanup): Ditto.
2795         (ws_handler): Ditto.
2796
2797 1998-01-23  Hrvoje Niksic  <hniksic@srce.hr>
2798
2799         * alloca.c: New file.
2800
2801         * Makefile.in (ALLOCA): Define.
2802
2803         * mswindows.c (ws_help): Constify.
2804         (ws_help): Use alloca.
2805
2806         * mswindows.c: Reformat.
2807
2808         * all: Added _(...) annotations for I18N snarfing and translation.
2809
2810         * host.c (ftp_getaddress): Nuke SYSINFO.
2811         (ftp_getaddress): Don't use getdomainname().
2812         (ftp_getaddress): Use uname(), where available.
2813
2814         * http.c (gethttp): Protect a stray fprintf().
2815
2816         * init.c (settime): New function.
2817         (setval): Treat WAIT specially, allowing suffixes like `m' for
2818         minutes, etc.
2819
2820 1998-01-21  Hrvoje Niksic  <hniksic@srce.hr>
2821
2822         * url.c (get_urls_html): Use alloca() for TEMP.
2823
2824 1998-01-21  Jordan Mendelson  <jordy@wserv.com>
2825
2826         * url.c (rotate_backups): New function.
2827
2828         * http.c (gethttp): Ditto.
2829
2830         * ftp.c (getftp): Rotate backups.
2831
2832 1997-12-18  Hrvoje Niksic  <hniksic@srce.hr>
2833
2834         * all: Renamed nmalloc(), nrealloc() and nstrdup() to xmalloc(),
2835         xrealloc() and xstrdup().  Use the new functions.
2836
2837         * url.c (decode_string): Made static.
2838         (has_proto): Ditto.
2839         (parse_dir): Ditto.
2840         (parse_uname): Ditto.
2841         (mkstruct): Ditto.
2842         (construct): Ditto.
2843         (construct_relative): Ditto.
2844
2845         * retr.c (show_progress): Made static.
2846
2847         * recur.c (robots_url): Made static.
2848         (retrieve_robots): Ditto.
2849         (parse_robots): Ditto.
2850         (robots_match): Ditto.
2851
2852         * main.h: Removed.
2853
2854         * main.c (printhelp): Made static.
2855         (hangup): Ditto.
2856
2857         * init.c (comind): Made static.
2858         (defaults): Ditto.
2859         (init_path): Ditto.
2860         (run_wgetrc): Ditto.
2861         (onoff): Ditto.
2862         (setonoff): Ditto.
2863         (setnum): Ditto.
2864         (myatoi): Ditto.
2865         (getperms): Ditto.
2866         (setbytes): Ditto.
2867
2868         * http.c (fetch_next_header): Made static.
2869         (hparsestatline): Ditto.
2870         (hskip_lws): Ditto.
2871         (hgetlen): Ditto.
2872         (hgetrange): Ditto.
2873         (hgettype): Ditto.
2874         (hgetlocation): Ditto.
2875         (hgetmodified): Ditto.
2876         (haccepts_none): Ditto.
2877         (gethttp): Ditto.
2878         (base64_encode_line): Ditto.
2879         (mktime_from_utc): Ditto.
2880         (http_atotm): Ditto.
2881
2882         * html.c (idmatch): Made static.
2883
2884         * host.c (search_host): Made static.
2885         (search_address): Ditto.
2886         (free_hlist): Ditto.
2887
2888         * ftp.c (getftp): Made static.
2889         (ftp_loop_internal): Ditto.
2890         (ftp_get_listing): Ditto.
2891         (ftp_retrieve_list): Ditto.
2892         (ftp_retrieve_dirs): Ditto.
2893         (ftp_retrieve_glob): Ditto.
2894         (freefileinfo): Ditto.
2895         (delelement): Ditto.
2896
2897         * ftp-ls.c (symperms): Made static.
2898         (ftp_parse_unix_ls): Ditto.
2899
2900         * connect.c (select_fd): Made static.
2901
2902         * utils.c (xmalloc): Renamed from nmalloc.
2903         (xrealloc): Renamed from nrealloc.
2904         (xstrdup): Renamed from nstrdup.
2905
2906         * getopt.c (exchange): Use alloca.
2907
2908         * mswindows.c (mycuserid): Use strncpy.
2909
2910         * New files mswindows.c, mswindows.h, sysdep.h.  winjunk.c,
2911         systhings.h, windecl.h and winjunk.h removed.
2912
2913         * mswindows.c (sleep): New function.
2914
2915         * utils.c: Include <windows.h> under Windows.
2916
2917 1997-06-12  Darko Budor  <dbudor@zesoi.fer.hr>
2918
2919         * url.h (URL_UNSAFE): Change default under Windows.
2920
2921         * retr.c (retrieve_from_file): Respect opt.delete_after.
2922
2923         * main.c (main): Call ws_help on Windows.
2924
2925         * winjunk.c (windows_main_junk): New function.
2926
2927         * main.c (main): Junk-process argv[0].
2928
2929         * http.c (mktime_from_utc): Return -1 if mktime failed.
2930
2931         * http.c (http_loop): Ditto.
2932
2933         * ftp.c (ftp_loop_internal): Change title on Windows when using a
2934         new URL.
2935
2936         * winjunk.c (getdomainname): Lots of functions.
2937
2938 1997-06-12  Hrvoje Niksic  <hniksic@srce.hr>
2939
2940         * cmpt.c (strptime_internal): Handle years more correctly for
2941         `%y'.
2942
2943 1997-06-09  Mike Thomas <mthomas@reality.ctron.com>
2944
2945         * http.c (gethttp): Allocate enough space for
2946         `Proxy-Authorization' header.
2947
2948 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2949
2950         * version.c: Wget/1.4.5 is released.
2951
2952 1997-05-10  Hrvoje Niksic  <hniksic@srce.hr>
2953
2954         * retr.c (get_contents): Check return value of fwrite more
2955         carefully.
2956
2957 1997-03-30  Andreas Schwab  <schwab@issan.informatik.uni-dortmund.de>
2958
2959         * cmpt.c (strptime_internal) [case 'Y']: Always subtract 1900 from
2960         year, regardless of century.
2961
2962 1997-03-30  Hrvoje Niksic  <hniksic@srce.hr>
2963
2964         * utils.c (isfile): Use `lstat' instead of `stat'.
2965
2966 1997-03-29  Hrvoje Niksic  <hniksic@srce.hr>
2967
2968         * utils.c (numdigit): Use explicit test.
2969
2970 1997-03-21  Hrvoje Niksic  <hniksic@srce.hr>
2971
2972         * http.c (http_loop): Always use `url_filename' to get u->local.
2973
2974 1997-03-20  Hrvoje Niksic  <hniksic@srce.hr>
2975
2976         * url.c: Recognize https.
2977
2978 1997-03-13  Hrvoje Niksic  <hniksic@srce.hr>
2979
2980         * recur.c (recursive_retrieve): Lowercase just the host name.
2981
2982 1997-03-09  Hrvoje Niksic  <hniksic@srce.hr>
2983
2984         * url.c (get_urls_file): Use the correct test.
2985         (get_urls_html): Ditto.
2986
2987 1997-03-07  Hrvoje Niksic  <hniksic@srce.hr>
2988
2989         * connect.c: Reverted addrlen to int.
2990
2991         * init.c (parse_line): Check for -1 instead of NONE.
2992
2993         * version.c: Changed version to 1.4.5.
2994
2995 1997-02-17  Hrvoje Niksic  <hniksic@srce.hr>
2996
2997         * init.c: New option netrc.
2998         (initialize): Don't parse .netrc.
2999
3000         * cmpt.c (recursive): Return rp.
3001         (strptime_internal): Match the long strings first, the abbreviated
3002         second.
3003
3004 1997-02-16  Hrvoje Niksic  <hniksic@srce.hr>
3005
3006         * http.c (check_end): New function.
3007         (http_atotm): Use it.
3008  
3009 1997-02-13  gilles Cedoc  <gilles@cedocar.fr>
3010
3011         * http.c (gethttp): Use them.
3012
3013         * init.c: New options proxy_user and proxy_passwd.
3014
3015 1997-02-14  Hrvoje Niksic  <hniksic@srce.hr>
3016
3017         * ftp.c (ftp_retrieve_list): Create links even if not relative.
3018
3019 1997-02-10  Hrvoje Niksic  <hniksic@srce.hr>
3020
3021         * recur.c (recursive_retrieve): Lowercase the host name, if the
3022         URL is not "optimized".
3023
3024         * host.c (realhost): Return l->hostname, even if it matches with
3025         host.
3026
3027 1997-02-10  Marin Purgar  <pmc@asgard.hr>
3028
3029         * connect.c: Make addrlen size_t instead of int.
3030         (conaddr): Ditto.
3031
3032 1997-02-09  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3033
3034         * systhings.h: Define S_ISLNK on NeXT too.
3035
3036 1997-02-09  Hrvoje Niksic  <hniksic@srce.hr>
3037
3038         * version.c: Released 1.4.3.
3039
3040         * url.c: Futher update to list of protostrings.
3041         (skip_proto): Skip `//' correctly for FTP and HTTP.
3042
3043         * url.c (get_urls_html): Handle bogus `http:' things a little
3044         different.
3045
3046         * main.c (main): Removed `follow-ftp' from `f'.
3047         (main): Dumped the `prefix-files' and `file-prefix' options and
3048         features; old and bogus.
3049         (main): Exit on failed setval() in `-e'.
3050
3051         * http.c (fetch_next_header): Use it to detect header continuation
3052         correctly.
3053
3054         * retr.c (buf_peek): New function.
3055
3056 1997-02-08  Hrvoje Niksic  <hniksic@srce.hr>
3057
3058         * wget.h: Include time.h and stuff.
3059
3060 1997-02-08  Roger Beeman  <beeman@cisco.com>
3061
3062         * ftp.c: Include <time.h>
3063
3064 1997-02-07  Hrvoje Niksic  <hniksic@srce.hr>
3065
3066         * url.c (findurl): Would read over buffer limits.
3067
3068 1997-02-06  Hrvoje Niksic  <hniksic@srce.hr>
3069
3070         * ftp-ls.c (ftp_parse_unix_ls): Allow spaces in file names.
3071
3072 1997-02-05  Hrvoje Niksic  <hniksic@srce.hr>
3073
3074         * http.c (http_atotm): Initialize tm.is_dst.
3075
3076 1997-02-02  Hrvoje Niksic  <hniksic@srce.hr>
3077
3078         * http.c (gethttp): Don't print the number of retrieved headers.
3079
3080         * main.c (main): New option `--no-clobber', alias for `-nc'.
3081
3082         * url.c: Recognize `https://'.
3083
3084 1997-02-01  Hrvoje Niksic  <hniksic@srce.hr>
3085
3086         * host.c (herrmsg): Don't use h_errno.
3087
3088 1997-01-30  Hrvoje Niksic  <hniksic@srce.hr>
3089
3090         * host.c (accept_domain): Use it.
3091
3092         * main.c (main): New option `--exclude-domains'.
3093
3094         * retr.c (retrieve_url): Use it.
3095         (retrieve_url): Bail out when an URL is redirecting to itself.
3096
3097         * url.c (url_equal): New function.
3098
3099 1997-01-29  Hrvoje Niksic  <hniksic@srce.hr>
3100
3101         * connect.c: Include arpa/inet.h instead of arpa/nameser.h.
3102
3103         * http.c (mk_utc_time): New function.
3104         (http_atotm): Use it; handle time zones correctly.
3105
3106 1997-01-28  Hrvoje Niksic  <hniksic@srce.hr>
3107
3108         * http.c: Ditto.
3109
3110         * ftp-basic.c: Use it instead of WRITE.
3111
3112         * connect.c (iwrite): New function.
3113
3114 1997-01-27  Hrvoje Niksic  <hniksic@srce.hr>
3115
3116         * cmpt.c (mktime): New function.
3117
3118         * netrc.c: Include <sys/types.h>.
3119
3120         * main.c (main): Wouldn't recognize --spider.
3121
3122         * retr.c (rate): Use `B', `KB' and `MB'.
3123         (reset_timer,elapsed_time): Moved from utils.c.
3124
3125         * ftp.c (ftp_retrieve_list): Ditto.
3126
3127         * http.c (http_loop): Don't touch the file if opt.dfp.
3128
3129 1997-01-24  Hrvoje Niksic  <hniksic@srce.hr>
3130
3131         * cmpt.c: New file.
3132
3133         * ftp.c (ftp_retrieve_glob): New argument semantics.
3134         (ftp_retrieve_dirs): Use it.
3135         (ftp_loop): Ditto.
3136
3137         * html.c (htmlfindurl): Recognize `'' as the quote char.
3138
3139 1997-01-23  Hrvoje Niksic  <hniksic@srce.hr>
3140
3141         * ftp.c (ftp_loop_internal): Use it.
3142
3143         * utils.c (remove_link): New function.
3144
3145 1997-01-22  Hrvoje Niksic  <hniksic@srce.hr>
3146
3147         * retr.c (retrieve_url): Require STRICT redirection URL.
3148
3149         * url.c (parseurl): New argument STRICT.
3150
3151         * http.c (hparsestatline): Be a little-bit less strict about
3152         status line format.
3153
3154 1997-01-21  Hrvoje Niksic  <hniksic@srce.hr>
3155
3156         * http.c (gethttp): Use it.
3157
3158         * main.c (main): Don't use '<digit>' as options.
3159
3160         * init.c: New option ignore_length.
3161
3162         * http.c (gethttp): Ditto.
3163         (http_loop): Check for redirection without Location:.
3164         (gethttp): Don't print Length unless RETROKF.
3165
3166         * ftp.c (getftp): Use it.
3167
3168         * url.c (mkalldirs): New function.
3169
3170         * utils.c (mymkdir): Don't check for existing non-directory.
3171
3172         * url.c (mkstruct): Don't create the directory.
3173
3174 1997-01-20  Hrvoje Niksic  <hniksic@srce.hr>
3175
3176         * init.c (setval): Removed NO_RECURSION checks.
3177
3178 1997-01-19  Hrvoje Niksic  <hniksic@srce.hr>
3179
3180         * version.c: "Released" 1.4.3-pre2.
3181
3182         * recur.c (recursive_retrieve): Bypass host checking only if URL
3183         is ftp AND parent URL is not ftp.
3184
3185         * ftp-basic.c (ftp_request): Print out Turtle Power.
3186
3187         * ftp.c (ftp_loop): Call ftp_retrieve_glob with 0 if there's no
3188         wildcard.
3189         (ftp_retrieve_glob): Call ftp_loop_internal even on empty list, if
3190         not glob.
3191
3192         * http.c (gethttp): Be a little bit smarter about status codes.
3193
3194         * recur.c (recursive_retrieve): Always reset opt.recursive when
3195         dealing with FTP.
3196
3197 1997-01-18  Hrvoje Niksic  <hniksic@srce.hr>
3198
3199         * retr.c (retrieve_url): New variable location_changed; use it for
3200         tests instead of mynewloc.
3201         (retrieve_url): Allow heuristic adding of html.
3202
3203         * url.c (url_filename): Don't use the `%' in Windows file names.
3204
3205         * http.c (http_loop): Always time-stamp the local file.
3206
3207         * http.c (http_loop): Ditto.
3208
3209         * ftp.c (ftp_retrieve_list): Use it.
3210
3211         * utils.c (my_touch): New function.
3212
3213         * ftp.c (ftp_retrieve_list): Use #ifdef HAVE_STRUCT_UTIMBUF
3214         instead of #ifndef NeXT.
3215
3216         * utils.c (strptime): New version, by Ulrich Drepper.
3217
3218 1997-01-17  Hrvoje Niksic  <hniksic@srce.hr>
3219
3220         * http.c (haccepts_none): Renamed from `haccepts_bytes'.
3221         (gethttp): If haccepts_none(), disable ACCEPTRANGES.
3222         (http_loop): Would remove ACCEPTRANGES.
3223
3224         * ftp.c (getftp): Call ftp_list with NULL.
3225
3226 1997-01-15  Hrvoje Niksic  <hniksic@srce.hr>
3227
3228         * html.c (ftp_index): Don't print minutes and seconds if we don't
3229         know them; beautify the output.
3230
3231         * ftp.c (getftp): Don't close the socket on FTPNSFOD.
3232
3233 1997-01-14  Hrvoje Niksic  <hniksic@srce.hr>
3234
3235         * utils.c (strptime): New function.
3236         (strptime): Don't use get_alt_number.
3237         (strptime): Don't use locale.
3238         (match_string): Made it a function.
3239
3240 1997-01-12  Hrvoje Niksic  <hniksic@srce.hr>
3241
3242         * http.c (http_atotm): New function.
3243         (http_loop): Use it.
3244
3245         * atotm.c: Removed from the distribution.
3246
3247         * http.c (base64_encode_line): Rewrite.
3248
3249 1997-01-09  Hrvoje Niksic  <hniksic@srce.hr>
3250
3251         * ftp.c (getftp): Use ftp_expected_bytes; print size.
3252
3253         * ftp-basic.c (ftp_response): Use ftp_last_respline.
3254         (ftp_expected_bytes): New function.
3255
3256         * ftp.c (getftp): Print the unauthoritative file length.
3257
3258         * ftp-ls.c: Renamed from ftp-unix.c.
3259         (ftp_parse_ls): Moved from ftp.c.
3260         (ftp_parse_unix_ls): Recognize seconds in time spec.
3261         (ftp_parse_unix_ls): Recognize year-less dates of the previous
3262         year.
3263
3264 1997-01-08  Hrvoje Niksic  <hniksic@srce.hr>
3265
3266         * ftp-basic.c: Don't declare errno if #defined.
3267
3268         * host.c (ftp_getaddress): Check for sysinfo legally.
3269
3270 1997-01-08  Darko Budor  <dbudor@diana.zems.fer.hr>
3271
3272         * connect.c (iread): Use READ.
3273
3274 1996-12-23  Hrvoje Niksic  <hniksic@srce.hr>
3275
3276         * url.c: Recognize finger, rlogin, tn3270, mid and cid as valid
3277         schemes.
3278
3279 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
3280
3281         * host.c (ftp_getaddress): Allow `.' in hostname.
3282
3283 1996-12-26  Darko Budor <dbudor@zems.fer.hr>
3284
3285         * wget.h: READ and WRITE macros for use instead of read and write
3286         on sockets, grep READ *.c, grep WRITE *.c
3287
3288         * wsstartup.c: new file - startup for winsock
3289
3290         * wsstartup.h: new file
3291
3292         * win32decl.h: new file - fixup for <errno.h> and winsock trouble
3293
3294         * configure.bat: Configure utility for MSVC
3295
3296         * src/Makefile.ms,config.h.ms: new files for use with MSVC 4.x
3297
3298 1996-12-22  Hrvoje Niksic  <hniksic@srce.hr>
3299
3300         * version.c: Released 1.4.3-pre.
3301
3302         * utils.c (prnum): Accept long.
3303         (legible): Use prnum().
3304
3305         * connect.c (make_connection): Accept port as short.
3306         (bindport): Ditto.
3307
3308         * http.c (gethttp): Use search_netrc.
3309
3310 1996-12-21  Hrvoje Niksic  <hniksic@srce.hr>
3311
3312         * ftp.c (getftp): Use search_netrc.
3313
3314         * netrc.c (free_netrc): New function.
3315
3316         * init.c (home_dir): New function.
3317
3318         * url.c (convert_links): Allow REL2ABS changes.
3319
3320 1996-12-21  Gordon Matzigkeit  <gord@gnu.ai.mit.edu>
3321
3322         * netrc.c: New file.
3323         (parse_netrc, maybe_add_to_list): New functions.
3324
3325 1996-12-17  Hrvoje Niksic  <hniksic@srce.hr>
3326
3327         * retr.c (retrieve_url): Reset opt.recursion before calling
3328         ftp_loop if it is reached through newloc.
3329
3330         * init.c (run_wgetrc): Print the wgetrc path too, when reporting
3331         error; don't use "Syntax error", since we don't know if it is
3332         really a syntax error.
3333
3334 1996-12-16  Hrvoje Niksic  <hniksic@srce.hr>
3335
3336         * utils.c (acceptable): Extract the filename part of the path.
3337
3338         * recur.c (recursive_retrieve): Call acceptable() with the right
3339         argument; would bug out on wildcards.
3340
3341         * init.c (parse_line): Likewise.
3342
3343         * html.c (htmlfindurl): Cast to char * when calling stuff.
3344
3345 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
3346
3347         * ftp.c (getftp): Use ftp_pasv.
3348
3349         * ftp-basic.c (ftp_request): Accept NULL value.
3350         (ftp_pasv): New function.
3351
3352         * options.h (struct options): Add passive FTP option.
3353
3354 1996-12-15  Hrvoje Niksic  <hniksic@srce.hr>
3355
3356         * url.c (parseurl): Debug output.
3357
3358         * utils.c (path_simplify): New one, adapted from bash's
3359         canonicalize_pathname().
3360
3361 1996-12-14  Hrvoje Niksic  <hniksic@srce.hr>
3362
3363         * ftp.c (getftp): Don't discard the buffer.
3364
3365         * retr.c (get_contents): New parameter nobuf.
3366
3367 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
3368
3369         * html.c (htmlfindurl): Recognize <meta contents="d; URL=...".
3370
3371         * init.c (setval): Strip the trailing slashes on CVECDIR.
3372
3373 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
3374
3375         * init.c: Make excludes and includes under CVECDIR instead of
3376         CVEC.
3377
3378 1996-12-13  Shawn McHorse  <riffraff@txdirect.net>
3379
3380         * url.c (get_urls_html): Skip "http:".
3381
3382 1996-12-13  Hrvoje Niksic  <hniksic@srce.hr>
3383
3384         * utils.c (strcasecmp): From glibc.
3385         (strncasecmp): Also.
3386         (strstr): Also.
3387
3388         * url.c: Added javascript: to the list of URLs prefixes.
3389
3390 1996-12-12  Shawn McHorse  <riffraff@txdirect.net>
3391
3392         * recur.c (retrieve_robots): Print the warning message only if
3393         verbose.
3394
3395 1996-12-12  Gregor Hoffleit  <flight@mathi.uni-heidelberg.DE>
3396
3397         * ftp.c (ftp_retrieve_list): Use NeXT old utime interface.
3398
3399 1996-12-12  Hrvoje Niksic  <hniksic@srce.hr>
3400
3401         * systhings.h: New file.
3402
3403         * ../configure.in: Check for utime.h
3404
3405         * ftp.c: Check whether we have unistd.h.
3406
3407 1996-11-27  Hrvoje Niksic  <hniksic@srce.hr>
3408
3409         * recur.c (recursive_retrieve): Send the canonical URL as referer.
3410         (recursive_retrieve): Call get_urls_html with the canonical URL.
3411
3412 1996-12-13  Kaveh R. Ghazi  <ghazi@caip.rutgers.edu>
3413
3414         * (configure.in, config.h.in, src/Makefile.in, src/*.[ch]): Add
3415         ansi2knr support for compilers which don't support ANSI style
3416         function prototypes and signatures.
3417
3418         * (aclocal.m4, src/ansi2knr.c, src/ansi2knr.1): New files.
3419
3420 1996-11-26  Hrvoje Niksic  <hniksic@srce.hr>
3421
3422         * url.c: Use it; Recognize paths ending with "." and ".." as
3423         directories.
3424         (url_filename): Append .n whenever file exists and could be a
3425         directory.
3426
3427         * url.h (ISDDOT): New macro.
3428
3429         * init.c (parse_line): Use unsigned char.
3430
3431         * url.c (get_urls_html): Cast to unsigned char * when calling
3432         htmlfindurl.
3433
3434         * html.c (htmlfindurl): Use unsigned char.
3435
3436         * version.c: Changed version to 1.4.3.
3437
3438 1996-11-25  Hrvoje Niksic  <hniksic@srce.hr>
3439
3440         * version.c: Released 1.4.2.
3441
3442         * ftp.c (getftp): Simplified assertion.
3443         (ftp_loop_internal): Remove symlink before downloading.
3444         (ftp_retrieve_list): Unlink the symlink name before attempting to
3445         create a symlink!
3446
3447         * options.h (struct options): Renamed print_server_response to
3448         server_response.
3449
3450         * ftp.c (rel_constr): Removed.
3451         (ftp_retrieve_list): Don't use it.
3452         (ftp_retrieve_list): Use opt.retr_symlinks.
3453
3454 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3455
3456         * main.c (main): New option retr_symlinks.
3457
3458         * url.c (convert_links): Print verbose message.
3459
3460 1996-11-24  Hrvoje Niksic  <hniksic@srce.hr>
3461
3462         * http.c (http_loop): Reset newloc in the beginning of function;
3463         would cause FMR in retrieve_url.
3464
3465 1996-11-23  Hrvoje Niksic  <hniksic@srce.hr>
3466
3467         * recur.c (convert_all_links): Find the URL of each HTML document,
3468         and feed it to get_urls_html; would bug out.
3469         (convert_all_links): Check for l2 instead of dl; removed dl.
3470
3471         * url.c (convert_links): Don't refer to freed newname.
3472
3473         * recur.c (recursive_retrieve): Add this_url to urls_downloaded.
3474
3475         * main.c (main): Print the OS_TYPE in the debug output, too.
3476
3477         * recur.c (recursive_retrieve): Check for opt.delete_after.
3478
3479         * main.c (main): New option delete-after.
3480
3481         * init.c (setval): Cleaned up.
3482
3483 1996-11-21  Hrvoje Niksic  <hniksic@srce.hr>
3484
3485         * Makefile.in (wget): Make `wget' the default target.
3486
3487         * ftp.c (ftp_loop_internal): Move noclobber checking out of the
3488         loop.
3489         (ftp_retrieve_list): Warn about non-matching sizes.
3490
3491         * http.c (http_loop): Made -nc non-dependent on opt.recursive.
3492
3493         * init.c (setnum): Renamed from setnuminf; New argument flags.
3494         (setval): Use it.
3495
3496         * main.c (main): Sorted the options.
3497         (main): New option --wait.
3498
3499 1996-11-21  Shawn McHorse  <riffraff@txdirect.net>
3500
3501         * html.c (htmlfindurl): Reset s->in_quote after getting out of
3502         quotes.
3503
3504 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3505
3506         * version.c: Changed version to 1.4.2.
3507
3508 1996-11-20  Hrvoje Niksic  <hniksic@srce.hr>
3509
3510         * version.c: Released 1.4.1.
3511
3512         * html.c (html_quote_string): New function.
3513         (ftp_index): Use it.
3514         (htmlfindurl): A more gentle ending debug message.
3515
3516         * ftp.c (ftp_loop): Check for opt.htmlify.
3517
3518         * init.c: New command htmlify.
3519
3520         * ftp.c (getftp): Nicer error messages, with `'-encapsulated
3521         strings.
3522         (ftp_loop): Print size of index.html.
3523
3524         * init.c (setval): Implement "styles".
3525
3526         * main.c (main): New option dotstyle.
3527
3528 1996-11-19  Hrvoje Niksic  <hniksic@srce.hr>
3529
3530         * ftp.c (getftp): Close the master socket in case of errors, after
3531         bindport().
3532
3533         * connect.c (bindport): Initialize msock to -1.
3534
3535         * ftp.c (getftp): Initialize dtsock to -1.
3536
3537         * connect.c (closeport): Don't close sock if sock == -1.
3538
3539 1996-11-18  Hrvoje Niksic  <hniksic@srce.hr>
3540
3541         * init.c (setnuminf): Nuked default value -- just leave unchanged.
3542         (setval): Don't send default values.
3543         (defaults): Use DEFAULT_TIMEOUT -- aaargh.
3544
3545         * options.h (struct options): Use long for dot_bytes.
3546
3547         * init.c (setquota): Renamed to setbytes.
3548         (setval): Use setbytes on DOTBYTES.
3549
3550 1996-11-17  Hrvoje Niksic  <hniksic@srce.hr>
3551
3552         * ftp.c (getftp): Initialize con->dltime.
3553
3554         * recur.c (recursive_retrieve): Use same_host instead of
3555         try_robots; simply load robots_txt whenever the host is changed.
3556         (recursive_retrieve): Free forbidden before calling parse_robots.
3557
3558 1996-11-16  Hrvoje Niksic  <hniksic@srce.hr>
3559
3560         * retr.c (show_progress): Use them.
3561
3562         * options.h (struct options): New options dot_bytes, dots_on_line
3563         and dot_spacing.
3564
3565 1996-11-16  Mark Boyns  <boyns@sdsu.edu>
3566
3567         * recur.c (recursive_retrieve): Retrieve directories regardless of
3568         acc/rej rules; check for empty u->file.
3569
3570 1996-11-14  Hrvoje Niksic  <hniksic@srce.hr>
3571
3572         * init.c (setval): Use it.
3573
3574         * utils.c (merge_vecs): New function.
3575
3576         * init.c (setval): Reset the list-type functions when encountering
3577         "".
3578
3579 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3580
3581         * recur.c (recursive_retrieve): Use base_url instead of this_url
3582         for no_parent.
3583
3584 1996-11-14  Shawn McHorse  <riffraff@txdirect.net>
3585
3586         * html.c (htmlfindurl): Reset s->in_quote after exiting the quote.
3587
3588 1996-11-13  Hrvoje Niksic  <hniksic@srce.hr>
3589
3590         * utils.c (sepstring): Rewrote; don't use strtok.
3591
3592         * recur.c (recursive_retrieve): Enter assorted this_url to slist
3593         when running the first time.
3594         (retrieve_robots): Warn to ignore errors when robots are loaded.
3595
3596         * utils.c (load_file): Moved from url.c.
3597
3598         * http.c: Made static variables const too in h* functions.
3599
3600         * main.c (main): Renamed --continue-ftp to --continue.
3601
3602         * recur.c (recursive_retrieve): Use it.
3603
3604         * utils.c (frontcmp): New function.
3605
3606         * url.c (accdir): New function.
3607
3608         * html.c (htmlfindurl): Recognize <area href=...>.
3609
3610         * ftp.c (ftp_retrieve_dirs): Implemented opt.includes.
3611
3612         * init.c (setval): Free the existing opt.excludes and
3613         opt.includes, if available.
3614
3615         * main.c (main): New option -I.
3616
3617 1996-11-12  Hrvoje Niksic  <hniksic@srce.hr>
3618
3619         * ftp.c (ftp_retrieve_glob): Do not weed out directories.
3620
3621         * version.c: Changed version to 1.4.1.
3622
3623 1996-11-11  Hrvoje Niksic  <hniksic@srce.hr>
3624
3625         * version.c: Released 1.4.0.
3626
3627 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3628
3629         * main.c (main): Free com and val after parse_line.
3630         (printhelp): Reorder the listing.
3631
3632         * http.c: More robust header parsing.
3633
3634         * http.c: Allow any number of spaces, or no spaces, precede ':'.
3635         (hskip_lws): New function.
3636         (haccepts_bytes): New function.
3637         (gethttp): Use it.
3638
3639         * init.c (setval): Check header sanity.
3640         (setval): Allow resetting of headers.
3641
3642 1996-11-10  Hrvoje Niksic  <hniksic@srce.hr>
3643
3644         * http.c (http_loop): Don't use has_wildcards.
3645
3646         * http.c (gethttp): Free all_headers -- would leak.
3647
3648         * recur.c (recursive_retrieve): Initialize depth to 1 instead of
3649         0 -- this fixes a long-standing bug in -rl.
3650
3651 1996-11-09  Hrvoje Niksic  <hniksic@srce.hr>
3652
3653         * ftp.c: Use -1 as "impossible" value for con->fd.
3654
3655         * url.h (URL_SEPARATOR): Don't treat `*' and `+' as separators.
3656
3657         * init.c (parse_line): Use isalpha.
3658
3659         * ftp-unix.c: Use HAVE_UNISTD_H.
3660
3661         * mtch.c (has_wildcards): Don't match \.
3662
3663         * http.c (http_loop): Warn on HTTP wildcard usage.
3664
3665 1996-11-08  Hrvoje Niksic  <hniksic@srce.hr>
3666
3667         * url.c (url_filename): Do not create numbered suffixes if
3668         opt.noclobber -- would bug out on -nc.
3669
3670 1996-11-07  Hrvoje Niksic  <hniksic@srce.hr>
3671
3672         * recur.c (parse_robots): Don't chuck out the commands without
3673         arguments (`Disallow:<empty>' didn't work).
3674         (parse_robots): Compare versions lowercase.
3675         (parse_robots): Match on base_version, not version_string!
3676         (parse_robots): Handle comments properly.
3677         (parse_robots): Match versions in a sane way.
3678
3679         * init.c: Print nicer error messages.
3680
3681         * version.c: Changed version to 1.4.0.
3682
3683 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3684
3685         * version.c: Released 1.4.0-test2.
3686
3687         * init.c (run_wgetrc): Close fp.
3688
3689         * ftp.c (ftp_retrieve_dirs): Allocate the correct length for
3690         u->dir.
3691
3692 1996-11-06  Hrvoje Niksic  <hniksic@srce.hr>
3693
3694         * init.c (setquota): Allow inf as quota specification.
3695
3696 1996-11-05  Hrvoje Niksic  <hniksic@srce.hr>
3697
3698         * ftp.c (ftp_retrieve_dirs): Return QUOTEXC if quota exceeded.
3699         (ftp_retrieve_glob): Return QUOTEXC on quota exceeded.
3700
3701         * main.c (main): Check for quota by comparison with downloaded
3702         stuff, not from status.
3703
3704         * connect.c (select_fd): Should compile on HPUX without warnings now.
3705
3706         * ftp.c (ftp_get_listing): Check whether ftp_loop_internal
3707         returned RETROK.
3708
3709 1996-11-04  Hrvoje Niksic  <hniksic@srce.hr>
3710
3711         * ftp.c (ftp_retrieve_glob): Print the pattern nicely.
3712         (getftp): Return FTPRETRINT on control connection error.
3713
3714         * html.c (htmlfindurl): Recognize <embed src=...> and
3715         <bgsound src=...>.
3716         (ftp_index): Handle username and password correctly.
3717
3718         * main.c (main): Made `-np' a synonim for --no-parent.
3719
3720 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3721
3722         * ftp.c (ftp_loop): Check for opt.ftp_glob too before calling
3723         ftp_retrieve_glob.
3724
3725         * version.c: Changed version to 1.4.0-test2.
3726
3727 1996-11-02  Hrvoje Niksic  <hniksic@srce.hr>
3728
3729         * version.c: Released 1.4.0-test1.
3730
3731         * url.c (str_url): Don't use sprintf when creating %2F-prefixed
3732         directory.
3733         (convert_links): Removed definition of make_backup.
3734
3735         * http.h: Removed definition of MAX_ERROR_LENGTH.
3736
3737         * host.c (ftp_getaddress): Check for "(none)" domains.
3738
3739         * ftp.c (ftp_retrieve_dirs): Docfix.
3740
3741         * http.c (gethttp): Use ou->referer instead of u->referer.
3742
3743         * retr.c (retrieve_url): Reset u to avoid freeing pointers twice;
3744         this was known to cause coredumps on Linux.
3745
3746         * html.c (ftp_index): Cast the argument to local_time to time_t *.
3747
3748 1996-11-01  Hrvoje Niksic  <hniksic@srce.hr>
3749
3750         * connect.c (select_fd): Use exceptfds -- once and for all.
3751
3752         * retr.c (retrieve_from_file): Free filename after
3753         recursive_retrieve.
3754         (retrieve_from_file): Send RFIRST_TIME to recursive_retrieve on
3755         first-time retrieval.
3756         (retrieve_from_file): Return uerr_t; new argument, count.
3757         (retrieve_from_file): Break on QUOTEXC.
3758
3759         * init.c (setquota): Fixed a bug that caused rejection of
3760         non-postfixed values..
3761
3762 1996-10-30  Hrvoje Niksic  <hniksic@srce.hr>
3763
3764         * version.c: Changed name to wget.
3765
3766         * connect.c (iread): Smarter use of select.
3767         (select_fd): Set errno on timeout.  If not timeout, return 1
3768         instead of 0.
3769
3770 1996-10-29  Hrvoje Niksic  <hniksic@srce.hr>
3771
3772         * ftp.c (ftp_loop_internal): Don't use con->cmd before
3773         establishing it.
3774
3775 1996-10-26  Hrvoje Niksic  <hniksic@srce.hr>
3776
3777         * http.c (gethttp): Send correct referer when using proxy.
3778         (gethttp): Use struct urlinfo ou to access the relevant data; send
3779         correct authorization in all cases.
3780
3781         * host.c (same_host): Use skip_uname to skip username and
3782         password.
3783
3784         * url.c (skip_uname): New function.
3785         (parseurl): Use it.
3786
3787         * host.c (same_host): Do not assume HTTP -- same_host should now
3788         be totally foolproof.
3789
3790         * url.c (skip_proto): New function.
3791         (parse_uname): Use it.
3792
3793         * http.c (gethttp): Create local user and passwd from what is
3794         given.
3795
3796         * url.c (parseurl): Check for HTTP username and password too.
3797
3798 1996-10-25  Hrvoje Niksic  <hniksic@srce.hr>
3799
3800         * config.h.in: Removed #define gethostbyname R...
3801
3802 1996-10-22  Hrvoje Niksic  <hniksic@srce.hr>
3803
3804         * version.c: Changed version to 1.4.0-test1.
3805
3806 1996-10-21  Hrvoje Niksic  <hniksic@srce.hr>
3807
3808         * version.c: "Released" 1.4b29.
3809
3810         * recur.c (recursive_retrieve): Check for no_parent.
3811
3812         * init.c (setval): Option update.
3813
3814         * main.c (main): New option no-parent.
3815
3816         * options.h (struct options): New variable no_parent.
3817
3818         * recur.c (recursive_retrieve): Only files are checked for
3819         opt.accepts and opt.rejects.
3820         (recursive_retrieve): Check directories for opt.excludes.
3821         (recursive_retrieve): Make the dir absolute when checking
3822         opt.excludes.
3823
3824         * html.c (htmlfindurl): Recognize <applet code=...> and <script
3825         src=...>
3826
3827 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3828
3829         * ftp.c (getftp): Do not line-break assert entries at all.
3830         (ftp_retrieve_dirs): docfix.
3831
3832         * connect.c (select_fd): Use fd + 1 as nfds.
3833
3834         * version.c: Changed version to 1.4b29.
3835
3836 1996-10-18  Hrvoje Niksic  <hniksic@srce.hr>
3837
3838         * version.c: "Released" 1.4b28.
3839
3840         * ftp.c (ftp_loop_internal): Check whether f->size == len and
3841         don't continue the loop if it is.
3842         (ftp_get_listing): Remove list_filename on unsuccesful loop.
3843
3844 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3845
3846         * ftp.c (ftp_loop_internal): Use strcpy to initialize tmp.
3847         (getftp): Do not use multiline assert.
3848
3849         * http.c (hparsestatline): Use mjr and mnr instead of major and
3850         minor, which don't compile on Ultrix.
3851         (http_loop): Use strcpy() to initialize tmp.
3852
3853         * all: Geturl -> Fetch
3854
3855 1996-10-17  Hrvoje Niksic  <hniksic@srce.hr>
3856
3857         * recur.c (parse_robots): Fixed an off-by-one bug when looking for
3858         ':'.
3859
3860         * html.c (htmlfindurl): Fixed several possible off-by-one bugs by
3861         moving `bufsize &&' to the beginning of each check in for-loops.
3862
3863         * recur.c (parse_robots): Close fp on exit.
3864
3865         * url.c (mymkdir): Check for each directory before creating.
3866
3867 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3868
3869         * version.c: Changed version to 1.4b28.
3870
3871 1996-10-16  Hrvoje Niksic  <hniksic@srce.hr>
3872
3873         * version.c: "Released" 1.4b27.
3874
3875         * init.c (parse_line): Use isspace.
3876         (parse_line): Free *com on all errors.
3877
3878         * ftp.c (ftp_loop): Change FTPOK to RETROK before exiting.
3879         (delelement): Use next instead of f->next and prev instead of
3880         f->prev.
3881         (delelement): Free the members of the deleted element.
3882
3883         * http.c (http_loop): Do not return RETROK on code != 20x.
3884
3885         * init.c (cleanup): Free opt.user_header.
3886         (cleanup): Free opt.domains.
3887
3888         * url.c (freelists): Moved to cleanup().
3889
3890         * http.c (hparsestatline): Docfix.
3891
3892         * main.c (main): Return with error status on unsuccesful
3893         retrieval.
3894
3895         * init.c (setval): Do not remove listing when mirroring.
3896
3897         * url.c (url_filename): Use opt.fileprefix.
3898
3899         * ftp.c (ftp_get_listing): Use url_filename to get filename for
3900         .listing.
3901
3902         * main.c (main): New option: -rn.
3903
3904 1996-10-15  Hrvoje Niksic  <hniksic@srce.hr>
3905
3906         * Makefile.in (RM): Added RM = rm -f.
3907
3908         * host.c (clean_hosts): New function.
3909         (free_hlist): Just free the list, no reset.
3910
3911         * version.c: Changed version to 1.4b27.
3912
3913 1996-10-13  Hrvoje Niksic  <hniksic@srce.hr>
3914
3915         * version.c: "Released" 1.4b26.
3916
3917         * retr.c (retrieve_from_file): If call get_urls_html with
3918         opt.spider to make it silent in spider mode.
3919
3920         * url.c (str_url): Use CLEANDUP instead of URL_CLEANSE.
3921
3922         * url.h (CLEANDUP): New macro.
3923
3924         * http.c (gethttp): Fixed a bug that freed location only when it
3925         was NULL.
3926
3927         * retr.c (retrieve_url): Free url if it will not be stored,
3928         i.e. newloc is NULL.
3929
3930         * html.c (htmlfindurl): Handle exiting from quotes correctly; the
3931         old version would bug out on <a href="x#a"href="y">.
3932
3933         * html.h (state_t): New member in_quote.
3934
3935         * html.c (htmlfindurl): Free s->attr at the beginning of
3936         attr-loop.
3937
3938         * recur.c (recursive_retrieve): Recognize RCLEANUP.
3939         (tried_robots): Make hosts a global variable.
3940         (recursive_retrieve): Free constr after URL host optimization.
3941         (tried_robots): Free urlinfo before exiting.
3942
3943         * utils.c (free_slist): New function.
3944
3945         * recur.c (recursive_retrieve): Use flags to add cleanup
3946         possibility.
3947
3948         * main.c (main): Free filename after recursive_retrieve.
3949
3950         * http.c (gethttp): Store successful responses too.
3951
3952 1996-10-12  Hrvoje Niksic  <hniksic@srce.hr>
3953
3954         * all: Constified the whole source.  This required some minor
3955         changes in many functions in url.c, possibly introducing bugs -- I
3956         hope not.
3957
3958         * ftp-basic.c: Removed last_respline.
3959
3960         * http.c (gethttp): Free type.
3961
3962         * host.c (same_host): Free real1 and real2.
3963
3964         * main.c (main): New option --spider.
3965
3966         * retr.c (get_contents): Don't reset errno.
3967
3968         * main.c (main): Sorted the options.
3969
3970         * connect.c (iread): Set errno to ETIMEDOUT only if it was left
3971         uninitialized by select().
3972
3973         * http.c (http_loop): Print the time when the connection is
3974         closed.
3975         (gethttp): Debug-print the HTTP request.
3976
3977 1996-10-11  Hrvoje Niksic  <hniksic@srce.hr>
3978
3979         * connect.c (iread): Do not try reading after timeout.
3980
3981         * main.c (main): Would bug out on -T.
3982
3983         * connect.c (select_fd): Do not use exceptfds.
3984         (iread): Set ETIMEDOUT on select_fd <= 0.
3985
3986         * version.c: Changed version to 1.4b26.
3987
3988 1996-10-10  Hrvoje Niksic  <hniksic@srce.hr>
3989
3990         * version.c: "Released" 1.4b25.
3991
3992         * ftp-unix.c (ftp_parse_unix_ls): Ignore lines without file name
3993         or link name.
3994
3995         * http.c (gethttp): Add errcode to struct hstat.
3996         (http_loop): Use it.
3997
3998         * url.c (no_proxy_match): Simplify using char** for no_proxy.
3999
4000         * options.h (struct options): Make opt.no_proxy a vector.
4001
4002         * utils.c (sepstring): Use !*s instead of !strlen(s).
4003
4004         * init.c (setval): Set opt.maxreclevel to 0 on --mirror.
4005         (getperms): Use ISODIGIT instead of isdigit.
4006
4007         * ftp.c (getftp): Print time.
4008
4009         * main.c (main): Use legible output of downloaded quantity.
4010
4011         * ftp.c (getftp): Use elapsed_time().
4012         (ftp_loop_internal): Use rate().
4013
4014         * http.c (http_loop): Add download ratio output; Use rate().
4015
4016         * utils.c (rate): New function.
4017
4018 1996-10-09  Hrvoje Niksic  <hniksic@srce.hr>
4019
4020         * http.c (http_loop): Use timer.
4021
4022         * ftp.c: Split to ftp-basic.c and ftp.c
4023
4024         * utils.c (reset_timer): New function.
4025         (elapsed_time): New function.
4026
4027         * retr.c (show_progress): Make bytes_in_line and offs long; should
4028         work on 16-bit machines.
4029
4030 1996-10-08  Hrvoje Niksic  <hniksic@srce.hr>
4031
4032         * url.c (in_acclist): New argument backward.
4033
4034         * ftp.c (ftp_retrieve_glob): Use acceptable() to determine whether
4035         a file should be retrieved according to suffix.
4036         (ftp_get_listing): Check the return value of unlink; Do not call
4037         ftp_retrieve_dirs if depth reached maxreclevel.
4038         (ftp_retrieve_dirs): Check whether the directory is in
4039         exclude-list.
4040
4041         * main.c (main): Print the version number at the beginning of
4042         DEBUG output.
4043         (main): Use strrchr when creating exec_name.
4044
4045         * ftp.c (ftp_retrieve_glob): Do not close control connection.
4046
4047         * version.c: Changed version to 1.4b25.
4048
4049 1996-10-07  Hrvoje Niksic  <hniksic@srce.hr>
4050
4051         * version.c: "Released" 1.4b24.
4052
4053         * Makefile.in: Rewrite.
4054
4055         * ftp.c (ftp_loop_internal): Likewise.
4056
4057         * retr.c (time_str): Check for failed time().
4058
4059         * html.c (htmlfindurl): Recognize <fig src> and <overlay src> from
4060         HTML3.0.
4061
4062         * retr.c (time_str): Return time_t *.
4063
4064         * connect.c (bindport): Close msock on unsuccesful bind.
4065         (bindport): The same for getsockname and listen.
4066
4067         * retr.c (retrieve_url): Allow any number of retries on
4068         proxy.
4069
4070         * http.c (gethttp): Do not treat errno == 0 as timeout.
4071         (http_loop): Likewise.
4072         (http_loop): Cosmetic changes.
4073
4074         * connect.c (iread): Set errno to ETIMEDOUT in case of timeout.
4075
4076         * retr.c (get_contents): Reset errno.
4077
4078         * ftp.c (getftp): Minor fixes.
4079
4080 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
4081
4082         * http.c: Do not use backups.
4083
4084         * geturl.1 (WARNING): Warn that man-page could be obsolete.
4085
4086         * getopt.c (getopt_long): Moved to getopt.c
4087
4088         * geturl.texi: Enhanced.
4089
4090         * main.c (main): Use it.
4091
4092         * recur.c (convert_all_links): New function.
4093
4094         * utils.c (add_slist): New argument flags.
4095
4096         * recur.c (recursive_retrieve): Update a list of downloaded URLs.
4097         (parse_robots): Do not chuck out empty value fields.
4098         (parse_robots): Make yourself welcome on empty Disallow.
4099
4100         * version.c: Changed version to 1.4b24.
4101
4102 1996-10-06  Hrvoje Niksic  <hniksic@srce.hr>
4103
4104         * version.c: "Released" 1.4b23.
4105
4106         * ftp.c (ftp_loop_internal): Get the time after getftp.
4107
4108         * Makefile.in (install.info): New target.
4109         (install): Use it.
4110
4111         * http.c (http_loop): Fix output when doing -O.
4112
4113 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
4114
4115         * geturl.texi: New file.
4116
4117         * main.c (main): Do not print the warnings and download summary if
4118         opt.quiet is set.
4119
4120         * version.c: Changed version to 1.4b23.
4121
4122 1996-10-05  Hrvoje Niksic  <hniksic@srce.hr>
4123
4124         * "Released" 1.4b22.
4125
4126         * atotm.c (atotm): Use True and False instead of TRUE and FALSE,
4127         to avoid redefinition warnings.
4128
4129         * host.c (store_hostaddress): Use memcpy() to copy the address
4130         returned by inet_addr.
4131
4132         * version.c: Changed version to 1.4b22.
4133
4134 1996-10-04  Hrvoje Niksic  <hniksic@srce.hr>
4135
4136         * version.c: "Released" 1.4b21.
4137
4138         * ftp-unix.c (ftp_parse_ls): Renamed to ftp_parse_unix_ls.
4139
4140         * ftp.c (ftp_port): Use conaddr.
4141         (getftp): Print the file length.
4142         (ftp_retrieve_list): Check the stamps of plain files only.
4143
4144         * connect.c (closeport): Do not call shutdown().
4145         (conaddr): New function.
4146
4147         * html.c (ftp_index): Made it dfp-aware.
4148
4149         * init.c (cleanup): New name of freemem. Close opt.dfp.
4150
4151         * ftp.c (getftp): Use opt.dfp if it is set.
4152
4153         * ftp-unix.c (ftp_parse_ls): Recognize time in h:mm format.
4154
4155         * ftp.c (ftp_retrieve_dirs): Fixed a bug that caused incorrect
4156         CWDs to be sent with recursive FTP retrievals.
4157
4158 1996-10-03  Hrvoje Niksic  <hniksic@srce.hr>
4159
4160         * recur.c (parse_robots): Made it more compliant with "official"
4161         specifications.
4162
4163         * http.c: New function.
4164
4165         * ftp-unix.c (ftp_parse_ls): Added better debug output.
4166
4167         * ftp.c (getftp): Print out the LIST in case of
4168         opt.print_server_response.
4169
4170         * version.c: Changed version to 1.4b21.
4171
4172 1996-10-01  Hrvoje Niksic  <hniksic@srce.hr>
4173
4174         * version.c: "Released" 1.4b20.
4175
4176         * README: Update.
4177
4178         * http.c (gethttp): Preset lengths of various headers instead of
4179         calculating them dynamically.
4180         (gethttp): Check for 206 partial contents.
4181
4182 1996-09-30  Hrvoje Niksic  <hniksic@srce.hr>
4183
4184         * configure.in: Set SYSTEM_GETURLRC to $libdir/geturlrc
4185
4186         * http.c (gethttp): Send the port number in the Host: header.
4187
4188 1996-09-29  Hrvoje Niksic  <hniksic@srce.hr>
4189
4190         * http.c (gethttp): Send host: header.
4191         (gethttp): Add the possibility of user-defined headers.
4192         (gethttp): Move decision about pragma: no-cache to http_loop,
4193         where it belongs.
4194         (gethttp): Pass a struct instead of enormous argument list.
4195         (http_loop): Use a new, fancier display format.
4196         (ftp_loop): Likewise.
4197
4198         * main.c: (hangup): Turn off buffering of the new log file.
4199
4200         * install-sh: Likewise.
4201
4202         * config.sub: Replace with the one in autoconf-2.10
4203
4204         * geturl.1: Update.
4205
4206         * init.c: New options httpuser and httppasswd.
4207
4208         * http.c: (base64_encode_line): New function.
4209         (gethttp): Send authentication.
4210
4211         * connect.c (make_connection): Use store_hostaddress.
4212
4213 1996-09-28  Hrvoje Niksic  <hniksic@srce.hr>
4214
4215         * host.c (store_hostaddress): New function.
4216
4217         * NEWS: Update.
4218
4219         * http.c (hgetrange): New function.
4220         (gethttp): Use ranges.
4221
4222         * utils.c (numdigit): Accept long instead of int.
4223
4224         * http.c (http_loop): Add restart capabilities.
4225
4226         * ftp.c (ftp_retrieve_glob): Fixed a bug that could cause matchres
4227         being used uninitialized.
4228         (ftp_retrieve_list): Similar fix.
4229
4230         * host.c (add_hlist): Fixed a bug that could cause cmp being used
4231         uninitialized.
4232
4233         * url.c (construct_relative): New function.
4234
4235         * recur.c (recursive_retrieve): Use it.
4236
4237         * retr.c (convert_links): New function.
4238
4239 1996-09-27  Hrvoje Niksic  <hniksic@srce.hr>
4240
4241         * url.c (free_urlpos): New function.
4242
4243         * recur.c (recursive_retrieve): Adapt.
4244
4245         * url.c (get_urls_html): Return a linked list instead of a vector.
4246
4247         * url.c (get_urls_file): Return a linked list instead of a vector.
4248
4249         * geturl.1: Update.
4250
4251         * http.c (gethttp): Implement it.
4252
4253         * init.c (setval): New option: SAVEHEADERS
4254
4255         * ftp.c (ftp_loop_internal): Do not set restval if listing is to
4256         be retrieved. Lack of this test caused bugs when the connection
4257         was lost during listing.
4258
4259         * retr.c (retrieve_url): Fixed a bug that caused
4260         coredumps. *newloc is now reset by default.
4261         (retrieve_url): Lift the twenty-tries limit on proxies.
4262
4263         * version.c: Changed version to 1.4b20.
4264
4265 1996-09-20  Hrvoje Niksic  <hniksic@srce.hr>
4266
4267         * version.c: "Released" 1.4b19.
4268
4269 1996-09-19  Hrvoje Niksic  <hniksic@srce.hr>
4270
4271         * ftp.c (ftp_loop_internal): Renamed from ftp_1fl_loop.
4272         (getftp): Changed prototype to accept ccon *.
4273
4274 1996-09-17  Hrvoje Niksic  <hniksic@srce.hr>
4275
4276         * ftp.c (ftp_retrieve_list): Fixed a bug that caused setting
4277         incorrect values to files pointed to by symbolic links.
4278         (ftp_1fl_loop): Do not count listings among the downloaded URL-s.
4279
4280 1996-09-16  Hrvoje Niksic  <hniksic@srce.hr>
4281
4282         * url.c (mkstruct): Do not prepend "./" in front of a pathname.
4283
4284         * main.c (main): New option: --user-agent.
4285
4286         * geturl.1: Ditto.
4287
4288         * init.h: Ditto.
4289
4290         * init.c (setval): Ditto.
4291
4292         * main.c (main): Rename "server-headers" to "server-response".
4293
4294         * ftp-unix.c (ftp_parse_ls): Check for asterisks at the end of
4295         executables in 'ls -F' listings.
4296
4297 1996-09-15  Hrvoje Niksic  <hniksic@srce.hr>
4298
4299         * url.c (parseurl): Remove realloc() and sprintf().
4300         (str_url): Get rid of sprintf().
4301
4302         * recur.c (recursive_retrieve): Enable FTP recursion through proxy
4303         servers.
4304
4305         * url.h (URL_CLEANSE): Made it else-resistant.
4306         (USE_PROXY): New macro.
4307
4308 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
4309
4310         * NEWS: Update.
4311
4312         * version.c: Changed version to 1.4b19.
4313
4314 1996-09-14  Hrvoje Niksic  <hniksic@srce.hr>
4315
4316         * version.c: "Released" 1.4b18.
4317
4318         * url.c: Made it reallocate space exponentially.
4319
4320 1996-09-14  Drazen Kacar  <dave@fly.cc.fer.hr>
4321
4322         * html.c (htmlfindurl): Added <frame src> and <iframe src> among
4323         the list of stuff to fetch.
4324
4325 1996-09-13  Hrvoje Niksic  <hniksic@srce.hr>
4326
4327         * url.c (get_urls_html): Fixed a bug that caused SIGSEGV's with
4328         -Fi.
4329
4330         * html.c (htmlfindurl): Rewrite.
4331
4332         * http.c (gethttp): Use opt.proxy_cache.
4333
4334         * main.c (main): Added --cache option.
4335
4336         * ftp.c (ftp_response): Print server response if opt.print_server
4337         response is set.
4338         (getftp): Print newlines after each request if the server response
4339         is to be printed.
4340         (ftp_response): Copy the last response line to last_respline.
4341
4342         * http.c (gethttp): Add Pragma: nocache for retried
4343         proxy-retrievals.
4344
4345         * ftp.c (getftp): Use it.
4346
4347         * retr.c (buf_discard): New function.
4348
4349         * ftp.c (ftp_response): Use buf_readchar().
4350         (getftp): Flush the control connection buffer before calling
4351         get_contents().
4352
4353         * retr.c (buf_readchar): New function.
4354         (buf_flush): New function.
4355         (get_contents): Use buf_readchar() instead of read(x, x, 1).
4356         (get_contents): Use buf_flush.
4357
4358 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
4359
4360         * ftp.c: Incorporate changes to ftp_response.
4361
4362         * ftp.c (ftp_response): Allocate the server response dynamically,
4363         as in read_whole_line and fetch_next_header.
4364
4365         * utils.c (read_whole_line): Fixed a bug that prevented reading
4366         the last line if it is not \n-terminated. Also fixed a possible
4367         memory overflow.
4368
4369         * http.c (fetch_next_header): Return malloc-ed string as large as
4370         needed.
4371         (gethttp): Use new fetch_next_header.
4372
4373 1996-09-12  Hrvoje Niksic  <hniksic@srce.hr>
4374
4375         * http.c (hgetlen): Compute the header length the first time only.
4376         (hgettype): Ditto.
4377         (hgetlocation): Ditto.
4378         (hgetmodified): Ditto.
4379
4380 1996-09-11  Hrvoje Niksic  <hniksic@srce.hr>
4381
4382         * sample.geturlrc: Update.
4383
4384 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4385
4386         * http.c (http_loop): Ditto.
4387
4388         * ftp.c (getftp): Open the output file as binary.
4389
4390         * version.c: Changed version to 1.4b18.
4391
4392 1996-09-10  Hrvoje Niksic  <hniksic@srce.hr>
4393
4394         * version.c: "Released" 1.4b17.
4395
4396         * ftp-unix.c (ftp_parse_ls): If unable to open file, return NULL
4397         instead of failed assertion.
4398
4399 1996-09-09  Hrvoje Niksic  <hniksic@srce.hr>
4400
4401         * ftp.c (ftp_get_listing): Add a numbered suffix to LIST_FILENAME
4402         if a file of that name already exists.
4403
4404 1996-09-05  Hrvoje Niksic  <hniksic@srce.hr>
4405
4406         * ftp.c (ftp_1fl_loop): Handler FTPPORTERR and FOPENERR correctly.
4407
4408         * config.h.in: Define gethostbyname as Rgethostbyname when using
4409         Socks.
4410
4411         * configure.in: Check for -lresolv if using Socks.
4412
4413         * version.c: Changed version to 1.4b17.
4414
4415 1996-07-15  Hrvoje Niksic  <hniksic@srce.hr>
4416
4417         * version.c: "Released" 1.4b16.
4418
4419         * http.c (gethttp): More intelligent check for first line of HTTP
4420         response.
4421         (gethttp): Would bug out on time-stamping.
4422
4423         * version.c: Changed version to 1.4b16.
4424
4425 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4426
4427         * version.c: Released 1.4b15.
4428
4429         * http.c (http_loop): Print \n after the loop entry, not before.
4430
4431         * url.c (url_filename): Use ISDOT.
4432
4433         * url.h (ISDOT): New macro.
4434
4435         * recur.c (recursive_retrieve): Change only opt.recursive for
4436         following FTP.
4437
4438 1996-07-11  Antonio Rosella <antonio.rosella@agip.it>
4439
4440         * socks/geturl.cgi: Fixed version No.
4441
4442         * socks/download-netscape.html: Ditto.
4443
4444         * socks/download.html: Changed socks.html to download.html.
4445
4446 1996-07-11  Hrvoje Niksic  <hniksic@srce.hr>
4447
4448         * url.c (url_filename): Check for opt.dirstruct instead for
4449         opt.recursive && opt.dirstruct.
4450
4451         * init.c (defaults): Ditto.
4452         (defaults): Reset dirstruct by default.
4453         (setval): Set opt.dirstruct whenever setting recursive.
4454
4455         * init.h: Removed FORCEDIRHIER.
4456
4457         * INSTALL: Added -L to socks-description.
4458
4459         * version.c: Changed version to 1.4b15.
4460
4461 1996-07-10  Hrvoje Niksic  <hniksic@srce.hr>
4462
4463         * version.c: "Released" 1.4b14.
4464
4465         * geturl.1: Update AUTHOR to include Rosella as contributor.
4466
4467         * NEWS: Update.
4468
4469         * socks/geturl.cgi: Simplified command creation, nuked <blink>.
4470
4471         * socks/geturl.cgi: Wrap nutscape extensions within if $netscape.
4472         (cal_time): Fix == to eq.
4473
4474         * socks/geturl.cgi: GPL-ized with permission of A. Rosella.
4475
4476         * geturl.1 (hostname): Moved URL CONVENTIONS to the beginning.
4477
4478         * Makefile.in: Use @VERSION@.
4479
4480         * configure.in: Check version from version.c.
4481
4482         * socks/geturl.cgi: Changed /pub/bin/perl to /usr/bin/perl.
4483
4484         * socks/download.html: Created from download-netscape.html, made
4485         HTML-2.0 compliant.
4486
4487         * recur.c (recursive_retrieve): Set opt.force_dir_hier when
4488         following FTP links from recursions.
4489
4490 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4491
4492         * url.c (mymkdir): Fixed a bug that prevented mymkdir() to create
4493         absolute directories correctly.
4494
4495         * version.c: Changed version to 1.4b14.
4496
4497 1996-07-09  Hrvoje Niksic  <hniksic@srce.hr>
4498
4499         * version.c: "Released" 1.4b13.
4500
4501         * url.c (make_backup): New function.
4502
4503         * http.c (http_loop): Make a backup copy of the local file (using
4504         rename(2)) before opening it.
4505
4506         * main.c (main): Added --backups.
4507
4508         * host.c (ftp_getaddress): Bail out on failed mycuserid().
4509         (ftp_getaddress): Check for leading dot on MY_DOMAIN.
4510         (ftp_getaddress): Check for empty, null or (null) domain.
4511
4512         * url.c (get_urls_html): If this_url is NULL, the base must have a
4513         protocol.
4514         (parseurl): Use has_proto.
4515
4516         * retr.c (retrieve_url): Warn when proxy is used with more than 20
4517         retries.
4518
4519         * url.c (mkstruct): Create the directory (calling mymkdir()) only
4520         if it is not already there.
4521         (has_proto): New function.
4522         (get_urls_html): Eliminate the remaining call to findurl -- use
4523         has_proto.
4524
4525         * geturl.1: Ditto.
4526
4527         * main.c: Change -X to -x.
4528
4529         * url.c (url_filename): Simplify creation of filename if
4530         prefix_files is set.
4531         (url_filename): Simplify everything. And I do mean *everything*.
4532         (mkstruct): Add dir_prefix before hostname.
4533         (path_simplify): Fixed a bug that caused writing outside the path
4534         string in case of "." and ".." path strings.
4535
4536 1996-07-06  Hrvoje Niksic  <hniksic@srce.hr>
4537
4538         * init.c: Added --mirror.
4539
4540         * main.c (main): Added -X to force saving of directory hierarchy.
4541
4542         * ftp.c (ftp_retrieve_list): Added recursion depth counter.
4543         (ftp_retrieve_list): Check whether quota is exceeded.
4544
4545         * url.c (get_urls_html): Skip leading blanks for absolute URIs.
4546
4547         * http.c (gethttp): Use referer if present.
4548
4549         * recur.c (recursive_retrieve): Set u->referer before calling
4550         retrieve_url.
4551
4552         * url.c (newurl): Use memset to nullify the struct members.
4553         (freeurl): Free the referer field too.
4554
4555         * url.h: Added referer to urlinfo.
4556
4557         * geturl.1: Updated the manual to document some of the new features.
4558
4559         * utils.c (numdigit): Moved from url.c.
4560
4561         * README: Rewritten.
4562
4563         * config.h.in: Add the support for socks.
4564
4565         * configure.in: Add the support for socks.
4566
4567         * url.c (url_filename): If the dir_prefix is ".", work with just
4568         the file name.
4569         (url_filename): Do not look for .n extensions if timestamping if
4570         turned on.
4571
4572         * retr.c (show_progress): Skip the over-abundant restval data, and
4573         print the rest of it with ',' instead of '.'.
4574
4575 1996-07-05  Hrvoje Niksic  <hniksic@srce.hr>
4576
4577         * retr.c (show_progress): Changed second arg. to long (as it
4578         should be).
4579         (show_progress): Moved to retr.c.
4580         (get_contents): Moved to retr.c.
4581
4582         * version.c: Change version to 1.4b13.
4583
4584 1996-07-05  Hrvoje Lacko <hlacko@fly.cc.fer.hr>
4585
4586         * url.c (in_acclist): Would return after the first suffix.
4587
4588 1996-07-04  Hrvoje Niksic  <hniksic@srce.hr>
4589
4590         * version.c: "Released" 1.4b12.
4591
4592         * url.c (path_simplify): More kludgifications.
4593         (get_urls_html): Use new parameters for htmlfindurl.
4594
4595         * html.c: Removed memorizing "parser states", since the new
4596         organization does not require them.
4597
4598         * init.c (run_geturlrc): Use read_whole_line.
4599
4600         * ftp-unix.c (ftp_parse_ls): Use read_whole_line.
4601
4602         * recur.c (parse_robots): Use read_whole_line.
4603
4604         * utils.c (read_whole_line): New function.
4605
4606         * recur.c (tried_robots): Use add_slist/in_slist, *much* cleaner.
4607
4608         * host.c (ngethostbyname): Call inet_addr just once. Yet to be
4609         tested on OSF and Ultrix.
4610         (add_hlist): New function.
4611         (free_hlist): New function.
4612         (search_host): New function.
4613         (search_address): New function.
4614         (realhost): Use search_host, search_address and add_hlist.
4615         (same_host): Replaced realloc() with strdupdelim(), made
4616         case-insensitive, fixed a memory leak.
4617
4618         * html.c (ftp_index): Fixed tm_min and tm_sec to be tm_hour and
4619         tm_min, like intended.
4620
4621         * version.c: Change user agent information to
4622         Geturl/version.
4623
4624 1996-07-03  Hrvoje Niksic  <hniksic@srce.hr>
4625
4626         * utils.c: Renamed nmalloc.c to utils.c, .h likewise.
4627
4628         * url.c (acceptable): Always accept directories.
4629
4630         * ftp-unix.c (ftp_parse_ls): Support brain-damaged "ls -F"-loving
4631         servers by stripping trailing @ from symlinks and trailing / from
4632         directories.
4633
4634         * ftp.c (ftp_loop): Debugged the "enhanced" heuristics. :-)
4635
4636         * url.c (skip_url): Use toupper instead of UCASE.
4637
4638         * host.c (sufmatch): Made it case-insensitive.
4639
4640         * url.c (match_backwards_or_pattern): Fixed i == -1 to j == -1.
4641         (match_backwards): New function, instead of
4642         match_backwards_or_pattern.
4643
4644         * recur.c (recursive_retrieve): Increased performance by
4645         introducing inl, which reduces number of calls to in_slist to only
4646         one.
4647
4648         * ftp.c (ftp_loop): Enhanced the heuristics that decides which
4649         routine to use.
4650
4651         * main.c (printhelp): Removed the warranty stuff.
4652
4653 1996-07-02  Hrvoje Niksic  <hniksic@srce.hr>
4654
4655         * url.c (add_slist): Simplify.
4656         (match_backwards_or_pattern): New function.
4657         (in_acclist): Use match_backwards_or_pattern.
4658         (matches): Remove.
4659
4660 1996-06-30  Hrvoje Niksic  <hniksic@srce.hr>
4661
4662         * ftp.c (ftp_loop): Call ftp_index on empty file names, if not
4663         recursive.
4664
4665         * html.c (ftp_index): Fixed to work. Beautified the output.
4666
4667         * ftp.c (ftp_retrieve_glob): Another argument to control whether
4668         globbing is to be used.
4669         (ftp_retrieve_list): Compare the time-stamps of local and remote
4670         files to determine whether to download.
4671
4672 1996-06-29  Hrvoje Niksic  <hniksic@srce.hr>
4673
4674         * ftp.c (rel_constr): New function.
4675
4676         * retr.c (retrieve_from_file): Check for text/html before
4677         retrieving recursively.
4678
4679         * main.c (main): Check whether the file is HTML before going into
4680         recursive HTML retrieving.
4681
4682         * ftp.c (ftp_retrieve_list): Manage directories.
4683         (ftp_retrieve_glob): Pass all the file-types to ftp_retrieve_list.
4684         (ftp_1fl_loop): Fixed a bug that caused con->com to be incorrectly
4685         initialized, causing bugchecks in getftp to fail.
4686
4687         * configure.in: Check for symlink.
4688
4689         * ftp.c (ftp_retrieve_list): Added support for symlinks.
4690
4691         * version.c: "Released" 1.4b10.
4692
4693         * atotm.c (atotm): Redeclared as time_t.
4694
4695         * init.c: New variable "timestamping".
4696
4697         * main.c (main): New option 'N'.
4698
4699         * http.c (hgetlocation): Case-insensitive match.
4700         (hgetmodified): New function.
4701         (http_loop): Implement time-stamping.
4702
4703 1996-06-28  Hrvoje Niksic  <hniksic@srce.hr>
4704
4705         * version.c: Changed version to 1.4b10
4706
4707         * atotm.c: New file, from phttpd.
4708
4709         * options.h (struct options): New parameter timestamping.
4710
4711         * version.c: 1.4b9 "released".
4712
4713         * recur.c (recursive_retrieve): Used linked list (ulist) for
4714         faster storing of URLs.
4715
4716         * url.c (get_urls_html): Removed the old kludge with comparing the
4717         outputs of htmlfindurl and findurl.
4718         (get_urls_html): Added better protocol support here.
4719         (create_hash): Removed, as well as add_hash and in_hash.
4720         (addslist): New function.
4721         (in_slist): ditto
4722
4723         * version.c: Released 1.4b8, changed version to b9.
4724
4725 1996-06-27  Hrvoje Niksic  <hniksic@srce.hr>
4726
4727         * ftp.c (freefileinfo): New function.
4728         (delelement): New function.
4729
4730         * everywhere: GPL!
4731
4732         * ftp.c (ftp_loop): Use ccon.
4733         (ftp_retrieve_glob): Likewise.
4734
4735         * ftp.h: Define ccon, to define status of control connection.
4736
4737         * ftp.c (ftp_get_listing): New function.
4738         (ftp_retrieve_more): New function.
4739         (ftp_retrieve_glob): New function.
4740
4741 1996-06-25  Hrvoje Niksic  <hniksic@srce.hr>
4742
4743         * configure.in: Removed the search for cuserid().
4744
4745         * init.c (getmode): Renamed to getperms.
4746
4747 1996-06-24  Hrvoje Niksic  <hniksic@srce.hr>
4748
4749         * version.c: New version.
4750
4751         * main.c (hangup): New function, that handles hangup. Hangup
4752         signal now causes geturl to stop writing on stdout, and to write
4753         to a log file.
4754
4755         * ftp.c (getftp): "Released" 1.4b7.
4756
4757         * html.c (htmlfindurl): Ignore everything inside <head>...</head>.
4758         (ftp_index): Use fileinfo/urlinfo.
4759
4760         * ftp-unix.c (ftp_parse_ls): New function.
4761         (symperms): New function.
4762
4763         * ftp.c (ftp_1fl_loop): New function, to handle 1-file loops.
4764
4765         * retr.c (retrieve_url): Added FTP support.
4766
4767 1996-06-23  Hrvoje Niksic  <hniksic@srce.hr>
4768
4769         * geturl.h: Removed NOTFTP2HTML enum.
4770         Added DO_LOGIN, DO_CWD and DO_LIST. LIST_ONLY is obsolete.
4771
4772         * ftp.c (getftp): Resynched with urlinfo.
4773         (getftp): Removed HMTL-ization of index.html from getftp.
4774
4775         * version.c: 1.4b6 "released".
4776
4777         * options.h (options): New struct, to keep options in.
4778
4779         * http.c (http_loop,gethttp): Synched with proxy.
4780
4781         * retr.c (retrieve_url): Implemented proxy retrieval.
4782
4783         * main.c (main): Use retrieve_from_file.
4784
4785 1996-06-22  Hrvoje Niksic  <hniksic@srce.hr>
4786
4787         * retr.c (retrieve_from_file): New function.
4788
4789         * url.c (parseurl): Modified to return URLOK if all OK. Protocol
4790         can be found in u->proto.
4791
4792         * ftp.c (ftp_response): Fixed to accept multi-line responses as
4793         per RFC 959.
4794
4795         * recr.c (recursive_retrieve): Take newloc from retrieve_url.
4796
4797         * url.c (mymkdir): Removed the file of the same name, if one
4798         exists.
4799         (isfile): New function.
4800         (mkstruct): Fixed the '/' glitches.
4801         (path_simplify): Hacked to treat something/.. correctly.
4802
4803 1996-06-21  Hrvoje Niksic  <hniksic@srce.hr>
4804
4805         * http.c (gethttp): Close the socket after error in headers.
4806         (http_loop): HEOF no longer a fatal header.
4807
4808         * loop.c (retrieve_url): When dt is NULL, do not modify it. This
4809         simplifies the syntax of calling retrieve_url.
4810
4811         * recr.c (recursive_retrieve): Modified to use get_urls_html.
4812
4813         * url.c (get_urls_file): New function.
4814         (get_urls_html): New function.
4815
4816         * recr.c (recursive_retrieve): Patched up to conform to the
4817         standards.
4818
4819         * http.c (gethttp): Synched with the rest...
4820         (gethttp): Treat only CONREFUSED specially, with connection
4821         errors.
4822
4823         * init.c,geturl.1,http.c (http_loop): Removed kill_error.
4824
4825 1996-06-20  Hrvoje Niksic  <hniksic@srce.hr>
4826
4827         * http.c (http_loop): New function.
4828
4829         * loop.c: Removed *lots* of stuff from retrieve_url.
4830
4831         * url.c (parseurl): Changed to work with urlinfo. Integrated
4832         username finding and path parsing.
4833         (newurl): New function.
4834         (freeurl): New function.
4835         (mkstruct): Removed the old bogosities, made it urlinfo-compliant.
4836         (url_filename): Likewise.
4837         (path_simplify): Accept relative paths too.
4838         (opt_url): Made urlinfo-compliant, removed bogosities.
4839         (path_simplify): Expanded to accept relative paths.
4840         (str_url): A replacement for hide_url
4841         (decode_string): Fixed a bug that caused malfunctioning when
4842         encountering an illegal %.. combination.
4843         (opt_url): Removed the argument. Dot-optimizations are now default.
4844
4845         * nmalloc.c (strdupdelim): New function.
4846
4847         * url.h: Added the urlinfo structure
4848
4849 1996-06-19  Hrvoje Niksic  <hniksic@srce.hr>
4850
4851         * url.c (hide_url): Thrown out the protocol assertion. Do not
4852         change the URL if the protocol if not recognized.
4853         (findurl): Put continue instead of break.
4854
4855 1996-06-18  Hrvoje Niksic  <hniksic@srce.hr>
4856
4857         * sample.geturlrc: Changed the defaults to be commented out and
4858         harmless (previous defaults caused pains if copied to
4859         ~/.geturlrc).
4860
4861         * http.c (gethttp): Print the HTTP request in debug mode.
4862
4863         * connect.c (iread): Added EINTR check loop to select-ing
4864         too. EINTR is now correctly handled with select().
4865
4866         * TODO: new file
4867
4868 1996-05-07  Hrvoje Niksic  <hniksic@srce.hr>
4869
4870         * host.c (same_host): Made the function a little bit more
4871         intelligent regarding diversified URL syntaxes.
4872
4873         * url.c (skip_url): Spaces are now skipped after URL:
4874
4875         * Released 1.3.1 with the patch to prevent crashing when sending
4876         NULL to robot* functions and the patch to compile "out of the box"
4877         on AIX.
4878
4879         * recr.c (recursive_retrieve): Added checking whether this_url is
4880         NULL when calling the robot functions.
4881
4882         * ChangeLog: New file.