]> sjero.net Git - wget/blob - NEWS
improved Test-idn-robots.px
[wget] / NEWS
1 GNU Wget NEWS -- history of user-visible changes.
2
3 Copyright (C) 1997, 1998, 1999, 2000, 2001, 2002, 2003, 2004, 2005,
4 2006, 2007, 2008, 2009, 2010, 2011, 2012 Free Software Foundation, Inc.
5 See the end for copying conditions.
6
7 Please send GNU Wget bug reports to <bug-wget@gnu.org>.
8 \f
9 * Changes in Wget X.Y.Z
10
11 ** Add support for --method.
12
13 ** Add support for file names longer than MAX_FILE.
14
15 ** Support FTP listing for the FTP Server on Windows Server 2008 R2.
16
17 ** Fix a regression when -c and --content-disposition are used together.
18
19 ** Support shorthand URLs in an input file.
20
21 ** Fix -c with servers that don't specify a content-length.
22
23 ** Add support for MD5-SESS
24
25 ** Do not fail on non fatal GNU TLS alerts during handshake.
26
27 ** Add support for --https-only.  When used wget will follow only
28    HTTPS links in recursive mode.
29
30 ** Support Perfect-Forward Secrecy in --secure-protocol.
31 \f
32 * Changes in Wget 1.14
33
34 ** Add support for content-on-error.  It allows to store the HTTP
35    payload on 4xx or 5xx errors.
36
37 ** Add support for WARC files.
38
39 ** Fix a memory leak problem in the GNU TLS backend.
40
41 ** Autoreconf works again for distributed tarballs.
42
43 ** Print some diagnostic messages to stderr not to stdout.
44
45 ** Report stdout close errors.
46
47 ** Accept the --report-speed option.
48
49 ** Enable client certificates when GNU TLS is used.
50
51 ** Add support for TLS Server Name Indication.
52
53 ** Accept the arguments --accept-reject and --reject-regex.
54
55 ** The GNU TLS backend honors correctly the timeout value.
56
57 ** Add support for RFC 2617 Digest Access Authentication.
58 \f
59 * Changes in Wget 1.13.4
60
61 ** Now --version and --help work again.
62
63 ** Fix a build error on solaris 10 sparc.
64
65 ** Now --timestamping and --continue work well together.
66
67 ** Return a network failure when FTP downloads fail and --timestamping
68    is specified.
69
70 ** Fix a segfault on an incomplete STYLE tag.
71 \f
72 * Changes in Wget 1.13.3
73
74 ** Support HTTP/1.1
75
76 ** Now by default the GNU TLS library for secure connections, instead of
77    OpenSSL.
78
79 ** Fix some portability issues.
80
81 ** Handle properly malformed status line in a HTTP response.
82
83 ** Ignore zero length domains in $no_proxy.
84
85 ** Set new cookies after an authorization failure.
86
87 ** Exit with failure if -k is specified and -O is not a regular file.
88
89 ** Cope better with unclosed html tags.
90
91 ** Print diagnostic messages to stderr, not stdout.
92
93 ** Do not use an additional HEAD request when --content-disposition is used,
94    but use directly GET.
95
96 ** Report the average transfer speed correctly when multiple URL's are specified
97    and -c influences the transferred data amount.
98
99 ** GNU TLS backend works again.
100
101 ** Now --timestamping and --continue works well together.
102
103 ** By default, on server redirects, use the original URL to get the
104    local file name. Close CVE-2010-2252.  This introduces a
105    backward-incompatibility; any script that relies on the old
106    behaviour must use --trust-server-names.
107
108 ** Fix a problem when -k is used and some URLs are specified trough
109    CSS.
110
111 ** Convert correctly URLs that need to be encoded to local files when following
112    links.
113
114 ** Use persistent connections with proxies supporting them.
115
116 ** Print the total download time as part of the summary for recursive downloads.
117
118 ** Now it is possible to specify a different startup configuration file trough
119    the --config option.
120
121 ** Fix an infinite loop with the error '<filename> has sprung into existence'
122    on a network error and -nc is used.
123
124 ** Now --adjust-extension does not modify the file extension if the file ends
125    in .htm.
126
127 ** Support HTTP/1.1 307 redirects keep request method.
128
129 ** Now --no-parent doesn't fetch undesired files if HTTP and HTTPS are used
130    by the same host on different pages.
131
132 ** Do not attempt to remove the file if it is not in the accept rules but
133    it is the output destination file.
134
135 ** Introduce `show_all_dns_entries' to print all IP addresses corresponding to
136    a DNS name when it is resolved.
137 \f
138 * Changes in Wget 1.12
139
140 ** Mailing list MOVED to bug-wget@gnu.org
141
142 ** SECURITY FIX: It had been possible to trick Wget into accepting
143 SSL certificates that don't match the host name, through the trick of
144 embedding NUL characters into the certs' common name. Fixed by Joao
145 Ferreira <joao@joaoff.com>.
146
147 ** Added support for CSS. This includes:
148      - Parsing links from CSS files, and from CSS content found in HTML
149        style tags and attributes.
150      - Supporting conversion of links found within CSS content, when
151        --convert-links is specified.
152      - Ensuring that CSS files end in the ".css" filename extension,
153        when --convert-links is specified.
154
155    CSS support in Wget is thanks to Ted Mielczarek
156    <ted.mielczarek@gmail.com>.
157
158 ** Added support for Internationalized Resource Identifiers (IRIs, RFC
159 3987). When support is enabled (requires libidn and libiconv), links
160 with non-ASCII bytes are translated from their source encoding to UTF-8
161 before percent-encoding.  IRI support was added by Saint Xavier
162 <wget@sxav.eu>, as his project for the Google Summer of Code.
163
164 ** Wget now provides more sensible exit status codes when downloads
165 don't proceed as expected (see the manual).
166
167 ** --default-page option (and associated wgetrc command) added to
168 support alternative default names for index.html.
169
170 ** --ask-password option (and associated wgetrc command) added to
171 support password prompts at the console.
172
173 ** The --input-file option now also handles retrieving links from
174 an external file.
175
176 ** The output generated by the --version option now includes
177 information on how it was built, and the set of configure-time options
178 that were selected.
179
180 ** --html-extension has been renamed to --adjust-extension, to reflect
181 the fact that it now also applies to CSS content. --html-extension is
182 still acceptable, but is now deprecated.
183
184 ** An "ascii" specifier is now accepted by --restrict-file-names, which
185 forces the percent-encoding of all non-ASCII bytes
186
187 ** Several previously existing, but undocumented .wgetrc options are
188 now documented: save_headers, spider, and user_agent,
189 auth_no_challenge, and keep_session_cookies. Also added documentation
190 for the "lowercase" and "uppercase" values for --restrict-file-names, which had been present since Wget 1.11.
191 \f
192 * Changes in Wget 1.11.4
193
194 ** Fixed an issue (apparently a regression) where -O would refuse to
195 download when -nc was given, even though the file didn't exist.
196
197 ** Fixed a situation where Wget could abort with --continue if the
198 remote server gives a content-length of zero when the file exists
199 locally with content.
200
201 ** Fixed a crash on some systems, due to Wget casting a pointer-to-long
202 to a pointer-to-time_t.
203
204 ** Translation updates for Catalan.
205 \f
206 * Changes in Wget 1.11.3
207
208 ** Downgraded -N with -O to a warning, rather than an error.
209
210 ** Translation updates
211 \f
212 * Changes in Wget 1.11.2
213
214 ** Fixed a problem in authenticating over HTTPS through a proxy.
215 (Regression in 1.11 over 1.10.2.)
216
217 ** The combination of -r or -p with -O, which was disallowed in 1.11,
218 has been downgraded to a warning in 1.11.2. (-O and -N, which was never
219 meaningful, is still an error.)
220
221 ** Further improvements to progress bar displays in non-English locales
222 (too many spaces could be inserted, causing the display to scroll).
223
224 ** Successive invocations of Wget on FTP URLS, with --no-remove-listing
225 and --continue, was causing Wget to append, rather than replace,
226 information in the .listing file, and thereby download the same files
227 multiple times. This has been fixed in 1.11.2.
228
229 ** Wget 1.11 no longer allowed ".." to persist at the beginning of URLs,
230 for improved conformance with RFC 3986. However, this behavior presents
231 problems for some FTP setups, and so they are now preserved again, for
232 FTP URLs only.
233 \f
234 * Changes in Wget 1.11.1.
235
236 ** Interrupted downloads no longer result in renaming the file
237 (regression in 1.11 over 1.10.2).
238
239 ** Progress bar now displays correctly in non-English locales (and a
240 related assertion failure was fixed).
241
242 ** Wget no longer issues a GET request over HTTP for files it should
243 know it's not going to download (regression in 1.11 over 1.10.2).
244
245 ** Added option --auth-no-challenge, to support broken pre-1.11
246 authentication-before-server-challenge, which turns out to still be
247 useful for some limited cases.
248
249 ** Documentation of accept/reject lists in the manual's "Types of
250 Files" section now explains various aspects of their behavior that may
251 be surprising, and notes that they may change in the future.
252
253 ** Documentation of --no-parents now explains how a trailing slash, or
254 lack thereof, in the specified URL, will affect behavior.
255 \f
256 * Changes in Wget 1.11.
257
258 ** Timestamping now uses the value from the most recent HTTP response,
259 rather than the first one it got.
260
261 ** Authentication information is no longer sent as part of the Referer
262 header in recursive fetches.
263
264 ** No authentication credentials are sent until a challenge is issued,
265 for improved security. Authentication handling is still not
266 RFC-compliant, as once a Basic challenge has been received, it will
267 assume it can send credentials to any URL at that same host, and not
268 just the ones at or below the original authenticated location.
269 Credentials for Digest authentication are still never saved or issued
270 automatically, and continue to require a challenge for each resource.
271
272 ** Added --max-redirect option, allowing the user to specify what should
273 be the maximum number of HTTP redirects to follow.
274
275 ** Wget now supports saving HTTP downloads using file names specified by
276 the `Content-Disposition' header.  This is a standard way of specifying
277 the file name used by many web dynamically generated pages. However, the
278 current implementation is inefficient, and known to have bugs. It is
279 EXPERIMENTAL only, and not enabled by default. Use --content-disposition
280 to enable it.
281
282 ** The new option `--ignore-case' makes Wget ignore case when
283 matching files, directories, and wildcards.  This affects the -X, -I,
284 -A, and -R options, as well as globbing in FTP URLs.
285
286 ** ETA projection is now displayed in "dot" progress output as well as
287 in the default progress bar.  (The dot progress is used by default when
288 logging Wget's output to file using the `-o' option.)
289
290 ** The "lockable boolean" argument type is no longer supported.  It
291 was only used by the passive_ftp .wgetrc setting.  If you're running
292 broken scripts or Perl modules that unconditionally specify
293 `--passive-ftp' and your firewall disallows it, you can override them
294 by replacing wget with a script that execs wget "$@" --no-passive-ftp.
295
296 ** The source code has been migrated to Mercurial. The repositories are
297 available at http://hg.addictivecode.org/. Prior to this, the source
298 code was hosted on Subversion (migrated from the original CVS); you can
299 still get access to older tags and branches for Wget in the Subversion
300 repository at http://addictivecode.org/svn/wget/.
301 \f
302 * Changes in Wget 1.10.
303
304 ** Downloading files larger than 2GB, sometimes referred to as "large
305 files", now works on systems that support them.  This includes the
306 majority of modern Unixes, as well as MS Windows.
307
308 ** IPv6 is now supported by Wget.  Unlike the experimental code in
309 1.9, this version supports dual-family systems.  The new flags
310 `--inet4' and `--inet6' (or `-4' and `-6' for short) force the use of
311 IPv4 and IPv6 respectively.  Note that IPv6 support has not yet been
312 tested on Windows.
313
314 ** Microsoft's proprietary "NTLM" method of HTTP authentication is now
315 supported.  This authentication method is undocumented and only used
316 by IIS.  Note that *proxy* authentication is not supported in this
317 release; you can only authenticate to the target web site.
318
319 ** Wget no longer truncates partially downloaded files when download
320 has to start over because the server doesn't support Range.  Instead,
321 with such servers Wget now simply ignores the data up to the byte
322 where the last attempt left off, and only then continues appending to
323 the file.  That way the downloaded file never shrinks, and download
324 retries from servers without support for partial downloads work even
325 when downloading to stdout.
326
327 ** SSL/TLS changes:
328
329 *** SSL/TLS downloads now attempt to verify the server's certificate
330 against the recognized certificate authorities.  This requires CA
331 certificates to have been installed in a location visible to the
332 OpenSSL library.  If this is not the case, you can get the bundle
333 yourself from a source you trust (for example, the bundle extracted
334 from Mozilla available at http://curl.haxx.se/docs/caextract.html),
335 and point Wget to the PEM file using the `--ca-certificate'
336 command-line option or the corresponding `.wgetrc' command.
337
338 *** Secure downloads now verify that the host name in the URL matches
339 the "common name" in the certificate presented by the server.
340
341 *** Although the above checks provide more secure downloads, they
342 unavoidably break interoperability with some sites that worked with
343 previous versions, particularly those using self-signed, expired, or
344 otherwise invalid certificates.  If you encounter "certificate
345 verification" errors or complaints that "common name doesn't match
346 requested host name" and are convinced of the site's authenticity, you
347 can use `--no-check-certificate' to bypass both checks.
348
349 *** Talking to SSL/TLS servers over proxies now actually works.
350 Previous versions of Wget erroneously sent GET requests for https
351 URLs.  Wget 1.10 utilizes the CONNECT method designed for this
352 purpose.
353
354 *** The SSL/TLS-related options have been redesigned and, for the
355 first time, documented in the manual.  The old, undocumented, options
356 are no longer supported.
357
358 ** Passive FTP is now the default FTP transfer mode.  Use
359 `--no-passive-ftp' or specify `passive_ftp = off' in your init file to
360 revert to the old behavior.
361
362 ** The `--header' option can now be used to override generated
363 headers.  For example, `wget --header="Host: foo.bar"
364 http://127.0.0.1' tells Wget to connect to localhost, but to specify
365 "foo.bar" in the `Host' header.  In previous versions such use of
366 `--header' lead to duplicate headers in HTTP requests.
367
368 ** The responses without headers, aka "HTTP 0.9" responses, are
369 detected and handled.  Although HTTP 0.9 has long been obsolete, it is
370 still occasionally used, sometimes by accident.
371
372 ** The progress bar is now updated regularly even when the data does
373 not arrive from the network.
374
375 ** Wget no longer preserves permissions of files retrieved by FTP by
376 default.  Anonymous FTP servers frequently use permissions like "664",
377 which might not be what the user wants.  The new option
378 `--preserve-permissions' and the corresponding `.wgetrc' variable can
379 be used to revert to the old behavior.
380
381 ** The new option `--protocol-directories' instructs Wget to also use
382 the protocol name as a directory component of local file names.
383
384 ** Options that previously unconditionally set or unset various flags
385 are now boolean options that can be invoked as either `--OPTION' or
386 `--no-OPTION'.  Options that required an argument "on" or "off" have
387 also been changed this way, but they still accept the old syntax for
388 backward compatibility.  For example, instead of `--glob=off' you can
389 write `--no-glob'.
390
391 Allowing `--no-OPTION' for every `--OPTION' and the other way around
392 is useful because it allows the user to override non-default behavior
393 specified via `.wgetrc'.
394
395 ** The new option `--keep-session-cookies' causes `--save-cookies' to
396 save session cookies (normally only kept in memory) along with the
397 permanent ones.  This is useful because many sites track important
398 information, such as whether the user has authenticated, in session
399 cookies.  With this option multiple Wget runs are treated as a single
400 browser session.
401
402 ** Wget now supports the --ftp-user and --ftp-password command
403 switches to set username and password for FTP, and the --user and
404 --password command switches to set username and password for both FTP
405 and HTTP.  The --http-passwd and --proxy-passwd command switches have
406 been renamed to --http-password and --proxy-password respectively, and
407 the related http_passwd and proxy_passwd .wgetrc commands to
408 http_password and proxy_password respectively.  The login and passwd
409 .wgetrc commands have been deprecated.
410
411 * `wget -b' now works correctly under Windows.
412 \f
413 * Wget 1.9.1 is a bugfix release with no user-visible changes.
414 \f
415 * Changes in Wget 1.9.
416
417 ** It is now possible to specify that POST method be used for HTTP
418 requests.  For example, `wget --post-data="id=foo&data=bar" URL' will
419 send a POST request with the specified contents.
420
421 ** IPv6 support is available, although it's still experimental.
422
423 ** The `--timeout' option now also affects DNS lookup and establishing
424 the TCP connection.  Previously it only affected reading and writing
425 data.  Those three timeouts can be set separately using
426 `--dns-timeout', `--connection-timeout', and `--read-timeout',
427 respectively.
428
429 ** Download speed shown by the progress bar is based on the data
430 recently read, rather than the average speed of the entire download.
431 The ETA projection is still based on the overall average.
432
433 ** It is now possible to connect to FTP servers through FWTK
434 firewalls.  Set ftp_proxy to an FTP URL, and Wget will automatically
435 log on to the proxy as "username@host".
436
437 ** The new option `--retry-connrefused' makes Wget retry downloads
438 even in the face of refused connections, which are otherwise
439 considered a fatal error.
440
441 ** The new option `--no-dns-cache' may be used to prevent Wget from
442 caching DNS lookups.
443
444 ** Wget no longer escapes characters in local file names based on
445 whether they're appropriate in URLs.  Escaping can still occur for
446 nonprintable characters or for '/', but no longer for frequent
447 characters such as space.  You can use the new option
448 --restrict-file-names to relax or strengthen these rules, which can be
449 useful if you dislike the default or if you're downloading to
450 non-native partitions.
451
452 ** Handling of HTML comments has been dumbed down to conform to what
453 users expect and other browsers do: instead of being treated as SGML
454 declaration, a comment is terminated at the first occurrence of "-->".
455 Use `--strict-comments' to revert to the old behavior.
456
457 ** Wget now correctly handles relative URIs that begin with "//", such
458 as "//img.foo.com/foo.jpg".
459
460 ** Boolean options in `.wgetrc' and on the command line now accept
461 values "yes" and "no" along with the traditional "on" and "off".
462
463 ** It is now possible to specify decimal values for timeouts, waiting
464 periods, and download rate.  For instance, `--wait=0.5' now works as
465 expected, as does `--dns-timeout=0.5' and even `--limit-rate=2.5k'.
466 \f
467 * Wget 1.8.2 is a bugfix release with no user-visible changes.
468 \f
469 * Wget 1.8.1 is a bugfix release with no user-visible changes.
470 \f
471 * Changes in Wget 1.8.
472
473 ** A new progress indicator is now available and used by default.
474 You can choose the progress bar type with `--progress=TYPE'.  Two
475 types are available, "bar" (the new default), and "dot" (the old
476 dotted indicator).  You can permanently revert to the old progress
477 indicator by putting `progress = dot' in your `.wgetrc'.
478
479 ** You can limit the download rate of the retrieval using the
480 `--limit-rate' option.  For example, `wget --limit-rate=15k URL' will
481 tell Wget not to download the body of the URL faster than 15 kilobytes
482 per second.
483
484 ** Recursive retrieval and link conversion have been revamped:
485
486 *** Wget now traverses links breadth-first.  This makes the
487 calculation of depth much more reliable than before.  Also, recursive
488 downloads are faster and consume *significantly* less memory than
489 before.
490
491 *** Links are converted only when the entire retrieval is complete.
492 This is the only safe thing to do, as only then is it known what URLs
493 have been downloaded.
494
495 *** BASE tags are handled correctly when converting links.  Since Wget
496 already resolves <base href="..."> when resolving handling URLs, link
497 conversion now makes the BASE tags point to an empty string.
498
499 *** HTML anchors are now handled correctly.  Links to an anchor in the
500 same document (<a href="#anchorname">), which used to confuse Wget,
501 are now converted correctly.
502
503 *** When in page-requisites (-p) mode, no-parent (-np) is ignored when
504 retrieving for inline images, stylesheets, and other documents needed
505 to display the page.
506
507 *** Page-requisites (-p) mode now works with frames.  In other words,
508 `wget -p URL-THAT-USES-FRAMES' will now download the frame HTML files,
509 and all the files that they need to be displayed properly.
510
511 ** `--base' now works conjunction with `--input-file', providing a
512 base for each URL and thereby allowing the URLs in the file to be
513 relative.
514
515 ** If a host has more than one IP address, Wget uses the other
516 addresses when accessing the first one fails.
517
518 ** Host directories now contain port information if the URL is at a
519 non-standard port.
520
521 ** Wget now supports the robots.txt directives specified in
522 <http://www.robotstxt.org/wc/norobots-rfc.txt>.
523
524 ** URL parser has been fixed, especially the infamous overzealous
525 quoting.  Wget no longer dequotes reserved characters, e.g. `%3F' is
526 no longer translated to `?', nor `%2B' to `+'.  Unsafe characters
527 which are not reserved are still escaped, of course.
528
529 ** No more than 20 successive redirections are allowed.
530 \f
531 * Wget 1.7.1 is a bugfix release with no user-visible changes.
532 \f
533 * Changes in Wget 1.7.
534
535 ** SSL (`https') pages now work if you compile Wget with SSL support;
536 use the `--with-ssl' configure flag.  You need to have OpenSSL
537 installed.
538
539 ** Cookies are now supported.  Wget will accept cookies sent by the
540 server and return them in later requests.  Additionally, it can load
541 and save cookies to disk, in the same format that Netscape uses.
542
543 ** "Keep-alive" (persistent) HTTP connections are now supported.
544 Using keep-alive allows Wget to share one TCP/IP connection for
545 many retrievals, making multiple-file downloads faster and less
546 stressing for the server and the network.
547
548 ** Wget now recognizes FTP directory listings generated by NT and VMS
549 servers.
550
551 ** It is now possible to recurse through FTP sites where logging in
552 puts you in some directory other than '/'.
553
554 ** You may now use `~' to mean home directory in `.wgetrc'.  For
555 example, `load_cookies = ~/.netscape/cookies.txt' works as you would
556 expect.
557
558 ** The HTML parser has been rewritten.  The new one works more
559 reliably, allows finer-grained control over which tags and attributes
560 are detected, and has better support for some features like correctly
561 skipping comments and declarations, decoding entities, etc.  It is
562 also more general.
563
564 ** <meta name="robots"> tags are now respected.
565
566 ** Wget's internal tables now use hash tables instead of linked lists
567 where appropriate.  This results in huge speedups when retrieving
568 large sites (thousands of documents).
569
570 ** Wget now has a man page, automatically generated from the Texinfo
571 documentation.  (The last version that shipped with a man page was
572 1.4.5).  To get this, you need to have pod2man from the Perl
573 distribution installed on your system.
574 \f
575 * Changes in Wget 1.6
576
577 ** Administrative changes.
578
579 *** Maintainership.  Due to Hrvoje being plagued with a "real job",
580 Dan Harkless is the most active maintainer (not that he doesn't have a
581 real job as well).  Hrvoje still participates occasionally, and both
582 are being helped by many other people.
583
584 *** Web page.  Thanks to Jan Prikryl, Wget has an "official" web page.
585 Take a look at:
586
587     http://sunsite.dk/wget/
588
589 *** Anonymous CVS.  Thanks to ever-helpful Karsten Thygesen, Wget
590 sources are now available at an anonymous CVS server.  Take a look at
591 the web page for downloading instructions.
592
593 ** New -K / --backup-converted / backup_converted = on option causes files
594 modified due to -k to be saved with a .orig prefix before being changed.  When
595 using -N as well, it is these .orig files that are compared against the server.
596
597 ** New --follow-tags / follow_tags = ... option allows you to restrict
598 Wget to following only certain HTML tags when doing a recursive
599 retrieval.  -G / --ignore-tags / ignore_tags = ... is just the
600 opposite -- all tags but the ones you specify will be followed.
601
602 ** New --waitretry / waitretry = SECONDS option allows waiting between retries
603 of failed downloads.  Wget will use "linear" backoff, waiting 1 second after the
604 first failure, 2 after the second, up to SECONDS.  waitretry is set to 10 by
605 default in the system wgetrc.
606
607 ** New -p / --page-requisites / page_requisites = on option causes
608 Wget to download all ancillary files necessary to display a given HTML
609 page properly (e.g. inlined images).
610
611 ** New -E / --html-extension / html_extension = on option causes Wget
612 to append ".html" to text/html filenames not ending in regexp
613 "\.[Hh][Tt][Mm][Ll]?".
614
615 ** New type of .wgetrc command -- "lockable Boolean".  Can be set to on, off,
616 always, or never.  This allows the .wgetrc to override the commandline.  So far,
617 passive_ftp is the only .wgetrc command which takes a lockable Boolean.
618
619 ** A number of new translation files have been added.
620
621 ** New --bind-address / bind_address = <address> option for people on hosts
622 bound to multiple IP addresses.
623
624 ** wget now accepts (illegal per HTTP spec) relative URLs in HTTP redirects.
625 \f
626 * Wget 1.5.3 is a bugfix release with no user-visible changes.
627 \f
628 * Wget 1.5.2 is a bugfix release with no user-visible changes.
629 \f
630 * Wget 1.5.1 is a bugfix release with no user-visible changes.
631 \f
632 * Changes in Wget 1.5.0
633
634 ** Wget speaks many languages!
635
636 On systems with gettext(), Wget will output messages in the language
637 set by the current locale, if available.  At this time we support
638 Czech, German, Croatian, Italian, Norwegian and Portuguese.
639
640 ** Opie (Skey) is now supported with FTP.
641
642 ** HTTP Digest Access Authentication (RFC2069) is now supported.
643
644 ** The new `-b' option makes Wget go to background automatically.
645
646 ** The `-I' and `-X' options now accept wildcard arguments.
647
648 ** The `-w' option now accepts suffixes `s' for seconds, `m' for
649 minutes, `h' for hours, `d' for days and `w' for weeks.
650
651 ** Upon getting SIGHUP, the whole previous log is now copied to
652 `wget-log'.
653
654 ** Wget now understands proxy settings with explicit usernames and
655 passwords, e.g. `http://user:password@proxy.foo.com/'.
656
657 ** You can use the new `--cut-dirs' option to make Wget create less
658 directories.
659
660 ** The `;type=a' appendix to FTP URLs is now recognized.  For
661 instance, the following command will retrieve the welcoming message in
662 ASCII type transfer:
663
664     wget "ftp://ftp.somewhere.com/welcome.msg;type=a"
665
666 ** `--help' and `--version' options have been redone to to conform to
667 standards set by other GNU utilities.
668
669 ** Wget should now be compilable under MS Windows environment.  MS
670 Visual C++ and Watcom C have been used successfully.
671
672 ** If the file length is known, percentages are displayed during
673 download.
674
675 ** The manual page, now hopelessly out of date, is no longer
676 distributed with Wget.
677 \f
678 * Wget 1.4.5 is a bugfix release with no user-visible changes.
679 \f
680 * Wget 1.4.4 is a bugfix release with no user-visible changes.
681 \f
682 * Changes in Wget 1.4.3
683
684 ** Wget is now a GNU utility.
685
686 ** Can do passive FTP.
687
688 ** Reads .netrc.
689
690 ** Info documentation expanded.
691
692 ** Compiles on pre-ANSI compilers.
693
694 ** Global wgetrc now goes to /usr/local/etc (i.e. $sysconfdir).
695
696 ** Lots of bugfixes.
697 \f
698 * Changes in Wget 1.4.2
699
700 ** New mirror site at ftp://sunsite.auc.dk/pub/infosystems/wget/,
701 thanks to Karsten Thygesen.
702
703 ** Mailing list!  Mail to wget-request@sunsite.auc.dk to subscribe.
704
705 ** New option --delete-after for proxy prefetching.
706
707 ** New option --retr-symlinks to retrieve symbolic links like plain
708 files.
709
710 ** rmold.pl -- script to remove files deleted on the remote server
711
712 ** --convert-links should work now.
713
714 ** Minor bugfixes.
715 \f
716 * Changes in Wget 1.4.1
717
718 ** Minor bugfixes.
719
720 ** Added -I (the opposite of -X).
721
722 ** Dot tracing is now customizable; try wget --dot-style=binary
723 \f
724 * Changes in Wget 1.4.0
725
726 ** Wget 1.4.0 [formerly known as Geturl] is an extensive rewrite of
727 Geturl.  Although many things look suspiciously similar, most of the
728 stuff was rewritten, like recursive retrieval, HTTP, FTP and mostly
729 everything else.  Wget should be now easier to debug, maintain and,
730 most importantly, use.
731
732 ** Recursive HTTP should now work without glitches, even with Location
733 changes, server-generated directory listings and other naughty stuff.
734
735 ** HTTP regetting is supported on servers that support Range
736 specification. WWW authorization is supported -- try
737 wget http://user:password@hostname/
738
739 ** FTP support was rewritten and widely enhanced. Globbing should now
740 work flawlessly. Symbolic links are created locally. All the
741 information the Unix-style ls listing can give is now recognized.
742
743 ** Recursive FTP is supported, e.g.
744     wget -r ftp://gnjilux.cc.fer.hr/pub/unix/util/
745
746 ** You can specify "rejected" directories, to which you do not want to
747 enter, e.g. with wget -X /pub
748
749 ** Time-stamping is supported, with both HTTP and FTP. Try wget -N URL.
750
751 ** A new texinfo reference manual is provided.  It can be read with
752 Emacs, standalone info, or converted to HTML, dvi or postscript.
753
754 ** Fixed a long-standing bug, so that Wget now works over SLIP
755 connections.
756
757 ** You can have a system-wide wgetrc (/usr/local/lib/wgetrc by
758 default). Settings in $HOME/.wgetrc override the global ones, of
759 course :-)
760
761 ** You can set up quota in .wgetrc to prevent sucking too much
762 data. Try `quota = 5M' in .wgetrc (or quota = 100K if you want your
763 sysadmin to like you).
764
765 ** Download rate is printed after retrieval.
766
767 ** Wget now sends the `Referer' header when retrieving
768 recursively.
769
770 ** With the new --no-parent option Wget can retrieve FTP recursively
771 through a proxy server.
772
773 ** HTML parser, as well as the whole of Wget was rewritten to be much
774 faster and less memory-consuming (yes, both).
775
776 ** Absolute links can be converted to relative links locally. Check
777 wget -k.
778
779 ** Wget catches hangup, filtering the output to a log file and
780 resuming work. Try kill -HUP %?wget.
781
782 ** User-defined headers can be sent.  Try
783
784     wget http://fly.cc.her.hr/ --header='Accept-Charset: iso-8859-2'
785
786 ** Acceptance/Rejection lists may contain wildcards.
787
788 ** Wget can display HTTP headers and/or FTP server response with the
789 new `-S' option.  It can save the original HTTP headers with `-s'.
790
791 ** socks library is now supported (thanks to Antonio Rosella
792 <Antonio.Rosella@agip.it>). Configure with --with-socks.
793
794 ** There is a nicer display of REST-ed output.
795
796 ** Many new options (like -x to force directory hierarchy, or -m to
797 turn on mirroring options).
798
799 ** Wget is now distributed under GNU General Public License (GPL).
800
801 ** Lots of small features I can't remember. :-)
802
803 ** A host of bugfixes.
804 \f
805 * Changes in Geturl 1.3
806
807 ** Added FTP globbing support (ftp://fly.cc.fer.hr/*)
808
809 ** Added support for no_proxy
810
811 ** Added support for ftp://user:password@host/
812
813 ** Added support for %xx in URL syntax
814
815 ** More natural command-line options
816
817 ** Added -e switch to execute .geturlrc commands from the command-line
818
819 ** Added support for robots.txt
820
821 ** Fixed some minor bugs
822 \f
823 * Geturl 1.2 is a bugfix release with no user-visible changes.
824 \f
825 * Changes in Geturl 1.1
826
827 ** REST supported in FTP
828
829 ** Proxy servers supported
830
831 ** GNU getopt used, which enables command-line arguments to be ordered
832 as you wish, e.g.  geturl http://fly.cc.fer.hr/ -vo log is the same as
833 geturl -vo log http://fly.cc.fer.hr/
834
835 ** Netscape-compatible URL syntax for HTTP supported: host[:port]/dir/file
836
837 ** NcFTP-compatible colon URL syntax for FTP supported: host:/dir/file
838
839 ** <base href="xxx"> supported
840
841 ** autoconf supported
842 \f
843 ----------------------------------------------------------------------
844 Copyright information:
845
846 Copyright (C) 1997-2005 Free Software Foundation, Inc.
847
848    Permission is granted to anyone to make or distribute verbatim
849    copies of this document as received, in any medium, provided that
850    the copyright notice and this permission notice are preserved, thus
851    giving the recipient permission to redistribute in turn.
852
853    Permission is granted to distribute modified versions of this
854    document, or of portions of it, under the above conditions,
855    provided also that they carry prominent notices stating who last
856    changed them.