support new duplicity versions:
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- unreleased
2     backupninja changes
3
4     handler changes
5         dup:
6          . General cleanup
7          . Better support for new duplicity (>= 0.4.4) command line syntax:
8            run remove-older-than when $keep is not set to yes (Closes: #458816),
9            and run "duplicity cleanup" before any other duplicity command; both
10            only trigger a warning on failure, since they should not stop backups
11            from being done. Also migrated full/incremental backup switch to the
12            new syntax.
13         rdiff:
14          . Fixed ignore_version default value missing
15          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
16            into options via remote-schema not already specified (Closes: #424639)
17         wget:
18          . New handler from rhatto designed to incrementally pull content from
19            a website to a local folder, based on the rsync handler
20
21 version 0.9.5 -- December 2, 2007
22     backupninja changes
23          . Fixed checks on configuration files permissions, since the patch
24            applied to fix #370396 broke this, especially for configuration files
25            created with permissions 000 by an older ninjahelper version.
26          . Enhanced portability for other platforms
27          . Added quoting because it was needed to prevent shell expansion, broking the
28            toint function sometimes (Closes: Trac#11)
29          . Fixed reportspace option (Closes: Trac#10)
30          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
31     handler changes
32         dup:
33          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
34            is not supported anymore) (Closes: #447425)
35          . New tmpdir configuration option, very useful in case duplicity tends
36            to fill up /tmp.
37         ldap:
38          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
39            compress=yes to be less redundant and not create empty uncompressed
40            file (Closes: #394935)
41          . Fixed ninjahelper to properly set compress option, standardized on yes/no
42            instead of on/off
43          . Fixed problem that caused combination of slapcat and compress to not work
44            together (Closes: Trac#29)
45          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
46            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
47         maildir:
48          . Added an examples file (Closes: Trac#23)
49          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
50            coreutils options, as well as some bashisms (Closes: Trac#24)
51          . Fix test mode (Closes: Trac#25)
52         mysql:
53          . Fixed case where odd combination of configuration options caused sqldump
54            backups to get overwritten with an empty file (Closes: #402679)
55          . Added 'nodata' option to enable you to specify tables that you want to omit
56            the data from a backup, but still backup the table structure. This is very
57            useful in cases where tables contain large amounts of cache data. See the
58            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
59          . Enhance code for selecting databases by asking MySQL not to give us the
60            header (-N), to not draw pretty boxes around the output (-B), send the query
61            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
62            Matthew Palmer (Closes: #452039).
63         pgsql:
64          . Support configuring PGSQLUSER for real, and document it a bit; this
65            broken support actually prevented pgsql handler to work for VServers
66            (Closes: #396578)
67         rdiff-backup:
68          . Added cstream support to allow for bandwidth limiting
69          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
70          . Add configuration option to allow you to disable the version check
71            as in some instances this may be an ok scenario (Closes: #424632)
72          . Added local destination support to helper (Closes: Trac#4)
73          . Allow exclude-only configurations (Closes: Trac#21)
74         rub/rsync
75          . Fixed typo in rub handler that caused it to not work
76          . Changed to use lib/vserver code
77          . Fixed fsck error
78          . Fixed integer comparison (Closes: Trac#3)
79          . Renamed handler to 'rsync', replaces outdated rub handler
80          . updated examples/Makefile.am and handlers/Makefile.am to include
81            rsnap/rsync (Closes: #440554)
82          . Added example.rsync configuration file
83         sys:
84          . Fixed typo breaking things for VServers.
85          . Fix bug when vrootdir is on its own partition (Closes: #395928)
86          . Better sfdisk error and output handling: should now properly warn
87            when it does not manage to backup a partition table, and shut up when
88            it succeeds (Closes: #396632)
89          . Added option to not use sfdisk at all, useful for vserver/xen instances
90            that produce warnings about no harddisks found (Closes: #404071)
91          . Fixed example in example.sys to detail the __star__ in partitionsfile and
92            note why its necessary (Closes: #409192)
93          . Force C locale for sfdisk to ensure english words are found in grep
94          . Make directory where output is placed configurable, and create the parent dir
95            if it doesn't exist (Closes: Trac#1)
96     ninjareport
97          . Added first draft of method to aggregate reports from many servers into
98            one email. Requires logtail, rsync, configuration of reporthost,
99            reportdirectory and reportuser in backupninja.conf. Configure cron to
100            run once a day, and individual backupninjas not to report by email their
101            status, then enjoy one email report from all hosts, rather than multiple
102     fixed 'make install' bug that failed if /etc/backup.d already existed
103     changed spaces to tabs in Makefile.am
104     updated redhat spec file (thanks Adam Monsen)
105
106 version 0.9.4 -- October 6th, 2006
107     backupninja changes
108          . Fixed bug in toint(), and thus isnow(), which caused it
109            to not work when run from cron.
110          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
111          . Add admingroup option to configuration to allow a group that can
112            read/write configurations (instead of only allowing root). Checks
113            and complains about group-readable files only when the group differs
114            from the one in the configuration file (default is root as before).
115            Thanks to Martin Krafft for the patch (Closes: #370396).
116          . When determining which backup actions to make, find now follows
117            symlinks for $configdirectory
118          . Changed order of -s to mail for compatibility
119          . fixed permission stat call so it uses the --format supported by
120            coreutils (Closes: #382747)
121          . Added disk space report option (thanks Adam Kosmin)
122     handler changes
123         Added tar handler:
124          . create tarballs
125         Added rsnap handler:
126          . rotated rsync snapshops
127          . code from paulv@bikkel.org
128         Added rub handler:
129          . alternative to rsnap
130          . code from rhatto@riseup.net
131         mysql:
132          . Fixed improper use of $vuserhome (Closes: #351083)
133          . Fixed erroneous removal of tmpfile when it didn't exit
134          . Fixed inversed vsname emptiness check
135          . Fixed su quote usage to be more posixy
136          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
137          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
138         pgsql:
139          . Fixed inversed vsname emptiness check
140          . Fixed su quote usage to be more posixy
141          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
142          . postgres user UID is now the one from inside the vserver if necessary
143          . Compress now happens in-line to save some disk space (Closes: #370778)
144          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
145         svn:
146          . Fixed inversed vsname emptiness check
147         rdiff:
148          . Symlink and globbing support in include/exclude/vsinclude
149            clarification: globbing is fully supported again, whereas no attempt
150            is done to dereference symlinks anymore, due to incompatibilities
151            between various readlink versions in this field.
152          . Removed overzealous vsnames check
153          . Now works if testconnect=no and if $test is not defined.
154          . add $sshoptions config parameter in [dest] section of config so
155            connections to ports other than 22 can be made by adding the
156            following to the top of the handler config:
157            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
158            --server'
159         dup:
160          . Symlink and globbing support in include/exclude/vsinclude
161            clarification: globbing is fully supported again, whereas no attempt
162            is done to dereference symlinks anymore, due to incompatibilities
163            between various readlink versions in this field.
164          . Removed over zealous vsnames check
165          . Does not pretend anymore that duplicity can work without
166            any passphrase
167          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
168            0.4.3 will integrate them); documented how to write sftp-compatible
169            sshoptions (Closes: #388543)
170          . Now forbid to (try to) include /.
171         sys:
172          . Many more system checks were added, (thanks to Petr Klíma)
173          . Added warning if no devices were found (thanks Ranier Zocholl)
174          . Enhanced debian package selections to include purged packages (thanks
175            Tom Hoover)
176          . Removed warning about vserver not running (thanks anarcat)
177         ldap:
178          . Compress now happens in-line to save some disk space (Closes: #370778)
179         makecd:
180          . Added nicelevel option (thanks rhatto)
181         trac:
182          . fixed problem when src was set to the trac repo directly (Closes: #382737)
183     lib changes
184         vserver:
185          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
186          . found_vservers: escaped special grep repetition character +
187          . forced mktemp to use a template with a name to be more compatible with
188            different versions of mktemp, thanks anarcat
189     ninjahelper changes
190          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
191          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
192          . When determining which backup actions to list, find now follows
193            symlinks for $configdirectory
194          . Stop checking helpers perms: both "make install" and distros packages
195            install them with appropriate permissions, it's overzealous to check
196            this at runtime, and is more complicated to do with current
197            admingroup option.
198         dup.helper:
199          . Fix: signing was enabled with symmetric encryption.
200     changed cron permissions to 644
201     changed /etc/backup.d permissions to 0770 (for admingroup)
202     minor documentation fixes
203     improved RPM build process allowing 'make rpm-package' and 'make
204     srpm-package' targets, also fixes permissions on man directories,
205     cleans up RPM-related files during distclean, and adds default
206     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
207
208 version 0.9.3 -- February 1st, 2006
209     autotools fixes
210     backupninja changes
211         backupninja.conf
212          . added (commented out) the various default paths to
213            programs such as PGSQLDUMP, so that users can figure
214            out more easily they can customize them
215         code refactor:
216          . now uses vservers lib to initialize vservers support
217     handler changes
218         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
219            degrees) new lib/vserver functionality
220         mysql:
221          . fixed no user defaults file processing
222         duplicity:
223          . fixed (again...) globbing in include and exclude options (Debian bug
224            #348022, follow-up to #338796)
225          . warn if vsnames or vsinclude is enabled while vservers support is
226            disabled in backupninja.conf
227          . now works when multiple vservers names are given (separated by space)
228            in vsnames config variable
229         rdiff
230          . fixed globbing bug in include, exclude and vsinclude options
231          . it's now possible to choose exactly which vservers should be
232            backed-up, as it already was with duplicity handler, with the
233            "vsnames" configuration setting
234     ninjahelper changes
235         rdiff.helper:
236          . fixed errors in create remote dir
237          . code formatting cleanup (three spaces indent)
238          . fixed bug which caused only first include/exclude dir to
239            have "include = "
240          . fixed globbing bug with exclude
241         ninjahelper:
242          . now reports error if the helper script has a syntax error or bombs out.
243          . code formatting cleanup (three spaces indent)
244     lib changes
245         vserver:
246          . init_vservers: improved VROOTDIR detection
247          . init_vservers: test in a stricter way the real vservers availability
248          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
249            don't follow symlinks)
250          . init_vservers: warn if vservers are enabled but no vserver is found
251          . new function: vservers_exist
252     known bugs:
253         easydialog:
254          . formDisplay does not return exit status.
255
256 version 0.9.2 -- December 29, 2005
257     backupninja changes
258         fixed broken toint() which caused when "everyday" problems
259         backupninja.conf.5 updated to include "when" and "vservers"
260         code refactor:
261             . moved to lib/ some code that has to be shared between
262               backupninja and ninjahelper
263     handler changes
264         trac:
265             . mkdir subdirectory problem fixed
266         duplicity:
267             . globbing support fixed in include and exclude options
268             . different signing and encrypting key support added
269             . fixed erroneous comments in example.dup about the way
270               GnuPG-related options are used
271         mysql:
272             . handler vserver bugs fixed and debug output enhanced
273     ninjahelper(s) changes
274         vserver-related functions added to lib/vservers.in
275         added man/ninjahelper.1 man page
276         makecd:
277             . was missing in Makefile.am/.in
278         rdiff-backup:
279             . used to expand '*' in default source directories
280             . the "Cancel" buttons used to have a weird behaviour
281             . updated to include Vserver selection
282         pgsql:
283             . forbid the user to choose an empty database set
284             . "Cancel" button now does what it is meant to do
285         mysql:
286             . enhanced for vserver support
287             . now able to select databases and dump directory
288         duplicity:
289             . new handler added (with Vserver support)
290
291 version 0.9.1 -- November 05 2005
292     rearranged source so that it is relocatable with autotools
293         (thanks to Petr Klíma petr.klima@madeta-group.cz)
294     fixed many bugs in rdiff helper
295     rdiff handler does not require 'label' (for real this time?)
296     added makecd ninjahelper
297         (thanks to Stefani stefani@riseup.net)
298     made ninjahelper create files with mode 600 rather than 000
299     changed subversion handler to use svnadmin hotcopy instead of
300             the unsupported hot-copy.py script, which was moved in Debian
301     update rdiff ninjahelper
302             now detects and auto-install rdiff-backup on the remote
303             machine if possible, also tests the remote backup directory
304             and offers to create it if it doesn't exist
305
306 version 0.9 -- October 19 2005
307     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
308      fixed insecure temporary file creation
309     *****************************************
310     removed erroneous magic file marker in pgsql handler
311     fixed incorrect find positional
312     changed direct grep of /etc/passwd to getent passwd.
313     rdiff helper has much better information on failed ssh attempt
314         (patch from cmccallum@thecsl.org).
315     rdiff handler now supports remote source and local dest.
316         (patch from cmccallum@thecsl.org).
317     man pages are greatly improved.
318
319 version 0.8 -- September 15 2005
320     added pgsql (PostgreSQL) handler, with vservers support.
321     added vservers support to duplicity handler
322         Note: the configuration is a bit different than the rdiff
323         handler's one, but the default behavior is the same:
324         have a look at example.dup.
325     improved README
326     documented .disabled method.
327     corrected VROOTDIR default value.
328     added ninjahelper to the install instructions.
329     improved rdiff, dup and sys handlers' vservers support
330         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
331         to be seen as a vserver
332     changes to sys handler
333         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
334         fixed dpkg existence test inside vserver.
335         fixed $nodpkg use.
336     changes to pgsql handler
337         now checks if the specified vserver is running.
338         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
339         now checks if "postgres" user exists on the host/vserver.
340     changes to ninjahelper
341         check_perms() does not die anymore on group/world readable
342         helper scripts (now consistent with the "helper scripts
343         must not be group or world writable!" error msg).
344     xedit action now tries $EDITOR, then /etc/alternatives/editor,
345         then nano, vim and vi, and aborts if none of these exists.
346     added helper for pgsql handler.
347     rdiff handler now does not require 'label'
348     changes to mysql and svn handlers' vservers support
349         these handlers now check if the source vserver is running
350     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
351
352 version 0.7 -- July 26 2005
353     added ninjahelper: a dialog based wizard for creating backupninja configs.
354     considerably improved and changed the log file output.
355     you can now disable actions with .disabled (this is new preferred method).
356     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
357     fixed bug when specifying multiple 'when' options.
358
359 version 0.6 -- June 16 2005
360     ldap handler has new options: backup method to use (ldapsearch or
361         slapcat), restart, passwordfile and binddn. Default backup method
362         is set to ldapsearch as this is safer
363     ******************************************************************
364     NOTE: to get the previous default behavior with the ldap handler,
365     you must set "method = slapcat". The new default is ldapsearch.
366     ******************************************************************
367     implemented fix so that the main script will echo fatal errors rather
368         than being silent about them, this means an error message every hour
369         if there is a major configuration problem (not a handler problem)
370     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
371     changes to duplicity handler (thanks intrigeri!):
372         "keep = yes" now disables file cleaning on desthost
373         added "sign" option for backups signing
374         added "encryptkey" option to specify the gpg key to use
375         split config into [source], [gpg] and [dest] sections
376         added "nicelevel" option
377         added "testconnect" option
378         added "sshoptions" option (will be passed to ssh/scp)
379         added "bandwidthlimit" option
380     example.dup example config file for duplicity handler
381     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
382     added configfile option to mysql handler
383         the default is /etc/mysql/debian.cnf. with this,
384         sqldump doesn't need dbusername. (hotcopy still does).
385     fixed bug in mysql handler which caused some passwords to not work.
386         (.my.cnf files now have double quotes around password)
387     can now pass options to hwinfo and sfdisk in sys handler.
388
389 version 0.5 -- April 12 2005
390     rdiff handler works when remote sshd has a banner
391     rdiff handler supports local dest
392     logfile is created if it doesn't exist
393     added "when = hourly"
394     added optional 'nicelevel' to rdiff handler
395     fixed bug where actions were not run in numeric order.
396     improved 'when' parsing.
397
398 version 0.4.4 -- March 18 2005
399     results of handlers are now read line by line.
400     changes to rdiff handler: added "options", and "keep" is
401         not necessarily days now (ie, it will pass straight through to
402         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
403     added dup handler (still pretty beta)
404     added maildir handler (very specialized handler)
405     added --run option (runs the specified action file)
406     improved sys handler, now uses hwinfo
407     added subversion hotbackup handler, svn.
408     added PATH to cron.d file, which fixes file not found errors.
409
410 version 0.4.2 -- Jan 6 2005
411     fixed bug which caused a report email to be sent even if no actions were run.
412     fixed bug where multiple handler status messages were ignored
413     added status in the subject line of report emails
414
415 version 0.4.1 -- Jan 3 2005
416     added $usecolors and now more conservative about when colors are echoed.
417     fixed major bug, 'when' actually works now.
418     replaced debug function with debug, info, warning, error, fatal.
419     added --now option to force all actions to be performed now.
420
421 version 0.4 -- Dec 26 2004
422     added "when" option, so that all configs can specify when
423         they are to be run.
424     added reportsuccess and reportwarning config options
425     added .sys handler (hardware, packages, partitions).
426
427 version 0.3.4 -- Dec 8 2004
428     fixed numerical variable quoting compatibility with older wc
429     fixed stderr redirect bug
430     some comments in example.rdiff
431
432 version 0.3.3 -- Nov 10 2004
433     '*' (asterisk) works now in rdiff config files
434     works now with gawk as well as mawk
435     many bug fixes to ldap handler
436     paths to helper scripts can be configured in global config
437     does not require /usr/bin/stat
438
439 version 0.3.2 -- Sept 29 2004
440     handler scripts are no longer executable (to comply with debian policy)
441     handler error and warning messages are sent with the notify email
442
443 version 0.3.1 -- Sept 5 2004
444     added ldap handler
445     moved sh support to a handler script
446     add test mode, where no action is taken.
447     added --help
448     force only root can read /etc/backup.d/*
449     fixed missing equals symbols in example.rdiff
450     changed backupninja executable to be /usr/sbin rather than /usr/bin
451
452 version 0.3 -- Oct 20 2004
453     ** IMPORTANT ** all config files are now ini style, not apache style
454     rewrote all scripts in bash for portability
455     added drop-in backupninja lib directory (/usr/share/backupninja)
456     all scripts are now run as root
457
458 version 0.2 -- Oct 14 2004
459     move distribution folder ./cron.d to ./etc/cron.d
460     fixed bug: removed printr of excludes (!)
461     added support for changing the user/group in rdiff sources.
462     added support for .mysql config files.
463
464 version 0.1 -- Oct 8 2004
465     initial release
466