195bbab287e059688567f2b7e756b232693bb735
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- July 21, 2008
2     backupninja changes
3          . fix bug in cstream definition, thanks Jamie McClelland
4          . Allow the entire backup run to be halted by an action, thanks to
5            Matthew Palmer (Closes: #455836)
6          . Fixed tr construct reporting a warning (Closes: #452669)
7     lib changes
8         vserver:
9          . added vservers_running function
10         tools
11          . mktemp is now required to run backupninja, removed less secure
12            fall-back if mktemp did not exist on the system
13     handler changes
14         dup:
15          . General cleanup
16          . Better support for new duplicity (>= 0.4.4) command line syntax:
17            run remove-older-than when $keep is not set to yes (Closes: #458816),
18            and run "duplicity cleanup" before any other duplicity command; both
19            only trigger a warning on failure, since they should not stop backups
20            from being done. Also migrated full/incremental backup switch to the
21            new syntax.
22          . Support every duplicity-supported transport with new configuration
23            option desturl (Closes: #483712, #346040, Trac#2).
24          . Actually allow to backup only VServers, by relaxing $include test.
25          . Set secure permissions on tmpdir when creating it.
26         ldap:
27          . support HDB backend just as the BDB one, and make message clearer
28            when no supported backend is found (Closes: #476910)
29         rdiff:
30          . Fixed ignore_version default value missing
31          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
32            into options via remote-schema not already specified (Closes: #424639)
33         wget:
34          . New handler from rhatto designed to incrementally pull content from
35            a website to a local folder, based on the rsync handler
36         maildir:
37          . fixed bug where maildirs that start with a number were skipped
38          . make maildir helper look in every subdirectory of the source directory for
39            maildirs, rather than just looking in the directories [a-zA-Z0-9], thanks
40            for the patch from chris@cenolan.com (Trac#43).
41          . make deleted maildirs record the date they were deleted
42          . add destid_file configuration option to enable you to specify an alternate
43            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
44         pgsql, mysql, svn, sys:
45          . use new vservers_running function from lib/vserver (factorization++)
46         sys:
47          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
48            (Closes: Trac#39)
49          . support selection of VServers to run on, in the same way as in the
50            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
51          . add support for capturing the package debconf selection states using
52            debconf-get-selections
53          . fixed catifexec function to actually work, also now passes the arguments
54            given to catifexec() to the called command (Thanks John Hallam!)
55          . Added more robust software RAID information capture by running mdadm
56            -Q --detail /dev/md?* because some people may have empty mdadm.conf files
57            (Thanks to John Hallam).
58         trac:
59          . stop failing on all the trac backups if just one fails, this means
60            removing the temporary trac backup directories if they fail
61         makecd
62          . updated handler for new toolset (genisoimage and wodim)
63
64 version 0.9.5 -- December 2, 2007
65     backupninja changes
66          . Fixed checks on configuration files permissions, since the patch
67            applied to fix #370396 broke this, especially for configuration files
68            created with permissions 000 by an older ninjahelper version.
69          . Enhanced portability for other platforms
70          . Added quoting because it was needed to prevent shell expansion, broking the
71            toint function sometimes (Closes: Trac#11)
72          . Fixed reportspace option (Closes: Trac#10)
73          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
74     handler changes
75         dup:
76          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
77            is not supported anymore) (Closes: #447425)
78          . New tmpdir configuration option, very useful in case duplicity tends
79            to fill up /tmp.
80         ldap:
81          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
82            compress=yes to be less redundant and not create empty uncompressed
83            file (Closes: #394935)
84          . Fixed ninjahelper to properly set compress option, standardized on yes/no
85            instead of on/off
86          . Fixed problem that caused combination of slapcat and compress to not work
87            together (Closes: Trac#29)
88          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
89            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
90         maildir:
91          . Added an examples file (Closes: Trac#23)
92          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
93            coreutils options, as well as some bashisms (Closes: Trac#24)
94          . Fix test mode (Closes: Trac#25)
95         mysql:
96          . Fixed case where odd combination of configuration options caused sqldump
97            backups to get overwritten with an empty file (Closes: #402679)
98          . Added 'nodata' option to enable you to specify tables that you want to omit
99            the data from a backup, but still backup the table structure. This is very
100            useful in cases where tables contain large amounts of cache data. See the
101            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
102          . Enhance code for selecting databases by asking MySQL not to give us the
103            header (-N), to not draw pretty boxes around the output (-B), send the query
104            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
105            Matthew Palmer (Closes: #452039).
106         pgsql:
107          . Support configuring PGSQLUSER for real, and document it a bit; this
108            broken support actually prevented pgsql handler to work for VServers
109            (Closes: #396578)
110         rdiff-backup:
111          . Added cstream support to allow for bandwidth limiting
112          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
113          . Add configuration option to allow you to disable the version check
114            as in some instances this may be an ok scenario (Closes: #424632)
115          . Added local destination support to helper (Closes: Trac#4)
116          . Allow exclude-only configurations (Closes: Trac#21)
117         rub/rsync
118          . Fixed typo in rub handler that caused it to not work
119          . Changed to use lib/vserver code
120          . Fixed fsck error
121          . Fixed integer comparison (Closes: Trac#3)
122          . Renamed handler to 'rsync', replaces outdated rub handler
123          . updated examples/Makefile.am and handlers/Makefile.am to include
124            rsnap/rsync (Closes: #440554)
125          . Added example.rsync configuration file
126         sys:
127          . Fixed typo breaking things for VServers.
128          . Fix bug when vrootdir is on its own partition (Closes: #395928)
129          . Better sfdisk error and output handling: should now properly warn
130            when it does not manage to backup a partition table, and shut up when
131            it succeeds (Closes: #396632)
132          . Added option to not use sfdisk at all, useful for vserver/xen instances
133            that produce warnings about no harddisks found (Closes: #404071)
134          . Fixed example in example.sys to detail the __star__ in partitionsfile and
135            note why its necessary (Closes: #409192)
136          . Force C locale for sfdisk to ensure english words are found in grep
137          . Make directory where output is placed configurable, and create the parent dir
138            if it doesn't exist (Closes: Trac#1)
139     ninjareport
140          . Added first draft of method to aggregate reports from many servers into
141            one email. Requires logtail, rsync, configuration of reporthost,
142            reportdirectory and reportuser in backupninja.conf. Configure cron to
143            run once a day, and individual backupninjas not to report by email their
144            status, then enjoy one email report from all hosts, rather than multiple
145     fixed 'make install' bug that failed if /etc/backup.d already existed
146     changed spaces to tabs in Makefile.am
147     updated redhat spec file (thanks Adam Monsen)
148
149 version 0.9.4 -- October 6th, 2006
150     backupninja changes
151          . Fixed bug in toint(), and thus isnow(), which caused it
152            to not work when run from cron.
153          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
154          . Add admingroup option to configuration to allow a group that can
155            read/write configurations (instead of only allowing root). Checks
156            and complains about group-readable files only when the group differs
157            from the one in the configuration file (default is root as before).
158            Thanks to Martin Krafft for the patch (Closes: #370396).
159          . When determining which backup actions to make, find now follows
160            symlinks for $configdirectory
161          . Changed order of -s to mail for compatibility
162          . fixed permission stat call so it uses the --format supported by
163            coreutils (Closes: #382747)
164          . Added disk space report option (thanks Adam Kosmin)
165     handler changes
166         Added tar handler:
167          . create tarballs
168         Added rsnap handler:
169          . rotated rsync snapshops
170          . code from paulv@bikkel.org
171         Added rub handler:
172          . alternative to rsnap
173          . code from rhatto@riseup.net
174         mysql:
175          . Fixed improper use of $vuserhome (Closes: #351083)
176          . Fixed erroneous removal of tmpfile when it didn't exit
177          . Fixed inversed vsname emptiness check
178          . Fixed su quote usage to be more posixy
179          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
180          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
181         pgsql:
182          . Fixed inversed vsname emptiness check
183          . Fixed su quote usage to be more posixy
184          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
185          . postgres user UID is now the one from inside the vserver if necessary
186          . Compress now happens in-line to save some disk space (Closes: #370778)
187          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
188         svn:
189          . Fixed inversed vsname emptiness check
190         rdiff:
191          . Symlink and globbing support in include/exclude/vsinclude
192            clarification: globbing is fully supported again, whereas no attempt
193            is done to dereference symlinks anymore, due to incompatibilities
194            between various readlink versions in this field.
195          . Removed overzealous vsnames check
196          . Now works if testconnect=no and if $test is not defined.
197          . add $sshoptions config parameter in [dest] section of config so
198            connections to ports other than 22 can be made by adding the
199            following to the top of the handler config:
200            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
201            --server'
202         dup:
203          . Symlink and globbing support in include/exclude/vsinclude
204            clarification: globbing is fully supported again, whereas no attempt
205            is done to dereference symlinks anymore, due to incompatibilities
206            between various readlink versions in this field.
207          . Removed over zealous vsnames check
208          . Does not pretend anymore that duplicity can work without
209            any passphrase
210          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
211            0.4.3 will integrate them); documented how to write sftp-compatible
212            sshoptions (Closes: #388543)
213          . Now forbid to (try to) include /.
214         sys:
215          . Many more system checks were added, (thanks to Petr KlĂ­ma)
216          . Added warning if no devices were found (thanks Ranier Zocholl)
217          . Enhanced debian package selections to include purged packages (thanks
218            Tom Hoover)
219          . Removed warning about vserver not running (thanks anarcat)
220         ldap:
221          . Compress now happens in-line to save some disk space (Closes: #370778)
222         makecd:
223          . Added nicelevel option (thanks rhatto)
224         trac:
225          . fixed problem when src was set to the trac repo directly (Closes: #382737)
226     lib changes
227         vserver:
228          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
229          . found_vservers: escaped special grep repetition character +
230          . forced mktemp to use a template with a name to be more compatible with
231            different versions of mktemp, thanks anarcat
232     ninjahelper changes
233          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
234          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
235          . When determining which backup actions to list, find now follows
236            symlinks for $configdirectory
237          . Stop checking helpers perms: both "make install" and distros packages
238            install them with appropriate permissions, it's overzealous to check
239            this at runtime, and is more complicated to do with current
240            admingroup option.
241         dup.helper:
242          . Fix: signing was enabled with symmetric encryption.
243     changed cron permissions to 644
244     changed /etc/backup.d permissions to 0770 (for admingroup)
245     minor documentation fixes
246     improved RPM build process allowing 'make rpm-package' and 'make
247     srpm-package' targets, also fixes permissions on man directories,
248     cleans up RPM-related files during distclean, and adds default
249     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
250
251 version 0.9.3 -- February 1st, 2006
252     autotools fixes
253     backupninja changes
254         backupninja.conf
255          . added (commented out) the various default paths to
256            programs such as PGSQLDUMP, so that users can figure
257            out more easily they can customize them
258         code refactor:
259          . now uses vservers lib to initialize vservers support
260     handler changes
261         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
262            degrees) new lib/vserver functionality
263         mysql:
264          . fixed no user defaults file processing
265         duplicity:
266          . fixed (again...) globbing in include and exclude options (Debian bug
267            #348022, follow-up to #338796)
268          . warn if vsnames or vsinclude is enabled while vservers support is
269            disabled in backupninja.conf
270          . now works when multiple vservers names are given (separated by space)
271            in vsnames config variable
272         rdiff
273          . fixed globbing bug in include, exclude and vsinclude options
274          . it's now possible to choose exactly which vservers should be
275            backed-up, as it already was with duplicity handler, with the
276            "vsnames" configuration setting
277     ninjahelper changes
278         rdiff.helper:
279          . fixed errors in create remote dir
280          . code formatting cleanup (three spaces indent)
281          . fixed bug which caused only first include/exclude dir to
282            have "include = "
283          . fixed globbing bug with exclude
284         ninjahelper:
285          . now reports error if the helper script has a syntax error or bombs out.
286          . code formatting cleanup (three spaces indent)
287     lib changes
288         vserver:
289          . init_vservers: improved VROOTDIR detection
290          . init_vservers: test in a stricter way the real vservers availability
291          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
292            don't follow symlinks)
293          . init_vservers: warn if vservers are enabled but no vserver is found
294          . new function: vservers_exist
295     known bugs:
296         easydialog:
297          . formDisplay does not return exit status.
298
299 version 0.9.2 -- December 29, 2005
300     backupninja changes
301         fixed broken toint() which caused when "everyday" problems
302         backupninja.conf.5 updated to include "when" and "vservers"
303         code refactor:
304             . moved to lib/ some code that has to be shared between
305               backupninja and ninjahelper
306     handler changes
307         trac:
308             . mkdir subdirectory problem fixed
309         duplicity:
310             . globbing support fixed in include and exclude options
311             . different signing and encrypting key support added
312             . fixed erroneous comments in example.dup about the way
313               GnuPG-related options are used
314         mysql:
315             . handler vserver bugs fixed and debug output enhanced
316     ninjahelper(s) changes
317         vserver-related functions added to lib/vservers.in
318         added man/ninjahelper.1 man page
319         makecd:
320             . was missing in Makefile.am/.in
321         rdiff-backup:
322             . used to expand '*' in default source directories
323             . the "Cancel" buttons used to have a weird behaviour
324             . updated to include Vserver selection
325         pgsql:
326             . forbid the user to choose an empty database set
327             . "Cancel" button now does what it is meant to do
328         mysql:
329             . enhanced for vserver support
330             . now able to select databases and dump directory
331         duplicity:
332             . new handler added (with Vserver support)
333
334 version 0.9.1 -- November 05 2005
335     rearranged source so that it is relocatable with autotools
336         (thanks to Petr KlĂ­ma petr.klima@madeta-group.cz)
337     fixed many bugs in rdiff helper
338     rdiff handler does not require 'label' (for real this time?)
339     added makecd ninjahelper
340         (thanks to Stefani stefani@riseup.net)
341     made ninjahelper create files with mode 600 rather than 000
342     changed subversion handler to use svnadmin hotcopy instead of
343             the unsupported hot-copy.py script, which was moved in Debian
344     update rdiff ninjahelper
345             now detects and auto-install rdiff-backup on the remote
346             machine if possible, also tests the remote backup directory
347             and offers to create it if it doesn't exist
348
349 version 0.9 -- October 19 2005
350     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
351      fixed insecure temporary file creation
352     *****************************************
353     removed erroneous magic file marker in pgsql handler
354     fixed incorrect find positional
355     changed direct grep of /etc/passwd to getent passwd.
356     rdiff helper has much better information on failed ssh attempt
357         (patch from cmccallum@thecsl.org).
358     rdiff handler now supports remote source and local dest.
359         (patch from cmccallum@thecsl.org).
360     man pages are greatly improved.
361
362 version 0.8 -- September 15 2005
363     added pgsql (PostgreSQL) handler, with vservers support.
364     added vservers support to duplicity handler
365         Note: the configuration is a bit different than the rdiff
366         handler's one, but the default behavior is the same:
367         have a look at example.dup.
368     improved README
369     documented .disabled method.
370     corrected VROOTDIR default value.
371     added ninjahelper to the install instructions.
372     improved rdiff, dup and sys handlers' vservers support
373         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
374         to be seen as a vserver
375     changes to sys handler
376         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
377         fixed dpkg existence test inside vserver.
378         fixed $nodpkg use.
379     changes to pgsql handler
380         now checks if the specified vserver is running.
381         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
382         now checks if "postgres" user exists on the host/vserver.
383     changes to ninjahelper
384         check_perms() does not die anymore on group/world readable
385         helper scripts (now consistent with the "helper scripts
386         must not be group or world writable!" error msg).
387     xedit action now tries $EDITOR, then /etc/alternatives/editor,
388         then nano, vim and vi, and aborts if none of these exists.
389     added helper for pgsql handler.
390     rdiff handler now does not require 'label'
391     changes to mysql and svn handlers' vservers support
392         these handlers now check if the source vserver is running
393     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
394
395 version 0.7 -- July 26 2005
396     added ninjahelper: a dialog based wizard for creating backupninja configs.
397     considerably improved and changed the log file output.
398     you can now disable actions with .disabled (this is new preferred method).
399     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
400     fixed bug when specifying multiple 'when' options.
401
402 version 0.6 -- June 16 2005
403     ldap handler has new options: backup method to use (ldapsearch or
404         slapcat), restart, passwordfile and binddn. Default backup method
405         is set to ldapsearch as this is safer
406     ******************************************************************
407     NOTE: to get the previous default behavior with the ldap handler,
408     you must set "method = slapcat". The new default is ldapsearch.
409     ******************************************************************
410     implemented fix so that the main script will echo fatal errors rather
411         than being silent about them, this means an error message every hour
412         if there is a major configuration problem (not a handler problem)
413     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
414     changes to duplicity handler (thanks intrigeri!):
415         "keep = yes" now disables file cleaning on desthost
416         added "sign" option for backups signing
417         added "encryptkey" option to specify the gpg key to use
418         split config into [source], [gpg] and [dest] sections
419         added "nicelevel" option
420         added "testconnect" option
421         added "sshoptions" option (will be passed to ssh/scp)
422         added "bandwidthlimit" option
423     example.dup example config file for duplicity handler
424     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
425     added configfile option to mysql handler
426         the default is /etc/mysql/debian.cnf. with this,
427         sqldump doesn't need dbusername. (hotcopy still does).
428     fixed bug in mysql handler which caused some passwords to not work.
429         (.my.cnf files now have double quotes around password)
430     can now pass options to hwinfo and sfdisk in sys handler.
431
432 version 0.5 -- April 12 2005
433     rdiff handler works when remote sshd has a banner
434     rdiff handler supports local dest
435     logfile is created if it doesn't exist
436     added "when = hourly"
437     added optional 'nicelevel' to rdiff handler
438     fixed bug where actions were not run in numeric order.
439     improved 'when' parsing.
440
441 version 0.4.4 -- March 18 2005
442     results of handlers are now read line by line.
443     changes to rdiff handler: added "options", and "keep" is
444         not necessarily days now (ie, it will pass straight through to
445         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
446     added dup handler (still pretty beta)
447     added maildir handler (very specialized handler)
448     added --run option (runs the specified action file)
449     improved sys handler, now uses hwinfo
450     added subversion hotbackup handler, svn.
451     added PATH to cron.d file, which fixes file not found errors.
452
453 version 0.4.2 -- Jan 6 2005
454     fixed bug which caused a report email to be sent even if no actions were run.
455     fixed bug where multiple handler status messages were ignored
456     added status in the subject line of report emails
457
458 version 0.4.1 -- Jan 3 2005
459     added $usecolors and now more conservative about when colors are echoed.
460     fixed major bug, 'when' actually works now.
461     replaced debug function with debug, info, warning, error, fatal.
462     added --now option to force all actions to be performed now.
463
464 version 0.4 -- Dec 26 2004
465     added "when" option, so that all configs can specify when
466         they are to be run.
467     added reportsuccess and reportwarning config options
468     added .sys handler (hardware, packages, partitions).
469
470 version 0.3.4 -- Dec 8 2004
471     fixed numerical variable quoting compatibility with older wc
472     fixed stderr redirect bug
473     some comments in example.rdiff
474
475 version 0.3.3 -- Nov 10 2004
476     '*' (asterisk) works now in rdiff config files
477     works now with gawk as well as mawk
478     many bug fixes to ldap handler
479     paths to helper scripts can be configured in global config
480     does not require /usr/bin/stat
481
482 version 0.3.2 -- Sept 29 2004
483     handler scripts are no longer executable (to comply with debian policy)
484     handler error and warning messages are sent with the notify email
485
486 version 0.3.1 -- Sept 5 2004
487     added ldap handler
488     moved sh support to a handler script
489     add test mode, where no action is taken.
490     added --help
491     force only root can read /etc/backup.d/*
492     fixed missing equals symbols in example.rdiff
493     changed backupninja executable to be /usr/sbin rather than /usr/bin
494
495 version 0.3 -- Oct 20 2004
496     ** IMPORTANT ** all config files are now ini style, not apache style
497     rewrote all scripts in bash for portability
498     added drop-in backupninja lib directory (/usr/share/backupninja)
499     all scripts are now run as root
500
501 version 0.2 -- Oct 14 2004
502     move distribution folder ./cron.d to ./etc/cron.d
503     fixed bug: removed printr of excludes (!)
504     added support for changing the user/group in rdiff sources.
505     added support for .mysql config files.
506
507 version 0.1 -- Oct 8 2004
508     initial release
509