2ca863d7869bc3648929d9ea014dca6267a8e432
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.7 -- UNRELEASED
2     backupninja changes
3          . fix bug in reportspace, thanks Dan Garthwaite
4     handler changes
5         maildir:
6          . fix location of deleted_on file
7          . add missing destid_file options to ssh connections
8
9 version 0.9.6 -- July 21, 2008
10     backupninja changes
11          . fix bug in cstream definition, thanks Jamie McClelland
12          . Allow the entire backup run to be halted by an action, thanks to
13            Matthew Palmer (Closes: #455836)
14          . Fixed tr construct reporting a warning (Closes: #452669)
15     lib changes
16         vserver:
17          . added vservers_running function
18         tools
19          . mktemp is now required to run backupninja, removed less secure
20            fall-back if mktemp did not exist on the system
21     handler changes
22         dup:
23          . General cleanup
24          . Better support for new duplicity (>= 0.4.4) command line syntax:
25            run remove-older-than when $keep is not set to yes (Closes: #458816),
26            and run "duplicity cleanup" before any other duplicity command; both
27            only trigger a warning on failure, since they should not stop backups
28            from being done. Also migrated full/incremental backup switch to the
29            new syntax.
30          . Support every duplicity-supported transport with new configuration
31            option desturl (Closes: #483712, #346040, Trac#2).
32          . Actually allow to backup only VServers, by relaxing $include test.
33          . Set secure permissions on tmpdir when creating it.
34         ldap:
35          . support HDB backend just as the BDB one, and make message clearer
36            when no supported backend is found (Closes: #476910)
37         rdiff:
38          . Fixed ignore_version default value missing
39          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
40            into options via remote-schema not already specified (Closes: #424639)
41         wget:
42          . New handler from rhatto designed to incrementally pull content from
43            a website to a local folder, based on the rsync handler
44         maildir:
45          . fixed bug where maildirs that start with a number were skipped
46          . make maildir helper look in every subdirectory of the source directory for
47            maildirs, rather than just looking in the directories [a-zA-Z0-9], thanks
48            for the patch from chris@cenolan.com (Trac#43).
49          . make deleted maildirs record the date they were deleted
50          . add destid_file configuration option to enable you to specify an alternate
51            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
52         pgsql, mysql, svn, sys:
53          . use new vservers_running function from lib/vserver (factorization++)
54         sys:
55          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
56            (Closes: Trac#39)
57          . support selection of VServers to run on, in the same way as in the
58            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
59          . add support for capturing the package debconf selection states using
60            debconf-get-selections
61          . fixed catifexec function to actually work, also now passes the arguments
62            given to catifexec() to the called command (Thanks John Hallam!)
63          . Added more robust software RAID information capture by running mdadm
64            -Q --detail /dev/md?* because some people may have empty mdadm.conf files
65            (Thanks to John Hallam).
66         trac:
67          . stop failing on all the trac backups if just one fails, this means
68            removing the temporary trac backup directories if they fail
69         makecd
70          . updated handler for new toolset (genisoimage and wodim)
71
72 version 0.9.5 -- December 2, 2007
73     backupninja changes
74          . Fixed checks on configuration files permissions, since the patch
75            applied to fix #370396 broke this, especially for configuration files
76            created with permissions 000 by an older ninjahelper version.
77          . Enhanced portability for other platforms
78          . Added quoting because it was needed to prevent shell expansion, broking the
79            toint function sometimes (Closes: Trac#11)
80          . Fixed reportspace option (Closes: Trac#10)
81          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
82     handler changes
83         dup:
84          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
85            is not supported anymore) (Closes: #447425)
86          . New tmpdir configuration option, very useful in case duplicity tends
87            to fill up /tmp.
88         ldap:
89          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
90            compress=yes to be less redundant and not create empty uncompressed
91            file (Closes: #394935)
92          . Fixed ninjahelper to properly set compress option, standardized on yes/no
93            instead of on/off
94          . Fixed problem that caused combination of slapcat and compress to not work
95            together (Closes: Trac#29)
96          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
97            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
98         maildir:
99          . Added an examples file (Closes: Trac#23)
100          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
101            coreutils options, as well as some bashisms (Closes: Trac#24)
102          . Fix test mode (Closes: Trac#25)
103         mysql:
104          . Fixed case where odd combination of configuration options caused sqldump
105            backups to get overwritten with an empty file (Closes: #402679)
106          . Added 'nodata' option to enable you to specify tables that you want to omit
107            the data from a backup, but still backup the table structure. This is very
108            useful in cases where tables contain large amounts of cache data. See the
109            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
110          . Enhance code for selecting databases by asking MySQL not to give us the
111            header (-N), to not draw pretty boxes around the output (-B), send the query
112            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
113            Matthew Palmer (Closes: #452039).
114         pgsql:
115          . Support configuring PGSQLUSER for real, and document it a bit; this
116            broken support actually prevented pgsql handler to work for VServers
117            (Closes: #396578)
118         rdiff-backup:
119          . Added cstream support to allow for bandwidth limiting
120          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
121          . Add configuration option to allow you to disable the version check
122            as in some instances this may be an ok scenario (Closes: #424632)
123          . Added local destination support to helper (Closes: Trac#4)
124          . Allow exclude-only configurations (Closes: Trac#21)
125         rub/rsync
126          . Fixed typo in rub handler that caused it to not work
127          . Changed to use lib/vserver code
128          . Fixed fsck error
129          . Fixed integer comparison (Closes: Trac#3)
130          . Renamed handler to 'rsync', replaces outdated rub handler
131          . updated examples/Makefile.am and handlers/Makefile.am to include
132            rsnap/rsync (Closes: #440554)
133          . Added example.rsync configuration file
134         sys:
135          . Fixed typo breaking things for VServers.
136          . Fix bug when vrootdir is on its own partition (Closes: #395928)
137          . Better sfdisk error and output handling: should now properly warn
138            when it does not manage to backup a partition table, and shut up when
139            it succeeds (Closes: #396632)
140          . Added option to not use sfdisk at all, useful for vserver/xen instances
141            that produce warnings about no harddisks found (Closes: #404071)
142          . Fixed example in example.sys to detail the __star__ in partitionsfile and
143            note why its necessary (Closes: #409192)
144          . Force C locale for sfdisk to ensure english words are found in grep
145          . Make directory where output is placed configurable, and create the parent dir
146            if it doesn't exist (Closes: Trac#1)
147     ninjareport
148          . Added first draft of method to aggregate reports from many servers into
149            one email. Requires logtail, rsync, configuration of reporthost,
150            reportdirectory and reportuser in backupninja.conf. Configure cron to
151            run once a day, and individual backupninjas not to report by email their
152            status, then enjoy one email report from all hosts, rather than multiple
153     fixed 'make install' bug that failed if /etc/backup.d already existed
154     changed spaces to tabs in Makefile.am
155     updated redhat spec file (thanks Adam Monsen)
156
157 version 0.9.4 -- October 6th, 2006
158     backupninja changes
159          . Fixed bug in toint(), and thus isnow(), which caused it
160            to not work when run from cron.
161          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
162          . Add admingroup option to configuration to allow a group that can
163            read/write configurations (instead of only allowing root). Checks
164            and complains about group-readable files only when the group differs
165            from the one in the configuration file (default is root as before).
166            Thanks to Martin Krafft for the patch (Closes: #370396).
167          . When determining which backup actions to make, find now follows
168            symlinks for $configdirectory
169          . Changed order of -s to mail for compatibility
170          . fixed permission stat call so it uses the --format supported by
171            coreutils (Closes: #382747)
172          . Added disk space report option (thanks Adam Kosmin)
173     handler changes
174         Added tar handler:
175          . create tarballs
176         Added rsnap handler:
177          . rotated rsync snapshops
178          . code from paulv@bikkel.org
179         Added rub handler:
180          . alternative to rsnap
181          . code from rhatto@riseup.net
182         mysql:
183          . Fixed improper use of $vuserhome (Closes: #351083)
184          . Fixed erroneous removal of tmpfile when it didn't exit
185          . Fixed inversed vsname emptiness check
186          . Fixed su quote usage to be more posixy
187          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
188          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
189         pgsql:
190          . Fixed inversed vsname emptiness check
191          . Fixed su quote usage to be more posixy
192          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
193          . postgres user UID is now the one from inside the vserver if necessary
194          . Compress now happens in-line to save some disk space (Closes: #370778)
195          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
196         svn:
197          . Fixed inversed vsname emptiness check
198         rdiff:
199          . Symlink and globbing support in include/exclude/vsinclude
200            clarification: globbing is fully supported again, whereas no attempt
201            is done to dereference symlinks anymore, due to incompatibilities
202            between various readlink versions in this field.
203          . Removed overzealous vsnames check
204          . Now works if testconnect=no and if $test is not defined.
205          . add $sshoptions config parameter in [dest] section of config so
206            connections to ports other than 22 can be made by adding the
207            following to the top of the handler config:
208            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
209            --server'
210         dup:
211          . Symlink and globbing support in include/exclude/vsinclude
212            clarification: globbing is fully supported again, whereas no attempt
213            is done to dereference symlinks anymore, due to incompatibilities
214            between various readlink versions in this field.
215          . Removed over zealous vsnames check
216          . Does not pretend anymore that duplicity can work without
217            any passphrase
218          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
219            0.4.3 will integrate them); documented how to write sftp-compatible
220            sshoptions (Closes: #388543)
221          . Now forbid to (try to) include /.
222         sys:
223          . Many more system checks were added, (thanks to Petr KlĂ­ma)
224          . Added warning if no devices were found (thanks Ranier Zocholl)
225          . Enhanced debian package selections to include purged packages (thanks
226            Tom Hoover)
227          . Removed warning about vserver not running (thanks anarcat)
228         ldap:
229          . Compress now happens in-line to save some disk space (Closes: #370778)
230         makecd:
231          . Added nicelevel option (thanks rhatto)
232         trac:
233          . fixed problem when src was set to the trac repo directly (Closes: #382737)
234     lib changes
235         vserver:
236          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
237          . found_vservers: escaped special grep repetition character +
238          . forced mktemp to use a template with a name to be more compatible with
239            different versions of mktemp, thanks anarcat
240     ninjahelper changes
241          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
242          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
243          . When determining which backup actions to list, find now follows
244            symlinks for $configdirectory
245          . Stop checking helpers perms: both "make install" and distros packages
246            install them with appropriate permissions, it's overzealous to check
247            this at runtime, and is more complicated to do with current
248            admingroup option.
249         dup.helper:
250          . Fix: signing was enabled with symmetric encryption.
251     changed cron permissions to 644
252     changed /etc/backup.d permissions to 0770 (for admingroup)
253     minor documentation fixes
254     improved RPM build process allowing 'make rpm-package' and 'make
255     srpm-package' targets, also fixes permissions on man directories,
256     cleans up RPM-related files during distclean, and adds default
257     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
258
259 version 0.9.3 -- February 1st, 2006
260     autotools fixes
261     backupninja changes
262         backupninja.conf
263          . added (commented out) the various default paths to
264            programs such as PGSQLDUMP, so that users can figure
265            out more easily they can customize them
266         code refactor:
267          . now uses vservers lib to initialize vservers support
268     handler changes
269         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
270            degrees) new lib/vserver functionality
271         mysql:
272          . fixed no user defaults file processing
273         duplicity:
274          . fixed (again...) globbing in include and exclude options (Debian bug
275            #348022, follow-up to #338796)
276          . warn if vsnames or vsinclude is enabled while vservers support is
277            disabled in backupninja.conf
278          . now works when multiple vservers names are given (separated by space)
279            in vsnames config variable
280         rdiff
281          . fixed globbing bug in include, exclude and vsinclude options
282          . it's now possible to choose exactly which vservers should be
283            backed-up, as it already was with duplicity handler, with the
284            "vsnames" configuration setting
285     ninjahelper changes
286         rdiff.helper:
287          . fixed errors in create remote dir
288          . code formatting cleanup (three spaces indent)
289          . fixed bug which caused only first include/exclude dir to
290            have "include = "
291          . fixed globbing bug with exclude
292         ninjahelper:
293          . now reports error if the helper script has a syntax error or bombs out.
294          . code formatting cleanup (three spaces indent)
295     lib changes
296         vserver:
297          . init_vservers: improved VROOTDIR detection
298          . init_vservers: test in a stricter way the real vservers availability
299          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
300            don't follow symlinks)
301          . init_vservers: warn if vservers are enabled but no vserver is found
302          . new function: vservers_exist
303     known bugs:
304         easydialog:
305          . formDisplay does not return exit status.
306
307 version 0.9.2 -- December 29, 2005
308     backupninja changes
309         fixed broken toint() which caused when "everyday" problems
310         backupninja.conf.5 updated to include "when" and "vservers"
311         code refactor:
312             . moved to lib/ some code that has to be shared between
313               backupninja and ninjahelper
314     handler changes
315         trac:
316             . mkdir subdirectory problem fixed
317         duplicity:
318             . globbing support fixed in include and exclude options
319             . different signing and encrypting key support added
320             . fixed erroneous comments in example.dup about the way
321               GnuPG-related options are used
322         mysql:
323             . handler vserver bugs fixed and debug output enhanced
324     ninjahelper(s) changes
325         vserver-related functions added to lib/vservers.in
326         added man/ninjahelper.1 man page
327         makecd:
328             . was missing in Makefile.am/.in
329         rdiff-backup:
330             . used to expand '*' in default source directories
331             . the "Cancel" buttons used to have a weird behaviour
332             . updated to include Vserver selection
333         pgsql:
334             . forbid the user to choose an empty database set
335             . "Cancel" button now does what it is meant to do
336         mysql:
337             . enhanced for vserver support
338             . now able to select databases and dump directory
339         duplicity:
340             . new handler added (with Vserver support)
341
342 version 0.9.1 -- November 05 2005
343     rearranged source so that it is relocatable with autotools
344         (thanks to Petr KlĂ­ma petr.klima@madeta-group.cz)
345     fixed many bugs in rdiff helper
346     rdiff handler does not require 'label' (for real this time?)
347     added makecd ninjahelper
348         (thanks to Stefani stefani@riseup.net)
349     made ninjahelper create files with mode 600 rather than 000
350     changed subversion handler to use svnadmin hotcopy instead of
351             the unsupported hot-copy.py script, which was moved in Debian
352     update rdiff ninjahelper
353             now detects and auto-install rdiff-backup on the remote
354             machine if possible, also tests the remote backup directory
355             and offers to create it if it doesn't exist
356
357 version 0.9 -- October 19 2005
358     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
359      fixed insecure temporary file creation
360     *****************************************
361     removed erroneous magic file marker in pgsql handler
362     fixed incorrect find positional
363     changed direct grep of /etc/passwd to getent passwd.
364     rdiff helper has much better information on failed ssh attempt
365         (patch from cmccallum@thecsl.org).
366     rdiff handler now supports remote source and local dest.
367         (patch from cmccallum@thecsl.org).
368     man pages are greatly improved.
369
370 version 0.8 -- September 15 2005
371     added pgsql (PostgreSQL) handler, with vservers support.
372     added vservers support to duplicity handler
373         Note: the configuration is a bit different than the rdiff
374         handler's one, but the default behavior is the same:
375         have a look at example.dup.
376     improved README
377     documented .disabled method.
378     corrected VROOTDIR default value.
379     added ninjahelper to the install instructions.
380     improved rdiff, dup and sys handlers' vservers support
381         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
382         to be seen as a vserver
383     changes to sys handler
384         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
385         fixed dpkg existence test inside vserver.
386         fixed $nodpkg use.
387     changes to pgsql handler
388         now checks if the specified vserver is running.
389         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
390         now checks if "postgres" user exists on the host/vserver.
391     changes to ninjahelper
392         check_perms() does not die anymore on group/world readable
393         helper scripts (now consistent with the "helper scripts
394         must not be group or world writable!" error msg).
395     xedit action now tries $EDITOR, then /etc/alternatives/editor,
396         then nano, vim and vi, and aborts if none of these exists.
397     added helper for pgsql handler.
398     rdiff handler now does not require 'label'
399     changes to mysql and svn handlers' vservers support
400         these handlers now check if the source vserver is running
401     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
402
403 version 0.7 -- July 26 2005
404     added ninjahelper: a dialog based wizard for creating backupninja configs.
405     considerably improved and changed the log file output.
406     you can now disable actions with .disabled (this is new preferred method).
407     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
408     fixed bug when specifying multiple 'when' options.
409
410 version 0.6 -- June 16 2005
411     ldap handler has new options: backup method to use (ldapsearch or
412         slapcat), restart, passwordfile and binddn. Default backup method
413         is set to ldapsearch as this is safer
414     ******************************************************************
415     NOTE: to get the previous default behavior with the ldap handler,
416     you must set "method = slapcat". The new default is ldapsearch.
417     ******************************************************************
418     implemented fix so that the main script will echo fatal errors rather
419         than being silent about them, this means an error message every hour
420         if there is a major configuration problem (not a handler problem)
421     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
422     changes to duplicity handler (thanks intrigeri!):
423         "keep = yes" now disables file cleaning on desthost
424         added "sign" option for backups signing
425         added "encryptkey" option to specify the gpg key to use
426         split config into [source], [gpg] and [dest] sections
427         added "nicelevel" option
428         added "testconnect" option
429         added "sshoptions" option (will be passed to ssh/scp)
430         added "bandwidthlimit" option
431     example.dup example config file for duplicity handler
432     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
433     added configfile option to mysql handler
434         the default is /etc/mysql/debian.cnf. with this,
435         sqldump doesn't need dbusername. (hotcopy still does).
436     fixed bug in mysql handler which caused some passwords to not work.
437         (.my.cnf files now have double quotes around password)
438     can now pass options to hwinfo and sfdisk in sys handler.
439
440 version 0.5 -- April 12 2005
441     rdiff handler works when remote sshd has a banner
442     rdiff handler supports local dest
443     logfile is created if it doesn't exist
444     added "when = hourly"
445     added optional 'nicelevel' to rdiff handler
446     fixed bug where actions were not run in numeric order.
447     improved 'when' parsing.
448
449 version 0.4.4 -- March 18 2005
450     results of handlers are now read line by line.
451     changes to rdiff handler: added "options", and "keep" is
452         not necessarily days now (ie, it will pass straight through to
453         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
454     added dup handler (still pretty beta)
455     added maildir handler (very specialized handler)
456     added --run option (runs the specified action file)
457     improved sys handler, now uses hwinfo
458     added subversion hotbackup handler, svn.
459     added PATH to cron.d file, which fixes file not found errors.
460
461 version 0.4.2 -- Jan 6 2005
462     fixed bug which caused a report email to be sent even if no actions were run.
463     fixed bug where multiple handler status messages were ignored
464     added status in the subject line of report emails
465
466 version 0.4.1 -- Jan 3 2005
467     added $usecolors and now more conservative about when colors are echoed.
468     fixed major bug, 'when' actually works now.
469     replaced debug function with debug, info, warning, error, fatal.
470     added --now option to force all actions to be performed now.
471
472 version 0.4 -- Dec 26 2004
473     added "when" option, so that all configs can specify when
474         they are to be run.
475     added reportsuccess and reportwarning config options
476     added .sys handler (hardware, packages, partitions).
477
478 version 0.3.4 -- Dec 8 2004
479     fixed numerical variable quoting compatibility with older wc
480     fixed stderr redirect bug
481     some comments in example.rdiff
482
483 version 0.3.3 -- Nov 10 2004
484     '*' (asterisk) works now in rdiff config files
485     works now with gawk as well as mawk
486     many bug fixes to ldap handler
487     paths to helper scripts can be configured in global config
488     does not require /usr/bin/stat
489
490 version 0.3.2 -- Sept 29 2004
491     handler scripts are no longer executable (to comply with debian policy)
492     handler error and warning messages are sent with the notify email
493
494 version 0.3.1 -- Sept 5 2004
495     added ldap handler
496     moved sh support to a handler script
497     add test mode, where no action is taken.
498     added --help
499     force only root can read /etc/backup.d/*
500     fixed missing equals symbols in example.rdiff
501     changed backupninja executable to be /usr/sbin rather than /usr/bin
502
503 version 0.3 -- Oct 20 2004
504     ** IMPORTANT ** all config files are now ini style, not apache style
505     rewrote all scripts in bash for portability
506     added drop-in backupninja lib directory (/usr/share/backupninja)
507     all scripts are now run as root
508
509 version 0.2 -- Oct 14 2004
510     move distribution folder ./cron.d to ./etc/cron.d
511     fixed bug: removed printr of excludes (!)
512     added support for changing the user/group in rdiff sources.
513     added support for .mysql config files.
514
515 version 0.1 -- Oct 8 2004
516     initial release
517