33a51de06ec5d8d96c6f442d4f6494ce1a3e6b85
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.7 -- UNRELEASED
2     backupninja changes
3          . fix bug in reportspace, thanks Dan Garthwaite
4          . do not assume English locale when using date (Closes: #465837)
5          . add 'when = manual' option, that can be used in the global config
6            file or in a given backup action file. Thanks Tuomas Jormola for the
7            preliminary patch (Closes: #511299)
8     handler changes
9         maildir:
10          . fix location of deleted_on file
11          . add missing destid_file options to ssh connections
12         mysql:
13          . Options passed to mysqldump are now customizable with the new
14            sqldumpoptions configuration variable. Thanks to Chris Lamb for his
15            preliminary patch (Closes: #502966)
16          . Hide 'mysqladmin ping' output, to prevent confusing the user in
17            case mysqld is running but the authentication fails, which apparently
18            does not prevent mysqldump to work.
19          . Fix the error message displayed when mysqld is not running:
20            mysqladmin ping indeed returns 0 when authentication fails.
21
22 version 0.9.6 -- July 21, 2008
23     backupninja changes
24          . fix bug in cstream definition, thanks Jamie McClelland
25          . Allow the entire backup run to be halted by an action, thanks to
26            Matthew Palmer (Closes: #455836)
27          . Fixed tr construct reporting a warning (Closes: #452669)
28     lib changes
29         vserver:
30          . added vservers_running function
31         tools
32          . mktemp is now required to run backupninja, removed less secure
33            fall-back if mktemp did not exist on the system
34     handler changes
35         dup:
36          . General cleanup
37          . Better support for new duplicity (>= 0.4.4) command line syntax:
38            run remove-older-than when $keep is not set to yes (Closes: #458816),
39            and run "duplicity cleanup" before any other duplicity command; both
40            only trigger a warning on failure, since they should not stop backups
41            from being done. Also migrated full/incremental backup switch to the
42            new syntax.
43          . Support every duplicity-supported transport with new configuration
44            option desturl (Closes: #483712, #346040, Trac#2).
45          . Actually allow to backup only VServers, by relaxing $include test.
46          . Set secure permissions on tmpdir when creating it.
47         ldap:
48          . support HDB backend just as the BDB one, and make message clearer
49            when no supported backend is found (Closes: #476910)
50         rdiff:
51          . Fixed ignore_version default value missing
52          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
53            into options via remote-schema not already specified (Closes: #424639)
54         wget:
55          . New handler from rhatto designed to incrementally pull content from
56            a website to a local folder, based on the rsync handler
57         maildir:
58          . fixed bug where maildirs that start with a number were skipped
59          . make maildir helper look in every subdirectory of the source directory for
60            maildirs, rather than just looking in the directories [a-zA-Z0-9], thanks
61            for the patch from chris@cenolan.com (Trac#43).
62          . make deleted maildirs record the date they were deleted
63          . add destid_file configuration option to enable you to specify an alternate
64            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
65         pgsql, mysql, svn, sys:
66          . use new vservers_running function from lib/vserver (factorization++)
67         sys:
68          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
69            (Closes: Trac#39)
70          . support selection of VServers to run on, in the same way as in the
71            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
72          . add support for capturing the package debconf selection states using
73            debconf-get-selections
74          . fixed catifexec function to actually work, also now passes the arguments
75            given to catifexec() to the called command (Thanks John Hallam!)
76          . Added more robust software RAID information capture by running mdadm
77            -Q --detail /dev/md?* because some people may have empty mdadm.conf files
78            (Thanks to John Hallam).
79         trac:
80          . stop failing on all the trac backups if just one fails, this means
81            removing the temporary trac backup directories if they fail
82         makecd
83          . updated handler for new toolset (genisoimage and wodim)
84
85 version 0.9.5 -- December 2, 2007
86     backupninja changes
87          . Fixed checks on configuration files permissions, since the patch
88            applied to fix #370396 broke this, especially for configuration files
89            created with permissions 000 by an older ninjahelper version.
90          . Enhanced portability for other platforms
91          . Added quoting because it was needed to prevent shell expansion, broking the
92            toint function sometimes (Closes: Trac#11)
93          . Fixed reportspace option (Closes: Trac#10)
94          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
95     handler changes
96         dup:
97          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
98            is not supported anymore) (Closes: #447425)
99          . New tmpdir configuration option, very useful in case duplicity tends
100            to fill up /tmp.
101         ldap:
102          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
103            compress=yes to be less redundant and not create empty uncompressed
104            file (Closes: #394935)
105          . Fixed ninjahelper to properly set compress option, standardized on yes/no
106            instead of on/off
107          . Fixed problem that caused combination of slapcat and compress to not work
108            together (Closes: Trac#29)
109          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
110            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
111         maildir:
112          . Added an examples file (Closes: Trac#23)
113          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
114            coreutils options, as well as some bashisms (Closes: Trac#24)
115          . Fix test mode (Closes: Trac#25)
116         mysql:
117          . Fixed case where odd combination of configuration options caused sqldump
118            backups to get overwritten with an empty file (Closes: #402679)
119          . Added 'nodata' option to enable you to specify tables that you want to omit
120            the data from a backup, but still backup the table structure. This is very
121            useful in cases where tables contain large amounts of cache data. See the
122            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
123          . Enhance code for selecting databases by asking MySQL not to give us the
124            header (-N), to not draw pretty boxes around the output (-B), send the query
125            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
126            Matthew Palmer (Closes: #452039).
127         pgsql:
128          . Support configuring PGSQLUSER for real, and document it a bit; this
129            broken support actually prevented pgsql handler to work for VServers
130            (Closes: #396578)
131         rdiff-backup:
132          . Added cstream support to allow for bandwidth limiting
133          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
134          . Add configuration option to allow you to disable the version check
135            as in some instances this may be an ok scenario (Closes: #424632)
136          . Added local destination support to helper (Closes: Trac#4)
137          . Allow exclude-only configurations (Closes: Trac#21)
138         rub/rsync
139          . Fixed typo in rub handler that caused it to not work
140          . Changed to use lib/vserver code
141          . Fixed fsck error
142          . Fixed integer comparison (Closes: Trac#3)
143          . Renamed handler to 'rsync', replaces outdated rub handler
144          . updated examples/Makefile.am and handlers/Makefile.am to include
145            rsnap/rsync (Closes: #440554)
146          . Added example.rsync configuration file
147         sys:
148          . Fixed typo breaking things for VServers.
149          . Fix bug when vrootdir is on its own partition (Closes: #395928)
150          . Better sfdisk error and output handling: should now properly warn
151            when it does not manage to backup a partition table, and shut up when
152            it succeeds (Closes: #396632)
153          . Added option to not use sfdisk at all, useful for vserver/xen instances
154            that produce warnings about no harddisks found (Closes: #404071)
155          . Fixed example in example.sys to detail the __star__ in partitionsfile and
156            note why its necessary (Closes: #409192)
157          . Force C locale for sfdisk to ensure english words are found in grep
158          . Make directory where output is placed configurable, and create the parent dir
159            if it doesn't exist (Closes: Trac#1)
160     ninjareport
161          . Added first draft of method to aggregate reports from many servers into
162            one email. Requires logtail, rsync, configuration of reporthost,
163            reportdirectory and reportuser in backupninja.conf. Configure cron to
164            run once a day, and individual backupninjas not to report by email their
165            status, then enjoy one email report from all hosts, rather than multiple
166     fixed 'make install' bug that failed if /etc/backup.d already existed
167     changed spaces to tabs in Makefile.am
168     updated redhat spec file (thanks Adam Monsen)
169
170 version 0.9.4 -- October 6th, 2006
171     backupninja changes
172          . Fixed bug in toint(), and thus isnow(), which caused it
173            to not work when run from cron.
174          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
175          . Add admingroup option to configuration to allow a group that can
176            read/write configurations (instead of only allowing root). Checks
177            and complains about group-readable files only when the group differs
178            from the one in the configuration file (default is root as before).
179            Thanks to Martin Krafft for the patch (Closes: #370396).
180          . When determining which backup actions to make, find now follows
181            symlinks for $configdirectory
182          . Changed order of -s to mail for compatibility
183          . fixed permission stat call so it uses the --format supported by
184            coreutils (Closes: #382747)
185          . Added disk space report option (thanks Adam Kosmin)
186     handler changes
187         Added tar handler:
188          . create tarballs
189         Added rsnap handler:
190          . rotated rsync snapshops
191          . code from paulv@bikkel.org
192         Added rub handler:
193          . alternative to rsnap
194          . code from rhatto@riseup.net
195         mysql:
196          . Fixed improper use of $vuserhome (Closes: #351083)
197          . Fixed erroneous removal of tmpfile when it didn't exit
198          . Fixed inversed vsname emptiness check
199          . Fixed su quote usage to be more posixy
200          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
201          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
202         pgsql:
203          . Fixed inversed vsname emptiness check
204          . Fixed su quote usage to be more posixy
205          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
206          . postgres user UID is now the one from inside the vserver if necessary
207          . Compress now happens in-line to save some disk space (Closes: #370778)
208          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
209         svn:
210          . Fixed inversed vsname emptiness check
211         rdiff:
212          . Symlink and globbing support in include/exclude/vsinclude
213            clarification: globbing is fully supported again, whereas no attempt
214            is done to dereference symlinks anymore, due to incompatibilities
215            between various readlink versions in this field.
216          . Removed overzealous vsnames check
217          . Now works if testconnect=no and if $test is not defined.
218          . add $sshoptions config parameter in [dest] section of config so
219            connections to ports other than 22 can be made by adding the
220            following to the top of the handler config:
221            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
222            --server'
223         dup:
224          . Symlink and globbing support in include/exclude/vsinclude
225            clarification: globbing is fully supported again, whereas no attempt
226            is done to dereference symlinks anymore, due to incompatibilities
227            between various readlink versions in this field.
228          . Removed over zealous vsnames check
229          . Does not pretend anymore that duplicity can work without
230            any passphrase
231          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
232            0.4.3 will integrate them); documented how to write sftp-compatible
233            sshoptions (Closes: #388543)
234          . Now forbid to (try to) include /.
235         sys:
236          . Many more system checks were added, (thanks to Petr KlĂ­ma)
237          . Added warning if no devices were found (thanks Ranier Zocholl)
238          . Enhanced debian package selections to include purged packages (thanks
239            Tom Hoover)
240          . Removed warning about vserver not running (thanks anarcat)
241         ldap:
242          . Compress now happens in-line to save some disk space (Closes: #370778)
243         makecd:
244          . Added nicelevel option (thanks rhatto)
245         trac:
246          . fixed problem when src was set to the trac repo directly (Closes: #382737)
247     lib changes
248         vserver:
249          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
250          . found_vservers: escaped special grep repetition character +
251          . forced mktemp to use a template with a name to be more compatible with
252            different versions of mktemp, thanks anarcat
253     ninjahelper changes
254          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
255          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
256          . When determining which backup actions to list, find now follows
257            symlinks for $configdirectory
258          . Stop checking helpers perms: both "make install" and distros packages
259            install them with appropriate permissions, it's overzealous to check
260            this at runtime, and is more complicated to do with current
261            admingroup option.
262         dup.helper:
263          . Fix: signing was enabled with symmetric encryption.
264     changed cron permissions to 644
265     changed /etc/backup.d permissions to 0770 (for admingroup)
266     minor documentation fixes
267     improved RPM build process allowing 'make rpm-package' and 'make
268     srpm-package' targets, also fixes permissions on man directories,
269     cleans up RPM-related files during distclean, and adds default
270     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
271
272 version 0.9.3 -- February 1st, 2006
273     autotools fixes
274     backupninja changes
275         backupninja.conf
276          . added (commented out) the various default paths to
277            programs such as PGSQLDUMP, so that users can figure
278            out more easily they can customize them
279         code refactor:
280          . now uses vservers lib to initialize vservers support
281     handler changes
282         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
283            degrees) new lib/vserver functionality
284         mysql:
285          . fixed no user defaults file processing
286         duplicity:
287          . fixed (again...) globbing in include and exclude options (Debian bug
288            #348022, follow-up to #338796)
289          . warn if vsnames or vsinclude is enabled while vservers support is
290            disabled in backupninja.conf
291          . now works when multiple vservers names are given (separated by space)
292            in vsnames config variable
293         rdiff
294          . fixed globbing bug in include, exclude and vsinclude options
295          . it's now possible to choose exactly which vservers should be
296            backed-up, as it already was with duplicity handler, with the
297            "vsnames" configuration setting
298     ninjahelper changes
299         rdiff.helper:
300          . fixed errors in create remote dir
301          . code formatting cleanup (three spaces indent)
302          . fixed bug which caused only first include/exclude dir to
303            have "include = "
304          . fixed globbing bug with exclude
305         ninjahelper:
306          . now reports error if the helper script has a syntax error or bombs out.
307          . code formatting cleanup (three spaces indent)
308     lib changes
309         vserver:
310          . init_vservers: improved VROOTDIR detection
311          . init_vservers: test in a stricter way the real vservers availability
312          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
313            don't follow symlinks)
314          . init_vservers: warn if vservers are enabled but no vserver is found
315          . new function: vservers_exist
316     known bugs:
317         easydialog:
318          . formDisplay does not return exit status.
319
320 version 0.9.2 -- December 29, 2005
321     backupninja changes
322         fixed broken toint() which caused when "everyday" problems
323         backupninja.conf.5 updated to include "when" and "vservers"
324         code refactor:
325             . moved to lib/ some code that has to be shared between
326               backupninja and ninjahelper
327     handler changes
328         trac:
329             . mkdir subdirectory problem fixed
330         duplicity:
331             . globbing support fixed in include and exclude options
332             . different signing and encrypting key support added
333             . fixed erroneous comments in example.dup about the way
334               GnuPG-related options are used
335         mysql:
336             . handler vserver bugs fixed and debug output enhanced
337     ninjahelper(s) changes
338         vserver-related functions added to lib/vservers.in
339         added man/ninjahelper.1 man page
340         makecd:
341             . was missing in Makefile.am/.in
342         rdiff-backup:
343             . used to expand '*' in default source directories
344             . the "Cancel" buttons used to have a weird behaviour
345             . updated to include Vserver selection
346         pgsql:
347             . forbid the user to choose an empty database set
348             . "Cancel" button now does what it is meant to do
349         mysql:
350             . enhanced for vserver support
351             . now able to select databases and dump directory
352         duplicity:
353             . new handler added (with Vserver support)
354
355 version 0.9.1 -- November 05 2005
356     rearranged source so that it is relocatable with autotools
357         (thanks to Petr KlĂ­ma petr.klima@madeta-group.cz)
358     fixed many bugs in rdiff helper
359     rdiff handler does not require 'label' (for real this time?)
360     added makecd ninjahelper
361         (thanks to Stefani stefani@riseup.net)
362     made ninjahelper create files with mode 600 rather than 000
363     changed subversion handler to use svnadmin hotcopy instead of
364             the unsupported hot-copy.py script, which was moved in Debian
365     update rdiff ninjahelper
366             now detects and auto-install rdiff-backup on the remote
367             machine if possible, also tests the remote backup directory
368             and offers to create it if it doesn't exist
369
370 version 0.9 -- October 19 2005
371     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
372      fixed insecure temporary file creation
373     *****************************************
374     removed erroneous magic file marker in pgsql handler
375     fixed incorrect find positional
376     changed direct grep of /etc/passwd to getent passwd.
377     rdiff helper has much better information on failed ssh attempt
378         (patch from cmccallum@thecsl.org).
379     rdiff handler now supports remote source and local dest.
380         (patch from cmccallum@thecsl.org).
381     man pages are greatly improved.
382
383 version 0.8 -- September 15 2005
384     added pgsql (PostgreSQL) handler, with vservers support.
385     added vservers support to duplicity handler
386         Note: the configuration is a bit different than the rdiff
387         handler's one, but the default behavior is the same:
388         have a look at example.dup.
389     improved README
390     documented .disabled method.
391     corrected VROOTDIR default value.
392     added ninjahelper to the install instructions.
393     improved rdiff, dup and sys handlers' vservers support
394         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
395         to be seen as a vserver
396     changes to sys handler
397         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
398         fixed dpkg existence test inside vserver.
399         fixed $nodpkg use.
400     changes to pgsql handler
401         now checks if the specified vserver is running.
402         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
403         now checks if "postgres" user exists on the host/vserver.
404     changes to ninjahelper
405         check_perms() does not die anymore on group/world readable
406         helper scripts (now consistent with the "helper scripts
407         must not be group or world writable!" error msg).
408     xedit action now tries $EDITOR, then /etc/alternatives/editor,
409         then nano, vim and vi, and aborts if none of these exists.
410     added helper for pgsql handler.
411     rdiff handler now does not require 'label'
412     changes to mysql and svn handlers' vservers support
413         these handlers now check if the source vserver is running
414     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
415
416 version 0.7 -- July 26 2005
417     added ninjahelper: a dialog based wizard for creating backupninja configs.
418     considerably improved and changed the log file output.
419     you can now disable actions with .disabled (this is new preferred method).
420     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
421     fixed bug when specifying multiple 'when' options.
422
423 version 0.6 -- June 16 2005
424     ldap handler has new options: backup method to use (ldapsearch or
425         slapcat), restart, passwordfile and binddn. Default backup method
426         is set to ldapsearch as this is safer
427     ******************************************************************
428     NOTE: to get the previous default behavior with the ldap handler,
429     you must set "method = slapcat". The new default is ldapsearch.
430     ******************************************************************
431     implemented fix so that the main script will echo fatal errors rather
432         than being silent about them, this means an error message every hour
433         if there is a major configuration problem (not a handler problem)
434     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
435     changes to duplicity handler (thanks intrigeri!):
436         "keep = yes" now disables file cleaning on desthost
437         added "sign" option for backups signing
438         added "encryptkey" option to specify the gpg key to use
439         split config into [source], [gpg] and [dest] sections
440         added "nicelevel" option
441         added "testconnect" option
442         added "sshoptions" option (will be passed to ssh/scp)
443         added "bandwidthlimit" option
444     example.dup example config file for duplicity handler
445     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
446     added configfile option to mysql handler
447         the default is /etc/mysql/debian.cnf. with this,
448         sqldump doesn't need dbusername. (hotcopy still does).
449     fixed bug in mysql handler which caused some passwords to not work.
450         (.my.cnf files now have double quotes around password)
451     can now pass options to hwinfo and sfdisk in sys handler.
452
453 version 0.5 -- April 12 2005
454     rdiff handler works when remote sshd has a banner
455     rdiff handler supports local dest
456     logfile is created if it doesn't exist
457     added "when = hourly"
458     added optional 'nicelevel' to rdiff handler
459     fixed bug where actions were not run in numeric order.
460     improved 'when' parsing.
461
462 version 0.4.4 -- March 18 2005
463     results of handlers are now read line by line.
464     changes to rdiff handler: added "options", and "keep" is
465         not necessarily days now (ie, it will pass straight through to
466         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
467     added dup handler (still pretty beta)
468     added maildir handler (very specialized handler)
469     added --run option (runs the specified action file)
470     improved sys handler, now uses hwinfo
471     added subversion hotbackup handler, svn.
472     added PATH to cron.d file, which fixes file not found errors.
473
474 version 0.4.2 -- Jan 6 2005
475     fixed bug which caused a report email to be sent even if no actions were run.
476     fixed bug where multiple handler status messages were ignored
477     added status in the subject line of report emails
478
479 version 0.4.1 -- Jan 3 2005
480     added $usecolors and now more conservative about when colors are echoed.
481     fixed major bug, 'when' actually works now.
482     replaced debug function with debug, info, warning, error, fatal.
483     added --now option to force all actions to be performed now.
484
485 version 0.4 -- Dec 26 2004
486     added "when" option, so that all configs can specify when
487         they are to be run.
488     added reportsuccess and reportwarning config options
489     added .sys handler (hardware, packages, partitions).
490
491 version 0.3.4 -- Dec 8 2004
492     fixed numerical variable quoting compatibility with older wc
493     fixed stderr redirect bug
494     some comments in example.rdiff
495
496 version 0.3.3 -- Nov 10 2004
497     '*' (asterisk) works now in rdiff config files
498     works now with gawk as well as mawk
499     many bug fixes to ldap handler
500     paths to helper scripts can be configured in global config
501     does not require /usr/bin/stat
502
503 version 0.3.2 -- Sept 29 2004
504     handler scripts are no longer executable (to comply with debian policy)
505     handler error and warning messages are sent with the notify email
506
507 version 0.3.1 -- Sept 5 2004
508     added ldap handler
509     moved sh support to a handler script
510     add test mode, where no action is taken.
511     added --help
512     force only root can read /etc/backup.d/*
513     fixed missing equals symbols in example.rdiff
514     changed backupninja executable to be /usr/sbin rather than /usr/bin
515
516 version 0.3 -- Oct 20 2004
517     ** IMPORTANT ** all config files are now ini style, not apache style
518     rewrote all scripts in bash for portability
519     added drop-in backupninja lib directory (/usr/share/backupninja)
520     all scripts are now run as root
521
522 version 0.2 -- Oct 14 2004
523     move distribution folder ./cron.d to ./etc/cron.d
524     fixed bug: removed printr of excludes (!)
525     added support for changing the user/group in rdiff sources.
526     added support for .mysql config files.
527
528 version 0.1 -- Oct 8 2004
529     initial release
530