87d32844e094b31ee5137ece26fec15fc606a8c9
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.7 -- UNRELEASED
2     backupninja changes
3          . fix bug in reportspace, thanks Dan Garthwaite
4          . do not assume English locale when using date (Closes: #465837)
5     handler changes
6         maildir:
7          . fix location of deleted_on file
8          . add missing destid_file options to ssh connections
9         mysql:
10          . Options passed to mysqldump are now customizable with the new
11            sqldumpoptions configuration variable. Thanks to Chris Lamb for his
12            preliminary patch (Closes: #502966)
13
14 version 0.9.6 -- July 21, 2008
15     backupninja changes
16          . fix bug in cstream definition, thanks Jamie McClelland
17          . Allow the entire backup run to be halted by an action, thanks to
18            Matthew Palmer (Closes: #455836)
19          . Fixed tr construct reporting a warning (Closes: #452669)
20     lib changes
21         vserver:
22          . added vservers_running function
23         tools
24          . mktemp is now required to run backupninja, removed less secure
25            fall-back if mktemp did not exist on the system
26     handler changes
27         dup:
28          . General cleanup
29          . Better support for new duplicity (>= 0.4.4) command line syntax:
30            run remove-older-than when $keep is not set to yes (Closes: #458816),
31            and run "duplicity cleanup" before any other duplicity command; both
32            only trigger a warning on failure, since they should not stop backups
33            from being done. Also migrated full/incremental backup switch to the
34            new syntax.
35          . Support every duplicity-supported transport with new configuration
36            option desturl (Closes: #483712, #346040, Trac#2).
37          . Actually allow to backup only VServers, by relaxing $include test.
38          . Set secure permissions on tmpdir when creating it.
39         ldap:
40          . support HDB backend just as the BDB one, and make message clearer
41            when no supported backend is found (Closes: #476910)
42         rdiff:
43          . Fixed ignore_version default value missing
44          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
45            into options via remote-schema not already specified (Closes: #424639)
46         wget:
47          . New handler from rhatto designed to incrementally pull content from
48            a website to a local folder, based on the rsync handler
49         maildir:
50          . fixed bug where maildirs that start with a number were skipped
51          . make maildir helper look in every subdirectory of the source directory for
52            maildirs, rather than just looking in the directories [a-zA-Z0-9], thanks
53            for the patch from chris@cenolan.com (Trac#43).
54          . make deleted maildirs record the date they were deleted
55          . add destid_file configuration option to enable you to specify an alternate
56            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
57         pgsql, mysql, svn, sys:
58          . use new vservers_running function from lib/vserver (factorization++)
59         sys:
60          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
61            (Closes: Trac#39)
62          . support selection of VServers to run on, in the same way as in the
63            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
64          . add support for capturing the package debconf selection states using
65            debconf-get-selections
66          . fixed catifexec function to actually work, also now passes the arguments
67            given to catifexec() to the called command (Thanks John Hallam!)
68          . Added more robust software RAID information capture by running mdadm
69            -Q --detail /dev/md?* because some people may have empty mdadm.conf files
70            (Thanks to John Hallam).
71         trac:
72          . stop failing on all the trac backups if just one fails, this means
73            removing the temporary trac backup directories if they fail
74         makecd
75          . updated handler for new toolset (genisoimage and wodim)
76
77 version 0.9.5 -- December 2, 2007
78     backupninja changes
79          . Fixed checks on configuration files permissions, since the patch
80            applied to fix #370396 broke this, especially for configuration files
81            created with permissions 000 by an older ninjahelper version.
82          . Enhanced portability for other platforms
83          . Added quoting because it was needed to prevent shell expansion, broking the
84            toint function sometimes (Closes: Trac#11)
85          . Fixed reportspace option (Closes: Trac#10)
86          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
87     handler changes
88         dup:
89          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
90            is not supported anymore) (Closes: #447425)
91          . New tmpdir configuration option, very useful in case duplicity tends
92            to fill up /tmp.
93         ldap:
94          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
95            compress=yes to be less redundant and not create empty uncompressed
96            file (Closes: #394935)
97          . Fixed ninjahelper to properly set compress option, standardized on yes/no
98            instead of on/off
99          . Fixed problem that caused combination of slapcat and compress to not work
100            together (Closes: Trac#29)
101          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
102            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
103         maildir:
104          . Added an examples file (Closes: Trac#23)
105          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
106            coreutils options, as well as some bashisms (Closes: Trac#24)
107          . Fix test mode (Closes: Trac#25)
108         mysql:
109          . Fixed case where odd combination of configuration options caused sqldump
110            backups to get overwritten with an empty file (Closes: #402679)
111          . Added 'nodata' option to enable you to specify tables that you want to omit
112            the data from a backup, but still backup the table structure. This is very
113            useful in cases where tables contain large amounts of cache data. See the
114            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
115          . Enhance code for selecting databases by asking MySQL not to give us the
116            header (-N), to not draw pretty boxes around the output (-B), send the query
117            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
118            Matthew Palmer (Closes: #452039).
119         pgsql:
120          . Support configuring PGSQLUSER for real, and document it a bit; this
121            broken support actually prevented pgsql handler to work for VServers
122            (Closes: #396578)
123         rdiff-backup:
124          . Added cstream support to allow for bandwidth limiting
125          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
126          . Add configuration option to allow you to disable the version check
127            as in some instances this may be an ok scenario (Closes: #424632)
128          . Added local destination support to helper (Closes: Trac#4)
129          . Allow exclude-only configurations (Closes: Trac#21)
130         rub/rsync
131          . Fixed typo in rub handler that caused it to not work
132          . Changed to use lib/vserver code
133          . Fixed fsck error
134          . Fixed integer comparison (Closes: Trac#3)
135          . Renamed handler to 'rsync', replaces outdated rub handler
136          . updated examples/Makefile.am and handlers/Makefile.am to include
137            rsnap/rsync (Closes: #440554)
138          . Added example.rsync configuration file
139         sys:
140          . Fixed typo breaking things for VServers.
141          . Fix bug when vrootdir is on its own partition (Closes: #395928)
142          . Better sfdisk error and output handling: should now properly warn
143            when it does not manage to backup a partition table, and shut up when
144            it succeeds (Closes: #396632)
145          . Added option to not use sfdisk at all, useful for vserver/xen instances
146            that produce warnings about no harddisks found (Closes: #404071)
147          . Fixed example in example.sys to detail the __star__ in partitionsfile and
148            note why its necessary (Closes: #409192)
149          . Force C locale for sfdisk to ensure english words are found in grep
150          . Make directory where output is placed configurable, and create the parent dir
151            if it doesn't exist (Closes: Trac#1)
152     ninjareport
153          . Added first draft of method to aggregate reports from many servers into
154            one email. Requires logtail, rsync, configuration of reporthost,
155            reportdirectory and reportuser in backupninja.conf. Configure cron to
156            run once a day, and individual backupninjas not to report by email their
157            status, then enjoy one email report from all hosts, rather than multiple
158     fixed 'make install' bug that failed if /etc/backup.d already existed
159     changed spaces to tabs in Makefile.am
160     updated redhat spec file (thanks Adam Monsen)
161
162 version 0.9.4 -- October 6th, 2006
163     backupninja changes
164          . Fixed bug in toint(), and thus isnow(), which caused it
165            to not work when run from cron.
166          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
167          . Add admingroup option to configuration to allow a group that can
168            read/write configurations (instead of only allowing root). Checks
169            and complains about group-readable files only when the group differs
170            from the one in the configuration file (default is root as before).
171            Thanks to Martin Krafft for the patch (Closes: #370396).
172          . When determining which backup actions to make, find now follows
173            symlinks for $configdirectory
174          . Changed order of -s to mail for compatibility
175          . fixed permission stat call so it uses the --format supported by
176            coreutils (Closes: #382747)
177          . Added disk space report option (thanks Adam Kosmin)
178     handler changes
179         Added tar handler:
180          . create tarballs
181         Added rsnap handler:
182          . rotated rsync snapshops
183          . code from paulv@bikkel.org
184         Added rub handler:
185          . alternative to rsnap
186          . code from rhatto@riseup.net
187         mysql:
188          . Fixed improper use of $vuserhome (Closes: #351083)
189          . Fixed erroneous removal of tmpfile when it didn't exit
190          . Fixed inversed vsname emptiness check
191          . Fixed su quote usage to be more posixy
192          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
193          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
194         pgsql:
195          . Fixed inversed vsname emptiness check
196          . Fixed su quote usage to be more posixy
197          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
198          . postgres user UID is now the one from inside the vserver if necessary
199          . Compress now happens in-line to save some disk space (Closes: #370778)
200          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
201         svn:
202          . Fixed inversed vsname emptiness check
203         rdiff:
204          . Symlink and globbing support in include/exclude/vsinclude
205            clarification: globbing is fully supported again, whereas no attempt
206            is done to dereference symlinks anymore, due to incompatibilities
207            between various readlink versions in this field.
208          . Removed overzealous vsnames check
209          . Now works if testconnect=no and if $test is not defined.
210          . add $sshoptions config parameter in [dest] section of config so
211            connections to ports other than 22 can be made by adding the
212            following to the top of the handler config:
213            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
214            --server'
215         dup:
216          . Symlink and globbing support in include/exclude/vsinclude
217            clarification: globbing is fully supported again, whereas no attempt
218            is done to dereference symlinks anymore, due to incompatibilities
219            between various readlink versions in this field.
220          . Removed over zealous vsnames check
221          . Does not pretend anymore that duplicity can work without
222            any passphrase
223          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
224            0.4.3 will integrate them); documented how to write sftp-compatible
225            sshoptions (Closes: #388543)
226          . Now forbid to (try to) include /.
227         sys:
228          . Many more system checks were added, (thanks to Petr KlĂ­ma)
229          . Added warning if no devices were found (thanks Ranier Zocholl)
230          . Enhanced debian package selections to include purged packages (thanks
231            Tom Hoover)
232          . Removed warning about vserver not running (thanks anarcat)
233         ldap:
234          . Compress now happens in-line to save some disk space (Closes: #370778)
235         makecd:
236          . Added nicelevel option (thanks rhatto)
237         trac:
238          . fixed problem when src was set to the trac repo directly (Closes: #382737)
239     lib changes
240         vserver:
241          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
242          . found_vservers: escaped special grep repetition character +
243          . forced mktemp to use a template with a name to be more compatible with
244            different versions of mktemp, thanks anarcat
245     ninjahelper changes
246          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
247          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
248          . When determining which backup actions to list, find now follows
249            symlinks for $configdirectory
250          . Stop checking helpers perms: both "make install" and distros packages
251            install them with appropriate permissions, it's overzealous to check
252            this at runtime, and is more complicated to do with current
253            admingroup option.
254         dup.helper:
255          . Fix: signing was enabled with symmetric encryption.
256     changed cron permissions to 644
257     changed /etc/backup.d permissions to 0770 (for admingroup)
258     minor documentation fixes
259     improved RPM build process allowing 'make rpm-package' and 'make
260     srpm-package' targets, also fixes permissions on man directories,
261     cleans up RPM-related files during distclean, and adds default
262     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
263
264 version 0.9.3 -- February 1st, 2006
265     autotools fixes
266     backupninja changes
267         backupninja.conf
268          . added (commented out) the various default paths to
269            programs such as PGSQLDUMP, so that users can figure
270            out more easily they can customize them
271         code refactor:
272          . now uses vservers lib to initialize vservers support
273     handler changes
274         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
275            degrees) new lib/vserver functionality
276         mysql:
277          . fixed no user defaults file processing
278         duplicity:
279          . fixed (again...) globbing in include and exclude options (Debian bug
280            #348022, follow-up to #338796)
281          . warn if vsnames or vsinclude is enabled while vservers support is
282            disabled in backupninja.conf
283          . now works when multiple vservers names are given (separated by space)
284            in vsnames config variable
285         rdiff
286          . fixed globbing bug in include, exclude and vsinclude options
287          . it's now possible to choose exactly which vservers should be
288            backed-up, as it already was with duplicity handler, with the
289            "vsnames" configuration setting
290     ninjahelper changes
291         rdiff.helper:
292          . fixed errors in create remote dir
293          . code formatting cleanup (three spaces indent)
294          . fixed bug which caused only first include/exclude dir to
295            have "include = "
296          . fixed globbing bug with exclude
297         ninjahelper:
298          . now reports error if the helper script has a syntax error or bombs out.
299          . code formatting cleanup (three spaces indent)
300     lib changes
301         vserver:
302          . init_vservers: improved VROOTDIR detection
303          . init_vservers: test in a stricter way the real vservers availability
304          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
305            don't follow symlinks)
306          . init_vservers: warn if vservers are enabled but no vserver is found
307          . new function: vservers_exist
308     known bugs:
309         easydialog:
310          . formDisplay does not return exit status.
311
312 version 0.9.2 -- December 29, 2005
313     backupninja changes
314         fixed broken toint() which caused when "everyday" problems
315         backupninja.conf.5 updated to include "when" and "vservers"
316         code refactor:
317             . moved to lib/ some code that has to be shared between
318               backupninja and ninjahelper
319     handler changes
320         trac:
321             . mkdir subdirectory problem fixed
322         duplicity:
323             . globbing support fixed in include and exclude options
324             . different signing and encrypting key support added
325             . fixed erroneous comments in example.dup about the way
326               GnuPG-related options are used
327         mysql:
328             . handler vserver bugs fixed and debug output enhanced
329     ninjahelper(s) changes
330         vserver-related functions added to lib/vservers.in
331         added man/ninjahelper.1 man page
332         makecd:
333             . was missing in Makefile.am/.in
334         rdiff-backup:
335             . used to expand '*' in default source directories
336             . the "Cancel" buttons used to have a weird behaviour
337             . updated to include Vserver selection
338         pgsql:
339             . forbid the user to choose an empty database set
340             . "Cancel" button now does what it is meant to do
341         mysql:
342             . enhanced for vserver support
343             . now able to select databases and dump directory
344         duplicity:
345             . new handler added (with Vserver support)
346
347 version 0.9.1 -- November 05 2005
348     rearranged source so that it is relocatable with autotools
349         (thanks to Petr KlĂ­ma petr.klima@madeta-group.cz)
350     fixed many bugs in rdiff helper
351     rdiff handler does not require 'label' (for real this time?)
352     added makecd ninjahelper
353         (thanks to Stefani stefani@riseup.net)
354     made ninjahelper create files with mode 600 rather than 000
355     changed subversion handler to use svnadmin hotcopy instead of
356             the unsupported hot-copy.py script, which was moved in Debian
357     update rdiff ninjahelper
358             now detects and auto-install rdiff-backup on the remote
359             machine if possible, also tests the remote backup directory
360             and offers to create it if it doesn't exist
361
362 version 0.9 -- October 19 2005
363     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
364      fixed insecure temporary file creation
365     *****************************************
366     removed erroneous magic file marker in pgsql handler
367     fixed incorrect find positional
368     changed direct grep of /etc/passwd to getent passwd.
369     rdiff helper has much better information on failed ssh attempt
370         (patch from cmccallum@thecsl.org).
371     rdiff handler now supports remote source and local dest.
372         (patch from cmccallum@thecsl.org).
373     man pages are greatly improved.
374
375 version 0.8 -- September 15 2005
376     added pgsql (PostgreSQL) handler, with vservers support.
377     added vservers support to duplicity handler
378         Note: the configuration is a bit different than the rdiff
379         handler's one, but the default behavior is the same:
380         have a look at example.dup.
381     improved README
382     documented .disabled method.
383     corrected VROOTDIR default value.
384     added ninjahelper to the install instructions.
385     improved rdiff, dup and sys handlers' vservers support
386         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
387         to be seen as a vserver
388     changes to sys handler
389         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
390         fixed dpkg existence test inside vserver.
391         fixed $nodpkg use.
392     changes to pgsql handler
393         now checks if the specified vserver is running.
394         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
395         now checks if "postgres" user exists on the host/vserver.
396     changes to ninjahelper
397         check_perms() does not die anymore on group/world readable
398         helper scripts (now consistent with the "helper scripts
399         must not be group or world writable!" error msg).
400     xedit action now tries $EDITOR, then /etc/alternatives/editor,
401         then nano, vim and vi, and aborts if none of these exists.
402     added helper for pgsql handler.
403     rdiff handler now does not require 'label'
404     changes to mysql and svn handlers' vservers support
405         these handlers now check if the source vserver is running
406     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
407
408 version 0.7 -- July 26 2005
409     added ninjahelper: a dialog based wizard for creating backupninja configs.
410     considerably improved and changed the log file output.
411     you can now disable actions with .disabled (this is new preferred method).
412     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
413     fixed bug when specifying multiple 'when' options.
414
415 version 0.6 -- June 16 2005
416     ldap handler has new options: backup method to use (ldapsearch or
417         slapcat), restart, passwordfile and binddn. Default backup method
418         is set to ldapsearch as this is safer
419     ******************************************************************
420     NOTE: to get the previous default behavior with the ldap handler,
421     you must set "method = slapcat". The new default is ldapsearch.
422     ******************************************************************
423     implemented fix so that the main script will echo fatal errors rather
424         than being silent about them, this means an error message every hour
425         if there is a major configuration problem (not a handler problem)
426     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
427     changes to duplicity handler (thanks intrigeri!):
428         "keep = yes" now disables file cleaning on desthost
429         added "sign" option for backups signing
430         added "encryptkey" option to specify the gpg key to use
431         split config into [source], [gpg] and [dest] sections
432         added "nicelevel" option
433         added "testconnect" option
434         added "sshoptions" option (will be passed to ssh/scp)
435         added "bandwidthlimit" option
436     example.dup example config file for duplicity handler
437     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
438     added configfile option to mysql handler
439         the default is /etc/mysql/debian.cnf. with this,
440         sqldump doesn't need dbusername. (hotcopy still does).
441     fixed bug in mysql handler which caused some passwords to not work.
442         (.my.cnf files now have double quotes around password)
443     can now pass options to hwinfo and sfdisk in sys handler.
444
445 version 0.5 -- April 12 2005
446     rdiff handler works when remote sshd has a banner
447     rdiff handler supports local dest
448     logfile is created if it doesn't exist
449     added "when = hourly"
450     added optional 'nicelevel' to rdiff handler
451     fixed bug where actions were not run in numeric order.
452     improved 'when' parsing.
453
454 version 0.4.4 -- March 18 2005
455     results of handlers are now read line by line.
456     changes to rdiff handler: added "options", and "keep" is
457         not necessarily days now (ie, it will pass straight through to
458         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
459     added dup handler (still pretty beta)
460     added maildir handler (very specialized handler)
461     added --run option (runs the specified action file)
462     improved sys handler, now uses hwinfo
463     added subversion hotbackup handler, svn.
464     added PATH to cron.d file, which fixes file not found errors.
465
466 version 0.4.2 -- Jan 6 2005
467     fixed bug which caused a report email to be sent even if no actions were run.
468     fixed bug where multiple handler status messages were ignored
469     added status in the subject line of report emails
470
471 version 0.4.1 -- Jan 3 2005
472     added $usecolors and now more conservative about when colors are echoed.
473     fixed major bug, 'when' actually works now.
474     replaced debug function with debug, info, warning, error, fatal.
475     added --now option to force all actions to be performed now.
476
477 version 0.4 -- Dec 26 2004
478     added "when" option, so that all configs can specify when
479         they are to be run.
480     added reportsuccess and reportwarning config options
481     added .sys handler (hardware, packages, partitions).
482
483 version 0.3.4 -- Dec 8 2004
484     fixed numerical variable quoting compatibility with older wc
485     fixed stderr redirect bug
486     some comments in example.rdiff
487
488 version 0.3.3 -- Nov 10 2004
489     '*' (asterisk) works now in rdiff config files
490     works now with gawk as well as mawk
491     many bug fixes to ldap handler
492     paths to helper scripts can be configured in global config
493     does not require /usr/bin/stat
494
495 version 0.3.2 -- Sept 29 2004
496     handler scripts are no longer executable (to comply with debian policy)
497     handler error and warning messages are sent with the notify email
498
499 version 0.3.1 -- Sept 5 2004
500     added ldap handler
501     moved sh support to a handler script
502     add test mode, where no action is taken.
503     added --help
504     force only root can read /etc/backup.d/*
505     fixed missing equals symbols in example.rdiff
506     changed backupninja executable to be /usr/sbin rather than /usr/bin
507
508 version 0.3 -- Oct 20 2004
509     ** IMPORTANT ** all config files are now ini style, not apache style
510     rewrote all scripts in bash for portability
511     added drop-in backupninja lib directory (/usr/share/backupninja)
512     all scripts are now run as root
513
514 version 0.2 -- Oct 14 2004
515     move distribution folder ./cron.d to ./etc/cron.d
516     fixed bug: removed printr of excludes (!)
517     added support for changing the user/group in rdiff sources.
518     added support for .mysql config files.
519
520 version 0.1 -- Oct 8 2004
521     initial release
522