80db11c51e1c4edaa1b52d53bbb465866e698013
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- unreleased
2     backupninja changes
3          . fix bug in cstream definition, thanks Jamie McClelland
4          . Allow the entire backup run to be halted by an action, thanks to
5            Matthew Palmer (Closes: #455836)
6          . Fixed tr construct reporting a warning (Closes: #452669)
7     lib changes
8         vserver:
9          . added vservers_running function
10         tools
11          . mktemp is now required to run backupninja, removed less secure
12            fall-back if mktemp did not exist on the system
13     handler changes
14         dup:
15          . General cleanup
16          . Better support for new duplicity (>= 0.4.4) command line syntax:
17            run remove-older-than when $keep is not set to yes (Closes: #458816),
18            and run "duplicity cleanup" before any other duplicity command; both
19            only trigger a warning on failure, since they should not stop backups
20            from being done. Also migrated full/incremental backup switch to the
21            new syntax.
22          . Support every duplicity-supported transport with new configuration
23            option desturl (Closes: #483712, #346040, Trac#2).
24          .
25         Actually allow to backup only VServers, by relaxing $include test.
26         ldap:
27          . support HDB backend just as the BDB one, and make message clearer
28            when no supported backend is found (Closes: #476910)
29         rdiff:
30          . Fixed ignore_version default value missing
31          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
32            into options via remote-schema not already specified (Closes: #424639)
33         wget:
34          . New handler from rhatto designed to incrementally pull content from
35            a website to a local folder, based on the rsync handler
36         maildir:
37          . fixed bug where maildirs that start with a number were skipped.
38          . make deleted maildirs record the date they were deleted
39          . add destid_file configuration option to enable you to specify an alternate
40            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
41         pgsql, mysql, svn, sys:
42          . use new vservers_running function from lib/vserver (factorization++)
43         sys:
44          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
45            (Closes: Trac#39)
46          . support selection of VServers to run on, in the same way as in the
47            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
48
49 version 0.9.5 -- December 2, 2007
50     backupninja changes
51          . Fixed checks on configuration files permissions, since the patch
52            applied to fix #370396 broke this, especially for configuration files
53            created with permissions 000 by an older ninjahelper version.
54          . Enhanced portability for other platforms
55          . Added quoting because it was needed to prevent shell expansion, broking the
56            toint function sometimes (Closes: Trac#11)
57          . Fixed reportspace option (Closes: Trac#10)
58          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
59     handler changes
60         dup:
61          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
62            is not supported anymore) (Closes: #447425)
63          . New tmpdir configuration option, very useful in case duplicity tends
64            to fill up /tmp.
65         ldap:
66          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
67            compress=yes to be less redundant and not create empty uncompressed
68            file (Closes: #394935)
69          . Fixed ninjahelper to properly set compress option, standardized on yes/no
70            instead of on/off
71          . Fixed problem that caused combination of slapcat and compress to not work
72            together (Closes: Trac#29)
73          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
74            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
75         maildir:
76          . Added an examples file (Closes: Trac#23)
77          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
78            coreutils options, as well as some bashisms (Closes: Trac#24)
79          . Fix test mode (Closes: Trac#25)
80         mysql:
81          . Fixed case where odd combination of configuration options caused sqldump
82            backups to get overwritten with an empty file (Closes: #402679)
83          . Added 'nodata' option to enable you to specify tables that you want to omit
84            the data from a backup, but still backup the table structure. This is very
85            useful in cases where tables contain large amounts of cache data. See the
86            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
87          . Enhance code for selecting databases by asking MySQL not to give us the
88            header (-N), to not draw pretty boxes around the output (-B), send the query
89            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
90            Matthew Palmer (Closes: #452039).
91         pgsql:
92          . Support configuring PGSQLUSER for real, and document it a bit; this
93            broken support actually prevented pgsql handler to work for VServers
94            (Closes: #396578)
95         rdiff-backup:
96          . Added cstream support to allow for bandwidth limiting
97          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
98          . Add configuration option to allow you to disable the version check
99            as in some instances this may be an ok scenario (Closes: #424632)
100          . Added local destination support to helper (Closes: Trac#4)
101          . Allow exclude-only configurations (Closes: Trac#21)
102         rub/rsync
103          . Fixed typo in rub handler that caused it to not work
104          . Changed to use lib/vserver code
105          . Fixed fsck error
106          . Fixed integer comparison (Closes: Trac#3)
107          . Renamed handler to 'rsync', replaces outdated rub handler
108          . updated examples/Makefile.am and handlers/Makefile.am to include
109            rsnap/rsync (Closes: #440554)
110          . Added example.rsync configuration file
111         sys:
112          . Fixed typo breaking things for VServers.
113          . Fix bug when vrootdir is on its own partition (Closes: #395928)
114          . Better sfdisk error and output handling: should now properly warn
115            when it does not manage to backup a partition table, and shut up when
116            it succeeds (Closes: #396632)
117          . Added option to not use sfdisk at all, useful for vserver/xen instances
118            that produce warnings about no harddisks found (Closes: #404071)
119          . Fixed example in example.sys to detail the __star__ in partitionsfile and
120            note why its necessary (Closes: #409192)
121          . Force C locale for sfdisk to ensure english words are found in grep
122          . Make directory where output is placed configurable, and create the parent dir
123            if it doesn't exist (Closes: Trac#1)
124     ninjareport
125          . Added first draft of method to aggregate reports from many servers into
126            one email. Requires logtail, rsync, configuration of reporthost,
127            reportdirectory and reportuser in backupninja.conf. Configure cron to
128            run once a day, and individual backupninjas not to report by email their
129            status, then enjoy one email report from all hosts, rather than multiple
130     fixed 'make install' bug that failed if /etc/backup.d already existed
131     changed spaces to tabs in Makefile.am
132     updated redhat spec file (thanks Adam Monsen)
133
134 version 0.9.4 -- October 6th, 2006
135     backupninja changes
136          . Fixed bug in toint(), and thus isnow(), which caused it
137            to not work when run from cron.
138          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
139          . Add admingroup option to configuration to allow a group that can
140            read/write configurations (instead of only allowing root). Checks
141            and complains about group-readable files only when the group differs
142            from the one in the configuration file (default is root as before).
143            Thanks to Martin Krafft for the patch (Closes: #370396).
144          . When determining which backup actions to make, find now follows
145            symlinks for $configdirectory
146          . Changed order of -s to mail for compatibility
147          . fixed permission stat call so it uses the --format supported by
148            coreutils (Closes: #382747)
149          . Added disk space report option (thanks Adam Kosmin)
150     handler changes
151         Added tar handler:
152          . create tarballs
153         Added rsnap handler:
154          . rotated rsync snapshops
155          . code from paulv@bikkel.org
156         Added rub handler:
157          . alternative to rsnap
158          . code from rhatto@riseup.net
159         mysql:
160          . Fixed improper use of $vuserhome (Closes: #351083)
161          . Fixed erroneous removal of tmpfile when it didn't exit
162          . Fixed inversed vsname emptiness check
163          . Fixed su quote usage to be more posixy
164          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
165          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
166         pgsql:
167          . Fixed inversed vsname emptiness check
168          . Fixed su quote usage to be more posixy
169          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
170          . postgres user UID is now the one from inside the vserver if necessary
171          . Compress now happens in-line to save some disk space (Closes: #370778)
172          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
173         svn:
174          . Fixed inversed vsname emptiness check
175         rdiff:
176          . Symlink and globbing support in include/exclude/vsinclude
177            clarification: globbing is fully supported again, whereas no attempt
178            is done to dereference symlinks anymore, due to incompatibilities
179            between various readlink versions in this field.
180          . Removed overzealous vsnames check
181          . Now works if testconnect=no and if $test is not defined.
182          . add $sshoptions config parameter in [dest] section of config so
183            connections to ports other than 22 can be made by adding the
184            following to the top of the handler config:
185            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
186            --server'
187         dup:
188          . Symlink and globbing support in include/exclude/vsinclude
189            clarification: globbing is fully supported again, whereas no attempt
190            is done to dereference symlinks anymore, due to incompatibilities
191            between various readlink versions in this field.
192          . Removed over zealous vsnames check
193          . Does not pretend anymore that duplicity can work without
194            any passphrase
195          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
196            0.4.3 will integrate them); documented how to write sftp-compatible
197            sshoptions (Closes: #388543)
198          . Now forbid to (try to) include /.
199         sys:
200          . Many more system checks were added, (thanks to Petr Klíma)
201          . Added warning if no devices were found (thanks Ranier Zocholl)
202          . Enhanced debian package selections to include purged packages (thanks
203            Tom Hoover)
204          . Removed warning about vserver not running (thanks anarcat)
205         ldap:
206          . Compress now happens in-line to save some disk space (Closes: #370778)
207         makecd:
208          . Added nicelevel option (thanks rhatto)
209         trac:
210          . fixed problem when src was set to the trac repo directly (Closes: #382737)
211     lib changes
212         vserver:
213          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
214          . found_vservers: escaped special grep repetition character +
215          . forced mktemp to use a template with a name to be more compatible with
216            different versions of mktemp, thanks anarcat
217     ninjahelper changes
218          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
219          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
220          . When determining which backup actions to list, find now follows
221            symlinks for $configdirectory
222          . Stop checking helpers perms: both "make install" and distros packages
223            install them with appropriate permissions, it's overzealous to check
224            this at runtime, and is more complicated to do with current
225            admingroup option.
226         dup.helper:
227          . Fix: signing was enabled with symmetric encryption.
228     changed cron permissions to 644
229     changed /etc/backup.d permissions to 0770 (for admingroup)
230     minor documentation fixes
231     improved RPM build process allowing 'make rpm-package' and 'make
232     srpm-package' targets, also fixes permissions on man directories,
233     cleans up RPM-related files during distclean, and adds default
234     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
235
236 version 0.9.3 -- February 1st, 2006
237     autotools fixes
238     backupninja changes
239         backupninja.conf
240          . added (commented out) the various default paths to
241            programs such as PGSQLDUMP, so that users can figure
242            out more easily they can customize them
243         code refactor:
244          . now uses vservers lib to initialize vservers support
245     handler changes
246         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
247            degrees) new lib/vserver functionality
248         mysql:
249          . fixed no user defaults file processing
250         duplicity:
251          . fixed (again...) globbing in include and exclude options (Debian bug
252            #348022, follow-up to #338796)
253          . warn if vsnames or vsinclude is enabled while vservers support is
254            disabled in backupninja.conf
255          . now works when multiple vservers names are given (separated by space)
256            in vsnames config variable
257         rdiff
258          . fixed globbing bug in include, exclude and vsinclude options
259          . it's now possible to choose exactly which vservers should be
260            backed-up, as it already was with duplicity handler, with the
261            "vsnames" configuration setting
262     ninjahelper changes
263         rdiff.helper:
264          . fixed errors in create remote dir
265          . code formatting cleanup (three spaces indent)
266          . fixed bug which caused only first include/exclude dir to
267            have "include = "
268          . fixed globbing bug with exclude
269         ninjahelper:
270          . now reports error if the helper script has a syntax error or bombs out.
271          . code formatting cleanup (three spaces indent)
272     lib changes
273         vserver:
274          . init_vservers: improved VROOTDIR detection
275          . init_vservers: test in a stricter way the real vservers availability
276          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
277            don't follow symlinks)
278          . init_vservers: warn if vservers are enabled but no vserver is found
279          . new function: vservers_exist
280     known bugs:
281         easydialog:
282          . formDisplay does not return exit status.
283
284 version 0.9.2 -- December 29, 2005
285     backupninja changes
286         fixed broken toint() which caused when "everyday" problems
287         backupninja.conf.5 updated to include "when" and "vservers"
288         code refactor:
289             . moved to lib/ some code that has to be shared between
290               backupninja and ninjahelper
291     handler changes
292         trac:
293             . mkdir subdirectory problem fixed
294         duplicity:
295             . globbing support fixed in include and exclude options
296             . different signing and encrypting key support added
297             . fixed erroneous comments in example.dup about the way
298               GnuPG-related options are used
299         mysql:
300             . handler vserver bugs fixed and debug output enhanced
301     ninjahelper(s) changes
302         vserver-related functions added to lib/vservers.in
303         added man/ninjahelper.1 man page
304         makecd:
305             . was missing in Makefile.am/.in
306         rdiff-backup:
307             . used to expand '*' in default source directories
308             . the "Cancel" buttons used to have a weird behaviour
309             . updated to include Vserver selection
310         pgsql:
311             . forbid the user to choose an empty database set
312             . "Cancel" button now does what it is meant to do
313         mysql:
314             . enhanced for vserver support
315             . now able to select databases and dump directory
316         duplicity:
317             . new handler added (with Vserver support)
318
319 version 0.9.1 -- November 05 2005
320     rearranged source so that it is relocatable with autotools
321         (thanks to Petr Klíma petr.klima@madeta-group.cz)
322     fixed many bugs in rdiff helper
323     rdiff handler does not require 'label' (for real this time?)
324     added makecd ninjahelper
325         (thanks to Stefani stefani@riseup.net)
326     made ninjahelper create files with mode 600 rather than 000
327     changed subversion handler to use svnadmin hotcopy instead of
328             the unsupported hot-copy.py script, which was moved in Debian
329     update rdiff ninjahelper
330             now detects and auto-install rdiff-backup on the remote
331             machine if possible, also tests the remote backup directory
332             and offers to create it if it doesn't exist
333
334 version 0.9 -- October 19 2005
335     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
336      fixed insecure temporary file creation
337     *****************************************
338     removed erroneous magic file marker in pgsql handler
339     fixed incorrect find positional
340     changed direct grep of /etc/passwd to getent passwd.
341     rdiff helper has much better information on failed ssh attempt
342         (patch from cmccallum@thecsl.org).
343     rdiff handler now supports remote source and local dest.
344         (patch from cmccallum@thecsl.org).
345     man pages are greatly improved.
346
347 version 0.8 -- September 15 2005
348     added pgsql (PostgreSQL) handler, with vservers support.
349     added vservers support to duplicity handler
350         Note: the configuration is a bit different than the rdiff
351         handler's one, but the default behavior is the same:
352         have a look at example.dup.
353     improved README
354     documented .disabled method.
355     corrected VROOTDIR default value.
356     added ninjahelper to the install instructions.
357     improved rdiff, dup and sys handlers' vservers support
358         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
359         to be seen as a vserver
360     changes to sys handler
361         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
362         fixed dpkg existence test inside vserver.
363         fixed $nodpkg use.
364     changes to pgsql handler
365         now checks if the specified vserver is running.
366         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
367         now checks if "postgres" user exists on the host/vserver.
368     changes to ninjahelper
369         check_perms() does not die anymore on group/world readable
370         helper scripts (now consistent with the "helper scripts
371         must not be group or world writable!" error msg).
372     xedit action now tries $EDITOR, then /etc/alternatives/editor,
373         then nano, vim and vi, and aborts if none of these exists.
374     added helper for pgsql handler.
375     rdiff handler now does not require 'label'
376     changes to mysql and svn handlers' vservers support
377         these handlers now check if the source vserver is running
378     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
379
380 version 0.7 -- July 26 2005
381     added ninjahelper: a dialog based wizard for creating backupninja configs.
382     considerably improved and changed the log file output.
383     you can now disable actions with .disabled (this is new preferred method).
384     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
385     fixed bug when specifying multiple 'when' options.
386
387 version 0.6 -- June 16 2005
388     ldap handler has new options: backup method to use (ldapsearch or
389         slapcat), restart, passwordfile and binddn. Default backup method
390         is set to ldapsearch as this is safer
391     ******************************************************************
392     NOTE: to get the previous default behavior with the ldap handler,
393     you must set "method = slapcat". The new default is ldapsearch.
394     ******************************************************************
395     implemented fix so that the main script will echo fatal errors rather
396         than being silent about them, this means an error message every hour
397         if there is a major configuration problem (not a handler problem)
398     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
399     changes to duplicity handler (thanks intrigeri!):
400         "keep = yes" now disables file cleaning on desthost
401         added "sign" option for backups signing
402         added "encryptkey" option to specify the gpg key to use
403         split config into [source], [gpg] and [dest] sections
404         added "nicelevel" option
405         added "testconnect" option
406         added "sshoptions" option (will be passed to ssh/scp)
407         added "bandwidthlimit" option
408     example.dup example config file for duplicity handler
409     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
410     added configfile option to mysql handler
411         the default is /etc/mysql/debian.cnf. with this,
412         sqldump doesn't need dbusername. (hotcopy still does).
413     fixed bug in mysql handler which caused some passwords to not work.
414         (.my.cnf files now have double quotes around password)
415     can now pass options to hwinfo and sfdisk in sys handler.
416
417 version 0.5 -- April 12 2005
418     rdiff handler works when remote sshd has a banner
419     rdiff handler supports local dest
420     logfile is created if it doesn't exist
421     added "when = hourly"
422     added optional 'nicelevel' to rdiff handler
423     fixed bug where actions were not run in numeric order.
424     improved 'when' parsing.
425
426 version 0.4.4 -- March 18 2005
427     results of handlers are now read line by line.
428     changes to rdiff handler: added "options", and "keep" is
429         not necessarily days now (ie, it will pass straight through to
430         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
431     added dup handler (still pretty beta)
432     added maildir handler (very specialized handler)
433     added --run option (runs the specified action file)
434     improved sys handler, now uses hwinfo
435     added subversion hotbackup handler, svn.
436     added PATH to cron.d file, which fixes file not found errors.
437
438 version 0.4.2 -- Jan 6 2005
439     fixed bug which caused a report email to be sent even if no actions were run.
440     fixed bug where multiple handler status messages were ignored
441     added status in the subject line of report emails
442
443 version 0.4.1 -- Jan 3 2005
444     added $usecolors and now more conservative about when colors are echoed.
445     fixed major bug, 'when' actually works now.
446     replaced debug function with debug, info, warning, error, fatal.
447     added --now option to force all actions to be performed now.
448
449 version 0.4 -- Dec 26 2004
450     added "when" option, so that all configs can specify when
451         they are to be run.
452     added reportsuccess and reportwarning config options
453     added .sys handler (hardware, packages, partitions).
454
455 version 0.3.4 -- Dec 8 2004
456     fixed numerical variable quoting compatibility with older wc
457     fixed stderr redirect bug
458     some comments in example.rdiff
459
460 version 0.3.3 -- Nov 10 2004
461     '*' (asterisk) works now in rdiff config files
462     works now with gawk as well as mawk
463     many bug fixes to ldap handler
464     paths to helper scripts can be configured in global config
465     does not require /usr/bin/stat
466
467 version 0.3.2 -- Sept 29 2004
468     handler scripts are no longer executable (to comply with debian policy)
469     handler error and warning messages are sent with the notify email
470
471 version 0.3.1 -- Sept 5 2004
472     added ldap handler
473     moved sh support to a handler script
474     add test mode, where no action is taken.
475     added --help
476     force only root can read /etc/backup.d/*
477     fixed missing equals symbols in example.rdiff
478     changed backupninja executable to be /usr/sbin rather than /usr/bin
479
480 version 0.3 -- Oct 20 2004
481     ** IMPORTANT ** all config files are now ini style, not apache style
482     rewrote all scripts in bash for portability
483     added drop-in backupninja lib directory (/usr/share/backupninja)
484     all scripts are now run as root
485
486 version 0.2 -- Oct 14 2004
487     move distribution folder ./cron.d to ./etc/cron.d
488     fixed bug: removed printr of excludes (!)
489     added support for changing the user/group in rdiff sources.
490     added support for .mysql config files.
491
492 version 0.1 -- Oct 8 2004
493     initial release
494