c32acb85f580ada0a5cd1460ca8b22056bfa5f35
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- unreleased
2     backupninja changes
3          . fix bug in cstream definition, thanks Jamie McClelland
4          . Allow the entire backup run to be halted by an action, thanks to
5            Matthew Palmer (Closes: #455836)
6          . Fixed tr construct reporting a warning (Closes: #452669)
7     handler changes
8         dup:
9          . General cleanup
10          . Better support for new duplicity (>= 0.4.4) command line syntax:
11            run remove-older-than when $keep is not set to yes (Closes: #458816),
12            and run "duplicity cleanup" before any other duplicity command; both
13            only trigger a warning on failure, since they should not stop backups
14            from being done. Also migrated full/incremental backup switch to the
15            new syntax.
16          . Support every duplicity-supported transport with new configuration
17            option desturl (Closes: #483712, #346040, Trac#2).
18         ldap:
19          . support HDB backend just as the BDB one, and make message clearer
20            when no supported backend is found (Closes: #476910)
21         rdiff:
22          . Fixed ignore_version default value missing
23          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
24            into options via remote-schema not already specified (Closes: #424639)
25         wget:
26          . New handler from rhatto designed to incrementally pull content from
27            a website to a local folder, based on the rsync handler
28         maildir:
29          . fixed bug where maildirs that start with a number were skipped.
30          . make deleted maildirs record the date they were deleted
31          . add destid_file configuration option to enable you to specify an alternate
32            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
33         sys:
34          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
35            (Closes: Trac#39)
36
37 version 0.9.5 -- December 2, 2007
38     backupninja changes
39          . Fixed checks on configuration files permissions, since the patch
40            applied to fix #370396 broke this, especially for configuration files
41            created with permissions 000 by an older ninjahelper version.
42          . Enhanced portability for other platforms
43          . Added quoting because it was needed to prevent shell expansion, broking the
44            toint function sometimes (Closes: Trac#11)
45          . Fixed reportspace option (Closes: Trac#10)
46          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
47     handler changes
48         dup:
49          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
50            is not supported anymore) (Closes: #447425)
51          . New tmpdir configuration option, very useful in case duplicity tends
52            to fill up /tmp.
53         ldap:
54          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
55            compress=yes to be less redundant and not create empty uncompressed
56            file (Closes: #394935)
57          . Fixed ninjahelper to properly set compress option, standardized on yes/no
58            instead of on/off
59          . Fixed problem that caused combination of slapcat and compress to not work
60            together (Closes: Trac#29)
61          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
62            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
63         maildir:
64          . Added an examples file (Closes: Trac#23)
65          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
66            coreutils options, as well as some bashisms (Closes: Trac#24)
67          . Fix test mode (Closes: Trac#25)
68         mysql:
69          . Fixed case where odd combination of configuration options caused sqldump
70            backups to get overwritten with an empty file (Closes: #402679)
71          . Added 'nodata' option to enable you to specify tables that you want to omit
72            the data from a backup, but still backup the table structure. This is very
73            useful in cases where tables contain large amounts of cache data. See the
74            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
75          . Enhance code for selecting databases by asking MySQL not to give us the
76            header (-N), to not draw pretty boxes around the output (-B), send the query
77            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
78            Matthew Palmer (Closes: #452039).
79         pgsql:
80          . Support configuring PGSQLUSER for real, and document it a bit; this
81            broken support actually prevented pgsql handler to work for VServers
82            (Closes: #396578)
83         rdiff-backup:
84          . Added cstream support to allow for bandwidth limiting
85          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
86          . Add configuration option to allow you to disable the version check
87            as in some instances this may be an ok scenario (Closes: #424632)
88          . Added local destination support to helper (Closes: Trac#4)
89          . Allow exclude-only configurations (Closes: Trac#21)
90         rub/rsync
91          . Fixed typo in rub handler that caused it to not work
92          . Changed to use lib/vserver code
93          . Fixed fsck error
94          . Fixed integer comparison (Closes: Trac#3)
95          . Renamed handler to 'rsync', replaces outdated rub handler
96          . updated examples/Makefile.am and handlers/Makefile.am to include
97            rsnap/rsync (Closes: #440554)
98          . Added example.rsync configuration file
99         sys:
100          . Fixed typo breaking things for VServers.
101          . Fix bug when vrootdir is on its own partition (Closes: #395928)
102          . Better sfdisk error and output handling: should now properly warn
103            when it does not manage to backup a partition table, and shut up when
104            it succeeds (Closes: #396632)
105          . Added option to not use sfdisk at all, useful for vserver/xen instances
106            that produce warnings about no harddisks found (Closes: #404071)
107          . Fixed example in example.sys to detail the __star__ in partitionsfile and
108            note why its necessary (Closes: #409192)
109          . Force C locale for sfdisk to ensure english words are found in grep
110          . Make directory where output is placed configurable, and create the parent dir
111            if it doesn't exist (Closes: Trac#1)
112     ninjareport
113          . Added first draft of method to aggregate reports from many servers into
114            one email. Requires logtail, rsync, configuration of reporthost,
115            reportdirectory and reportuser in backupninja.conf. Configure cron to
116            run once a day, and individual backupninjas not to report by email their
117            status, then enjoy one email report from all hosts, rather than multiple
118     fixed 'make install' bug that failed if /etc/backup.d already existed
119     changed spaces to tabs in Makefile.am
120     updated redhat spec file (thanks Adam Monsen)
121
122 version 0.9.4 -- October 6th, 2006
123     backupninja changes
124          . Fixed bug in toint(), and thus isnow(), which caused it
125            to not work when run from cron.
126          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
127          . Add admingroup option to configuration to allow a group that can
128            read/write configurations (instead of only allowing root). Checks
129            and complains about group-readable files only when the group differs
130            from the one in the configuration file (default is root as before).
131            Thanks to Martin Krafft for the patch (Closes: #370396).
132          . When determining which backup actions to make, find now follows
133            symlinks for $configdirectory
134          . Changed order of -s to mail for compatibility
135          . fixed permission stat call so it uses the --format supported by
136            coreutils (Closes: #382747)
137          . Added disk space report option (thanks Adam Kosmin)
138     handler changes
139         Added tar handler:
140          . create tarballs
141         Added rsnap handler:
142          . rotated rsync snapshops
143          . code from paulv@bikkel.org
144         Added rub handler:
145          . alternative to rsnap
146          . code from rhatto@riseup.net
147         mysql:
148          . Fixed improper use of $vuserhome (Closes: #351083)
149          . Fixed erroneous removal of tmpfile when it didn't exit
150          . Fixed inversed vsname emptiness check
151          . Fixed su quote usage to be more posixy
152          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
153          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
154         pgsql:
155          . Fixed inversed vsname emptiness check
156          . Fixed su quote usage to be more posixy
157          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
158          . postgres user UID is now the one from inside the vserver if necessary
159          . Compress now happens in-line to save some disk space (Closes: #370778)
160          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
161         svn:
162          . Fixed inversed vsname emptiness check
163         rdiff:
164          . Symlink and globbing support in include/exclude/vsinclude
165            clarification: globbing is fully supported again, whereas no attempt
166            is done to dereference symlinks anymore, due to incompatibilities
167            between various readlink versions in this field.
168          . Removed overzealous vsnames check
169          . Now works if testconnect=no and if $test is not defined.
170          . add $sshoptions config parameter in [dest] section of config so
171            connections to ports other than 22 can be made by adding the
172            following to the top of the handler config:
173            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
174            --server'
175         dup:
176          . Symlink and globbing support in include/exclude/vsinclude
177            clarification: globbing is fully supported again, whereas no attempt
178            is done to dereference symlinks anymore, due to incompatibilities
179            between various readlink versions in this field.
180          . Removed over zealous vsnames check
181          . Does not pretend anymore that duplicity can work without
182            any passphrase
183          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
184            0.4.3 will integrate them); documented how to write sftp-compatible
185            sshoptions (Closes: #388543)
186          . Now forbid to (try to) include /.
187         sys:
188          . Many more system checks were added, (thanks to Petr Klíma)
189          . Added warning if no devices were found (thanks Ranier Zocholl)
190          . Enhanced debian package selections to include purged packages (thanks
191            Tom Hoover)
192          . Removed warning about vserver not running (thanks anarcat)
193         ldap:
194          . Compress now happens in-line to save some disk space (Closes: #370778)
195         makecd:
196          . Added nicelevel option (thanks rhatto)
197         trac:
198          . fixed problem when src was set to the trac repo directly (Closes: #382737)
199     lib changes
200         vserver:
201          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
202          . found_vservers: escaped special grep repetition character +
203          . forced mktemp to use a template with a name to be more compatible with
204            different versions of mktemp, thanks anarcat
205     ninjahelper changes
206          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
207          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
208          . When determining which backup actions to list, find now follows
209            symlinks for $configdirectory
210          . Stop checking helpers perms: both "make install" and distros packages
211            install them with appropriate permissions, it's overzealous to check
212            this at runtime, and is more complicated to do with current
213            admingroup option.
214         dup.helper:
215          . Fix: signing was enabled with symmetric encryption.
216     changed cron permissions to 644
217     changed /etc/backup.d permissions to 0770 (for admingroup)
218     minor documentation fixes
219     improved RPM build process allowing 'make rpm-package' and 'make
220     srpm-package' targets, also fixes permissions on man directories,
221     cleans up RPM-related files during distclean, and adds default
222     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
223
224 version 0.9.3 -- February 1st, 2006
225     autotools fixes
226     backupninja changes
227         backupninja.conf
228          . added (commented out) the various default paths to
229            programs such as PGSQLDUMP, so that users can figure
230            out more easily they can customize them
231         code refactor:
232          . now uses vservers lib to initialize vservers support
233     handler changes
234         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
235            degrees) new lib/vserver functionality
236         mysql:
237          . fixed no user defaults file processing
238         duplicity:
239          . fixed (again...) globbing in include and exclude options (Debian bug
240            #348022, follow-up to #338796)
241          . warn if vsnames or vsinclude is enabled while vservers support is
242            disabled in backupninja.conf
243          . now works when multiple vservers names are given (separated by space)
244            in vsnames config variable
245         rdiff
246          . fixed globbing bug in include, exclude and vsinclude options
247          . it's now possible to choose exactly which vservers should be
248            backed-up, as it already was with duplicity handler, with the
249            "vsnames" configuration setting
250     ninjahelper changes
251         rdiff.helper:
252          . fixed errors in create remote dir
253          . code formatting cleanup (three spaces indent)
254          . fixed bug which caused only first include/exclude dir to
255            have "include = "
256          . fixed globbing bug with exclude
257         ninjahelper:
258          . now reports error if the helper script has a syntax error or bombs out.
259          . code formatting cleanup (three spaces indent)
260     lib changes
261         vserver:
262          . init_vservers: improved VROOTDIR detection
263          . init_vservers: test in a stricter way the real vservers availability
264          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
265            don't follow symlinks)
266          . init_vservers: warn if vservers are enabled but no vserver is found
267          . new function: vservers_exist
268     known bugs:
269         easydialog:
270          . formDisplay does not return exit status.
271
272 version 0.9.2 -- December 29, 2005
273     backupninja changes
274         fixed broken toint() which caused when "everyday" problems
275         backupninja.conf.5 updated to include "when" and "vservers"
276         code refactor:
277             . moved to lib/ some code that has to be shared between
278               backupninja and ninjahelper
279     handler changes
280         trac:
281             . mkdir subdirectory problem fixed
282         duplicity:
283             . globbing support fixed in include and exclude options
284             . different signing and encrypting key support added
285             . fixed erroneous comments in example.dup about the way
286               GnuPG-related options are used
287         mysql:
288             . handler vserver bugs fixed and debug output enhanced
289     ninjahelper(s) changes
290         vserver-related functions added to lib/vservers.in
291         added man/ninjahelper.1 man page
292         makecd:
293             . was missing in Makefile.am/.in
294         rdiff-backup:
295             . used to expand '*' in default source directories
296             . the "Cancel" buttons used to have a weird behaviour
297             . updated to include Vserver selection
298         pgsql:
299             . forbid the user to choose an empty database set
300             . "Cancel" button now does what it is meant to do
301         mysql:
302             . enhanced for vserver support
303             . now able to select databases and dump directory
304         duplicity:
305             . new handler added (with Vserver support)
306
307 version 0.9.1 -- November 05 2005
308     rearranged source so that it is relocatable with autotools
309         (thanks to Petr Klíma petr.klima@madeta-group.cz)
310     fixed many bugs in rdiff helper
311     rdiff handler does not require 'label' (for real this time?)
312     added makecd ninjahelper
313         (thanks to Stefani stefani@riseup.net)
314     made ninjahelper create files with mode 600 rather than 000
315     changed subversion handler to use svnadmin hotcopy instead of
316             the unsupported hot-copy.py script, which was moved in Debian
317     update rdiff ninjahelper
318             now detects and auto-install rdiff-backup on the remote
319             machine if possible, also tests the remote backup directory
320             and offers to create it if it doesn't exist
321
322 version 0.9 -- October 19 2005
323     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
324      fixed insecure temporary file creation
325     *****************************************
326     removed erroneous magic file marker in pgsql handler
327     fixed incorrect find positional
328     changed direct grep of /etc/passwd to getent passwd.
329     rdiff helper has much better information on failed ssh attempt
330         (patch from cmccallum@thecsl.org).
331     rdiff handler now supports remote source and local dest.
332         (patch from cmccallum@thecsl.org).
333     man pages are greatly improved.
334
335 version 0.8 -- September 15 2005
336     added pgsql (PostgreSQL) handler, with vservers support.
337     added vservers support to duplicity handler
338         Note: the configuration is a bit different than the rdiff
339         handler's one, but the default behavior is the same:
340         have a look at example.dup.
341     improved README
342     documented .disabled method.
343     corrected VROOTDIR default value.
344     added ninjahelper to the install instructions.
345     improved rdiff, dup and sys handlers' vservers support
346         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
347         to be seen as a vserver
348     changes to sys handler
349         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
350         fixed dpkg existence test inside vserver.
351         fixed $nodpkg use.
352     changes to pgsql handler
353         now checks if the specified vserver is running.
354         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
355         now checks if "postgres" user exists on the host/vserver.
356     changes to ninjahelper
357         check_perms() does not die anymore on group/world readable
358         helper scripts (now consistent with the "helper scripts
359         must not be group or world writable!" error msg).
360     xedit action now tries $EDITOR, then /etc/alternatives/editor,
361         then nano, vim and vi, and aborts if none of these exists.
362     added helper for pgsql handler.
363     rdiff handler now does not require 'label'
364     changes to mysql and svn handlers' vservers support
365         these handlers now check if the source vserver is running
366     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
367
368 version 0.7 -- July 26 2005
369     added ninjahelper: a dialog based wizard for creating backupninja configs.
370     considerably improved and changed the log file output.
371     you can now disable actions with .disabled (this is new preferred method).
372     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
373     fixed bug when specifying multiple 'when' options.
374
375 version 0.6 -- June 16 2005
376     ldap handler has new options: backup method to use (ldapsearch or
377         slapcat), restart, passwordfile and binddn. Default backup method
378         is set to ldapsearch as this is safer
379     ******************************************************************
380     NOTE: to get the previous default behavior with the ldap handler,
381     you must set "method = slapcat". The new default is ldapsearch.
382     ******************************************************************
383     implemented fix so that the main script will echo fatal errors rather
384         than being silent about them, this means an error message every hour
385         if there is a major configuration problem (not a handler problem)
386     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
387     changes to duplicity handler (thanks intrigeri!):
388         "keep = yes" now disables file cleaning on desthost
389         added "sign" option for backups signing
390         added "encryptkey" option to specify the gpg key to use
391         split config into [source], [gpg] and [dest] sections
392         added "nicelevel" option
393         added "testconnect" option
394         added "sshoptions" option (will be passed to ssh/scp)
395         added "bandwidthlimit" option
396     example.dup example config file for duplicity handler
397     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
398     added configfile option to mysql handler
399         the default is /etc/mysql/debian.cnf. with this,
400         sqldump doesn't need dbusername. (hotcopy still does).
401     fixed bug in mysql handler which caused some passwords to not work.
402         (.my.cnf files now have double quotes around password)
403     can now pass options to hwinfo and sfdisk in sys handler.
404
405 version 0.5 -- April 12 2005
406     rdiff handler works when remote sshd has a banner
407     rdiff handler supports local dest
408     logfile is created if it doesn't exist
409     added "when = hourly"
410     added optional 'nicelevel' to rdiff handler
411     fixed bug where actions were not run in numeric order.
412     improved 'when' parsing.
413
414 version 0.4.4 -- March 18 2005
415     results of handlers are now read line by line.
416     changes to rdiff handler: added "options", and "keep" is
417         not necessarily days now (ie, it will pass straight through to
418         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
419     added dup handler (still pretty beta)
420     added maildir handler (very specialized handler)
421     added --run option (runs the specified action file)
422     improved sys handler, now uses hwinfo
423     added subversion hotbackup handler, svn.
424     added PATH to cron.d file, which fixes file not found errors.
425
426 version 0.4.2 -- Jan 6 2005
427     fixed bug which caused a report email to be sent even if no actions were run.
428     fixed bug where multiple handler status messages were ignored
429     added status in the subject line of report emails
430
431 version 0.4.1 -- Jan 3 2005
432     added $usecolors and now more conservative about when colors are echoed.
433     fixed major bug, 'when' actually works now.
434     replaced debug function with debug, info, warning, error, fatal.
435     added --now option to force all actions to be performed now.
436
437 version 0.4 -- Dec 26 2004
438     added "when" option, so that all configs can specify when
439         they are to be run.
440     added reportsuccess and reportwarning config options
441     added .sys handler (hardware, packages, partitions).
442
443 version 0.3.4 -- Dec 8 2004
444     fixed numerical variable quoting compatibility with older wc
445     fixed stderr redirect bug
446     some comments in example.rdiff
447
448 version 0.3.3 -- Nov 10 2004
449     '*' (asterisk) works now in rdiff config files
450     works now with gawk as well as mawk
451     many bug fixes to ldap handler
452     paths to helper scripts can be configured in global config
453     does not require /usr/bin/stat
454
455 version 0.3.2 -- Sept 29 2004
456     handler scripts are no longer executable (to comply with debian policy)
457     handler error and warning messages are sent with the notify email
458
459 version 0.3.1 -- Sept 5 2004
460     added ldap handler
461     moved sh support to a handler script
462     add test mode, where no action is taken.
463     added --help
464     force only root can read /etc/backup.d/*
465     fixed missing equals symbols in example.rdiff
466     changed backupninja executable to be /usr/sbin rather than /usr/bin
467
468 version 0.3 -- Oct 20 2004
469     ** IMPORTANT ** all config files are now ini style, not apache style
470     rewrote all scripts in bash for portability
471     added drop-in backupninja lib directory (/usr/share/backupninja)
472     all scripts are now run as root
473
474 version 0.2 -- Oct 14 2004
475     move distribution folder ./cron.d to ./etc/cron.d
476     fixed bug: removed printr of excludes (!)
477     added support for changing the user/group in rdiff sources.
478     added support for .mysql config files.
479
480 version 0.1 -- Oct 8 2004
481     initial release
482