remove rsnap and rename rub handler to rsync, after consultation with rhatto
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.5 -- unreleased
2     ninjareport
3          . Added first draft of method to aggregate reports from many servers into
4            one email. Requires logtail, rsync, configuration of reporthost,
5            reportdirectory and reportuser in backupninja.conf. Configure cron to
6            run once a day, and individual backupninjas not to report by email their
7            status, then enjoy one email report from all hosts, rather than multiple
8     backupninja changes
9          . Fixed checks on configuration files permissions, since the patch
10            applied to fix #370396 broke this, especially for configuration files
11            created with permissions 000 by an older ninjahelper version.
12          . Enhanced portability for other platforms
13          . Fixed Trac#11 (quoting needed to prevent shell expansion, broke the
14            toint function sometimes)
15          . Fixed reportspace option (Trac#10)
16     handler changes
17         dup:
18          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
19            is not supported anymore)
20         ldap:
21          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
22            compress=yes to be less redundant and not create empty uncompressed
23            file (Closes: #394935)
24         mysql:
25          . Fixed case where odd combination of configuration options caused sqldump
26            backups to get overwritten with an empty file (Closes: #402679)
27          . Added 'nodata' option to enable you to specify tables that you want to omit
28            the data from a backup, but still backup the table structure. This is very
29            useful in cases where tables contain large amounts of cache data. See the
30            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
31         pgsql:
32          . Support configuring PGSQLUSER for real, and document it a bit; this
33            broken support actually prevented pgsql handler to work for VServers
34            (Closes: #396578)
35         rdiff-backup:
36          . Added cstream support to allow for bandwidth limiting
37          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
38          . Add configuration option to allow you to disable the version check
39            as in some instances this may be an ok scenario (Closes: #424632)
40         rub/rsync
41          . Fixed typo in rub handler that caused it to not work
42          . Changed to use lib/vserver code
43          . Fixed fsck error
44          . Fixed integer comparison (Closes: Trac#3)
45          . Renamed handler to 'rsync', replaces outdated rub handler
46          . updated examples/Makefile.am and handlers/Makefile.am to include
47            rsnap/rsync (Closes: #440554)
48         sys:
49          . Fixed typo breaking things for VServers.
50          . Fix bug when vrootdir is on its own partition (Closes: #395928)
51          . Better sfdisk error and output handling: should now properly warn
52            when it does not manage to backup a partition table, and shut up when
53            it succeeds (Closes: #396632)
54          . Added option to not use sfdisk at all, useful for vserver/xen instances
55            that produce warnings about no harddisks found (Closes: #404071)
56          . Fixed example in example.sys to detail the __star__ in partitionsfile and
57            note why its necessary (Closes: #409192)
58          . Force C locale for sfdisk to ensure english words are found in grep
59     fixed 'make install' bug that failed if /etc/backup.d already existed
60     changed spaces to tabs in Makefile.am
61     
62
63 version 0.9.4 -- October 6th, 2006
64     backupninja changes
65          . Fixed bug in toint(), and thus isnow(), which caused it
66            to not work when run from cron.
67          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
68          . Add admingroup option to configuration to allow a group that can
69            read/write configurations (instead of only allowing root). Checks
70            and complains about group-readable files only when the group differs
71            from the one in the configuration file (default is root as before). 
72            Thanks to Martin Krafft for the patch (Closes: #370396).
73          . When determining which backup actions to make, find now follows
74            symlinks for $configdirectory
75          . Changed order of -s to mail for compatibility
76          . fixed permission stat call so it uses the --format supported by
77            coreutils (Closes: #382747)
78          . Added disk space report option (thanks Adam Kosmin)
79     handler changes
80         Added tar handler:
81          . create tarballs
82         Added rsnap handler:
83          . rotated rsync snapshops
84          . code from paulv@bikkel.org
85         Added rub handler: 
86          . alternative to rsnap
87          . code from rhatto@riseup.net
88         mysql:
89          . Fixed improper use of $vuserhome (Closes: #351083)
90          . Fixed erroneous removal of tmpfile when it didn't exit
91          . Fixed inversed vsname emptiness check
92          . Fixed su quote usage to be more posixy
93          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
94          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
95         pgsql:
96          . Fixed inversed vsname emptiness check
97          . Fixed su quote usage to be more posixy
98          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
99          . postgres user UID is now the one from inside the vserver if necessary
100          . Compress now happens in-line to save some disk space (Closes: #370778)
101          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default) 
102         svn:
103          . Fixed inversed vsname emptiness check
104         rdiff:
105          . Symlink and globbing support in include/exclude/vsinclude
106            clarification: globbing is fully supported again, whereas no attempt
107            is done to dereference symlinks anymore, due to incompatibilities
108            between various readlink versions in this field.
109          . Removed overzealous vsnames check
110          . Now works if testconnect=no and if $test is not defined.
111          . add $sshoptions config parameter in [dest] section of config so
112            connections to ports other than 22 can be made by adding the
113            following to the top of the handler config:
114            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
115            --server'
116         dup:
117          . Symlink and globbing support in include/exclude/vsinclude
118            clarification: globbing is fully supported again, whereas no attempt
119            is done to dereference symlinks anymore, due to incompatibilities
120            between various readlink versions in this field.
121          . Removed over zealous vsnames check
122          . Does not pretend anymore that duplicity can work without
123            any passphrase
124          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
125            0.4.3 will integrate them); documented how to write sftp-compatible
126            sshoptions (Closes: #388543)
127          . Now forbid to (try to) include /.
128         sys:
129          . Many more system checks were added, (thanks to Petr Klíma)
130          . Added warning if no devices were found (thanks Ranier Zocholl)
131          . Enhanced debian package selections to include purged packages (thanks
132            Tom Hoover)
133          . Removed warning about vserver not running (thanks anarcat)
134         ldap:
135          . Compress now happens in-line to save some disk space (Closes: #370778)
136         makecd:
137          . Added nicelevel option (thanks rhatto)
138         trac:
139          . fixed problem when src was set to the trac repo directly (Closes: #382737)
140     lib changes
141         vserver:
142          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
143          . found_vservers: escaped special grep repetition character +
144          . forced mktemp to use a template with a name to be more compatible with 
145            different versions of mktemp, thanks anarcat
146     ninjahelper changes
147          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
148          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
149          . When determining which backup actions to list, find now follows
150            symlinks for $configdirectory
151          . Stop checking helpers perms: both "make install" and distros packages
152            install them with appropriate permissions, it's overzealous to check
153            this at runtime, and is more complicated to do with current
154            admingroup option.
155         dup.helper:
156          . Fix: signing was enabled with symmetric encryption.
157     changed cron permissions to 644
158     changed /etc/backup.d permissions to 0770 (for admingroup)
159     minor documentation fixes
160     improved RPM build process allowing 'make rpm-package' and 'make
161     srpm-package' targets, also fixes permissions on man directories, 
162     cleans up RPM-related files during distclean, and adds default
163     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
164
165 version 0.9.3 -- February 1st, 2006
166     autotools fixes
167     backupninja changes
168         backupninja.conf
169          . added (commented out) the various default paths to
170            programs such as PGSQLDUMP, so that users can figure
171            out more easily they can customize them
172         code refactor:
173          . now uses vservers lib to initialize vservers support
174     handler changes
175         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
176            degrees) new lib/vserver functionality
177         mysql:
178          . fixed no user defaults file processing
179         duplicity:
180          . fixed (again...) globbing in include and exclude options (Debian bug
181            #348022, follow-up to #338796)
182          . warn if vsnames or vsinclude is enabled while vservers support is
183            disabled in backupninja.conf
184          . now works when multiple vservers names are given (separated by space)
185            in vsnames config variable
186         rdiff
187          . fixed globbing bug in include, exclude and vsinclude options
188          . it's now possible to choose exactly which vservers should be
189            backed-up, as it already was with duplicity handler, with the
190            "vsnames" configuration setting
191     ninjahelper changes
192         rdiff.helper:
193          . fixed errors in create remote dir
194          . code formatting cleanup (three spaces indent)
195          . fixed bug which caused only first include/exclude dir to
196            have "include = "
197          . fixed globbing bug with exclude
198         ninjahelper:
199          . now reports error if the helper script has a syntax error or bombs out.
200          . code formatting cleanup (three spaces indent)
201     lib changes
202         vserver:
203          . init_vservers: improved VROOTDIR detection
204          . init_vservers: test in a stricter way the real vservers availability
205          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
206            don't follow symlinks)
207          . init_vservers: warn if vservers are enabled but no vserver is found
208          . new function: vservers_exist
209     known bugs:
210         easydialog: 
211          . formDisplay does not return exit status.
212
213 version 0.9.2 -- December 29, 2005
214     backupninja changes
215         fixed broken toint() which caused when "everyday" problems
216         backupninja.conf.5 updated to include "when" and "vservers"
217         code refactor:
218             . moved to lib/ some code that has to be shared between
219               backupninja and ninjahelper
220     handler changes
221         trac:
222             . mkdir subdirectory problem fixed
223         duplicity:
224             . globbing support fixed in include and exclude options 
225             . different signing and encrypting key support added
226             . fixed erroneous comments in example.dup about the way
227               GnuPG-related options are used
228         mysql:
229             . handler vserver bugs fixed and debug output enhanced
230     ninjahelper(s) changes
231         vserver-related functions added to lib/vservers.in
232         added man/ninjahelper.1 man page
233         makecd:
234             . was missing in Makefile.am/.in
235         rdiff-backup:
236             . used to expand '*' in default source directories
237             . the "Cancel" buttons used to have a weird behaviour
238             . updated to include Vserver selection 
239         pgsql:
240             . forbid the user to choose an empty database set 
241             . "Cancel" button now does what it is meant to do
242         mysql:
243             . enhanced for vserver support 
244             . now able to select databases and dump directory
245         duplicity:
246             . new handler added (with Vserver support)
247
248 version 0.9.1 -- November 05 2005
249     rearranged source so that it is relocatable with autotools
250         (thanks to Petr Klíma petr.klima@madeta-group.cz)
251     fixed many bugs in rdiff helper
252     rdiff handler does not require 'label' (for real this time?)
253     added makecd ninjahelper
254         (thanks to Stefani stefani@riseup.net)
255     made ninjahelper create files with mode 600 rather than 000
256     changed subversion handler to use svnadmin hotcopy instead of
257             the unsupported hot-copy.py script, which was moved in Debian
258     update rdiff ninjahelper
259             now detects and auto-install rdiff-backup on the remote 
260             machine if possible, also tests the remote backup directory
261             and offers to create it if it doesn't exist
262
263 version 0.9 -- October 19 2005
264     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
265      fixed insecure temporary file creation 
266     *****************************************
267     removed erroneous magic file marker in pgsql handler
268     fixed incorrect find positional
269     changed direct grep of /etc/passwd to getent passwd.
270     rdiff helper has much better information on failed ssh attempt
271         (patch from cmccallum@thecsl.org).
272     rdiff handler now supports remote source and local dest. 
273         (patch from cmccallum@thecsl.org).
274     man pages are greatly improved.
275
276 version 0.8 -- September 15 2005
277     added pgsql (PostgreSQL) handler, with vservers support.
278     added vservers support to duplicity handler
279         Note: the configuration is a bit different than the rdiff
280         handler's one, but the default behavior is the same:
281         have a look at example.dup.
282     improved README
283     documented .disabled method.
284     corrected VROOTDIR default value.
285     added ninjahelper to the install instructions.
286     improved rdiff, dup and sys handlers' vservers support
287         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
288         to be seen as a vserver
289     changes to sys handler
290         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
291         fixed dpkg existence test inside vserver.
292         fixed $nodpkg use.
293     changes to pgsql handler
294         now checks if the specified vserver is running.
295         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
296         now checks if "postgres" user exists on the host/vserver.
297     changes to ninjahelper
298         check_perms() does not die anymore on group/world readable
299         helper scripts (now consistent with the "helper scripts
300         must not be group or world writable!" error msg).
301     xedit action now tries $EDITOR, then /etc/alternatives/editor,
302         then nano, vim and vi, and aborts if none of these exists.
303     added helper for pgsql handler.
304     rdiff handler now does not require 'label'
305     changes to mysql and svn handlers' vservers support
306         these handlers now check if the source vserver is running
307     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
308
309 version 0.7 -- July 26 2005
310     added ninjahelper: a dialog based wizard for creating backupninja configs.
311     considerably improved and changed the log file output.
312     you can now disable actions with .disabled (this is new preferred method).
313     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
314     fixed bug when specifying multiple 'when' options.
315
316 version 0.6 -- June 16 2005
317     ldap handler has new options: backup method to use (ldapsearch or
318         slapcat), restart, passwordfile and binddn. Default backup method
319         is set to ldapsearch as this is safer
320     ******************************************************************
321     NOTE: to get the previous default behavior with the ldap handler, 
322     you must set "method = slapcat". The new default is ldapsearch.
323     ******************************************************************
324     implemented fix so that the main script will echo fatal errors rather
325         than being silent about them, this means an error message every hour
326         if there is a major configuration problem (not a handler problem)
327     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
328     changes to duplicity handler (thanks intrigeri!):
329         "keep = yes" now disables file cleaning on desthost
330         added "sign" option for backups signing
331         added "encryptkey" option to specify the gpg key to use
332         split config into [source], [gpg] and [dest] sections
333         added "nicelevel" option
334         added "testconnect" option
335         added "sshoptions" option (will be passed to ssh/scp)
336         added "bandwidthlimit" option
337     example.dup example config file for duplicity handler 
338     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
339     added configfile option to mysql handler
340         the default is /etc/mysql/debian.cnf. with this, 
341         sqldump doesn't need dbusername. (hotcopy still does).
342     fixed bug in mysql handler which caused some passwords to not work.
343         (.my.cnf files now have double quotes around password)
344     can now pass options to hwinfo and sfdisk in sys handler.
345
346 version 0.5 -- April 12 2005
347     rdiff handler works when remote sshd has a banner
348     rdiff handler supports local dest 
349     logfile is created if it doesn't exist
350     added "when = hourly" 
351     added optional 'nicelevel' to rdiff handler
352     fixed bug where actions were not run in numeric order.
353     improved 'when' parsing.
354
355 version 0.4.4 -- March 18 2005
356     results of handlers are now read line by line. 
357     changes to rdiff handler: added "options", and "keep" is
358         not necessarily days now (ie, it will pass straight through to
359         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
360     added dup handler (still pretty beta)
361     added maildir handler (very specialized handler)
362     added --run option (runs the specified action file)
363     improved sys handler, now uses hwinfo
364     added subversion hotbackup handler, svn. 
365     added PATH to cron.d file, which fixes file not found errors.
366
367 version 0.4.2 -- Jan 6 2005
368     fixed bug which caused a report email to be sent even if no actions were run.
369     fixed bug where multiple handler status messages were ignored
370     added status in the subject line of report emails
371
372 version 0.4.1 -- Jan 3 2005
373     added $usecolors and now more conservative about when colors are echoed.
374     fixed major bug, 'when' actually works now.
375     replaced debug function with debug, info, warning, error, fatal.
376     added --now option to force all actions to be performed now.
377     
378 version 0.4 -- Dec 26 2004
379     added "when" option, so that all configs can specify when
380         they are to be run.
381     added reportsuccess and reportwarning config options
382     added .sys handler (hardware, packages, partitions).
383
384 version 0.3.4 -- Dec 8 2004
385     fixed numerical variable quoting compatibility with older wc    
386     fixed stderr redirect bug
387     some comments in example.rdiff
388
389 version 0.3.3 -- Nov 10 2004
390     '*' (asterisk) works now in rdiff config files
391     works now with gawk as well as mawk
392     many bug fixes to ldap handler
393     paths to helper scripts can be configured in global config
394     does not require /usr/bin/stat
395
396 version 0.3.2 -- Sept 29 2004
397     handler scripts are no longer executable (to comply with debian policy)
398     handler error and warning messages are sent with the notify email
399
400 version 0.3.1 -- Sept 5 2004
401     added ldap handler
402     moved sh support to a handler script
403     add test mode, where no action is taken.
404     added --help
405     force only root can read /etc/backup.d/*
406     fixed missing equals symbols in example.rdiff
407     changed backupninja executable to be /usr/sbin rather than /usr/bin
408     
409 version 0.3 -- Oct 20 2004
410     ** IMPORTANT ** all config files are now ini style, not apache style
411     rewrote all scripts in bash for portability
412     added drop-in backupninja lib directory (/usr/share/backupninja)
413     all scripts are now run as root
414
415 version 0.2 -- Oct 14 2004
416     move distribution folder ./cron.d to ./etc/cron.d
417     fixed bug: removed printr of excludes (!)
418     added support for changing the user/group in rdiff sources.
419     added support for .mysql config files.
420     
421 version 0.1 -- Oct 8 2004
422     initial release 
423