Fixes for Trac#24
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.5 -- unreleased
2     ninjareport
3          . Added first draft of method to aggregate reports from many servers into
4            one email. Requires logtail, rsync, configuration of reporthost,
5            reportdirectory and reportuser in backupninja.conf. Configure cron to
6            run once a day, and individual backupninjas not to report by email their
7            status, then enjoy one email report from all hosts, rather than multiple
8     backupninja changes
9          . Fixed checks on configuration files permissions, since the patch
10            applied to fix #370396 broke this, especially for configuration files
11            created with permissions 000 by an older ninjahelper version.
12          . Enhanced portability for other platforms
13          . Added quoting because it was needed to prevent shell expansion, broking the
14            toint function sometimes (Closes: Trac#11)
15          . Fixed reportspace option (Closes: Trac#10)
16          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
17     handler changes
18         dup:
19          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
20            is not supported anymore)
21         ldap:
22          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
23            compress=yes to be less redundant and not create empty uncompressed
24            file (Closes: #394935)
25          . Fixed ninjahelper to properly set compress option, standardized on yes/no
26            instead of on/off
27          . Fixed problem that caused combination of slapcat and compress to not work
28            together (Closes: Trac#29)
29         maildir:
30          . Added an examples file (Closes: Trac#23)
31          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU 
32            coreutils options, as well as some bashisms (Closes: Trac#24)
33         mysql:
34          . Fixed case where odd combination of configuration options caused sqldump
35            backups to get overwritten with an empty file (Closes: #402679)
36          . Added 'nodata' option to enable you to specify tables that you want to omit
37            the data from a backup, but still backup the table structure. This is very
38            useful in cases where tables contain large amounts of cache data. See the
39            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
40          . Enhance code for selecting databases by asking MySQL not to give us the 
41            header (-N), to not draw pretty boxes around the output (-B), send the query 
42            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
43            Matthew Palmer (Closes: #452039).
44         pgsql:
45          . Support configuring PGSQLUSER for real, and document it a bit; this
46            broken support actually prevented pgsql handler to work for VServers
47            (Closes: #396578)
48         rdiff-backup:
49          . Added cstream support to allow for bandwidth limiting
50          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
51          . Add configuration option to allow you to disable the version check
52            as in some instances this may be an ok scenario (Closes: #424632)
53          . Added local destination support to helper (Closes: Trac#4)
54         rub/rsync
55          . Fixed typo in rub handler that caused it to not work
56          . Changed to use lib/vserver code
57          . Fixed fsck error
58          . Fixed integer comparison (Closes: Trac#3)
59          . Renamed handler to 'rsync', replaces outdated rub handler
60          . updated examples/Makefile.am and handlers/Makefile.am to include
61            rsnap/rsync (Closes: #440554)
62          . Added example.rsync configuration file
63         sys:
64          . Fixed typo breaking things for VServers.
65          . Fix bug when vrootdir is on its own partition (Closes: #395928)
66          . Better sfdisk error and output handling: should now properly warn
67            when it does not manage to backup a partition table, and shut up when
68            it succeeds (Closes: #396632)
69          . Added option to not use sfdisk at all, useful for vserver/xen instances
70            that produce warnings about no harddisks found (Closes: #404071)
71          . Fixed example in example.sys to detail the __star__ in partitionsfile and
72            note why its necessary (Closes: #409192)
73          . Force C locale for sfdisk to ensure english words are found in grep
74          . Make directory where output is placed configurable, and create the parent dir 
75            if it doesn't exist (Closes: Trac#1)
76     fixed 'make install' bug that failed if /etc/backup.d already existed
77     changed spaces to tabs in Makefile.am
78     
79
80 version 0.9.4 -- October 6th, 2006
81     backupninja changes
82          . Fixed bug in toint(), and thus isnow(), which caused it
83            to not work when run from cron.
84          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
85          . Add admingroup option to configuration to allow a group that can
86            read/write configurations (instead of only allowing root). Checks
87            and complains about group-readable files only when the group differs
88            from the one in the configuration file (default is root as before). 
89            Thanks to Martin Krafft for the patch (Closes: #370396).
90          . When determining which backup actions to make, find now follows
91            symlinks for $configdirectory
92          . Changed order of -s to mail for compatibility
93          . fixed permission stat call so it uses the --format supported by
94            coreutils (Closes: #382747)
95          . Added disk space report option (thanks Adam Kosmin)
96     handler changes
97         Added tar handler:
98          . create tarballs
99         Added rsnap handler:
100          . rotated rsync snapshops
101          . code from paulv@bikkel.org
102         Added rub handler: 
103          . alternative to rsnap
104          . code from rhatto@riseup.net
105         mysql:
106          . Fixed improper use of $vuserhome (Closes: #351083)
107          . Fixed erroneous removal of tmpfile when it didn't exit
108          . Fixed inversed vsname emptiness check
109          . Fixed su quote usage to be more posixy
110          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
111          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
112         pgsql:
113          . Fixed inversed vsname emptiness check
114          . Fixed su quote usage to be more posixy
115          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
116          . postgres user UID is now the one from inside the vserver if necessary
117          . Compress now happens in-line to save some disk space (Closes: #370778)
118          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default) 
119         svn:
120          . Fixed inversed vsname emptiness check
121         rdiff:
122          . Symlink and globbing support in include/exclude/vsinclude
123            clarification: globbing is fully supported again, whereas no attempt
124            is done to dereference symlinks anymore, due to incompatibilities
125            between various readlink versions in this field.
126          . Removed overzealous vsnames check
127          . Now works if testconnect=no and if $test is not defined.
128          . add $sshoptions config parameter in [dest] section of config so
129            connections to ports other than 22 can be made by adding the
130            following to the top of the handler config:
131            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
132            --server'
133         dup:
134          . Symlink and globbing support in include/exclude/vsinclude
135            clarification: globbing is fully supported again, whereas no attempt
136            is done to dereference symlinks anymore, due to incompatibilities
137            between various readlink versions in this field.
138          . Removed over zealous vsnames check
139          . Does not pretend anymore that duplicity can work without
140            any passphrase
141          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
142            0.4.3 will integrate them); documented how to write sftp-compatible
143            sshoptions (Closes: #388543)
144          . Now forbid to (try to) include /.
145         sys:
146          . Many more system checks were added, (thanks to Petr Klíma)
147          . Added warning if no devices were found (thanks Ranier Zocholl)
148          . Enhanced debian package selections to include purged packages (thanks
149            Tom Hoover)
150          . Removed warning about vserver not running (thanks anarcat)
151         ldap:
152          . Compress now happens in-line to save some disk space (Closes: #370778)
153         makecd:
154          . Added nicelevel option (thanks rhatto)
155         trac:
156          . fixed problem when src was set to the trac repo directly (Closes: #382737)
157     lib changes
158         vserver:
159          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
160          . found_vservers: escaped special grep repetition character +
161          . forced mktemp to use a template with a name to be more compatible with 
162            different versions of mktemp, thanks anarcat
163     ninjahelper changes
164          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
165          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
166          . When determining which backup actions to list, find now follows
167            symlinks for $configdirectory
168          . Stop checking helpers perms: both "make install" and distros packages
169            install them with appropriate permissions, it's overzealous to check
170            this at runtime, and is more complicated to do with current
171            admingroup option.
172         dup.helper:
173          . Fix: signing was enabled with symmetric encryption.
174     changed cron permissions to 644
175     changed /etc/backup.d permissions to 0770 (for admingroup)
176     minor documentation fixes
177     improved RPM build process allowing 'make rpm-package' and 'make
178     srpm-package' targets, also fixes permissions on man directories, 
179     cleans up RPM-related files during distclean, and adds default
180     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
181
182 version 0.9.3 -- February 1st, 2006
183     autotools fixes
184     backupninja changes
185         backupninja.conf
186          . added (commented out) the various default paths to
187            programs such as PGSQLDUMP, so that users can figure
188            out more easily they can customize them
189         code refactor:
190          . now uses vservers lib to initialize vservers support
191     handler changes
192         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
193            degrees) new lib/vserver functionality
194         mysql:
195          . fixed no user defaults file processing
196         duplicity:
197          . fixed (again...) globbing in include and exclude options (Debian bug
198            #348022, follow-up to #338796)
199          . warn if vsnames or vsinclude is enabled while vservers support is
200            disabled in backupninja.conf
201          . now works when multiple vservers names are given (separated by space)
202            in vsnames config variable
203         rdiff
204          . fixed globbing bug in include, exclude and vsinclude options
205          . it's now possible to choose exactly which vservers should be
206            backed-up, as it already was with duplicity handler, with the
207            "vsnames" configuration setting
208     ninjahelper changes
209         rdiff.helper:
210          . fixed errors in create remote dir
211          . code formatting cleanup (three spaces indent)
212          . fixed bug which caused only first include/exclude dir to
213            have "include = "
214          . fixed globbing bug with exclude
215         ninjahelper:
216          . now reports error if the helper script has a syntax error or bombs out.
217          . code formatting cleanup (three spaces indent)
218     lib changes
219         vserver:
220          . init_vservers: improved VROOTDIR detection
221          . init_vservers: test in a stricter way the real vservers availability
222          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
223            don't follow symlinks)
224          . init_vservers: warn if vservers are enabled but no vserver is found
225          . new function: vservers_exist
226     known bugs:
227         easydialog: 
228          . formDisplay does not return exit status.
229
230 version 0.9.2 -- December 29, 2005
231     backupninja changes
232         fixed broken toint() which caused when "everyday" problems
233         backupninja.conf.5 updated to include "when" and "vservers"
234         code refactor:
235             . moved to lib/ some code that has to be shared between
236               backupninja and ninjahelper
237     handler changes
238         trac:
239             . mkdir subdirectory problem fixed
240         duplicity:
241             . globbing support fixed in include and exclude options 
242             . different signing and encrypting key support added
243             . fixed erroneous comments in example.dup about the way
244               GnuPG-related options are used
245         mysql:
246             . handler vserver bugs fixed and debug output enhanced
247     ninjahelper(s) changes
248         vserver-related functions added to lib/vservers.in
249         added man/ninjahelper.1 man page
250         makecd:
251             . was missing in Makefile.am/.in
252         rdiff-backup:
253             . used to expand '*' in default source directories
254             . the "Cancel" buttons used to have a weird behaviour
255             . updated to include Vserver selection 
256         pgsql:
257             . forbid the user to choose an empty database set 
258             . "Cancel" button now does what it is meant to do
259         mysql:
260             . enhanced for vserver support 
261             . now able to select databases and dump directory
262         duplicity:
263             . new handler added (with Vserver support)
264
265 version 0.9.1 -- November 05 2005
266     rearranged source so that it is relocatable with autotools
267         (thanks to Petr Klíma petr.klima@madeta-group.cz)
268     fixed many bugs in rdiff helper
269     rdiff handler does not require 'label' (for real this time?)
270     added makecd ninjahelper
271         (thanks to Stefani stefani@riseup.net)
272     made ninjahelper create files with mode 600 rather than 000
273     changed subversion handler to use svnadmin hotcopy instead of
274             the unsupported hot-copy.py script, which was moved in Debian
275     update rdiff ninjahelper
276             now detects and auto-install rdiff-backup on the remote 
277             machine if possible, also tests the remote backup directory
278             and offers to create it if it doesn't exist
279
280 version 0.9 -- October 19 2005
281     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
282      fixed insecure temporary file creation 
283     *****************************************
284     removed erroneous magic file marker in pgsql handler
285     fixed incorrect find positional
286     changed direct grep of /etc/passwd to getent passwd.
287     rdiff helper has much better information on failed ssh attempt
288         (patch from cmccallum@thecsl.org).
289     rdiff handler now supports remote source and local dest. 
290         (patch from cmccallum@thecsl.org).
291     man pages are greatly improved.
292
293 version 0.8 -- September 15 2005
294     added pgsql (PostgreSQL) handler, with vservers support.
295     added vservers support to duplicity handler
296         Note: the configuration is a bit different than the rdiff
297         handler's one, but the default behavior is the same:
298         have a look at example.dup.
299     improved README
300     documented .disabled method.
301     corrected VROOTDIR default value.
302     added ninjahelper to the install instructions.
303     improved rdiff, dup and sys handlers' vservers support
304         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
305         to be seen as a vserver
306     changes to sys handler
307         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
308         fixed dpkg existence test inside vserver.
309         fixed $nodpkg use.
310     changes to pgsql handler
311         now checks if the specified vserver is running.
312         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
313         now checks if "postgres" user exists on the host/vserver.
314     changes to ninjahelper
315         check_perms() does not die anymore on group/world readable
316         helper scripts (now consistent with the "helper scripts
317         must not be group or world writable!" error msg).
318     xedit action now tries $EDITOR, then /etc/alternatives/editor,
319         then nano, vim and vi, and aborts if none of these exists.
320     added helper for pgsql handler.
321     rdiff handler now does not require 'label'
322     changes to mysql and svn handlers' vservers support
323         these handlers now check if the source vserver is running
324     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
325
326 version 0.7 -- July 26 2005
327     added ninjahelper: a dialog based wizard for creating backupninja configs.
328     considerably improved and changed the log file output.
329     you can now disable actions with .disabled (this is new preferred method).
330     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
331     fixed bug when specifying multiple 'when' options.
332
333 version 0.6 -- June 16 2005
334     ldap handler has new options: backup method to use (ldapsearch or
335         slapcat), restart, passwordfile and binddn. Default backup method
336         is set to ldapsearch as this is safer
337     ******************************************************************
338     NOTE: to get the previous default behavior with the ldap handler, 
339     you must set "method = slapcat". The new default is ldapsearch.
340     ******************************************************************
341     implemented fix so that the main script will echo fatal errors rather
342         than being silent about them, this means an error message every hour
343         if there is a major configuration problem (not a handler problem)
344     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
345     changes to duplicity handler (thanks intrigeri!):
346         "keep = yes" now disables file cleaning on desthost
347         added "sign" option for backups signing
348         added "encryptkey" option to specify the gpg key to use
349         split config into [source], [gpg] and [dest] sections
350         added "nicelevel" option
351         added "testconnect" option
352         added "sshoptions" option (will be passed to ssh/scp)
353         added "bandwidthlimit" option
354     example.dup example config file for duplicity handler 
355     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
356     added configfile option to mysql handler
357         the default is /etc/mysql/debian.cnf. with this, 
358         sqldump doesn't need dbusername. (hotcopy still does).
359     fixed bug in mysql handler which caused some passwords to not work.
360         (.my.cnf files now have double quotes around password)
361     can now pass options to hwinfo and sfdisk in sys handler.
362
363 version 0.5 -- April 12 2005
364     rdiff handler works when remote sshd has a banner
365     rdiff handler supports local dest 
366     logfile is created if it doesn't exist
367     added "when = hourly" 
368     added optional 'nicelevel' to rdiff handler
369     fixed bug where actions were not run in numeric order.
370     improved 'when' parsing.
371
372 version 0.4.4 -- March 18 2005
373     results of handlers are now read line by line. 
374     changes to rdiff handler: added "options", and "keep" is
375         not necessarily days now (ie, it will pass straight through to
376         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
377     added dup handler (still pretty beta)
378     added maildir handler (very specialized handler)
379     added --run option (runs the specified action file)
380     improved sys handler, now uses hwinfo
381     added subversion hotbackup handler, svn. 
382     added PATH to cron.d file, which fixes file not found errors.
383
384 version 0.4.2 -- Jan 6 2005
385     fixed bug which caused a report email to be sent even if no actions were run.
386     fixed bug where multiple handler status messages were ignored
387     added status in the subject line of report emails
388
389 version 0.4.1 -- Jan 3 2005
390     added $usecolors and now more conservative about when colors are echoed.
391     fixed major bug, 'when' actually works now.
392     replaced debug function with debug, info, warning, error, fatal.
393     added --now option to force all actions to be performed now.
394     
395 version 0.4 -- Dec 26 2004
396     added "when" option, so that all configs can specify when
397         they are to be run.
398     added reportsuccess and reportwarning config options
399     added .sys handler (hardware, packages, partitions).
400
401 version 0.3.4 -- Dec 8 2004
402     fixed numerical variable quoting compatibility with older wc    
403     fixed stderr redirect bug
404     some comments in example.rdiff
405
406 version 0.3.3 -- Nov 10 2004
407     '*' (asterisk) works now in rdiff config files
408     works now with gawk as well as mawk
409     many bug fixes to ldap handler
410     paths to helper scripts can be configured in global config
411     does not require /usr/bin/stat
412
413 version 0.3.2 -- Sept 29 2004
414     handler scripts are no longer executable (to comply with debian policy)
415     handler error and warning messages are sent with the notify email
416
417 version 0.3.1 -- Sept 5 2004
418     added ldap handler
419     moved sh support to a handler script
420     add test mode, where no action is taken.
421     added --help
422     force only root can read /etc/backup.d/*
423     fixed missing equals symbols in example.rdiff
424     changed backupninja executable to be /usr/sbin rather than /usr/bin
425     
426 version 0.3 -- Oct 20 2004
427     ** IMPORTANT ** all config files are now ini style, not apache style
428     rewrote all scripts in bash for portability
429     added drop-in backupninja lib directory (/usr/share/backupninja)
430     all scripts are now run as root
431
432 version 0.2 -- Oct 14 2004
433     move distribution folder ./cron.d to ./etc/cron.d
434     fixed bug: removed printr of excludes (!)
435     added support for changing the user/group in rdiff sources.
436     added support for .mysql config files.
437     
438 version 0.1 -- Oct 8 2004
439     initial release 
440