fixed ldap handler not recognizing database suffix
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.5 -- unreleased
2     ninjareport
3          . Added first draft of method to aggregate reports from many servers into
4            one email. Requires logtail, rsync, configuration of reporthost,
5            reportdirectory and reportuser in backupninja.conf. Configure cron to
6            run once a day, and individual backupninjas not to report by email their
7            status, then enjoy one email report from all hosts, rather than multiple
8     backupninja changes
9          . Fixed checks on configuration files permissions, since the patch
10            applied to fix #370396 broke this, especially for configuration files
11            created with permissions 000 by an older ninjahelper version.
12          . Enhanced portability for other platforms
13          . Added quoting because it was needed to prevent shell expansion, broking the
14            toint function sometimes (Closes: Trac#11)
15          . Fixed reportspace option (Closes: Trac#10)
16          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
17     handler changes
18         dup:
19          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
20            is not supported anymore)
21         ldap:
22          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
23            compress=yes to be less redundant and not create empty uncompressed
24            file (Closes: #394935)
25          . Fixed ninjahelper to properly set compress option, standardized on yes/no
26            instead of on/off
27          . Fixed problem that caused combination of slapcat and compress to not work
28            together (Closes: Trac#29)
29         maildir:
30          . Added an examples file (Closes: Trac#23)
31         mysql:
32          . Fixed case where odd combination of configuration options caused sqldump
33            backups to get overwritten with an empty file (Closes: #402679)
34          . Added 'nodata' option to enable you to specify tables that you want to omit
35            the data from a backup, but still backup the table structure. This is very
36            useful in cases where tables contain large amounts of cache data. See the
37            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
38          . Enhance code for selecting databases by asking MySQL not to give us the 
39            header (-N), to not draw pretty boxes around the output (-B), send the query 
40            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
41            Matthew Palmer (Closes: #452039).
42         pgsql:
43          . Support configuring PGSQLUSER for real, and document it a bit; this
44            broken support actually prevented pgsql handler to work for VServers
45            (Closes: #396578)
46         rdiff-backup:
47          . Added cstream support to allow for bandwidth limiting
48          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
49          . Add configuration option to allow you to disable the version check
50            as in some instances this may be an ok scenario (Closes: #424632)
51          . Added local destination support to helper (Closes: Trac#4)
52         rub/rsync
53          . Fixed typo in rub handler that caused it to not work
54          . Changed to use lib/vserver code
55          . Fixed fsck error
56          . Fixed integer comparison (Closes: Trac#3)
57          . Renamed handler to 'rsync', replaces outdated rub handler
58          . updated examples/Makefile.am and handlers/Makefile.am to include
59            rsnap/rsync (Closes: #440554)
60          . Added example.rsync configuration file
61         sys:
62          . Fixed typo breaking things for VServers.
63          . Fix bug when vrootdir is on its own partition (Closes: #395928)
64          . Better sfdisk error and output handling: should now properly warn
65            when it does not manage to backup a partition table, and shut up when
66            it succeeds (Closes: #396632)
67          . Added option to not use sfdisk at all, useful for vserver/xen instances
68            that produce warnings about no harddisks found (Closes: #404071)
69          . Fixed example in example.sys to detail the __star__ in partitionsfile and
70            note why its necessary (Closes: #409192)
71          . Force C locale for sfdisk to ensure english words are found in grep
72          . Make directory where output is placed configurable, and create the parent dir 
73            if it doesn't exist (Closes: Trac#1)
74     fixed 'make install' bug that failed if /etc/backup.d already existed
75     changed spaces to tabs in Makefile.am
76     
77
78 version 0.9.4 -- October 6th, 2006
79     backupninja changes
80          . Fixed bug in toint(), and thus isnow(), which caused it
81            to not work when run from cron.
82          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
83          . Add admingroup option to configuration to allow a group that can
84            read/write configurations (instead of only allowing root). Checks
85            and complains about group-readable files only when the group differs
86            from the one in the configuration file (default is root as before). 
87            Thanks to Martin Krafft for the patch (Closes: #370396).
88          . When determining which backup actions to make, find now follows
89            symlinks for $configdirectory
90          . Changed order of -s to mail for compatibility
91          . fixed permission stat call so it uses the --format supported by
92            coreutils (Closes: #382747)
93          . Added disk space report option (thanks Adam Kosmin)
94     handler changes
95         Added tar handler:
96          . create tarballs
97         Added rsnap handler:
98          . rotated rsync snapshops
99          . code from paulv@bikkel.org
100         Added rub handler: 
101          . alternative to rsnap
102          . code from rhatto@riseup.net
103         mysql:
104          . Fixed improper use of $vuserhome (Closes: #351083)
105          . Fixed erroneous removal of tmpfile when it didn't exit
106          . Fixed inversed vsname emptiness check
107          . Fixed su quote usage to be more posixy
108          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
109          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
110         pgsql:
111          . Fixed inversed vsname emptiness check
112          . Fixed su quote usage to be more posixy
113          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
114          . postgres user UID is now the one from inside the vserver if necessary
115          . Compress now happens in-line to save some disk space (Closes: #370778)
116          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default) 
117         svn:
118          . Fixed inversed vsname emptiness check
119         rdiff:
120          . Symlink and globbing support in include/exclude/vsinclude
121            clarification: globbing is fully supported again, whereas no attempt
122            is done to dereference symlinks anymore, due to incompatibilities
123            between various readlink versions in this field.
124          . Removed overzealous vsnames check
125          . Now works if testconnect=no and if $test is not defined.
126          . add $sshoptions config parameter in [dest] section of config so
127            connections to ports other than 22 can be made by adding the
128            following to the top of the handler config:
129            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
130            --server'
131         dup:
132          . Symlink and globbing support in include/exclude/vsinclude
133            clarification: globbing is fully supported again, whereas no attempt
134            is done to dereference symlinks anymore, due to incompatibilities
135            between various readlink versions in this field.
136          . Removed over zealous vsnames check
137          . Does not pretend anymore that duplicity can work without
138            any passphrase
139          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
140            0.4.3 will integrate them); documented how to write sftp-compatible
141            sshoptions (Closes: #388543)
142          . Now forbid to (try to) include /.
143         sys:
144          . Many more system checks were added, (thanks to Petr Klíma)
145          . Added warning if no devices were found (thanks Ranier Zocholl)
146          . Enhanced debian package selections to include purged packages (thanks
147            Tom Hoover)
148          . Removed warning about vserver not running (thanks anarcat)
149         ldap:
150          . Compress now happens in-line to save some disk space (Closes: #370778)
151         makecd:
152          . Added nicelevel option (thanks rhatto)
153         trac:
154          . fixed problem when src was set to the trac repo directly (Closes: #382737)
155     lib changes
156         vserver:
157          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
158          . found_vservers: escaped special grep repetition character +
159          . forced mktemp to use a template with a name to be more compatible with 
160            different versions of mktemp, thanks anarcat
161     ninjahelper changes
162          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
163          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
164          . When determining which backup actions to list, find now follows
165            symlinks for $configdirectory
166          . Stop checking helpers perms: both "make install" and distros packages
167            install them with appropriate permissions, it's overzealous to check
168            this at runtime, and is more complicated to do with current
169            admingroup option.
170         dup.helper:
171          . Fix: signing was enabled with symmetric encryption.
172     changed cron permissions to 644
173     changed /etc/backup.d permissions to 0770 (for admingroup)
174     minor documentation fixes
175     improved RPM build process allowing 'make rpm-package' and 'make
176     srpm-package' targets, also fixes permissions on man directories, 
177     cleans up RPM-related files during distclean, and adds default
178     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
179
180 version 0.9.3 -- February 1st, 2006
181     autotools fixes
182     backupninja changes
183         backupninja.conf
184          . added (commented out) the various default paths to
185            programs such as PGSQLDUMP, so that users can figure
186            out more easily they can customize them
187         code refactor:
188          . now uses vservers lib to initialize vservers support
189     handler changes
190         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
191            degrees) new lib/vserver functionality
192         mysql:
193          . fixed no user defaults file processing
194         duplicity:
195          . fixed (again...) globbing in include and exclude options (Debian bug
196            #348022, follow-up to #338796)
197          . warn if vsnames or vsinclude is enabled while vservers support is
198            disabled in backupninja.conf
199          . now works when multiple vservers names are given (separated by space)
200            in vsnames config variable
201         rdiff
202          . fixed globbing bug in include, exclude and vsinclude options
203          . it's now possible to choose exactly which vservers should be
204            backed-up, as it already was with duplicity handler, with the
205            "vsnames" configuration setting
206     ninjahelper changes
207         rdiff.helper:
208          . fixed errors in create remote dir
209          . code formatting cleanup (three spaces indent)
210          . fixed bug which caused only first include/exclude dir to
211            have "include = "
212          . fixed globbing bug with exclude
213         ninjahelper:
214          . now reports error if the helper script has a syntax error or bombs out.
215          . code formatting cleanup (three spaces indent)
216     lib changes
217         vserver:
218          . init_vservers: improved VROOTDIR detection
219          . init_vservers: test in a stricter way the real vservers availability
220          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
221            don't follow symlinks)
222          . init_vservers: warn if vservers are enabled but no vserver is found
223          . new function: vservers_exist
224     known bugs:
225         easydialog: 
226          . formDisplay does not return exit status.
227
228 version 0.9.2 -- December 29, 2005
229     backupninja changes
230         fixed broken toint() which caused when "everyday" problems
231         backupninja.conf.5 updated to include "when" and "vservers"
232         code refactor:
233             . moved to lib/ some code that has to be shared between
234               backupninja and ninjahelper
235     handler changes
236         trac:
237             . mkdir subdirectory problem fixed
238         duplicity:
239             . globbing support fixed in include and exclude options 
240             . different signing and encrypting key support added
241             . fixed erroneous comments in example.dup about the way
242               GnuPG-related options are used
243         mysql:
244             . handler vserver bugs fixed and debug output enhanced
245     ninjahelper(s) changes
246         vserver-related functions added to lib/vservers.in
247         added man/ninjahelper.1 man page
248         makecd:
249             . was missing in Makefile.am/.in
250         rdiff-backup:
251             . used to expand '*' in default source directories
252             . the "Cancel" buttons used to have a weird behaviour
253             . updated to include Vserver selection 
254         pgsql:
255             . forbid the user to choose an empty database set 
256             . "Cancel" button now does what it is meant to do
257         mysql:
258             . enhanced for vserver support 
259             . now able to select databases and dump directory
260         duplicity:
261             . new handler added (with Vserver support)
262
263 version 0.9.1 -- November 05 2005
264     rearranged source so that it is relocatable with autotools
265         (thanks to Petr Klíma petr.klima@madeta-group.cz)
266     fixed many bugs in rdiff helper
267     rdiff handler does not require 'label' (for real this time?)
268     added makecd ninjahelper
269         (thanks to Stefani stefani@riseup.net)
270     made ninjahelper create files with mode 600 rather than 000
271     changed subversion handler to use svnadmin hotcopy instead of
272             the unsupported hot-copy.py script, which was moved in Debian
273     update rdiff ninjahelper
274             now detects and auto-install rdiff-backup on the remote 
275             machine if possible, also tests the remote backup directory
276             and offers to create it if it doesn't exist
277
278 version 0.9 -- October 19 2005
279     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
280      fixed insecure temporary file creation 
281     *****************************************
282     removed erroneous magic file marker in pgsql handler
283     fixed incorrect find positional
284     changed direct grep of /etc/passwd to getent passwd.
285     rdiff helper has much better information on failed ssh attempt
286         (patch from cmccallum@thecsl.org).
287     rdiff handler now supports remote source and local dest. 
288         (patch from cmccallum@thecsl.org).
289     man pages are greatly improved.
290
291 version 0.8 -- September 15 2005
292     added pgsql (PostgreSQL) handler, with vservers support.
293     added vservers support to duplicity handler
294         Note: the configuration is a bit different than the rdiff
295         handler's one, but the default behavior is the same:
296         have a look at example.dup.
297     improved README
298     documented .disabled method.
299     corrected VROOTDIR default value.
300     added ninjahelper to the install instructions.
301     improved rdiff, dup and sys handlers' vservers support
302         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
303         to be seen as a vserver
304     changes to sys handler
305         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
306         fixed dpkg existence test inside vserver.
307         fixed $nodpkg use.
308     changes to pgsql handler
309         now checks if the specified vserver is running.
310         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
311         now checks if "postgres" user exists on the host/vserver.
312     changes to ninjahelper
313         check_perms() does not die anymore on group/world readable
314         helper scripts (now consistent with the "helper scripts
315         must not be group or world writable!" error msg).
316     xedit action now tries $EDITOR, then /etc/alternatives/editor,
317         then nano, vim and vi, and aborts if none of these exists.
318     added helper for pgsql handler.
319     rdiff handler now does not require 'label'
320     changes to mysql and svn handlers' vservers support
321         these handlers now check if the source vserver is running
322     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
323
324 version 0.7 -- July 26 2005
325     added ninjahelper: a dialog based wizard for creating backupninja configs.
326     considerably improved and changed the log file output.
327     you can now disable actions with .disabled (this is new preferred method).
328     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
329     fixed bug when specifying multiple 'when' options.
330
331 version 0.6 -- June 16 2005
332     ldap handler has new options: backup method to use (ldapsearch or
333         slapcat), restart, passwordfile and binddn. Default backup method
334         is set to ldapsearch as this is safer
335     ******************************************************************
336     NOTE: to get the previous default behavior with the ldap handler, 
337     you must set "method = slapcat". The new default is ldapsearch.
338     ******************************************************************
339     implemented fix so that the main script will echo fatal errors rather
340         than being silent about them, this means an error message every hour
341         if there is a major configuration problem (not a handler problem)
342     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
343     changes to duplicity handler (thanks intrigeri!):
344         "keep = yes" now disables file cleaning on desthost
345         added "sign" option for backups signing
346         added "encryptkey" option to specify the gpg key to use
347         split config into [source], [gpg] and [dest] sections
348         added "nicelevel" option
349         added "testconnect" option
350         added "sshoptions" option (will be passed to ssh/scp)
351         added "bandwidthlimit" option
352     example.dup example config file for duplicity handler 
353     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
354     added configfile option to mysql handler
355         the default is /etc/mysql/debian.cnf. with this, 
356         sqldump doesn't need dbusername. (hotcopy still does).
357     fixed bug in mysql handler which caused some passwords to not work.
358         (.my.cnf files now have double quotes around password)
359     can now pass options to hwinfo and sfdisk in sys handler.
360
361 version 0.5 -- April 12 2005
362     rdiff handler works when remote sshd has a banner
363     rdiff handler supports local dest 
364     logfile is created if it doesn't exist
365     added "when = hourly" 
366     added optional 'nicelevel' to rdiff handler
367     fixed bug where actions were not run in numeric order.
368     improved 'when' parsing.
369
370 version 0.4.4 -- March 18 2005
371     results of handlers are now read line by line. 
372     changes to rdiff handler: added "options", and "keep" is
373         not necessarily days now (ie, it will pass straight through to
374         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
375     added dup handler (still pretty beta)
376     added maildir handler (very specialized handler)
377     added --run option (runs the specified action file)
378     improved sys handler, now uses hwinfo
379     added subversion hotbackup handler, svn. 
380     added PATH to cron.d file, which fixes file not found errors.
381
382 version 0.4.2 -- Jan 6 2005
383     fixed bug which caused a report email to be sent even if no actions were run.
384     fixed bug where multiple handler status messages were ignored
385     added status in the subject line of report emails
386
387 version 0.4.1 -- Jan 3 2005
388     added $usecolors and now more conservative about when colors are echoed.
389     fixed major bug, 'when' actually works now.
390     replaced debug function with debug, info, warning, error, fatal.
391     added --now option to force all actions to be performed now.
392     
393 version 0.4 -- Dec 26 2004
394     added "when" option, so that all configs can specify when
395         they are to be run.
396     added reportsuccess and reportwarning config options
397     added .sys handler (hardware, packages, partitions).
398
399 version 0.3.4 -- Dec 8 2004
400     fixed numerical variable quoting compatibility with older wc    
401     fixed stderr redirect bug
402     some comments in example.rdiff
403
404 version 0.3.3 -- Nov 10 2004
405     '*' (asterisk) works now in rdiff config files
406     works now with gawk as well as mawk
407     many bug fixes to ldap handler
408     paths to helper scripts can be configured in global config
409     does not require /usr/bin/stat
410
411 version 0.3.2 -- Sept 29 2004
412     handler scripts are no longer executable (to comply with debian policy)
413     handler error and warning messages are sent with the notify email
414
415 version 0.3.1 -- Sept 5 2004
416     added ldap handler
417     moved sh support to a handler script
418     add test mode, where no action is taken.
419     added --help
420     force only root can read /etc/backup.d/*
421     fixed missing equals symbols in example.rdiff
422     changed backupninja executable to be /usr/sbin rather than /usr/bin
423     
424 version 0.3 -- Oct 20 2004
425     ** IMPORTANT ** all config files are now ini style, not apache style
426     rewrote all scripts in bash for portability
427     added drop-in backupninja lib directory (/usr/share/backupninja)
428     all scripts are now run as root
429
430 version 0.2 -- Oct 14 2004
431     move distribution folder ./cron.d to ./etc/cron.d
432     fixed bug: removed printr of excludes (!)
433     added support for changing the user/group in rdiff sources.
434     added support for .mysql config files.
435     
436 version 0.1 -- Oct 8 2004
437     initial release 
438