added local support to rdiff helper
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.5 -- unreleased
2     ninjareport
3          . Added first draft of method to aggregate reports from many servers into
4            one email. Requires logtail, rsync, configuration of reporthost,
5            reportdirectory and reportuser in backupninja.conf. Configure cron to
6            run once a day, and individual backupninjas not to report by email their
7            status, then enjoy one email report from all hosts, rather than multiple
8     backupninja changes
9          . Fixed checks on configuration files permissions, since the patch
10            applied to fix #370396 broke this, especially for configuration files
11            created with permissions 000 by an older ninjahelper version.
12          . Enhanced portability for other platforms
13          . Added quoting because it was needed to prevent shell expansion, broking the
14            toint function sometimes (Trac#11)
15          . Fixed reportspace option (Trac#10)
16     handler changes
17         dup:
18          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
19            is not supported anymore)
20         ldap:
21          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
22            compress=yes to be less redundant and not create empty uncompressed
23            file (Closes: #394935)
24         mysql:
25          . Fixed case where odd combination of configuration options caused sqldump
26            backups to get overwritten with an empty file (Closes: #402679)
27          . Added 'nodata' option to enable you to specify tables that you want to omit
28            the data from a backup, but still backup the table structure. This is very
29            useful in cases where tables contain large amounts of cache data. See the
30            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
31          . Enhance code for selecting databases by asking MySQL not to give us the 
32            header (-N), to not draw pretty boxes around the output (-B), send the query 
33            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
34            Matthew Palmer (Closes: #452039).
35         pgsql:
36          . Support configuring PGSQLUSER for real, and document it a bit; this
37            broken support actually prevented pgsql handler to work for VServers
38            (Closes: #396578)
39         rdiff-backup:
40          . Added cstream support to allow for bandwidth limiting
41          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
42          . Add configuration option to allow you to disable the version check
43            as in some instances this may be an ok scenario (Closes: #424632)
44          . Added local destination support to helper (Closes: Trac#4)
45         rub/rsync
46          . Fixed typo in rub handler that caused it to not work
47          . Changed to use lib/vserver code
48          . Fixed fsck error
49          . Fixed integer comparison (Closes: Trac#3)
50          . Renamed handler to 'rsync', replaces outdated rub handler
51          . updated examples/Makefile.am and handlers/Makefile.am to include
52            rsnap/rsync (Closes: #440554)
53          . Added example.rsync configuration file
54         sys:
55          . Fixed typo breaking things for VServers.
56          . Fix bug when vrootdir is on its own partition (Closes: #395928)
57          . Better sfdisk error and output handling: should now properly warn
58            when it does not manage to backup a partition table, and shut up when
59            it succeeds (Closes: #396632)
60          . Added option to not use sfdisk at all, useful for vserver/xen instances
61            that produce warnings about no harddisks found (Closes: #404071)
62          . Fixed example in example.sys to detail the __star__ in partitionsfile and
63            note why its necessary (Closes: #409192)
64          . Force C locale for sfdisk to ensure english words are found in grep
65          . Make directory where output is placed configurable, and create the parent dir 
66            if it doesn't exist (Closes: Trac#1)
67     fixed 'make install' bug that failed if /etc/backup.d already existed
68     changed spaces to tabs in Makefile.am
69     
70
71 version 0.9.4 -- October 6th, 2006
72     backupninja changes
73          . Fixed bug in toint(), and thus isnow(), which caused it
74            to not work when run from cron.
75          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
76          . Add admingroup option to configuration to allow a group that can
77            read/write configurations (instead of only allowing root). Checks
78            and complains about group-readable files only when the group differs
79            from the one in the configuration file (default is root as before). 
80            Thanks to Martin Krafft for the patch (Closes: #370396).
81          . When determining which backup actions to make, find now follows
82            symlinks for $configdirectory
83          . Changed order of -s to mail for compatibility
84          . fixed permission stat call so it uses the --format supported by
85            coreutils (Closes: #382747)
86          . Added disk space report option (thanks Adam Kosmin)
87     handler changes
88         Added tar handler:
89          . create tarballs
90         Added rsnap handler:
91          . rotated rsync snapshops
92          . code from paulv@bikkel.org
93         Added rub handler: 
94          . alternative to rsnap
95          . code from rhatto@riseup.net
96         mysql:
97          . Fixed improper use of $vuserhome (Closes: #351083)
98          . Fixed erroneous removal of tmpfile when it didn't exit
99          . Fixed inversed vsname emptiness check
100          . Fixed su quote usage to be more posixy
101          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
102          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
103         pgsql:
104          . Fixed inversed vsname emptiness check
105          . Fixed su quote usage to be more posixy
106          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
107          . postgres user UID is now the one from inside the vserver if necessary
108          . Compress now happens in-line to save some disk space (Closes: #370778)
109          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default) 
110         svn:
111          . Fixed inversed vsname emptiness check
112         rdiff:
113          . Symlink and globbing support in include/exclude/vsinclude
114            clarification: globbing is fully supported again, whereas no attempt
115            is done to dereference symlinks anymore, due to incompatibilities
116            between various readlink versions in this field.
117          . Removed overzealous vsnames check
118          . Now works if testconnect=no and if $test is not defined.
119          . add $sshoptions config parameter in [dest] section of config so
120            connections to ports other than 22 can be made by adding the
121            following to the top of the handler config:
122            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
123            --server'
124         dup:
125          . Symlink and globbing support in include/exclude/vsinclude
126            clarification: globbing is fully supported again, whereas no attempt
127            is done to dereference symlinks anymore, due to incompatibilities
128            between various readlink versions in this field.
129          . Removed over zealous vsnames check
130          . Does not pretend anymore that duplicity can work without
131            any passphrase
132          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
133            0.4.3 will integrate them); documented how to write sftp-compatible
134            sshoptions (Closes: #388543)
135          . Now forbid to (try to) include /.
136         sys:
137          . Many more system checks were added, (thanks to Petr Klíma)
138          . Added warning if no devices were found (thanks Ranier Zocholl)
139          . Enhanced debian package selections to include purged packages (thanks
140            Tom Hoover)
141          . Removed warning about vserver not running (thanks anarcat)
142         ldap:
143          . Compress now happens in-line to save some disk space (Closes: #370778)
144         makecd:
145          . Added nicelevel option (thanks rhatto)
146         trac:
147          . fixed problem when src was set to the trac repo directly (Closes: #382737)
148     lib changes
149         vserver:
150          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
151          . found_vservers: escaped special grep repetition character +
152          . forced mktemp to use a template with a name to be more compatible with 
153            different versions of mktemp, thanks anarcat
154     ninjahelper changes
155          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
156          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
157          . When determining which backup actions to list, find now follows
158            symlinks for $configdirectory
159          . Stop checking helpers perms: both "make install" and distros packages
160            install them with appropriate permissions, it's overzealous to check
161            this at runtime, and is more complicated to do with current
162            admingroup option.
163         dup.helper:
164          . Fix: signing was enabled with symmetric encryption.
165     changed cron permissions to 644
166     changed /etc/backup.d permissions to 0770 (for admingroup)
167     minor documentation fixes
168     improved RPM build process allowing 'make rpm-package' and 'make
169     srpm-package' targets, also fixes permissions on man directories, 
170     cleans up RPM-related files during distclean, and adds default
171     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
172
173 version 0.9.3 -- February 1st, 2006
174     autotools fixes
175     backupninja changes
176         backupninja.conf
177          . added (commented out) the various default paths to
178            programs such as PGSQLDUMP, so that users can figure
179            out more easily they can customize them
180         code refactor:
181          . now uses vservers lib to initialize vservers support
182     handler changes
183         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
184            degrees) new lib/vserver functionality
185         mysql:
186          . fixed no user defaults file processing
187         duplicity:
188          . fixed (again...) globbing in include and exclude options (Debian bug
189            #348022, follow-up to #338796)
190          . warn if vsnames or vsinclude is enabled while vservers support is
191            disabled in backupninja.conf
192          . now works when multiple vservers names are given (separated by space)
193            in vsnames config variable
194         rdiff
195          . fixed globbing bug in include, exclude and vsinclude options
196          . it's now possible to choose exactly which vservers should be
197            backed-up, as it already was with duplicity handler, with the
198            "vsnames" configuration setting
199     ninjahelper changes
200         rdiff.helper:
201          . fixed errors in create remote dir
202          . code formatting cleanup (three spaces indent)
203          . fixed bug which caused only first include/exclude dir to
204            have "include = "
205          . fixed globbing bug with exclude
206         ninjahelper:
207          . now reports error if the helper script has a syntax error or bombs out.
208          . code formatting cleanup (three spaces indent)
209     lib changes
210         vserver:
211          . init_vservers: improved VROOTDIR detection
212          . init_vservers: test in a stricter way the real vservers availability
213          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
214            don't follow symlinks)
215          . init_vservers: warn if vservers are enabled but no vserver is found
216          . new function: vservers_exist
217     known bugs:
218         easydialog: 
219          . formDisplay does not return exit status.
220
221 version 0.9.2 -- December 29, 2005
222     backupninja changes
223         fixed broken toint() which caused when "everyday" problems
224         backupninja.conf.5 updated to include "when" and "vservers"
225         code refactor:
226             . moved to lib/ some code that has to be shared between
227               backupninja and ninjahelper
228     handler changes
229         trac:
230             . mkdir subdirectory problem fixed
231         duplicity:
232             . globbing support fixed in include and exclude options 
233             . different signing and encrypting key support added
234             . fixed erroneous comments in example.dup about the way
235               GnuPG-related options are used
236         mysql:
237             . handler vserver bugs fixed and debug output enhanced
238     ninjahelper(s) changes
239         vserver-related functions added to lib/vservers.in
240         added man/ninjahelper.1 man page
241         makecd:
242             . was missing in Makefile.am/.in
243         rdiff-backup:
244             . used to expand '*' in default source directories
245             . the "Cancel" buttons used to have a weird behaviour
246             . updated to include Vserver selection 
247         pgsql:
248             . forbid the user to choose an empty database set 
249             . "Cancel" button now does what it is meant to do
250         mysql:
251             . enhanced for vserver support 
252             . now able to select databases and dump directory
253         duplicity:
254             . new handler added (with Vserver support)
255
256 version 0.9.1 -- November 05 2005
257     rearranged source so that it is relocatable with autotools
258         (thanks to Petr Klíma petr.klima@madeta-group.cz)
259     fixed many bugs in rdiff helper
260     rdiff handler does not require 'label' (for real this time?)
261     added makecd ninjahelper
262         (thanks to Stefani stefani@riseup.net)
263     made ninjahelper create files with mode 600 rather than 000
264     changed subversion handler to use svnadmin hotcopy instead of
265             the unsupported hot-copy.py script, which was moved in Debian
266     update rdiff ninjahelper
267             now detects and auto-install rdiff-backup on the remote 
268             machine if possible, also tests the remote backup directory
269             and offers to create it if it doesn't exist
270
271 version 0.9 -- October 19 2005
272     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
273      fixed insecure temporary file creation 
274     *****************************************
275     removed erroneous magic file marker in pgsql handler
276     fixed incorrect find positional
277     changed direct grep of /etc/passwd to getent passwd.
278     rdiff helper has much better information on failed ssh attempt
279         (patch from cmccallum@thecsl.org).
280     rdiff handler now supports remote source and local dest. 
281         (patch from cmccallum@thecsl.org).
282     man pages are greatly improved.
283
284 version 0.8 -- September 15 2005
285     added pgsql (PostgreSQL) handler, with vservers support.
286     added vservers support to duplicity handler
287         Note: the configuration is a bit different than the rdiff
288         handler's one, but the default behavior is the same:
289         have a look at example.dup.
290     improved README
291     documented .disabled method.
292     corrected VROOTDIR default value.
293     added ninjahelper to the install instructions.
294     improved rdiff, dup and sys handlers' vservers support
295         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
296         to be seen as a vserver
297     changes to sys handler
298         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
299         fixed dpkg existence test inside vserver.
300         fixed $nodpkg use.
301     changes to pgsql handler
302         now checks if the specified vserver is running.
303         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
304         now checks if "postgres" user exists on the host/vserver.
305     changes to ninjahelper
306         check_perms() does not die anymore on group/world readable
307         helper scripts (now consistent with the "helper scripts
308         must not be group or world writable!" error msg).
309     xedit action now tries $EDITOR, then /etc/alternatives/editor,
310         then nano, vim and vi, and aborts if none of these exists.
311     added helper for pgsql handler.
312     rdiff handler now does not require 'label'
313     changes to mysql and svn handlers' vservers support
314         these handlers now check if the source vserver is running
315     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
316
317 version 0.7 -- July 26 2005
318     added ninjahelper: a dialog based wizard for creating backupninja configs.
319     considerably improved and changed the log file output.
320     you can now disable actions with .disabled (this is new preferred method).
321     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
322     fixed bug when specifying multiple 'when' options.
323
324 version 0.6 -- June 16 2005
325     ldap handler has new options: backup method to use (ldapsearch or
326         slapcat), restart, passwordfile and binddn. Default backup method
327         is set to ldapsearch as this is safer
328     ******************************************************************
329     NOTE: to get the previous default behavior with the ldap handler, 
330     you must set "method = slapcat". The new default is ldapsearch.
331     ******************************************************************
332     implemented fix so that the main script will echo fatal errors rather
333         than being silent about them, this means an error message every hour
334         if there is a major configuration problem (not a handler problem)
335     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
336     changes to duplicity handler (thanks intrigeri!):
337         "keep = yes" now disables file cleaning on desthost
338         added "sign" option for backups signing
339         added "encryptkey" option to specify the gpg key to use
340         split config into [source], [gpg] and [dest] sections
341         added "nicelevel" option
342         added "testconnect" option
343         added "sshoptions" option (will be passed to ssh/scp)
344         added "bandwidthlimit" option
345     example.dup example config file for duplicity handler 
346     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
347     added configfile option to mysql handler
348         the default is /etc/mysql/debian.cnf. with this, 
349         sqldump doesn't need dbusername. (hotcopy still does).
350     fixed bug in mysql handler which caused some passwords to not work.
351         (.my.cnf files now have double quotes around password)
352     can now pass options to hwinfo and sfdisk in sys handler.
353
354 version 0.5 -- April 12 2005
355     rdiff handler works when remote sshd has a banner
356     rdiff handler supports local dest 
357     logfile is created if it doesn't exist
358     added "when = hourly" 
359     added optional 'nicelevel' to rdiff handler
360     fixed bug where actions were not run in numeric order.
361     improved 'when' parsing.
362
363 version 0.4.4 -- March 18 2005
364     results of handlers are now read line by line. 
365     changes to rdiff handler: added "options", and "keep" is
366         not necessarily days now (ie, it will pass straight through to
367         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
368     added dup handler (still pretty beta)
369     added maildir handler (very specialized handler)
370     added --run option (runs the specified action file)
371     improved sys handler, now uses hwinfo
372     added subversion hotbackup handler, svn. 
373     added PATH to cron.d file, which fixes file not found errors.
374
375 version 0.4.2 -- Jan 6 2005
376     fixed bug which caused a report email to be sent even if no actions were run.
377     fixed bug where multiple handler status messages were ignored
378     added status in the subject line of report emails
379
380 version 0.4.1 -- Jan 3 2005
381     added $usecolors and now more conservative about when colors are echoed.
382     fixed major bug, 'when' actually works now.
383     replaced debug function with debug, info, warning, error, fatal.
384     added --now option to force all actions to be performed now.
385     
386 version 0.4 -- Dec 26 2004
387     added "when" option, so that all configs can specify when
388         they are to be run.
389     added reportsuccess and reportwarning config options
390     added .sys handler (hardware, packages, partitions).
391
392 version 0.3.4 -- Dec 8 2004
393     fixed numerical variable quoting compatibility with older wc    
394     fixed stderr redirect bug
395     some comments in example.rdiff
396
397 version 0.3.3 -- Nov 10 2004
398     '*' (asterisk) works now in rdiff config files
399     works now with gawk as well as mawk
400     many bug fixes to ldap handler
401     paths to helper scripts can be configured in global config
402     does not require /usr/bin/stat
403
404 version 0.3.2 -- Sept 29 2004
405     handler scripts are no longer executable (to comply with debian policy)
406     handler error and warning messages are sent with the notify email
407
408 version 0.3.1 -- Sept 5 2004
409     added ldap handler
410     moved sh support to a handler script
411     add test mode, where no action is taken.
412     added --help
413     force only root can read /etc/backup.d/*
414     fixed missing equals symbols in example.rdiff
415     changed backupninja executable to be /usr/sbin rather than /usr/bin
416     
417 version 0.3 -- Oct 20 2004
418     ** IMPORTANT ** all config files are now ini style, not apache style
419     rewrote all scripts in bash for portability
420     added drop-in backupninja lib directory (/usr/share/backupninja)
421     all scripts are now run as root
422
423 version 0.2 -- Oct 14 2004
424     move distribution folder ./cron.d to ./etc/cron.d
425     fixed bug: removed printr of excludes (!)
426     added support for changing the user/group in rdiff sources.
427     added support for .mysql config files.
428     
429 version 0.1 -- Oct 8 2004
430     initial release 
431