add the ability to save the debconf package selection states in the sys handler,...
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- unreleased
2     backupninja changes
3          . fix bug in cstream definition, thanks Jamie McClelland
4          . Allow the entire backup run to be halted by an action, thanks to
5            Matthew Palmer (Closes: #455836)
6          . Fixed tr construct reporting a warning (Closes: #452669)
7     lib changes
8         vserver:
9          . added vservers_running function
10         tools
11          . mktemp is now required to run backupninja, removed less secure
12            fall-back if mktemp did not exist on the system
13     handler changes
14         dup:
15          . General cleanup
16          . Better support for new duplicity (>= 0.4.4) command line syntax:
17            run remove-older-than when $keep is not set to yes (Closes: #458816),
18            and run "duplicity cleanup" before any other duplicity command; both
19            only trigger a warning on failure, since they should not stop backups
20            from being done. Also migrated full/incremental backup switch to the
21            new syntax.
22          . Support every duplicity-supported transport with new configuration
23            option desturl (Closes: #483712, #346040, Trac#2).
24          .
25         Actually allow to backup only VServers, by relaxing $include test.
26         ldap:
27          . support HDB backend just as the BDB one, and make message clearer
28            when no supported backend is found (Closes: #476910)
29         rdiff:
30          . Fixed ignore_version default value missing
31          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
32            into options via remote-schema not already specified (Closes: #424639)
33         wget:
34          . New handler from rhatto designed to incrementally pull content from
35            a website to a local folder, based on the rsync handler
36         maildir:
37          . fixed bug where maildirs that start with a number were skipped.
38          . make deleted maildirs record the date they were deleted
39          . add destid_file configuration option to enable you to specify an alternate
40            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
41         pgsql, mysql, svn, sys:
42          . use new vservers_running function from lib/vserver (factorization++)
43         sys:
44          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
45            (Closes: Trac#39)
46          . support selection of VServers to run on, in the same way as in the
47            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
48          . add support for capturing the package debconf selection states using
49            debconf-get-selections
50
51 version 0.9.5 -- December 2, 2007
52     backupninja changes
53          . Fixed checks on configuration files permissions, since the patch
54            applied to fix #370396 broke this, especially for configuration files
55            created with permissions 000 by an older ninjahelper version.
56          . Enhanced portability for other platforms
57          . Added quoting because it was needed to prevent shell expansion, broking the
58            toint function sometimes (Closes: Trac#11)
59          . Fixed reportspace option (Closes: Trac#10)
60          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
61     handler changes
62         dup:
63          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
64            is not supported anymore) (Closes: #447425)
65          . New tmpdir configuration option, very useful in case duplicity tends
66            to fill up /tmp.
67         ldap:
68          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
69            compress=yes to be less redundant and not create empty uncompressed
70            file (Closes: #394935)
71          . Fixed ninjahelper to properly set compress option, standardized on yes/no
72            instead of on/off
73          . Fixed problem that caused combination of slapcat and compress to not work
74            together (Closes: Trac#29)
75          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
76            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
77         maildir:
78          . Added an examples file (Closes: Trac#23)
79          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
80            coreutils options, as well as some bashisms (Closes: Trac#24)
81          . Fix test mode (Closes: Trac#25)
82         mysql:
83          . Fixed case where odd combination of configuration options caused sqldump
84            backups to get overwritten with an empty file (Closes: #402679)
85          . Added 'nodata' option to enable you to specify tables that you want to omit
86            the data from a backup, but still backup the table structure. This is very
87            useful in cases where tables contain large amounts of cache data. See the
88            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
89          . Enhance code for selecting databases by asking MySQL not to give us the
90            header (-N), to not draw pretty boxes around the output (-B), send the query
91            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
92            Matthew Palmer (Closes: #452039).
93         pgsql:
94          . Support configuring PGSQLUSER for real, and document it a bit; this
95            broken support actually prevented pgsql handler to work for VServers
96            (Closes: #396578)
97         rdiff-backup:
98          . Added cstream support to allow for bandwidth limiting
99          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
100          . Add configuration option to allow you to disable the version check
101            as in some instances this may be an ok scenario (Closes: #424632)
102          . Added local destination support to helper (Closes: Trac#4)
103          . Allow exclude-only configurations (Closes: Trac#21)
104         rub/rsync
105          . Fixed typo in rub handler that caused it to not work
106          . Changed to use lib/vserver code
107          . Fixed fsck error
108          . Fixed integer comparison (Closes: Trac#3)
109          . Renamed handler to 'rsync', replaces outdated rub handler
110          . updated examples/Makefile.am and handlers/Makefile.am to include
111            rsnap/rsync (Closes: #440554)
112          . Added example.rsync configuration file
113         sys:
114          . Fixed typo breaking things for VServers.
115          . Fix bug when vrootdir is on its own partition (Closes: #395928)
116          . Better sfdisk error and output handling: should now properly warn
117            when it does not manage to backup a partition table, and shut up when
118            it succeeds (Closes: #396632)
119          . Added option to not use sfdisk at all, useful for vserver/xen instances
120            that produce warnings about no harddisks found (Closes: #404071)
121          . Fixed example in example.sys to detail the __star__ in partitionsfile and
122            note why its necessary (Closes: #409192)
123          . Force C locale for sfdisk to ensure english words are found in grep
124          . Make directory where output is placed configurable, and create the parent dir
125            if it doesn't exist (Closes: Trac#1)
126     ninjareport
127          . Added first draft of method to aggregate reports from many servers into
128            one email. Requires logtail, rsync, configuration of reporthost,
129            reportdirectory and reportuser in backupninja.conf. Configure cron to
130            run once a day, and individual backupninjas not to report by email their
131            status, then enjoy one email report from all hosts, rather than multiple
132     fixed 'make install' bug that failed if /etc/backup.d already existed
133     changed spaces to tabs in Makefile.am
134     updated redhat spec file (thanks Adam Monsen)
135
136 version 0.9.4 -- October 6th, 2006
137     backupninja changes
138          . Fixed bug in toint(), and thus isnow(), which caused it
139            to not work when run from cron.
140          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
141          . Add admingroup option to configuration to allow a group that can
142            read/write configurations (instead of only allowing root). Checks
143            and complains about group-readable files only when the group differs
144            from the one in the configuration file (default is root as before).
145            Thanks to Martin Krafft for the patch (Closes: #370396).
146          . When determining which backup actions to make, find now follows
147            symlinks for $configdirectory
148          . Changed order of -s to mail for compatibility
149          . fixed permission stat call so it uses the --format supported by
150            coreutils (Closes: #382747)
151          . Added disk space report option (thanks Adam Kosmin)
152     handler changes
153         Added tar handler:
154          . create tarballs
155         Added rsnap handler:
156          . rotated rsync snapshops
157          . code from paulv@bikkel.org
158         Added rub handler:
159          . alternative to rsnap
160          . code from rhatto@riseup.net
161         mysql:
162          . Fixed improper use of $vuserhome (Closes: #351083)
163          . Fixed erroneous removal of tmpfile when it didn't exit
164          . Fixed inversed vsname emptiness check
165          . Fixed su quote usage to be more posixy
166          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
167          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
168         pgsql:
169          . Fixed inversed vsname emptiness check
170          . Fixed su quote usage to be more posixy
171          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
172          . postgres user UID is now the one from inside the vserver if necessary
173          . Compress now happens in-line to save some disk space (Closes: #370778)
174          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
175         svn:
176          . Fixed inversed vsname emptiness check
177         rdiff:
178          . Symlink and globbing support in include/exclude/vsinclude
179            clarification: globbing is fully supported again, whereas no attempt
180            is done to dereference symlinks anymore, due to incompatibilities
181            between various readlink versions in this field.
182          . Removed overzealous vsnames check
183          . Now works if testconnect=no and if $test is not defined.
184          . add $sshoptions config parameter in [dest] section of config so
185            connections to ports other than 22 can be made by adding the
186            following to the top of the handler config:
187            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
188            --server'
189         dup:
190          . Symlink and globbing support in include/exclude/vsinclude
191            clarification: globbing is fully supported again, whereas no attempt
192            is done to dereference symlinks anymore, due to incompatibilities
193            between various readlink versions in this field.
194          . Removed over zealous vsnames check
195          . Does not pretend anymore that duplicity can work without
196            any passphrase
197          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
198            0.4.3 will integrate them); documented how to write sftp-compatible
199            sshoptions (Closes: #388543)
200          . Now forbid to (try to) include /.
201         sys:
202          . Many more system checks were added, (thanks to Petr KlĂ­ma)
203          . Added warning if no devices were found (thanks Ranier Zocholl)
204          . Enhanced debian package selections to include purged packages (thanks
205            Tom Hoover)
206          . Removed warning about vserver not running (thanks anarcat)
207         ldap:
208          . Compress now happens in-line to save some disk space (Closes: #370778)
209         makecd:
210          . Added nicelevel option (thanks rhatto)
211         trac:
212          . fixed problem when src was set to the trac repo directly (Closes: #382737)
213     lib changes
214         vserver:
215          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
216          . found_vservers: escaped special grep repetition character +
217          . forced mktemp to use a template with a name to be more compatible with
218            different versions of mktemp, thanks anarcat
219     ninjahelper changes
220          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
221          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
222          . When determining which backup actions to list, find now follows
223            symlinks for $configdirectory
224          . Stop checking helpers perms: both "make install" and distros packages
225            install them with appropriate permissions, it's overzealous to check
226            this at runtime, and is more complicated to do with current
227            admingroup option.
228         dup.helper:
229          . Fix: signing was enabled with symmetric encryption.
230     changed cron permissions to 644
231     changed /etc/backup.d permissions to 0770 (for admingroup)
232     minor documentation fixes
233     improved RPM build process allowing 'make rpm-package' and 'make
234     srpm-package' targets, also fixes permissions on man directories,
235     cleans up RPM-related files during distclean, and adds default
236     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
237
238 version 0.9.3 -- February 1st, 2006
239     autotools fixes
240     backupninja changes
241         backupninja.conf
242          . added (commented out) the various default paths to
243            programs such as PGSQLDUMP, so that users can figure
244            out more easily they can customize them
245         code refactor:
246          . now uses vservers lib to initialize vservers support
247     handler changes
248         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
249            degrees) new lib/vserver functionality
250         mysql:
251          . fixed no user defaults file processing
252         duplicity:
253          . fixed (again...) globbing in include and exclude options (Debian bug
254            #348022, follow-up to #338796)
255          . warn if vsnames or vsinclude is enabled while vservers support is
256            disabled in backupninja.conf
257          . now works when multiple vservers names are given (separated by space)
258            in vsnames config variable
259         rdiff
260          . fixed globbing bug in include, exclude and vsinclude options
261          . it's now possible to choose exactly which vservers should be
262            backed-up, as it already was with duplicity handler, with the
263            "vsnames" configuration setting
264     ninjahelper changes
265         rdiff.helper:
266          . fixed errors in create remote dir
267          . code formatting cleanup (three spaces indent)
268          . fixed bug which caused only first include/exclude dir to
269            have "include = "
270          . fixed globbing bug with exclude
271         ninjahelper:
272          . now reports error if the helper script has a syntax error or bombs out.
273          . code formatting cleanup (three spaces indent)
274     lib changes
275         vserver:
276          . init_vservers: improved VROOTDIR detection
277          . init_vservers: test in a stricter way the real vservers availability
278          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
279            don't follow symlinks)
280          . init_vservers: warn if vservers are enabled but no vserver is found
281          . new function: vservers_exist
282     known bugs:
283         easydialog:
284          . formDisplay does not return exit status.
285
286 version 0.9.2 -- December 29, 2005
287     backupninja changes
288         fixed broken toint() which caused when "everyday" problems
289         backupninja.conf.5 updated to include "when" and "vservers"
290         code refactor:
291             . moved to lib/ some code that has to be shared between
292               backupninja and ninjahelper
293     handler changes
294         trac:
295             . mkdir subdirectory problem fixed
296         duplicity:
297             . globbing support fixed in include and exclude options
298             . different signing and encrypting key support added
299             . fixed erroneous comments in example.dup about the way
300               GnuPG-related options are used
301         mysql:
302             . handler vserver bugs fixed and debug output enhanced
303     ninjahelper(s) changes
304         vserver-related functions added to lib/vservers.in
305         added man/ninjahelper.1 man page
306         makecd:
307             . was missing in Makefile.am/.in
308         rdiff-backup:
309             . used to expand '*' in default source directories
310             . the "Cancel" buttons used to have a weird behaviour
311             . updated to include Vserver selection
312         pgsql:
313             . forbid the user to choose an empty database set
314             . "Cancel" button now does what it is meant to do
315         mysql:
316             . enhanced for vserver support
317             . now able to select databases and dump directory
318         duplicity:
319             . new handler added (with Vserver support)
320
321 version 0.9.1 -- November 05 2005
322     rearranged source so that it is relocatable with autotools
323         (thanks to Petr KlĂ­ma petr.klima@madeta-group.cz)
324     fixed many bugs in rdiff helper
325     rdiff handler does not require 'label' (for real this time?)
326     added makecd ninjahelper
327         (thanks to Stefani stefani@riseup.net)
328     made ninjahelper create files with mode 600 rather than 000
329     changed subversion handler to use svnadmin hotcopy instead of
330             the unsupported hot-copy.py script, which was moved in Debian
331     update rdiff ninjahelper
332             now detects and auto-install rdiff-backup on the remote
333             machine if possible, also tests the remote backup directory
334             and offers to create it if it doesn't exist
335
336 version 0.9 -- October 19 2005
337     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
338      fixed insecure temporary file creation
339     *****************************************
340     removed erroneous magic file marker in pgsql handler
341     fixed incorrect find positional
342     changed direct grep of /etc/passwd to getent passwd.
343     rdiff helper has much better information on failed ssh attempt
344         (patch from cmccallum@thecsl.org).
345     rdiff handler now supports remote source and local dest.
346         (patch from cmccallum@thecsl.org).
347     man pages are greatly improved.
348
349 version 0.8 -- September 15 2005
350     added pgsql (PostgreSQL) handler, with vservers support.
351     added vservers support to duplicity handler
352         Note: the configuration is a bit different than the rdiff
353         handler's one, but the default behavior is the same:
354         have a look at example.dup.
355     improved README
356     documented .disabled method.
357     corrected VROOTDIR default value.
358     added ninjahelper to the install instructions.
359     improved rdiff, dup and sys handlers' vservers support
360         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
361         to be seen as a vserver
362     changes to sys handler
363         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
364         fixed dpkg existence test inside vserver.
365         fixed $nodpkg use.
366     changes to pgsql handler
367         now checks if the specified vserver is running.
368         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
369         now checks if "postgres" user exists on the host/vserver.
370     changes to ninjahelper
371         check_perms() does not die anymore on group/world readable
372         helper scripts (now consistent with the "helper scripts
373         must not be group or world writable!" error msg).
374     xedit action now tries $EDITOR, then /etc/alternatives/editor,
375         then nano, vim and vi, and aborts if none of these exists.
376     added helper for pgsql handler.
377     rdiff handler now does not require 'label'
378     changes to mysql and svn handlers' vservers support
379         these handlers now check if the source vserver is running
380     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
381
382 version 0.7 -- July 26 2005
383     added ninjahelper: a dialog based wizard for creating backupninja configs.
384     considerably improved and changed the log file output.
385     you can now disable actions with .disabled (this is new preferred method).
386     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
387     fixed bug when specifying multiple 'when' options.
388
389 version 0.6 -- June 16 2005
390     ldap handler has new options: backup method to use (ldapsearch or
391         slapcat), restart, passwordfile and binddn. Default backup method
392         is set to ldapsearch as this is safer
393     ******************************************************************
394     NOTE: to get the previous default behavior with the ldap handler,
395     you must set "method = slapcat". The new default is ldapsearch.
396     ******************************************************************
397     implemented fix so that the main script will echo fatal errors rather
398         than being silent about them, this means an error message every hour
399         if there is a major configuration problem (not a handler problem)
400     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
401     changes to duplicity handler (thanks intrigeri!):
402         "keep = yes" now disables file cleaning on desthost
403         added "sign" option for backups signing
404         added "encryptkey" option to specify the gpg key to use
405         split config into [source], [gpg] and [dest] sections
406         added "nicelevel" option
407         added "testconnect" option
408         added "sshoptions" option (will be passed to ssh/scp)
409         added "bandwidthlimit" option
410     example.dup example config file for duplicity handler
411     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
412     added configfile option to mysql handler
413         the default is /etc/mysql/debian.cnf. with this,
414         sqldump doesn't need dbusername. (hotcopy still does).
415     fixed bug in mysql handler which caused some passwords to not work.
416         (.my.cnf files now have double quotes around password)
417     can now pass options to hwinfo and sfdisk in sys handler.
418
419 version 0.5 -- April 12 2005
420     rdiff handler works when remote sshd has a banner
421     rdiff handler supports local dest
422     logfile is created if it doesn't exist
423     added "when = hourly"
424     added optional 'nicelevel' to rdiff handler
425     fixed bug where actions were not run in numeric order.
426     improved 'when' parsing.
427
428 version 0.4.4 -- March 18 2005
429     results of handlers are now read line by line.
430     changes to rdiff handler: added "options", and "keep" is
431         not necessarily days now (ie, it will pass straight through to
432         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
433     added dup handler (still pretty beta)
434     added maildir handler (very specialized handler)
435     added --run option (runs the specified action file)
436     improved sys handler, now uses hwinfo
437     added subversion hotbackup handler, svn.
438     added PATH to cron.d file, which fixes file not found errors.
439
440 version 0.4.2 -- Jan 6 2005
441     fixed bug which caused a report email to be sent even if no actions were run.
442     fixed bug where multiple handler status messages were ignored
443     added status in the subject line of report emails
444
445 version 0.4.1 -- Jan 3 2005
446     added $usecolors and now more conservative about when colors are echoed.
447     fixed major bug, 'when' actually works now.
448     replaced debug function with debug, info, warning, error, fatal.
449     added --now option to force all actions to be performed now.
450
451 version 0.4 -- Dec 26 2004
452     added "when" option, so that all configs can specify when
453         they are to be run.
454     added reportsuccess and reportwarning config options
455     added .sys handler (hardware, packages, partitions).
456
457 version 0.3.4 -- Dec 8 2004
458     fixed numerical variable quoting compatibility with older wc
459     fixed stderr redirect bug
460     some comments in example.rdiff
461
462 version 0.3.3 -- Nov 10 2004
463     '*' (asterisk) works now in rdiff config files
464     works now with gawk as well as mawk
465     many bug fixes to ldap handler
466     paths to helper scripts can be configured in global config
467     does not require /usr/bin/stat
468
469 version 0.3.2 -- Sept 29 2004
470     handler scripts are no longer executable (to comply with debian policy)
471     handler error and warning messages are sent with the notify email
472
473 version 0.3.1 -- Sept 5 2004
474     added ldap handler
475     moved sh support to a handler script
476     add test mode, where no action is taken.
477     added --help
478     force only root can read /etc/backup.d/*
479     fixed missing equals symbols in example.rdiff
480     changed backupninja executable to be /usr/sbin rather than /usr/bin
481
482 version 0.3 -- Oct 20 2004
483     ** IMPORTANT ** all config files are now ini style, not apache style
484     rewrote all scripts in bash for portability
485     added drop-in backupninja lib directory (/usr/share/backupninja)
486     all scripts are now run as root
487
488 version 0.2 -- Oct 14 2004
489     move distribution folder ./cron.d to ./etc/cron.d
490     fixed bug: removed printr of excludes (!)
491     added support for changing the user/group in rdiff sources.
492     added support for .mysql config files.
493
494 version 0.1 -- Oct 8 2004
495     initial release
496