backupninja: do not assume English locale when using date (Closes: #465837)
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.7 -- UNRELEASED
2     backupninja changes
3          . fix bug in reportspace, thanks Dan Garthwaite
4          . do not assume English locale when using date (Closes: #465837)
5     handler changes
6         maildir:
7          . fix location of deleted_on file
8          . add missing destid_file options to ssh connections
9
10 version 0.9.6 -- July 21, 2008
11     backupninja changes
12          . fix bug in cstream definition, thanks Jamie McClelland
13          . Allow the entire backup run to be halted by an action, thanks to
14            Matthew Palmer (Closes: #455836)
15          . Fixed tr construct reporting a warning (Closes: #452669)
16     lib changes
17         vserver:
18          . added vservers_running function
19         tools
20          . mktemp is now required to run backupninja, removed less secure
21            fall-back if mktemp did not exist on the system
22     handler changes
23         dup:
24          . General cleanup
25          . Better support for new duplicity (>= 0.4.4) command line syntax:
26            run remove-older-than when $keep is not set to yes (Closes: #458816),
27            and run "duplicity cleanup" before any other duplicity command; both
28            only trigger a warning on failure, since they should not stop backups
29            from being done. Also migrated full/incremental backup switch to the
30            new syntax.
31          . Support every duplicity-supported transport with new configuration
32            option desturl (Closes: #483712, #346040, Trac#2).
33          . Actually allow to backup only VServers, by relaxing $include test.
34          . Set secure permissions on tmpdir when creating it.
35         ldap:
36          . support HDB backend just as the BDB one, and make message clearer
37            when no supported backend is found (Closes: #476910)
38         rdiff:
39          . Fixed ignore_version default value missing
40          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
41            into options via remote-schema not already specified (Closes: #424639)
42         wget:
43          . New handler from rhatto designed to incrementally pull content from
44            a website to a local folder, based on the rsync handler
45         maildir:
46          . fixed bug where maildirs that start with a number were skipped
47          . make maildir helper look in every subdirectory of the source directory for
48            maildirs, rather than just looking in the directories [a-zA-Z0-9], thanks
49            for the patch from chris@cenolan.com (Trac#43).
50          . make deleted maildirs record the date they were deleted
51          . add destid_file configuration option to enable you to specify an alternate
52            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
53         pgsql, mysql, svn, sys:
54          . use new vservers_running function from lib/vserver (factorization++)
55         sys:
56          . update for 2.6 kernels: use /proc/kallsyms instead of /proc/ksyms
57            (Closes: Trac#39)
58          . support selection of VServers to run on, in the same way as in the
59            dup handler, with the new vsnames configuration option ; (Closes: Trac#45)
60          . add support for capturing the package debconf selection states using
61            debconf-get-selections
62          . fixed catifexec function to actually work, also now passes the arguments
63            given to catifexec() to the called command (Thanks John Hallam!)
64          . Added more robust software RAID information capture by running mdadm
65            -Q --detail /dev/md?* because some people may have empty mdadm.conf files
66            (Thanks to John Hallam).
67         trac:
68          . stop failing on all the trac backups if just one fails, this means
69            removing the temporary trac backup directories if they fail
70         makecd
71          . updated handler for new toolset (genisoimage and wodim)
72
73 version 0.9.5 -- December 2, 2007
74     backupninja changes
75          . Fixed checks on configuration files permissions, since the patch
76            applied to fix #370396 broke this, especially for configuration files
77            created with permissions 000 by an older ninjahelper version.
78          . Enhanced portability for other platforms
79          . Added quoting because it was needed to prevent shell expansion, broking the
80            toint function sometimes (Closes: Trac#11)
81          . Fixed reportspace option (Closes: Trac#10)
82          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
83     handler changes
84         dup:
85          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
86            is not supported anymore) (Closes: #447425)
87          . New tmpdir configuration option, very useful in case duplicity tends
88            to fill up /tmp.
89         ldap:
90          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
91            compress=yes to be less redundant and not create empty uncompressed
92            file (Closes: #394935)
93          . Fixed ninjahelper to properly set compress option, standardized on yes/no
94            instead of on/off
95          . Fixed problem that caused combination of slapcat and compress to not work
96            together (Closes: Trac#29)
97          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
98            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
99         maildir:
100          . Added an examples file (Closes: Trac#23)
101          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
102            coreutils options, as well as some bashisms (Closes: Trac#24)
103          . Fix test mode (Closes: Trac#25)
104         mysql:
105          . Fixed case where odd combination of configuration options caused sqldump
106            backups to get overwritten with an empty file (Closes: #402679)
107          . Added 'nodata' option to enable you to specify tables that you want to omit
108            the data from a backup, but still backup the table structure. This is very
109            useful in cases where tables contain large amounts of cache data. See the
110            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
111          . Enhance code for selecting databases by asking MySQL not to give us the
112            header (-N), to not draw pretty boxes around the output (-B), send the query
113            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
114            Matthew Palmer (Closes: #452039).
115         pgsql:
116          . Support configuring PGSQLUSER for real, and document it a bit; this
117            broken support actually prevented pgsql handler to work for VServers
118            (Closes: #396578)
119         rdiff-backup:
120          . Added cstream support to allow for bandwidth limiting
121          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
122          . Add configuration option to allow you to disable the version check
123            as in some instances this may be an ok scenario (Closes: #424632)
124          . Added local destination support to helper (Closes: Trac#4)
125          . Allow exclude-only configurations (Closes: Trac#21)
126         rub/rsync
127          . Fixed typo in rub handler that caused it to not work
128          . Changed to use lib/vserver code
129          . Fixed fsck error
130          . Fixed integer comparison (Closes: Trac#3)
131          . Renamed handler to 'rsync', replaces outdated rub handler
132          . updated examples/Makefile.am and handlers/Makefile.am to include
133            rsnap/rsync (Closes: #440554)
134          . Added example.rsync configuration file
135         sys:
136          . Fixed typo breaking things for VServers.
137          . Fix bug when vrootdir is on its own partition (Closes: #395928)
138          . Better sfdisk error and output handling: should now properly warn
139            when it does not manage to backup a partition table, and shut up when
140            it succeeds (Closes: #396632)
141          . Added option to not use sfdisk at all, useful for vserver/xen instances
142            that produce warnings about no harddisks found (Closes: #404071)
143          . Fixed example in example.sys to detail the __star__ in partitionsfile and
144            note why its necessary (Closes: #409192)
145          . Force C locale for sfdisk to ensure english words are found in grep
146          . Make directory where output is placed configurable, and create the parent dir
147            if it doesn't exist (Closes: Trac#1)
148     ninjareport
149          . Added first draft of method to aggregate reports from many servers into
150            one email. Requires logtail, rsync, configuration of reporthost,
151            reportdirectory and reportuser in backupninja.conf. Configure cron to
152            run once a day, and individual backupninjas not to report by email their
153            status, then enjoy one email report from all hosts, rather than multiple
154     fixed 'make install' bug that failed if /etc/backup.d already existed
155     changed spaces to tabs in Makefile.am
156     updated redhat spec file (thanks Adam Monsen)
157
158 version 0.9.4 -- October 6th, 2006
159     backupninja changes
160          . Fixed bug in toint(), and thus isnow(), which caused it
161            to not work when run from cron.
162          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
163          . Add admingroup option to configuration to allow a group that can
164            read/write configurations (instead of only allowing root). Checks
165            and complains about group-readable files only when the group differs
166            from the one in the configuration file (default is root as before).
167            Thanks to Martin Krafft for the patch (Closes: #370396).
168          . When determining which backup actions to make, find now follows
169            symlinks for $configdirectory
170          . Changed order of -s to mail for compatibility
171          . fixed permission stat call so it uses the --format supported by
172            coreutils (Closes: #382747)
173          . Added disk space report option (thanks Adam Kosmin)
174     handler changes
175         Added tar handler:
176          . create tarballs
177         Added rsnap handler:
178          . rotated rsync snapshops
179          . code from paulv@bikkel.org
180         Added rub handler:
181          . alternative to rsnap
182          . code from rhatto@riseup.net
183         mysql:
184          . Fixed improper use of $vuserhome (Closes: #351083)
185          . Fixed erroneous removal of tmpfile when it didn't exit
186          . Fixed inversed vsname emptiness check
187          . Fixed su quote usage to be more posixy
188          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
189          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
190         pgsql:
191          . Fixed inversed vsname emptiness check
192          . Fixed su quote usage to be more posixy
193          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
194          . postgres user UID is now the one from inside the vserver if necessary
195          . Compress now happens in-line to save some disk space (Closes: #370778)
196          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
197         svn:
198          . Fixed inversed vsname emptiness check
199         rdiff:
200          . Symlink and globbing support in include/exclude/vsinclude
201            clarification: globbing is fully supported again, whereas no attempt
202            is done to dereference symlinks anymore, due to incompatibilities
203            between various readlink versions in this field.
204          . Removed overzealous vsnames check
205          . Now works if testconnect=no and if $test is not defined.
206          . add $sshoptions config parameter in [dest] section of config so
207            connections to ports other than 22 can be made by adding the
208            following to the top of the handler config:
209            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
210            --server'
211         dup:
212          . Symlink and globbing support in include/exclude/vsinclude
213            clarification: globbing is fully supported again, whereas no attempt
214            is done to dereference symlinks anymore, due to incompatibilities
215            between various readlink versions in this field.
216          . Removed over zealous vsnames check
217          . Does not pretend anymore that duplicity can work without
218            any passphrase
219          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
220            0.4.3 will integrate them); documented how to write sftp-compatible
221            sshoptions (Closes: #388543)
222          . Now forbid to (try to) include /.
223         sys:
224          . Many more system checks were added, (thanks to Petr KlĂ­ma)
225          . Added warning if no devices were found (thanks Ranier Zocholl)
226          . Enhanced debian package selections to include purged packages (thanks
227            Tom Hoover)
228          . Removed warning about vserver not running (thanks anarcat)
229         ldap:
230          . Compress now happens in-line to save some disk space (Closes: #370778)
231         makecd:
232          . Added nicelevel option (thanks rhatto)
233         trac:
234          . fixed problem when src was set to the trac repo directly (Closes: #382737)
235     lib changes
236         vserver:
237          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
238          . found_vservers: escaped special grep repetition character +
239          . forced mktemp to use a template with a name to be more compatible with
240            different versions of mktemp, thanks anarcat
241     ninjahelper changes
242          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
243          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
244          . When determining which backup actions to list, find now follows
245            symlinks for $configdirectory
246          . Stop checking helpers perms: both "make install" and distros packages
247            install them with appropriate permissions, it's overzealous to check
248            this at runtime, and is more complicated to do with current
249            admingroup option.
250         dup.helper:
251          . Fix: signing was enabled with symmetric encryption.
252     changed cron permissions to 644
253     changed /etc/backup.d permissions to 0770 (for admingroup)
254     minor documentation fixes
255     improved RPM build process allowing 'make rpm-package' and 'make
256     srpm-package' targets, also fixes permissions on man directories,
257     cleans up RPM-related files during distclean, and adds default
258     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
259
260 version 0.9.3 -- February 1st, 2006
261     autotools fixes
262     backupninja changes
263         backupninja.conf
264          . added (commented out) the various default paths to
265            programs such as PGSQLDUMP, so that users can figure
266            out more easily they can customize them
267         code refactor:
268          . now uses vservers lib to initialize vservers support
269     handler changes
270         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
271            degrees) new lib/vserver functionality
272         mysql:
273          . fixed no user defaults file processing
274         duplicity:
275          . fixed (again...) globbing in include and exclude options (Debian bug
276            #348022, follow-up to #338796)
277          . warn if vsnames or vsinclude is enabled while vservers support is
278            disabled in backupninja.conf
279          . now works when multiple vservers names are given (separated by space)
280            in vsnames config variable
281         rdiff
282          . fixed globbing bug in include, exclude and vsinclude options
283          . it's now possible to choose exactly which vservers should be
284            backed-up, as it already was with duplicity handler, with the
285            "vsnames" configuration setting
286     ninjahelper changes
287         rdiff.helper:
288          . fixed errors in create remote dir
289          . code formatting cleanup (three spaces indent)
290          . fixed bug which caused only first include/exclude dir to
291            have "include = "
292          . fixed globbing bug with exclude
293         ninjahelper:
294          . now reports error if the helper script has a syntax error or bombs out.
295          . code formatting cleanup (three spaces indent)
296     lib changes
297         vserver:
298          . init_vservers: improved VROOTDIR detection
299          . init_vservers: test in a stricter way the real vservers availability
300          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
301            don't follow symlinks)
302          . init_vservers: warn if vservers are enabled but no vserver is found
303          . new function: vservers_exist
304     known bugs:
305         easydialog:
306          . formDisplay does not return exit status.
307
308 version 0.9.2 -- December 29, 2005
309     backupninja changes
310         fixed broken toint() which caused when "everyday" problems
311         backupninja.conf.5 updated to include "when" and "vservers"
312         code refactor:
313             . moved to lib/ some code that has to be shared between
314               backupninja and ninjahelper
315     handler changes
316         trac:
317             . mkdir subdirectory problem fixed
318         duplicity:
319             . globbing support fixed in include and exclude options
320             . different signing and encrypting key support added
321             . fixed erroneous comments in example.dup about the way
322               GnuPG-related options are used
323         mysql:
324             . handler vserver bugs fixed and debug output enhanced
325     ninjahelper(s) changes
326         vserver-related functions added to lib/vservers.in
327         added man/ninjahelper.1 man page
328         makecd:
329             . was missing in Makefile.am/.in
330         rdiff-backup:
331             . used to expand '*' in default source directories
332             . the "Cancel" buttons used to have a weird behaviour
333             . updated to include Vserver selection
334         pgsql:
335             . forbid the user to choose an empty database set
336             . "Cancel" button now does what it is meant to do
337         mysql:
338             . enhanced for vserver support
339             . now able to select databases and dump directory
340         duplicity:
341             . new handler added (with Vserver support)
342
343 version 0.9.1 -- November 05 2005
344     rearranged source so that it is relocatable with autotools
345         (thanks to Petr KlĂ­ma petr.klima@madeta-group.cz)
346     fixed many bugs in rdiff helper
347     rdiff handler does not require 'label' (for real this time?)
348     added makecd ninjahelper
349         (thanks to Stefani stefani@riseup.net)
350     made ninjahelper create files with mode 600 rather than 000
351     changed subversion handler to use svnadmin hotcopy instead of
352             the unsupported hot-copy.py script, which was moved in Debian
353     update rdiff ninjahelper
354             now detects and auto-install rdiff-backup on the remote
355             machine if possible, also tests the remote backup directory
356             and offers to create it if it doesn't exist
357
358 version 0.9 -- October 19 2005
359     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
360      fixed insecure temporary file creation
361     *****************************************
362     removed erroneous magic file marker in pgsql handler
363     fixed incorrect find positional
364     changed direct grep of /etc/passwd to getent passwd.
365     rdiff helper has much better information on failed ssh attempt
366         (patch from cmccallum@thecsl.org).
367     rdiff handler now supports remote source and local dest.
368         (patch from cmccallum@thecsl.org).
369     man pages are greatly improved.
370
371 version 0.8 -- September 15 2005
372     added pgsql (PostgreSQL) handler, with vservers support.
373     added vservers support to duplicity handler
374         Note: the configuration is a bit different than the rdiff
375         handler's one, but the default behavior is the same:
376         have a look at example.dup.
377     improved README
378     documented .disabled method.
379     corrected VROOTDIR default value.
380     added ninjahelper to the install instructions.
381     improved rdiff, dup and sys handlers' vservers support
382         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
383         to be seen as a vserver
384     changes to sys handler
385         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
386         fixed dpkg existence test inside vserver.
387         fixed $nodpkg use.
388     changes to pgsql handler
389         now checks if the specified vserver is running.
390         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
391         now checks if "postgres" user exists on the host/vserver.
392     changes to ninjahelper
393         check_perms() does not die anymore on group/world readable
394         helper scripts (now consistent with the "helper scripts
395         must not be group or world writable!" error msg).
396     xedit action now tries $EDITOR, then /etc/alternatives/editor,
397         then nano, vim and vi, and aborts if none of these exists.
398     added helper for pgsql handler.
399     rdiff handler now does not require 'label'
400     changes to mysql and svn handlers' vservers support
401         these handlers now check if the source vserver is running
402     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
403
404 version 0.7 -- July 26 2005
405     added ninjahelper: a dialog based wizard for creating backupninja configs.
406     considerably improved and changed the log file output.
407     you can now disable actions with .disabled (this is new preferred method).
408     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
409     fixed bug when specifying multiple 'when' options.
410
411 version 0.6 -- June 16 2005
412     ldap handler has new options: backup method to use (ldapsearch or
413         slapcat), restart, passwordfile and binddn. Default backup method
414         is set to ldapsearch as this is safer
415     ******************************************************************
416     NOTE: to get the previous default behavior with the ldap handler,
417     you must set "method = slapcat". The new default is ldapsearch.
418     ******************************************************************
419     implemented fix so that the main script will echo fatal errors rather
420         than being silent about them, this means an error message every hour
421         if there is a major configuration problem (not a handler problem)
422     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
423     changes to duplicity handler (thanks intrigeri!):
424         "keep = yes" now disables file cleaning on desthost
425         added "sign" option for backups signing
426         added "encryptkey" option to specify the gpg key to use
427         split config into [source], [gpg] and [dest] sections
428         added "nicelevel" option
429         added "testconnect" option
430         added "sshoptions" option (will be passed to ssh/scp)
431         added "bandwidthlimit" option
432     example.dup example config file for duplicity handler
433     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
434     added configfile option to mysql handler
435         the default is /etc/mysql/debian.cnf. with this,
436         sqldump doesn't need dbusername. (hotcopy still does).
437     fixed bug in mysql handler which caused some passwords to not work.
438         (.my.cnf files now have double quotes around password)
439     can now pass options to hwinfo and sfdisk in sys handler.
440
441 version 0.5 -- April 12 2005
442     rdiff handler works when remote sshd has a banner
443     rdiff handler supports local dest
444     logfile is created if it doesn't exist
445     added "when = hourly"
446     added optional 'nicelevel' to rdiff handler
447     fixed bug where actions were not run in numeric order.
448     improved 'when' parsing.
449
450 version 0.4.4 -- March 18 2005
451     results of handlers are now read line by line.
452     changes to rdiff handler: added "options", and "keep" is
453         not necessarily days now (ie, it will pass straight through to
454         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
455     added dup handler (still pretty beta)
456     added maildir handler (very specialized handler)
457     added --run option (runs the specified action file)
458     improved sys handler, now uses hwinfo
459     added subversion hotbackup handler, svn.
460     added PATH to cron.d file, which fixes file not found errors.
461
462 version 0.4.2 -- Jan 6 2005
463     fixed bug which caused a report email to be sent even if no actions were run.
464     fixed bug where multiple handler status messages were ignored
465     added status in the subject line of report emails
466
467 version 0.4.1 -- Jan 3 2005
468     added $usecolors and now more conservative about when colors are echoed.
469     fixed major bug, 'when' actually works now.
470     replaced debug function with debug, info, warning, error, fatal.
471     added --now option to force all actions to be performed now.
472
473 version 0.4 -- Dec 26 2004
474     added "when" option, so that all configs can specify when
475         they are to be run.
476     added reportsuccess and reportwarning config options
477     added .sys handler (hardware, packages, partitions).
478
479 version 0.3.4 -- Dec 8 2004
480     fixed numerical variable quoting compatibility with older wc
481     fixed stderr redirect bug
482     some comments in example.rdiff
483
484 version 0.3.3 -- Nov 10 2004
485     '*' (asterisk) works now in rdiff config files
486     works now with gawk as well as mawk
487     many bug fixes to ldap handler
488     paths to helper scripts can be configured in global config
489     does not require /usr/bin/stat
490
491 version 0.3.2 -- Sept 29 2004
492     handler scripts are no longer executable (to comply with debian policy)
493     handler error and warning messages are sent with the notify email
494
495 version 0.3.1 -- Sept 5 2004
496     added ldap handler
497     moved sh support to a handler script
498     add test mode, where no action is taken.
499     added --help
500     force only root can read /etc/backup.d/*
501     fixed missing equals symbols in example.rdiff
502     changed backupninja executable to be /usr/sbin rather than /usr/bin
503
504 version 0.3 -- Oct 20 2004
505     ** IMPORTANT ** all config files are now ini style, not apache style
506     rewrote all scripts in bash for portability
507     added drop-in backupninja lib directory (/usr/share/backupninja)
508     all scripts are now run as root
509
510 version 0.2 -- Oct 14 2004
511     move distribution folder ./cron.d to ./etc/cron.d
512     fixed bug: removed printr of excludes (!)
513     added support for changing the user/group in rdiff sources.
514     added support for .mysql config files.
515
516 version 0.1 -- Oct 8 2004
517     initial release
518