add changelog entry for maildir destid_file addition
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- unreleased
2     backupninja changes
3         fix bug in cstream definition, thanks Jamie McClelland
4     handler changes
5         dup:
6          . General cleanup
7          . Better support for new duplicity (>= 0.4.4) command line syntax:
8            run remove-older-than when $keep is not set to yes (Closes: #458816),
9            and run "duplicity cleanup" before any other duplicity command; both
10            only trigger a warning on failure, since they should not stop backups
11            from being done. Also migrated full/incremental backup switch to the
12            new syntax.
13         rdiff:
14          . Fixed ignore_version default value missing
15          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
16            into options via remote-schema not already specified (Closes: #424639)
17         wget:
18          . New handler from rhatto designed to incrementally pull content from
19            a website to a local folder, based on the rsync handler
20         maildir:
21          . fixed bug where maildirs that start with a number were skipped.
22          . make deleted maildirs record the date they were deleted
23          . add destid_file configuration option to enable you to specify an alternate
24            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
25
26 version 0.9.5 -- December 2, 2007
27     backupninja changes
28          . Fixed checks on configuration files permissions, since the patch
29            applied to fix #370396 broke this, especially for configuration files
30            created with permissions 000 by an older ninjahelper version.
31          . Enhanced portability for other platforms
32          . Added quoting because it was needed to prevent shell expansion, broking the
33            toint function sometimes (Closes: Trac#11)
34          . Fixed reportspace option (Closes: Trac#10)
35          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
36     handler changes
37         dup:
38          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
39            is not supported anymore) (Closes: #447425)
40          . New tmpdir configuration option, very useful in case duplicity tends
41            to fill up /tmp.
42         ldap:
43          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
44            compress=yes to be less redundant and not create empty uncompressed
45            file (Closes: #394935)
46          . Fixed ninjahelper to properly set compress option, standardized on yes/no
47            instead of on/off
48          . Fixed problem that caused combination of slapcat and compress to not work
49            together (Closes: Trac#29)
50          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
51            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
52         maildir:
53          . Added an examples file (Closes: Trac#23)
54          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
55            coreutils options, as well as some bashisms (Closes: Trac#24)
56          . Fix test mode (Closes: Trac#25)
57         mysql:
58          . Fixed case where odd combination of configuration options caused sqldump
59            backups to get overwritten with an empty file (Closes: #402679)
60          . Added 'nodata' option to enable you to specify tables that you want to omit
61            the data from a backup, but still backup the table structure. This is very
62            useful in cases where tables contain large amounts of cache data. See the
63            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
64          . Enhance code for selecting databases by asking MySQL not to give us the
65            header (-N), to not draw pretty boxes around the output (-B), send the query
66            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
67            Matthew Palmer (Closes: #452039).
68         pgsql:
69          . Support configuring PGSQLUSER for real, and document it a bit; this
70            broken support actually prevented pgsql handler to work for VServers
71            (Closes: #396578)
72         rdiff-backup:
73          . Added cstream support to allow for bandwidth limiting
74          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
75          . Add configuration option to allow you to disable the version check
76            as in some instances this may be an ok scenario (Closes: #424632)
77          . Added local destination support to helper (Closes: Trac#4)
78          . Allow exclude-only configurations (Closes: Trac#21)
79         rub/rsync
80          . Fixed typo in rub handler that caused it to not work
81          . Changed to use lib/vserver code
82          . Fixed fsck error
83          . Fixed integer comparison (Closes: Trac#3)
84          . Renamed handler to 'rsync', replaces outdated rub handler
85          . updated examples/Makefile.am and handlers/Makefile.am to include
86            rsnap/rsync (Closes: #440554)
87          . Added example.rsync configuration file
88         sys:
89          . Fixed typo breaking things for VServers.
90          . Fix bug when vrootdir is on its own partition (Closes: #395928)
91          . Better sfdisk error and output handling: should now properly warn
92            when it does not manage to backup a partition table, and shut up when
93            it succeeds (Closes: #396632)
94          . Added option to not use sfdisk at all, useful for vserver/xen instances
95            that produce warnings about no harddisks found (Closes: #404071)
96          . Fixed example in example.sys to detail the __star__ in partitionsfile and
97            note why its necessary (Closes: #409192)
98          . Force C locale for sfdisk to ensure english words are found in grep
99          . Make directory where output is placed configurable, and create the parent dir
100            if it doesn't exist (Closes: Trac#1)
101     ninjareport
102          . Added first draft of method to aggregate reports from many servers into
103            one email. Requires logtail, rsync, configuration of reporthost,
104            reportdirectory and reportuser in backupninja.conf. Configure cron to
105            run once a day, and individual backupninjas not to report by email their
106            status, then enjoy one email report from all hosts, rather than multiple
107     fixed 'make install' bug that failed if /etc/backup.d already existed
108     changed spaces to tabs in Makefile.am
109     updated redhat spec file (thanks Adam Monsen)
110
111 version 0.9.4 -- October 6th, 2006
112     backupninja changes
113          . Fixed bug in toint(), and thus isnow(), which caused it
114            to not work when run from cron.
115          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
116          . Add admingroup option to configuration to allow a group that can
117            read/write configurations (instead of only allowing root). Checks
118            and complains about group-readable files only when the group differs
119            from the one in the configuration file (default is root as before).
120            Thanks to Martin Krafft for the patch (Closes: #370396).
121          . When determining which backup actions to make, find now follows
122            symlinks for $configdirectory
123          . Changed order of -s to mail for compatibility
124          . fixed permission stat call so it uses the --format supported by
125            coreutils (Closes: #382747)
126          . Added disk space report option (thanks Adam Kosmin)
127     handler changes
128         Added tar handler:
129          . create tarballs
130         Added rsnap handler:
131          . rotated rsync snapshops
132          . code from paulv@bikkel.org
133         Added rub handler:
134          . alternative to rsnap
135          . code from rhatto@riseup.net
136         mysql:
137          . Fixed improper use of $vuserhome (Closes: #351083)
138          . Fixed erroneous removal of tmpfile when it didn't exit
139          . Fixed inversed vsname emptiness check
140          . Fixed su quote usage to be more posixy
141          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
142          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
143         pgsql:
144          . Fixed inversed vsname emptiness check
145          . Fixed su quote usage to be more posixy
146          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
147          . postgres user UID is now the one from inside the vserver if necessary
148          . Compress now happens in-line to save some disk space (Closes: #370778)
149          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
150         svn:
151          . Fixed inversed vsname emptiness check
152         rdiff:
153          . Symlink and globbing support in include/exclude/vsinclude
154            clarification: globbing is fully supported again, whereas no attempt
155            is done to dereference symlinks anymore, due to incompatibilities
156            between various readlink versions in this field.
157          . Removed overzealous vsnames check
158          . Now works if testconnect=no and if $test is not defined.
159          . add $sshoptions config parameter in [dest] section of config so
160            connections to ports other than 22 can be made by adding the
161            following to the top of the handler config:
162            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
163            --server'
164         dup:
165          . Symlink and globbing support in include/exclude/vsinclude
166            clarification: globbing is fully supported again, whereas no attempt
167            is done to dereference symlinks anymore, due to incompatibilities
168            between various readlink versions in this field.
169          . Removed over zealous vsnames check
170          . Does not pretend anymore that duplicity can work without
171            any passphrase
172          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
173            0.4.3 will integrate them); documented how to write sftp-compatible
174            sshoptions (Closes: #388543)
175          . Now forbid to (try to) include /.
176         sys:
177          . Many more system checks were added, (thanks to Petr Klíma)
178          . Added warning if no devices were found (thanks Ranier Zocholl)
179          . Enhanced debian package selections to include purged packages (thanks
180            Tom Hoover)
181          . Removed warning about vserver not running (thanks anarcat)
182         ldap:
183          . Compress now happens in-line to save some disk space (Closes: #370778)
184         makecd:
185          . Added nicelevel option (thanks rhatto)
186         trac:
187          . fixed problem when src was set to the trac repo directly (Closes: #382737)
188     lib changes
189         vserver:
190          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
191          . found_vservers: escaped special grep repetition character +
192          . forced mktemp to use a template with a name to be more compatible with
193            different versions of mktemp, thanks anarcat
194     ninjahelper changes
195          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
196          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
197          . When determining which backup actions to list, find now follows
198            symlinks for $configdirectory
199          . Stop checking helpers perms: both "make install" and distros packages
200            install them with appropriate permissions, it's overzealous to check
201            this at runtime, and is more complicated to do with current
202            admingroup option.
203         dup.helper:
204          . Fix: signing was enabled with symmetric encryption.
205     changed cron permissions to 644
206     changed /etc/backup.d permissions to 0770 (for admingroup)
207     minor documentation fixes
208     improved RPM build process allowing 'make rpm-package' and 'make
209     srpm-package' targets, also fixes permissions on man directories,
210     cleans up RPM-related files during distclean, and adds default
211     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
212
213 version 0.9.3 -- February 1st, 2006
214     autotools fixes
215     backupninja changes
216         backupninja.conf
217          . added (commented out) the various default paths to
218            programs such as PGSQLDUMP, so that users can figure
219            out more easily they can customize them
220         code refactor:
221          . now uses vservers lib to initialize vservers support
222     handler changes
223         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
224            degrees) new lib/vserver functionality
225         mysql:
226          . fixed no user defaults file processing
227         duplicity:
228          . fixed (again...) globbing in include and exclude options (Debian bug
229            #348022, follow-up to #338796)
230          . warn if vsnames or vsinclude is enabled while vservers support is
231            disabled in backupninja.conf
232          . now works when multiple vservers names are given (separated by space)
233            in vsnames config variable
234         rdiff
235          . fixed globbing bug in include, exclude and vsinclude options
236          . it's now possible to choose exactly which vservers should be
237            backed-up, as it already was with duplicity handler, with the
238            "vsnames" configuration setting
239     ninjahelper changes
240         rdiff.helper:
241          . fixed errors in create remote dir
242          . code formatting cleanup (three spaces indent)
243          . fixed bug which caused only first include/exclude dir to
244            have "include = "
245          . fixed globbing bug with exclude
246         ninjahelper:
247          . now reports error if the helper script has a syntax error or bombs out.
248          . code formatting cleanup (three spaces indent)
249     lib changes
250         vserver:
251          . init_vservers: improved VROOTDIR detection
252          . init_vservers: test in a stricter way the real vservers availability
253          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
254            don't follow symlinks)
255          . init_vservers: warn if vservers are enabled but no vserver is found
256          . new function: vservers_exist
257     known bugs:
258         easydialog:
259          . formDisplay does not return exit status.
260
261 version 0.9.2 -- December 29, 2005
262     backupninja changes
263         fixed broken toint() which caused when "everyday" problems
264         backupninja.conf.5 updated to include "when" and "vservers"
265         code refactor:
266             . moved to lib/ some code that has to be shared between
267               backupninja and ninjahelper
268     handler changes
269         trac:
270             . mkdir subdirectory problem fixed
271         duplicity:
272             . globbing support fixed in include and exclude options
273             . different signing and encrypting key support added
274             . fixed erroneous comments in example.dup about the way
275               GnuPG-related options are used
276         mysql:
277             . handler vserver bugs fixed and debug output enhanced
278     ninjahelper(s) changes
279         vserver-related functions added to lib/vservers.in
280         added man/ninjahelper.1 man page
281         makecd:
282             . was missing in Makefile.am/.in
283         rdiff-backup:
284             . used to expand '*' in default source directories
285             . the "Cancel" buttons used to have a weird behaviour
286             . updated to include Vserver selection
287         pgsql:
288             . forbid the user to choose an empty database set
289             . "Cancel" button now does what it is meant to do
290         mysql:
291             . enhanced for vserver support
292             . now able to select databases and dump directory
293         duplicity:
294             . new handler added (with Vserver support)
295
296 version 0.9.1 -- November 05 2005
297     rearranged source so that it is relocatable with autotools
298         (thanks to Petr Klíma petr.klima@madeta-group.cz)
299     fixed many bugs in rdiff helper
300     rdiff handler does not require 'label' (for real this time?)
301     added makecd ninjahelper
302         (thanks to Stefani stefani@riseup.net)
303     made ninjahelper create files with mode 600 rather than 000
304     changed subversion handler to use svnadmin hotcopy instead of
305             the unsupported hot-copy.py script, which was moved in Debian
306     update rdiff ninjahelper
307             now detects and auto-install rdiff-backup on the remote
308             machine if possible, also tests the remote backup directory
309             and offers to create it if it doesn't exist
310
311 version 0.9 -- October 19 2005
312     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
313      fixed insecure temporary file creation
314     *****************************************
315     removed erroneous magic file marker in pgsql handler
316     fixed incorrect find positional
317     changed direct grep of /etc/passwd to getent passwd.
318     rdiff helper has much better information on failed ssh attempt
319         (patch from cmccallum@thecsl.org).
320     rdiff handler now supports remote source and local dest.
321         (patch from cmccallum@thecsl.org).
322     man pages are greatly improved.
323
324 version 0.8 -- September 15 2005
325     added pgsql (PostgreSQL) handler, with vservers support.
326     added vservers support to duplicity handler
327         Note: the configuration is a bit different than the rdiff
328         handler's one, but the default behavior is the same:
329         have a look at example.dup.
330     improved README
331     documented .disabled method.
332     corrected VROOTDIR default value.
333     added ninjahelper to the install instructions.
334     improved rdiff, dup and sys handlers' vservers support
335         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
336         to be seen as a vserver
337     changes to sys handler
338         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
339         fixed dpkg existence test inside vserver.
340         fixed $nodpkg use.
341     changes to pgsql handler
342         now checks if the specified vserver is running.
343         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
344         now checks if "postgres" user exists on the host/vserver.
345     changes to ninjahelper
346         check_perms() does not die anymore on group/world readable
347         helper scripts (now consistent with the "helper scripts
348         must not be group or world writable!" error msg).
349     xedit action now tries $EDITOR, then /etc/alternatives/editor,
350         then nano, vim and vi, and aborts if none of these exists.
351     added helper for pgsql handler.
352     rdiff handler now does not require 'label'
353     changes to mysql and svn handlers' vservers support
354         these handlers now check if the source vserver is running
355     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
356
357 version 0.7 -- July 26 2005
358     added ninjahelper: a dialog based wizard for creating backupninja configs.
359     considerably improved and changed the log file output.
360     you can now disable actions with .disabled (this is new preferred method).
361     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
362     fixed bug when specifying multiple 'when' options.
363
364 version 0.6 -- June 16 2005
365     ldap handler has new options: backup method to use (ldapsearch or
366         slapcat), restart, passwordfile and binddn. Default backup method
367         is set to ldapsearch as this is safer
368     ******************************************************************
369     NOTE: to get the previous default behavior with the ldap handler,
370     you must set "method = slapcat". The new default is ldapsearch.
371     ******************************************************************
372     implemented fix so that the main script will echo fatal errors rather
373         than being silent about them, this means an error message every hour
374         if there is a major configuration problem (not a handler problem)
375     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
376     changes to duplicity handler (thanks intrigeri!):
377         "keep = yes" now disables file cleaning on desthost
378         added "sign" option for backups signing
379         added "encryptkey" option to specify the gpg key to use
380         split config into [source], [gpg] and [dest] sections
381         added "nicelevel" option
382         added "testconnect" option
383         added "sshoptions" option (will be passed to ssh/scp)
384         added "bandwidthlimit" option
385     example.dup example config file for duplicity handler
386     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
387     added configfile option to mysql handler
388         the default is /etc/mysql/debian.cnf. with this,
389         sqldump doesn't need dbusername. (hotcopy still does).
390     fixed bug in mysql handler which caused some passwords to not work.
391         (.my.cnf files now have double quotes around password)
392     can now pass options to hwinfo and sfdisk in sys handler.
393
394 version 0.5 -- April 12 2005
395     rdiff handler works when remote sshd has a banner
396     rdiff handler supports local dest
397     logfile is created if it doesn't exist
398     added "when = hourly"
399     added optional 'nicelevel' to rdiff handler
400     fixed bug where actions were not run in numeric order.
401     improved 'when' parsing.
402
403 version 0.4.4 -- March 18 2005
404     results of handlers are now read line by line.
405     changes to rdiff handler: added "options", and "keep" is
406         not necessarily days now (ie, it will pass straight through to
407         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
408     added dup handler (still pretty beta)
409     added maildir handler (very specialized handler)
410     added --run option (runs the specified action file)
411     improved sys handler, now uses hwinfo
412     added subversion hotbackup handler, svn.
413     added PATH to cron.d file, which fixes file not found errors.
414
415 version 0.4.2 -- Jan 6 2005
416     fixed bug which caused a report email to be sent even if no actions were run.
417     fixed bug where multiple handler status messages were ignored
418     added status in the subject line of report emails
419
420 version 0.4.1 -- Jan 3 2005
421     added $usecolors and now more conservative about when colors are echoed.
422     fixed major bug, 'when' actually works now.
423     replaced debug function with debug, info, warning, error, fatal.
424     added --now option to force all actions to be performed now.
425
426 version 0.4 -- Dec 26 2004
427     added "when" option, so that all configs can specify when
428         they are to be run.
429     added reportsuccess and reportwarning config options
430     added .sys handler (hardware, packages, partitions).
431
432 version 0.3.4 -- Dec 8 2004
433     fixed numerical variable quoting compatibility with older wc
434     fixed stderr redirect bug
435     some comments in example.rdiff
436
437 version 0.3.3 -- Nov 10 2004
438     '*' (asterisk) works now in rdiff config files
439     works now with gawk as well as mawk
440     many bug fixes to ldap handler
441     paths to helper scripts can be configured in global config
442     does not require /usr/bin/stat
443
444 version 0.3.2 -- Sept 29 2004
445     handler scripts are no longer executable (to comply with debian policy)
446     handler error and warning messages are sent with the notify email
447
448 version 0.3.1 -- Sept 5 2004
449     added ldap handler
450     moved sh support to a handler script
451     add test mode, where no action is taken.
452     added --help
453     force only root can read /etc/backup.d/*
454     fixed missing equals symbols in example.rdiff
455     changed backupninja executable to be /usr/sbin rather than /usr/bin
456
457 version 0.3 -- Oct 20 2004
458     ** IMPORTANT ** all config files are now ini style, not apache style
459     rewrote all scripts in bash for portability
460     added drop-in backupninja lib directory (/usr/share/backupninja)
461     all scripts are now run as root
462
463 version 0.2 -- Oct 14 2004
464     move distribution folder ./cron.d to ./etc/cron.d
465     fixed bug: removed printr of excludes (!)
466     added support for changing the user/group in rdiff sources.
467     added support for .mysql config files.
468
469 version 0.1 -- Oct 8 2004
470     initial release
471