LDAP: support HDB backend just as the BDB one
[matthijs/upstream/backupninja.git] / ChangeLog
1 version 0.9.6 -- unreleased
2     backupninja changes
3         fix bug in cstream definition, thanks Jamie McClelland
4     handler changes
5         dup:
6          . General cleanup
7          . Better support for new duplicity (>= 0.4.4) command line syntax:
8            run remove-older-than when $keep is not set to yes (Closes: #458816),
9            and run "duplicity cleanup" before any other duplicity command; both
10            only trigger a warning on failure, since they should not stop backups
11            from being done. Also migrated full/incremental backup switch to the
12            new syntax.
13         ldap:
14          . support HDB backend just as the BDB one (Closes: #476910)
15         rdiff:
16          . Fixed ignore_version default value missing
17          . Add patch from Matthew Palmer to rdiff handler to incorporate sshoptions
18            into options via remote-schema not already specified (Closes: #424639)
19         wget:
20          . New handler from rhatto designed to incrementally pull content from
21            a website to a local folder, based on the rsync handler
22         maildir:
23          . fixed bug where maildirs that start with a number were skipped.
24          . make deleted maildirs record the date they were deleted
25          . add destid_file configuration option to enable you to specify an alternate
26            ssh public key authentication file (defaulting to /root/.ssh/id_rsa)
27
28 version 0.9.5 -- December 2, 2007
29     backupninja changes
30          . Fixed checks on configuration files permissions, since the patch
31            applied to fix #370396 broke this, especially for configuration files
32            created with permissions 000 by an older ninjahelper version.
33          . Enhanced portability for other platforms
34          . Added quoting because it was needed to prevent shell expansion, broking the
35            toint function sometimes (Closes: Trac#11)
36          . Fixed reportspace option (Closes: Trac#10)
37          . Fixed ldap handler not recognizing database suffix (Closes: Trac#28)
38     handler changes
39         dup:
40          . Support duplicity >= 0.4.3 invocation syntax (--ssh-command option
41            is not supported anymore) (Closes: #447425)
42          . New tmpdir configuration option, very useful in case duplicity tends
43            to fill up /tmp.
44         ldap:
45          . Fixed shell command quoting issues, missing 'then' clauses, cleaned up
46            compress=yes to be less redundant and not create empty uncompressed
47            file (Closes: #394935)
48          . Fixed ninjahelper to properly set compress option, standardized on yes/no
49            instead of on/off
50          . Fixed problem that caused combination of slapcat and compress to not work
51            together (Closes: Trac#29)
52          . Applied patch from romain.tartiere@healthgrid.org to fix the SSL/TLS options
53            to be correct, also set TLS to be the default over SSL (Closes: Trac#13)
54         maildir:
55          . Added an examples file (Closes: Trac#23)
56          . Applied patch from Anarcat that fixes the cp/mkdir calls to not use GNU
57            coreutils options, as well as some bashisms (Closes: Trac#24)
58          . Fix test mode (Closes: Trac#25)
59         mysql:
60          . Fixed case where odd combination of configuration options caused sqldump
61            backups to get overwritten with an empty file (Closes: #402679)
62          . Added 'nodata' option to enable you to specify tables that you want to omit
63            the data from a backup, but still backup the table structure. This is very
64            useful in cases where tables contain large amounts of cache data. See the
65            example.mysql for options, thanks Daniel Bonniot (Closes: #408829)
66          . Enhance code for selecting databases by asking MySQL not to give us the
67            header (-N), to not draw pretty boxes around the output (-B), send the query
68            via -e instead of a pipe and ensure MySQL listens to -B. Thanks to
69            Matthew Palmer (Closes: #452039).
70         pgsql:
71          . Support configuring PGSQLUSER for real, and document it a bit; this
72            broken support actually prevented pgsql handler to work for VServers
73            (Closes: #396578)
74         rdiff-backup:
75          . Added cstream support to allow for bandwidth limiting
76          . Handle "keep = yes" to disable old backups removal (Closes: #424633)
77          . Add configuration option to allow you to disable the version check
78            as in some instances this may be an ok scenario (Closes: #424632)
79          . Added local destination support to helper (Closes: Trac#4)
80          . Allow exclude-only configurations (Closes: Trac#21)
81         rub/rsync
82          . Fixed typo in rub handler that caused it to not work
83          . Changed to use lib/vserver code
84          . Fixed fsck error
85          . Fixed integer comparison (Closes: Trac#3)
86          . Renamed handler to 'rsync', replaces outdated rub handler
87          . updated examples/Makefile.am and handlers/Makefile.am to include
88            rsnap/rsync (Closes: #440554)
89          . Added example.rsync configuration file
90         sys:
91          . Fixed typo breaking things for VServers.
92          . Fix bug when vrootdir is on its own partition (Closes: #395928)
93          . Better sfdisk error and output handling: should now properly warn
94            when it does not manage to backup a partition table, and shut up when
95            it succeeds (Closes: #396632)
96          . Added option to not use sfdisk at all, useful for vserver/xen instances
97            that produce warnings about no harddisks found (Closes: #404071)
98          . Fixed example in example.sys to detail the __star__ in partitionsfile and
99            note why its necessary (Closes: #409192)
100          . Force C locale for sfdisk to ensure english words are found in grep
101          . Make directory where output is placed configurable, and create the parent dir
102            if it doesn't exist (Closes: Trac#1)
103     ninjareport
104          . Added first draft of method to aggregate reports from many servers into
105            one email. Requires logtail, rsync, configuration of reporthost,
106            reportdirectory and reportuser in backupninja.conf. Configure cron to
107            run once a day, and individual backupninjas not to report by email their
108            status, then enjoy one email report from all hosts, rather than multiple
109     fixed 'make install' bug that failed if /etc/backup.d already existed
110     changed spaces to tabs in Makefile.am
111     updated redhat spec file (thanks Adam Monsen)
112
113 version 0.9.4 -- October 6th, 2006
114     backupninja changes
115          . Fixed bug in toint(), and thus isnow(), which caused it
116            to not work when run from cron.
117          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
118          . Add admingroup option to configuration to allow a group that can
119            read/write configurations (instead of only allowing root). Checks
120            and complains about group-readable files only when the group differs
121            from the one in the configuration file (default is root as before).
122            Thanks to Martin Krafft for the patch (Closes: #370396).
123          . When determining which backup actions to make, find now follows
124            symlinks for $configdirectory
125          . Changed order of -s to mail for compatibility
126          . fixed permission stat call so it uses the --format supported by
127            coreutils (Closes: #382747)
128          . Added disk space report option (thanks Adam Kosmin)
129     handler changes
130         Added tar handler:
131          . create tarballs
132         Added rsnap handler:
133          . rotated rsync snapshops
134          . code from paulv@bikkel.org
135         Added rub handler:
136          . alternative to rsnap
137          . code from rhatto@riseup.net
138         mysql:
139          . Fixed improper use of $vuserhome (Closes: #351083)
140          . Fixed erroneous removal of tmpfile when it didn't exit
141          . Fixed inversed vsname emptiness check
142          . Fixed su quote usage to be more posixy
143          . Compress for sqldumps now happens in-line to save some disk space (Closes: #370778)
144          . Fixed --defaults-file now as --defaults-extra-file (thanks rhatto)
145         pgsql:
146          . Fixed inversed vsname emptiness check
147          . Fixed su quote usage to be more posixy
148          . Fixed shell expansion, thanks Thomas Kotzian (Closes: #363297)
149          . postgres user UID is now the one from inside the vserver if necessary
150          . Compress now happens in-line to save some disk space (Closes: #370778)
151          . $PGSQLUSER is used instead of hardcoding user 'postgres' (although this is the default)
152         svn:
153          . Fixed inversed vsname emptiness check
154         rdiff:
155          . Symlink and globbing support in include/exclude/vsinclude
156            clarification: globbing is fully supported again, whereas no attempt
157            is done to dereference symlinks anymore, due to incompatibilities
158            between various readlink versions in this field.
159          . Removed overzealous vsnames check
160          . Now works if testconnect=no and if $test is not defined.
161          . add $sshoptions config parameter in [dest] section of config so
162            connections to ports other than 22 can be made by adding the
163            following to the top of the handler config:
164            options = --remote-schema 'ssh -p REMOTE-PORT -C %s rdiff-backup
165            --server'
166         dup:
167          . Symlink and globbing support in include/exclude/vsinclude
168            clarification: globbing is fully supported again, whereas no attempt
169            is done to dereference symlinks anymore, due to incompatibilities
170            between various readlink versions in this field.
171          . Removed over zealous vsnames check
172          . Does not pretend anymore that duplicity can work without
173            any passphrase
174          . Support duplicity 0.4.2 (with Debian patches applied; upstream's
175            0.4.3 will integrate them); documented how to write sftp-compatible
176            sshoptions (Closes: #388543)
177          . Now forbid to (try to) include /.
178         sys:
179          . Many more system checks were added, (thanks to Petr Klíma)
180          . Added warning if no devices were found (thanks Ranier Zocholl)
181          . Enhanced debian package selections to include purged packages (thanks
182            Tom Hoover)
183          . Removed warning about vserver not running (thanks anarcat)
184         ldap:
185          . Compress now happens in-line to save some disk space (Closes: #370778)
186         makecd:
187          . Added nicelevel option (thanks rhatto)
188         trac:
189          . fixed problem when src was set to the trac repo directly (Closes: #382737)
190     lib changes
191         vserver:
192          . init_vservers: fixed Debian bug #351083 (improper readlink syntax)
193          . found_vservers: escaped special grep repetition character +
194          . forced mktemp to use a template with a name to be more compatible with
195            different versions of mktemp, thanks anarcat
196     ninjahelper changes
197          . Recursively ignore subdirs in /etc/backup.d (Closes: #361102)
198          . Fix configdirectory error that forced you to use /etc/backup.d, thanks anarcat
199          . When determining which backup actions to list, find now follows
200            symlinks for $configdirectory
201          . Stop checking helpers perms: both "make install" and distros packages
202            install them with appropriate permissions, it's overzealous to check
203            this at runtime, and is more complicated to do with current
204            admingroup option.
205         dup.helper:
206          . Fix: signing was enabled with symmetric encryption.
207     changed cron permissions to 644
208     changed /etc/backup.d permissions to 0770 (for admingroup)
209     minor documentation fixes
210     improved RPM build process allowing 'make rpm-package' and 'make
211     srpm-package' targets, also fixes permissions on man directories,
212     cleans up RPM-related files during distclean, and adds default
213     EDITOR for "autogen.sh -f" if none is set. (thanks Robert Napier)
214
215 version 0.9.3 -- February 1st, 2006
216     autotools fixes
217     backupninja changes
218         backupninja.conf
219          . added (commented out) the various default paths to
220            programs such as PGSQLDUMP, so that users can figure
221            out more easily they can customize them
222         code refactor:
223          . now uses vservers lib to initialize vservers support
224     handler changes
225         duplicity, mysql, pgsql, rdiff, svn, sys: start to use (at different
226            degrees) new lib/vserver functionality
227         mysql:
228          . fixed no user defaults file processing
229         duplicity:
230          . fixed (again...) globbing in include and exclude options (Debian bug
231            #348022, follow-up to #338796)
232          . warn if vsnames or vsinclude is enabled while vservers support is
233            disabled in backupninja.conf
234          . now works when multiple vservers names are given (separated by space)
235            in vsnames config variable
236         rdiff
237          . fixed globbing bug in include, exclude and vsinclude options
238          . it's now possible to choose exactly which vservers should be
239            backed-up, as it already was with duplicity handler, with the
240            "vsnames" configuration setting
241     ninjahelper changes
242         rdiff.helper:
243          . fixed errors in create remote dir
244          . code formatting cleanup (three spaces indent)
245          . fixed bug which caused only first include/exclude dir to
246            have "include = "
247          . fixed globbing bug with exclude
248         ninjahelper:
249          . now reports error if the helper script has a syntax error or bombs out.
250          . code formatting cleanup (three spaces indent)
251     lib changes
252         vserver:
253          . init_vservers: improved VROOTDIR detection
254          . init_vservers: test in a stricter way the real vservers availability
255          . init_vservers: canonicalize VROOTDIR (since duplicity et al.
256            don't follow symlinks)
257          . init_vservers: warn if vservers are enabled but no vserver is found
258          . new function: vservers_exist
259     known bugs:
260         easydialog:
261          . formDisplay does not return exit status.
262
263 version 0.9.2 -- December 29, 2005
264     backupninja changes
265         fixed broken toint() which caused when "everyday" problems
266         backupninja.conf.5 updated to include "when" and "vservers"
267         code refactor:
268             . moved to lib/ some code that has to be shared between
269               backupninja and ninjahelper
270     handler changes
271         trac:
272             . mkdir subdirectory problem fixed
273         duplicity:
274             . globbing support fixed in include and exclude options
275             . different signing and encrypting key support added
276             . fixed erroneous comments in example.dup about the way
277               GnuPG-related options are used
278         mysql:
279             . handler vserver bugs fixed and debug output enhanced
280     ninjahelper(s) changes
281         vserver-related functions added to lib/vservers.in
282         added man/ninjahelper.1 man page
283         makecd:
284             . was missing in Makefile.am/.in
285         rdiff-backup:
286             . used to expand '*' in default source directories
287             . the "Cancel" buttons used to have a weird behaviour
288             . updated to include Vserver selection
289         pgsql:
290             . forbid the user to choose an empty database set
291             . "Cancel" button now does what it is meant to do
292         mysql:
293             . enhanced for vserver support
294             . now able to select databases and dump directory
295         duplicity:
296             . new handler added (with Vserver support)
297
298 version 0.9.1 -- November 05 2005
299     rearranged source so that it is relocatable with autotools
300         (thanks to Petr Klíma petr.klima@madeta-group.cz)
301     fixed many bugs in rdiff helper
302     rdiff handler does not require 'label' (for real this time?)
303     added makecd ninjahelper
304         (thanks to Stefani stefani@riseup.net)
305     made ninjahelper create files with mode 600 rather than 000
306     changed subversion handler to use svnadmin hotcopy instead of
307             the unsupported hot-copy.py script, which was moved in Debian
308     update rdiff ninjahelper
309             now detects and auto-install rdiff-backup on the remote
310             machine if possible, also tests the remote backup directory
311             and offers to create it if it doesn't exist
312
313 version 0.9 -- October 19 2005
314     *** IMPORTANT CHANGE, UPGRADE AT ONCE ***
315      fixed insecure temporary file creation
316     *****************************************
317     removed erroneous magic file marker in pgsql handler
318     fixed incorrect find positional
319     changed direct grep of /etc/passwd to getent passwd.
320     rdiff helper has much better information on failed ssh attempt
321         (patch from cmccallum@thecsl.org).
322     rdiff handler now supports remote source and local dest.
323         (patch from cmccallum@thecsl.org).
324     man pages are greatly improved.
325
326 version 0.8 -- September 15 2005
327     added pgsql (PostgreSQL) handler, with vservers support.
328     added vservers support to duplicity handler
329         Note: the configuration is a bit different than the rdiff
330         handler's one, but the default behavior is the same:
331         have a look at example.dup.
332     improved README
333     documented .disabled method.
334     corrected VROOTDIR default value.
335     added ninjahelper to the install instructions.
336     improved rdiff, dup and sys handlers' vservers support
337         prevent vserver-debiantools' $VROOTDIR/ARCHIVES directory
338         to be seen as a vserver
339     changes to sys handler
340         make use of configurable $VSERVERINFO instead of hard-coded vserver-info.
341         fixed dpkg existence test inside vserver.
342         fixed $nodpkg use.
343     changes to pgsql handler
344         now checks if the specified vserver is running.
345         now checks if $PGSQLDUMP/$PGSQLDUMPALL are available where needed.
346         now checks if "postgres" user exists on the host/vserver.
347     changes to ninjahelper
348         check_perms() does not die anymore on group/world readable
349         helper scripts (now consistent with the "helper scripts
350         must not be group or world writable!" error msg).
351     xedit action now tries $EDITOR, then /etc/alternatives/editor,
352         then nano, vim and vi, and aborts if none of these exists.
353     added helper for pgsql handler.
354     rdiff handler now does not require 'label'
355     changes to mysql and svn handlers' vservers support
356         these handlers now check if the source vserver is running
357     added 'ignores' for mysql handler. (thanks Daniel.Bonniot@inria.fr)
358
359 version 0.7 -- July 26 2005
360     added ninjahelper: a dialog based wizard for creating backupninja configs.
361     considerably improved and changed the log file output.
362     you can now disable actions with .disabled (this is new preferred method).
363     added makecd handler and example.makecd for backing up to cd/dvd (thanks stef).
364     fixed bug when specifying multiple 'when' options.
365
366 version 0.6 -- June 16 2005
367     ldap handler has new options: backup method to use (ldapsearch or
368         slapcat), restart, passwordfile and binddn. Default backup method
369         is set to ldapsearch as this is safer
370     ******************************************************************
371     NOTE: to get the previous default behavior with the ldap handler,
372     you must set "method = slapcat". The new default is ldapsearch.
373     ******************************************************************
374     implemented fix so that the main script will echo fatal errors rather
375         than being silent about them, this means an error message every hour
376         if there is a major configuration problem (not a handler problem)
377     added vserver support to main script and to the handlers: mysql, svn, sys, rdiff
378     changes to duplicity handler (thanks intrigeri!):
379         "keep = yes" now disables file cleaning on desthost
380         added "sign" option for backups signing
381         added "encryptkey" option to specify the gpg key to use
382         split config into [source], [gpg] and [dest] sections
383         added "nicelevel" option
384         added "testconnect" option
385         added "sshoptions" option (will be passed to ssh/scp)
386         added "bandwidthlimit" option
387     example.dup example config file for duplicity handler
388     added trac (http://trac.edgewall.com/) environment handler (thanks Charles Lepple!)
389     added configfile option to mysql handler
390         the default is /etc/mysql/debian.cnf. with this,
391         sqldump doesn't need dbusername. (hotcopy still does).
392     fixed bug in mysql handler which caused some passwords to not work.
393         (.my.cnf files now have double quotes around password)
394     can now pass options to hwinfo and sfdisk in sys handler.
395
396 version 0.5 -- April 12 2005
397     rdiff handler works when remote sshd has a banner
398     rdiff handler supports local dest
399     logfile is created if it doesn't exist
400     added "when = hourly"
401     added optional 'nicelevel' to rdiff handler
402     fixed bug where actions were not run in numeric order.
403     improved 'when' parsing.
404
405 version 0.4.4 -- March 18 2005
406     results of handlers are now read line by line.
407     changes to rdiff handler: added "options", and "keep" is
408         not necessarily days now (ie, it will pass straight through to
409         rdiff-backup if the keep has a unit on it, otherwise it adds the 'D').
410     added dup handler (still pretty beta)
411     added maildir handler (very specialized handler)
412     added --run option (runs the specified action file)
413     improved sys handler, now uses hwinfo
414     added subversion hotbackup handler, svn.
415     added PATH to cron.d file, which fixes file not found errors.
416
417 version 0.4.2 -- Jan 6 2005
418     fixed bug which caused a report email to be sent even if no actions were run.
419     fixed bug where multiple handler status messages were ignored
420     added status in the subject line of report emails
421
422 version 0.4.1 -- Jan 3 2005
423     added $usecolors and now more conservative about when colors are echoed.
424     fixed major bug, 'when' actually works now.
425     replaced debug function with debug, info, warning, error, fatal.
426     added --now option to force all actions to be performed now.
427
428 version 0.4 -- Dec 26 2004
429     added "when" option, so that all configs can specify when
430         they are to be run.
431     added reportsuccess and reportwarning config options
432     added .sys handler (hardware, packages, partitions).
433
434 version 0.3.4 -- Dec 8 2004
435     fixed numerical variable quoting compatibility with older wc
436     fixed stderr redirect bug
437     some comments in example.rdiff
438
439 version 0.3.3 -- Nov 10 2004
440     '*' (asterisk) works now in rdiff config files
441     works now with gawk as well as mawk
442     many bug fixes to ldap handler
443     paths to helper scripts can be configured in global config
444     does not require /usr/bin/stat
445
446 version 0.3.2 -- Sept 29 2004
447     handler scripts are no longer executable (to comply with debian policy)
448     handler error and warning messages are sent with the notify email
449
450 version 0.3.1 -- Sept 5 2004
451     added ldap handler
452     moved sh support to a handler script
453     add test mode, where no action is taken.
454     added --help
455     force only root can read /etc/backup.d/*
456     fixed missing equals symbols in example.rdiff
457     changed backupninja executable to be /usr/sbin rather than /usr/bin
458
459 version 0.3 -- Oct 20 2004
460     ** IMPORTANT ** all config files are now ini style, not apache style
461     rewrote all scripts in bash for portability
462     added drop-in backupninja lib directory (/usr/share/backupninja)
463     all scripts are now run as root
464
465 version 0.2 -- Oct 14 2004
466     move distribution folder ./cron.d to ./etc/cron.d
467     fixed bug: removed printr of excludes (!)
468     added support for changing the user/group in rdiff sources.
469     added support for .mysql config files.
470
471 version 0.1 -- Oct 8 2004
472     initial release
473