s/queue._GetJobInfoUnlocked/job.GetInfo/
[ganeti-local] / NEWS
diff --git a/NEWS b/NEWS
index 6f004db..7e91508 100644 (file)
--- a/NEWS
+++ b/NEWS
 News
 ====
 
+Version 2.2.0
+-------------
+
+- Added tool (``move-instance``) and infrastructure to move instances
+  between separate clusters (see :doc:`separate documentation
+  <move-instance>` and :doc:`design document <design-2.2>`)
+- Added per-request RPC timeout
+- RAPI now requires a Content-Type header for requests with a body (e.g.
+  ``PUT`` or ``POST``) which must be set to ``application/json`` (see
+  RFC2616 (HTTP/1.1), section 7.2.1)
+- ``ganeti-watcher`` attempts to restart ``ganeti-rapi`` if RAPI is not
+  reachable
+- Implemented initial support for running Ganeti daemons as separate
+  users, see configure-time flags ``--with-user-prefix`` and
+  ``--with-group-prefix`` (only ``ganeti-rapi`` is supported at this
+  time)
+- Instances can be removed after export (``gnt-backup export
+  --remove-instance``)
+- Self-signed certificates generated by Ganeti now use a 2048 bit RSA
+  key (instead of 1024 bit)
+- Added new cluster configuration file for cluster domain secret
+- Import/export now use SSL instead of SSH
+- Added support for showing estimated time when exporting an instance,
+  see the ``ganeti-os-interface(7)`` manpage and look for
+  ``EXP_SIZE_FD``
+
+
+Version 2.1.3
+-------------
+
+*(Released Thu, 3 Jun 2010)*
+
+A medium sized development cycle. Some new features, and some
+fixes/small improvements/cleanups.
+
+Significant features
+~~~~~~~~~~~~~~~~~~~~
+
+The node deamon now tries to mlock itself into memory, unless the
+``--no-mlock`` flag is passed. It also doesn't fail if it can't write
+its logs, and falls back to console logging. This allows emergency
+features such as ``gnt-node powercycle`` to work even in the event of a
+broken node disk (tested offlining the disk hosting the node's
+filesystem and dropping its memory caches; don't try this at home)
+
+KVM: add vhost-net acceleration support. It can be tested with a new
+enough version of the kernel and of qemu-kvm.
+
+KVM: Add instance chrooting feature. If you use privilege dropping for
+your VMs you can also now force them to chroot to an empty directory,
+before starting the emulated guest.
+
+KVM: Add maximum migration bandwith and maximum downtime tweaking
+support (requires a new-enough version of qemu-kvm).
+
+Cluster verify will now warn if the master node doesn't have the master
+ip configured on it.
+
+Add a new (incompatible) instance creation request format to RAPI which
+supports all parameters (previously only a subset was supported, and it
+wasn't possible to extend the old format to accomodate all the new
+features. The old format is still supported, and a client can check for
+this feature, before using it, by checking for its presence in the
+``features`` RAPI resource.
+
+Now with ancient latin support. Try it passing the ``--roman`` option to
+``gnt-instance info``, ``gnt-cluster info`` or ``gnt-node list``
+(requires the python-roman module to be installed, in order to work).
+
+Other changes
+~~~~~~~~~~~~~
+
+As usual many internal code refactorings, documentation updates, and
+such. Among others:
+
+  - Lots of improvements and cleanups to the experimental Remote API
+    (RAPI) client library.
+  - A new unit test suite for the core daemon libraries.
+  - A fix to creating missing directories makes sure the umask is not
+    applied anymore. This enforces the same directory permissions
+    everywhere.
+  - Better handling terminating daemons with ctrl+c (used when running
+    them in debugging mode).
+  - Fix a race condition in live migrating a KVM instance, when stat()
+    on the old proc status file returned EINVAL, which is an unexpected
+    value.
+  - Fixed manpage checking with newer man and utf-8 charachters. But now
+    you need the en_US.UTF-8 locale enabled to build Ganeti from git.
+
+
+Version 2.1.2.1
+---------------
+
+*(Released Fri, 7 May 2010)*
+
+Fix a bug which prevented untagged KVM instances from starting.
+
+
+Version 2.1.2
+-------------
+
+*(Released Fri, 7 May 2010)*
+
+Another release with a long development cycle, during which many
+different features were added.
+
+Significant features
+~~~~~~~~~~~~~~~~~~~~
+
+The KVM hypervisor now can run the individual instances as non-root, to
+reduce the impact of a VM being hijacked due to bugs in the
+hypervisor. It is possible to run all instances as a single (non-root)
+user, to manually specify a user for each instance, or to dynamically
+allocate a user out of a cluster-wide pool to each instance, with the
+guarantee that no two instances will run under the same user ID on any
+given node.
+
+An experimental RAPI client library, that can be used standalone
+(without the other Ganeti libraries), is provided in the source tree as
+``lib/rapi/client.py``. Note this client might change its interface in
+the future, as we iterate on its capabilities.
+
+A new command, ``gnt-cluster renew-crypto`` has been added to easily
+replace the cluster's certificates and crypto keys. This might help in
+case they have been compromised, or have simply expired.
+
+A new disk option for instance creation has been added that allows one
+to "adopt" currently existing logical volumes, with data
+preservation. This should allow easier migration to Ganeti from
+unmanaged (or managed via other software) instances.
+
+Another disk improvement is the possibility to convert between redundant
+(DRBD) and plain (LVM) disk configuration for an instance. This should
+allow better scalability (starting with one node and growing the
+cluster, or shrinking a two-node cluster to one node).
+
+A new feature that could help with automated node failovers has been
+implemented: if a node sees itself as offline (by querying the master
+candidates), it will try to shutdown (hard) all instances and any active
+DRBD devices. This reduces the risk of duplicate instances if an
+external script automatically failovers the instances on such nodes. To
+enable this, the cluster parameter ``maintain_node_health`` should be
+enabled; in the future this option (per the name) will enable other
+automatic maintenance features.
+
+Instance export/import now will reuse the original instance
+specifications for all parameters; that means exporting an instance,
+deleting it and the importing it back should give an almost identical
+instance. Note that the default import behaviour has changed from
+before, where it created only one NIC; now it recreates the original
+number of NICs.
+
+Cluster verify has added a few new checks: SSL certificates validity,
+/etc/hosts consistency across the cluster, etc.
+
+Other changes
+~~~~~~~~~~~~~
+
+As usual, many internal changes were done, documentation fixes,
+etc. Among others:
+
+- Fixed cluster initialization with disabled cluster storage (regression
+  introduced in 2.1.1)
+- File-based storage supports growing the disks
+- Fixed behaviour of node role changes
+- Fixed cluster verify for some corner cases, plus a general rewrite of
+  cluster verify to allow future extension with more checks
+- Fixed log spamming by watcher and node daemon (regression introduced
+  in 2.1.1)
+- Fixed possible validation issues when changing the list of enabled
+  hypervisors
+- Fixed cleanup of /etc/hosts during node removal
+- Fixed RAPI response for invalid methods
+- Fixed bug with hashed passwords in ``ganeti-rapi`` daemon
+- Multiple small improvements to the KVM hypervisor (VNC usage, booting
+  from ide disks, etc.)
+- Allow OS changes without re-installation (to record a changed OS
+  outside of Ganeti, or to allow OS renames)
+- Allow instance creation without OS installation (useful for example if
+  the OS will be installed manually, or restored from a backup not in
+  Ganeti format)
+- Implemented option to make cluster ``copyfile`` use the replication
+  network
+- Added list of enabled hypervisors to ssconf (possibly useful for
+  external scripts)
+- Added a new tool (``tools/cfgupgrade12``) that allows upgrading from
+  1.2 clusters
+- A partial form of node re-IP is possible via node readd, which now
+  allows changed node primary IP
+- Command line utilities now show an informational message if the job is
+  waiting for a lock
+- The logs of the master daemon now show the PID/UID/GID of the
+  connected client
+
 
 Version 2.1.1
 -------------
 
+*(Released Fri, 12 Mar 2010)*
+
 During the 2.1.0 long release candidate cycle, a lot of improvements and
 changes have accumulated with were released later as 2.1.1.
 
@@ -119,6 +315,8 @@ New features
 Version 2.1.0
 -------------
 
+*(Released Tue, 2 Mar 2010)*
+
 Ganeti 2.1 brings many improvements with it. Major changes:
 
 - Added infrastructure to ease automated disk repairs
@@ -218,6 +416,8 @@ Details
 Version 2.0.6
 -------------
 
+*(Released Thu, 4 Feb 2010)*
+
 - Fix cleaner behaviour on nodes not in a cluster (Debian bug 568105)
 - Fix a string formatting bug
 - Improve safety of the code in some error paths
@@ -227,6 +427,8 @@ Version 2.0.6
 Version 2.0.5
 -------------
 
+*(Released Thu, 17 Dec 2009)*
+
 - Fix security issue due to missing validation of iallocator names; this
   allows local and remote execution of arbitrary executables
 - Fix failure of gnt-node list during instance removal
@@ -236,6 +438,8 @@ Version 2.0.5
 Version 2.0.4
 -------------
 
+*(Released Wed, 30 Sep 2009)*
+
 - Fixed many wrong messages
 - Fixed a few bugs related to the locking library
 - Fixed MAC checking at instance creation time
@@ -279,6 +483,8 @@ Version 2.0.4
 Version 2.0.3
 -------------
 
+*(Released Fri, 7 Aug 2009)*
+
 - Added ``--ignore-size`` to the ``gnt-instance activate-disks`` command
   to allow using the pre-2.0.2 behaviour in activation, if any existing
   instances have mismatched disk sizes in the configuration
@@ -295,6 +501,8 @@ Version 2.0.3
 Version 2.0.2
 -------------
 
+*(Released Fri, 17 Jul 2009)*
+
 - Added experimental support for stripped logical volumes; this should
   enhance performance but comes with a higher complexity in the block
   device handling; stripping is only enabled when passing
@@ -327,6 +535,8 @@ Version 2.0.2
 Version 2.0.1
 -------------
 
+*(Released Tue, 16 Jun 2009)*
+
 - added ``-H``/``-B`` startup parameters to ``gnt-instance``, which will
   allow re-adding the start in single-user option (regression from 1.2)
 - the watcher writes the instance status to a file, to allow monitoring
@@ -357,12 +567,16 @@ Version 2.0.1
 Version 2.0.0 final
 -------------------
 
+*(Released Wed, 27 May 2009)*
+
 - no changes from rc5
 
 
 Version 2.0 release candidate 5
 -------------------------------
 
+*(Released Wed, 20 May 2009)*
+
 - fix a couple of bugs (validation, argument checks)
 - fix ``gnt-cluster getmaster`` on non-master nodes (regression)
 - some small improvements to RAPI and IAllocator
@@ -372,6 +586,8 @@ Version 2.0 release candidate 5
 Version 2.0 release candidate 4
 -------------------------------
 
+*(Released Mon, 27 Apr 2009)*
+
 - change the OS list to not require locks; this helps with big clusters
 - fix ``gnt-cluster verify`` and ``gnt-cluster verify-disks`` when the
   volume group is broken
@@ -385,6 +601,8 @@ Version 2.0 release candidate 4
 Version 2.0 release candidate 3
 -------------------------------
 
+*(Released Wed, 8 Apr 2009)*
+
 - Change the internal locking model of some ``gnt-node`` commands, in
   order to reduce contention (and blocking of master daemon) when
   batching many creation/reinstall jobs
@@ -397,6 +615,8 @@ Version 2.0 release candidate 3
 Version 2.0 release candidate 2
 -------------------------------
 
+*(Released Fri, 27 Mar 2009)*
+
 - Now the cfgupgrade scripts works and can upgrade 1.2.7 clusters to 2.0
 - Fix watcher startup sequence, improves the behaviour of busy clusters
 - Some other fixes in ``gnt-cluster verify``, ``gnt-instance
@@ -408,6 +628,8 @@ Version 2.0 release candidate 2
 Version 2.0 release candidate 1
 -------------------------------
 
+*(Released Mon, 2 Mar 2009)*
+
 - More documentation updates, now all docs should be more-or-less
   up-to-date
 - A couple of small fixes (mixed hypervisor clusters, offline nodes,
@@ -420,6 +642,8 @@ Version 2.0 release candidate 1
 Version 2.0 beta 2
 ------------------
 
+*(Released Thu, 19 Feb 2009)*
+
 - Xen PVM and KVM have switched the default value for the instance root
   disk to the first partition on the first drive, instead of the whole
   drive; this means that the OS installation scripts must be changed
@@ -436,6 +660,8 @@ Version 2.0 beta 2
 Version 2.0 beta 1
 ------------------
 
+*(Released Mon, 26 Jan 2009)*
+
 - Version 2 is a general rewrite of the code and therefore the
   differences are too many to list, see the design document for 2.0 in
   the ``doc/`` subdirectory for more details
@@ -466,6 +692,8 @@ Version 2.0 beta 1
 Version 1.2.7
 -------------
 
+*(Released Tue, 13 Jan 2009)*
+
 - Change the default reboot type in ``gnt-instance reboot`` to "hard"
 - Reuse the old instance mac address by default on instance import, if
   the instance name is the same.
@@ -491,6 +719,8 @@ Version 1.2.7
 Version 1.2.6
 -------------
 
+*(Released Wed, 24 Sep 2008)*
+
 - new ``--hvm-nic-type`` and ``--hvm-disk-type`` flags to control the
   type of disk exported to fully virtualized instances.
 - provide access to the serial console of HVM instances
@@ -514,6 +744,8 @@ Version 1.2.6
 Version 1.2.5
 -------------
 
+*(Released Tue, 22 Jul 2008)*
+
 - note: the allowed size and number of tags per object were reduced
 - fix a bug in ``gnt-cluster verify`` with inconsistent volume groups
 - fixed twisted 8.x compatibility
@@ -531,6 +763,8 @@ Version 1.2.5
 Version 1.2.4
 -------------
 
+*(Released Fri, 13 Jun 2008)*
+
 - Experimental readonly, REST-based remote API implementation;
   automatically started on master node, TCP port 5080, if enabled by
   ``--enable-rapi`` parameter to configure script.
@@ -574,6 +808,8 @@ Version 1.2.4
 Version 1.2.3
 -------------
 
+*(Released Mon, 18 Feb 2008)*
+
 - more tweaks to the disk activation code (especially helpful for DRBD)
 - change the default ``gnt-instance list`` output format, now there is
   one combined status field (see the manpage for the exact values this
@@ -588,6 +824,8 @@ Version 1.2.3
 Version 1.2.2
 -------------
 
+*(Released Wed, 30 Jan 2008)*
+
 - fix ``gnt-instance modify`` breakage introduced in 1.2.1 with the HVM
   support (issue 23)
 - add command aliases infrastructure and a few aliases
@@ -605,6 +843,8 @@ Version 1.2.2
 Version 1.2.1
 -------------
 
+*(Released Wed, 16 Jan 2008)*
+
 - experimental HVM support, read the install document, section
   "Initializing the cluster"
 - allow for the PVM hypervisor per-instance kernel and initrd paths
@@ -623,6 +863,8 @@ Version 1.2.1
 Version 1.2.0
 -------------
 
+*(Released Tue, 4 Dec 2007)*
+
 - Log the ``xm create`` output to the node daemon log on failure (to
   help diagnosing the error)
 - In debug mode, log all external commands output if failed to the logs
@@ -632,6 +874,8 @@ Version 1.2.0
 Version 1.2b3
 -------------
 
+*(Released Wed, 28 Nov 2007)*
+
 - Another round of updates to the DRBD 8 code to deal with more failures
   in the replace secondary node operation
 - Some more logging of failures in disk operations (lvm, drbd)
@@ -642,6 +886,8 @@ Version 1.2b3
 Version 1.2b2
 -------------
 
+*(Released Tue, 13 Nov 2007)*
+
 - Change configuration file format from Python's Pickle to JSON.
   Upgrading is possible using the cfgupgrade utility.
 - Add support for DRBD 8.0 (new disk template ``drbd``) which allows for