Remove hardcoded FLOPPY_DEV in helper

Check the cmdline of the kernel to determine what device to check
for find the rules file

In xen use the helper image in ro mode

Make sure everything works even when the root filesystem in the helper
VM is mounted read-only.

Merge branch 'master' into xen

Conflicts:
snf-image-helper/common.sh
snf-image-host/Makefile.am
snf-image-host/common.sh.in
snf-image-host/create
snf-image-host/defaults

Cleanup Xen code

Make it comply with the rest of the software. Some things are not
ready yet.

Add new XEN_BRIDGE variable.

This can be used to configure the bridge on which the helper's VM
nic will be attached when using XEN.

Remove deprecated network_backend_support check

Change some default values

Change HELPER_SIZE to 600 and HELPER_SOFT_TIMEOUT to 120

Update ChangeLog and configure.ac for ver. 0.7.6

Make the size of the helper VM image configurable

Add a new HELPER_SIZE variable for this purpose. Default size is
hardcoded to 400MB

Fix a bug in DeleteSSHkeys

The code for checking for non-default keys was never called

Mount /dev & /proc in the helper before chrooting

Update ChangeLog and configure.ac for ver. 0.7.5

Make defaults file inherit the ./configure options

Cleanup variables and ./configure options

Remove:
HELPER_CACHE_DIR
HELPER_IMG
HELPER_KERNEL
HELPER_INITRD
  TIMELIMIT
Add:
TIMEOUT

In configure, remove:
--enable-network-backend
--with-helper-img
--with-helper-kernel
--with-helper-initrd

Update ChangeLog and configure.ac for ver. 0.7.4

Mount all local filesystems when deploying images

If the image has /home on a different partition than /, then
we'll need to have it mounted to inject files on a user's home
directory.

Fix a bug in get_partition_to_resize

Fix a typo in a variable name

Update ChangeLog and configure.ac for ver. 0.7.3

Fix multstrap.conf to work with apt2

Update ChangeLog and configure.ac for ver. 0.7.2

In multistrap.conf change repository to apt2

Fix AssignHostname task for arch linux

If both /etc/rc.conf and /etc/hostname are missing, create the latter
to host the hostname.

Treat partitions with id="f" as extended

Partitions with id=0x0F are extended partitions with LBA addressing.

Check for /etc/hostname in AssignHostname task

By default without investigating the distro of the guest VM, check
for the presence of /etc/hostname file. This is the default place
for static host names in systems that use the systemd startup deamon.

Fix helper's error monitoring system

Fix a bug where errors that where not created using log_error where
not registered to the monitoring subsystem.

del c:\windows\panther\unattend.xml after sysprep

Make sure the cached unattend xml file gets deleted after sysprep

Update ChangeLog and configure.ac for ver. 0.7.1

In helper put sysrq shutdown cmd in an inf loop

This is needed because in some cases, the init could exit before the
system shut down causing a KERNEL PANIC.

Add Christos Stavrakakis to the authors list

Make pithcat work with pithosmap:// URLs

Modify pithcat to be able to parse and work with URLs of the form:
`pithosmap://hash/size' which are neeed for archipelagos.

Update ChangeLog and configure.ac for ver. 0.7

Credit psomas@grnet.gr for the helper VM shutdown

Stratos Psomadakis suggested to shutdoen the helper VM using the `o'
Magic SsysRq key

Code cleanup

Make sure local variables are defined as local before they get assigned.
Having variables get defined and assigned in one line like this:

local var=foo

can sometimes cause problems. For example, this line:

local var=$(false)

will return 0 and the script will not fail if set -x is defined.

Make snf-image fail if config_url isn't accessible

Fix a wrong entry in version_pinning.pref

Fix repo url in multistrap.conf

Do not install a local helper package by default

snf-image-update-helper will only install a pkg retrieved from the
apt unless -p option is specified.

Add rule for version pinning for snf-image-helper

Exit if the version check fails

Remove old do_debootstrap function from common.sh

Add new version_consistency_check in configure

This can be used to enable or disable the version check between
snf-image-host and snf-image-helper at the end of the update-helper
script.

Remove caching

Using package caches to create the helper image is dangerous now that
snf-image-helper is automatically retrieved.

Hardcode arch and suit in multistrap.conf

Use squeeze instead of stable

Add apt preferences dir for multistrap

The files hosted in this directory will be added in the
/etc/apt/preferences.d directory of the helper image before multistrap
runs.

Update ChangeLog and configure.ac for ver. 0.6.5

Fix a bug introduced in 9fca5245a2eae67af86719bb0f

AssignHostname task did not search for Unattend.xml in a case
insensitive way.

Update ChangeLog and configure.ac for ver. 0.6.4

Fix a bug introduced in f012a7dd3f0ed634f1a2215936

Update ChangeLog and configure.ac for ver. 0.6.3

Fix a bug in helper's error monitoring system

Make sure that if log_error is executed like this:

log_error "text" "text"

The 2 arguments get merged before being fed to the monitoring system.

Check if the img_properties are decoded correct

In image helper, check if decode-properties.py returned 0 and log
the error if this is not the case.

Fix minor typo in ChangePassword task

Don't overwrite C:\Unattend.xml in the windows

If unattend.xml is present in the windows image, use this one unless
USE_DEFAULT_UNATTEND is specified as an image property.

Fix the error messages in helper

In update-helper remove the tmp image on errors

If an error occurs, the temporary helper image under
/var/lib/snf-image-helper should be removed.

Conflicts:

snf-image-host/snf-image-update-helper.in

Fix a bug in the helper's monitoring system

Fix a bug where the helper will not send a image-helper-error msg
if an error occures when running snf-image-helper main script and
not one of the configuration tasks.

Conflicts:

snf-image-helper/common.sh

Update ChangeLog and configure.ac for ver. 0.6.2

Update ChangeLog and configure.ac for version 0.6.1

Change default error msg in monitoring

Fix an obsolete trap line

It should have been changed in commit 696deeec2b28dacc75e93544835497982df2af50

Fix error and info messages

Seperate error messages from monitoring messages

Do not send through the monitor pipe the error messages. They may
contain internal sensitive information. Create a new report_error
function for sending errors through the monitoring pipe.

Conflicts:
snf-image-host/create
snf-image-host/snf-image-update-helper.in

In ChangePassword task check if the users exist

Check if the users stated in the USERS image property do actually
exist.

Support installing snf-image-helper from apt repos

snf-image-update-helper should check when creating a helper VM if
an snf-image-helper package was installed from an apt repository
through multistrap. If this is the case, snf-image-update-helper
should not complain about not finding the HELPER_PKG.

Use a seperated dir for update-helper cache files

By default this directory is $(LOCALSTATEDIR)/cache/snf-image/helper

Use env. variables to pass options to pithcat

This is done for security reasons. The options may contain sensitive
data like the Pithos DB password and while the program (pithcat) is
running the whole command line is exposed to everyone through ps.

Suppress a reglookup warning

Hundred of warnings like this: `WARN: While quoting value for
'<registry_key>', warning returned: Data could not be interpreted,
quoting raw buffer.' are outputed when reglookup reads the registry
of a Windows 2012 system.

Use socat rather than screen for xm commands

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Don't move the kernel out of the helper VM image

When snf-image-update-helper runned, it moved the kernel and the
initrd file out of the helper VM image. With this patch,
snf-image-update-helper will copy the kernel to the host without
removing it from the image.

Use socat to dump helper messages in case of xen

Helper gets a dummy interface and communication between helper
and host is done via socat STDIO INTERFACE:eth0/vif$helperid.0

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Make use of XenStore to export SUCCESS msg

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Xen support

Support launching helper domain on top of Xen hypervisor under PV mode.

Helper VM becomes hypervisor aware by passing hypervisor=$HYPERVISOR
in the kernel command line and thus acts accordingly (which logging
devices to use, what disk/floppy devices to expect, etc)

We separate all hypervisor specific functions and vars and source them
according to $HYPERVISOR env var.

Due to the fact that multiconsole for PV domains is supported only after
linux kernel 3.2 (Stefano Stabellini tree - branch 3.2-multiconsole-2
git://xenbits.xen.org/people/sstabellini/linux-pvhvm.git) all
output/error report and logging is done via hvc0.

Helper domain is debootstraped with 2 kernels (linux-image-amd64,
linux-image-xen-amd64) and is booted accordingly.

Floppy is not supported in PV so floppy is passed as another disk.

The images created can run on top of xen-hvm and xen-pvm hypervisor.

Change logging to start with HELPER_MONITOR_ in order to parse it when
having only one console.

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Disable fsyncs in helper's VM resize operation

You can disable this behaviour by defining the DO_SYNC image property.

Delete helper img if errors occure during creation

If snf-image-update-helper exits with errors, delete the temporary
image file from /var/lib/snf-image/helper.

Replace debootstrap with multistrap

multistrap is more flexible allows as to define more that one
repository to retrieve packages from.

Fix a bug in snf-image-update-helper

the kernel and init paths computed by snf-image-update-helper script
were incorrect.

Add back the snf_image_activate_helper check

Remove the boot and shutdown process in helper VM

Make snf-image-helper ran as init process when calling the helper
VM. Also make the helper VM shut down quickly by using the shut off
SysRq.

Use UTC when calling date command

Add IMAGE_DEBUG variable

if this is set, then snf-image will run in debug mode.

Drop the `user' password reset rule

Drop the rule that resets the password for user with username `user'
if the USERS image property is missing and the system is detected
to be a Fedora or a Ubuntu Linux system.

Update ChangeLog and configure for version 0.6

Remove enable-network-backend flag from configure

The curl dependency is not optional any more.

Add new config_url os parameter

This url points to a json file that contains the value for other
OS parameters. Using this file we can pass parameters to snf-image
without writting them in Ganeti's config.data. This is
useful, for 2 reasons:
* Privacy: We don't want the password to appear in the Ganeti config
* Speed: Some parameters like IMG_PERSONALITY can be quite large (a few
KB) and since ganeti shares the instance configuration among different
nodes, the overall system will start getting slower if many instances
with IMG_PERSONALITY exist.

Add working import and export scripts

Fix an identation error in common.sh.in

Make sure EnforcePersonality runs last

When a users inject a file in an image that already exists,
we want to make sure that this file is not altered by any other task.
So, the EnforcePersonality task, is the last task that should run
before the image is unmounted.

Update ChangeLog and configure for version 0.5

Update ChangeLog and configure.ac for v0.4.2

Update ChangeLog and configure.ac for v0.4.1

Add support for null image backend type

This backend type can be used if we want snf-image to configure the
VM disk without first copying an image to it. This is useful for
cases were the VM disk is already populated before snf-image runs.

Fix minor typo

In archlinux make use of /etc/hostname if present

Newer arch linux systems use this file to assign a hostname. If the
file is present and not empty, then use it.

Add support for archlinux

 * Fix distro detection code to detect arch linux systems
 * Fix AssighHostname hook to successfully assign the host name on
   arch linux systems

Fix some monitoring messages.

Don't strip stderr lines in image-error msgs

Create a dedicated host monitoring program

This program is used to output info and error messages from the host.

Add stderr-monitor.py for monitoring stderr

This programm will get the stderr file as input and it will create a
json image-error msg

Add new image-info monitoring msg type

snf-image-host can output info messages using the log_info function.

Minor changes in monitoring protocol

Change msg field to messages in monitoring messages with type
image-helper and subtype error or warning. The new field is a list
of strings.