code.grnet.gr Git - snf-image-creator/blob - image_creator/util.py

   1 # -*- coding: utf-8 -*-
   2 #
   3 # Copyright 2012 GRNET S.A. All rights reserved.
   4 #
   5 # Redistribution and use in source and binary forms, with or
   6 # without modification, are permitted provided that the following
   7 # conditions are met:
   8 #
   9 #   1. Redistributions of source code must retain the above
  10 #      copyright notice, this list of conditions and the following
  11 #      disclaimer.
  12 #
  13 #   2. Redistributions in binary form must reproduce the above
  14 #      copyright notice, this list of conditions and the following
  15 #      disclaimer in the documentation and/or other materials
  16 #      provided with the distribution.
  17 #
  18 # THIS SOFTWARE IS PROVIDED BY GRNET S.A. ``AS IS'' AND ANY EXPRESS
  19 # OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
  20 # WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
  21 # PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL GRNET S.A OR
  22 # CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
  23 # SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
  24 # LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF
  25 # USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED
  26 # AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
  27 # LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN
  28 # ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
  29 # POSSIBILITY OF SUCH DAMAGE.
  30 #
  31 # The views and conclusions contained in the software and
  32 # documentation are those of the authors and should not be
  33 # interpreted as representing official policies, either expressed
  34 # or implied, of GRNET S.A.
  35
  36 """This module provides various helper functions to be used by other parts of
  37 the package.
  38 """
  39
  40 import sh
  41 import hashlib
  42 import time
  43 import os
  44
  45
  46 class FatalError(Exception):
  47     """Fatal Error exception of snf-image-creator"""
  48     pass
  49
  50
  51 def get_command(command):
  52     """Return a file system binary command"""
  53     def find_sbin_command(command, exception):
  54         search_paths = ['/usr/local/sbin', '/usr/sbin', '/sbin']
  55         for fullpath in map(lambda x: "%s/%s" % (x, command), search_paths):
  56             if os.path.exists(fullpath) and os.access(fullpath, os.X_OK):
  57                 return sh.Command(fullpath)
  58         raise exception
  59
  60     try:
  61         return sh.__getattr__(command)
  62     except sh.CommandNotFound as e:
  63         return find_sbin_command(command, e)
  64
  65
  66 def try_fail_repeat(command, *args):
  67     """Execute a command multiple times until it succeeds"""
  68     times = (0.1, 0.5, 1, 2)
  69     i = iter(times)
  70     while True:
  71         try:
  72             command(*args)
  73             return
  74         except sh.ErrorReturnCode:
  75             try:
  76                 wait = i.next()
  77             except StopIteration:
  78                 break
  79             time.sleep(wait)
  80
  81     raise FatalError("Command: `%s %s' failed" % (command, " ".join(args)))
  82
  83
  84 def free_space(dirname):
  85     """Compute the free space in a directory"""
  86     stat = os.statvfs(dirname)
  87     return stat.f_bavail * stat.f_frsize
  88
  89
  90 class MD5:
  91     """Represents MD5 computations"""
  92     def __init__(self, output):
  93         """Create an MD5 instance"""
  94         self.out = output
  95
  96     def compute(self, filename, size):
  97         """Compute the MD5 checksum of a file"""
  98         MB = 2 ** 20
  99         BLOCKSIZE = 4 * MB  # 4MB
 100
 101         prog_size = ((size + MB - 1) // MB)  # in MB
 102         progressbar = self.out.Progress(prog_size, "Calculating md5sum", 'mb')
 103         md5 = hashlib.md5()
 104         with open(filename, "r") as src:
 105             left = size
 106             while left > 0:
 107                 length = min(left, BLOCKSIZE)
 108                 data = src.read(length)
 109                 md5.update(data)
 110                 left -= length
 111                 progressbar.goto((size - left) // MB)
 112
 113         checksum = md5.hexdigest()
 114         progressbar.success(checksum)
 115
 116         return checksum
 117
 118 # vim: set sta sts=4 shiftwidth=4 sw=4 et ai :