Allow users to specify tmp dir for large files
[snf-image-creator] / image_creator / util.py
1 # Copyright 2012 GRNET S.A. All rights reserved.
2 #
3 # Redistribution and use in source and binary forms, with or
4 # without modification, are permitted provided that the following
5 # conditions are met:
6 #
7 #   1. Redistributions of source code must retain the above
8 #      copyright notice, this list of conditions and the following
9 #      disclaimer.
10 #
11 #   2. Redistributions in binary form must reproduce the above
12 #      copyright notice, this list of conditions and the following
13 #      disclaimer in the documentation and/or other materials
14 #      provided with the distribution.
15 #
16 # THIS SOFTWARE IS PROVIDED BY GRNET S.A. ``AS IS'' AND ANY EXPRESS
17 # OR IMPLIED WARRANTIES, INCLUDING, BUT NOT LIMITED TO, THE IMPLIED
18 # WARRANTIES OF MERCHANTABILITY AND FITNESS FOR A PARTICULAR
19 # PURPOSE ARE DISCLAIMED. IN NO EVENT SHALL GRNET S.A OR
20 # CONTRIBUTORS BE LIABLE FOR ANY DIRECT, INDIRECT, INCIDENTAL,
21 # SPECIAL, EXEMPLARY, OR CONSEQUENTIAL DAMAGES (INCLUDING, BUT NOT
22 # LIMITED TO, PROCUREMENT OF SUBSTITUTE GOODS OR SERVICES; LOSS OF
23 # USE, DATA, OR PROFITS; OR BUSINESS INTERRUPTION) HOWEVER CAUSED
24 # AND ON ANY THEORY OF LIABILITY, WHETHER IN CONTRACT, STRICT
25 # LIABILITY, OR TORT (INCLUDING NEGLIGENCE OR OTHERWISE) ARISING IN
26 # ANY WAY OUT OF THE USE OF THIS SOFTWARE, EVEN IF ADVISED OF THE
27 # POSSIBILITY OF SUCH DAMAGE.
28 #
29 # The views and conclusions contained in the software and
30 # documentation are those of the authors and should not be
31 # interpreted as representing official policies, either expressed
32 # or implied, of GRNET S.A.
33
34 import sys
35 import sh
36 import hashlib
37 import time
38 import os
39
40
41 class FatalError(Exception):
42     pass
43
44
45 def get_command(command):
46     def find_sbin_command(command, exception):
47         search_paths = ['/usr/local/sbin', '/usr/sbin', '/sbin']
48         for fullpath in map(lambda x: "%s/%s" % (x, command), search_paths):
49             if os.path.exists(fullpath) and os.access(fullpath, os.X_OK):
50                 return sh.Command(fullpath)
51         raise exception
52
53     try:
54         return sh.__getattr__(command)
55     except sh.CommadNotFount as e:
56         return find_sbin_command(command, e)
57
58
59 def try_fail_repeat(command, *args):
60
61     times = (0.1, 0.5, 1, 2)
62     i = iter(times)
63     while True:
64         try:
65             command(*args)
66             return
67         except sh.ErrorReturnCode:
68             try:
69                 wait = i.next()
70             except StopIteration:
71                 break
72             time.sleep(wait)
73
74     raise FatalError("Command: `%s %s' failed" % (command, " ".join(args)))
75
76
77 def free_space(dirname):
78     stat = os.statvfs(dirname)
79     return stat.f_bavail * stat.f_frsize
80
81
82 class MD5:
83     def __init__(self, output):
84         self.out = output
85
86     def compute(self, filename, size):
87         MB = 2 ** 20
88         BLOCKSIZE = 4 * MB  # 4MB
89
90         prog_size = ((size + MB - 1) // MB)  # in MB
91         progressbar = self.out.Progress(prog_size, "Calculating md5sum", 'mb')
92         md5 = hashlib.md5()
93         with open(filename, "r") as src:
94             left = size
95             while left > 0:
96                 length = min(left, BLOCKSIZE)
97                 data = src.read(length)
98                 md5.update(data)
99                 left -= length
100                 progressbar.goto((size - left) // MB)
101
102         checksum = md5.hexdigest()
103         progressbar.success(checksum)
104
105         return checksum
106
107 # vim: set sta sts=4 shiftwidth=4 sw=4 et ai :