Fix mispeled import cyclades_cli --> cyclades

Update upgrade notes

Merge branch 'feature-logging' into develop

Set ~/.kamaki.log with mode 0600 as default

Refs: #3610

Update Changelog

Upgrade package metadata

- Copyright date
- Upgrade notes and suggestions
- Refer to synnefo.org in README
- classifiers in setup

Merge branch 'feature-store' into develop

Make recursive upload non-default, rearange checks

Alloow recursive upload with -R
Rearange pre-upload checks as shown bellow:
- check first if it is recursive & direcory
- check if object exists or forced to overwrite
- check container limit and used size

Feature #3536

Take into account container used bytes in upload

Before uploading, check if there is enough remaining space on container
remaning space = container limit - container used bytes

Merge branch 'develop' into feature-store

Merge branch 'feature-store' into develop

Adjust documentation to include new upload feats.

Prevent upload if uploads exceed container limit

Feature #3536

Implement a recursive upload

kamaki file upload <directory> <container>[:remote-dir]

where remote-dir either is a dir or does not exist

Feature #3536

Update docs to use the term Synnefo where needed

In some cases, the term 'GRNET development team' was replaced with 'Synnefo' or
'Synnefo development team'

Merge branch 'feature-store' into develop

Add some parameters to storage.list_object

:param limit: (int) The amount of results requested

:param marker: (str) Return containers with name lexicographically
    after marker

:param prefix: (str) Return objects starting with prefix

:param format: (str) reply format can be json or xml (default:json)

:param delimiter: (str) Return objects up to the delimiter

:param path: (str) assume prefix = path and delimiter = /

Bug #3596

Merge branch 'feature-image' into develop

Add some client-side filters to image list

--owner=<uuid> :  print only images with given owner

--name-prefix=<prefix>  :  print only images with name starting with <prefix>
--name-suffix=<suffix>  :  print only images with name starting with <suffix>
--name-like=<part>      :  print only images with name containing <part>

Feature #3513

Filter image listing results by owner

Introduce the --owner parameter to kamaki image list (was: image public)
If given, only images of given owner will be pronted on console. This is a
client side filtering, as oposed to the other filters of the command.

Merge branch 'feature-network' into develop

Set a default network type when creating nets

Default type is MAX_FILTERED

Support #3514

Merge branch 'feature-containerlimit' into develop

Split file-quota semantics for account and contner

kamaki file quota --> only for account
kamaki file quota <container> --> kamaki file containerlimit get [container]

Support #3541

Rename file setquota to file containerlimit set

Also, do not allow user to set account quota

Merge branch 'feature-rename' into develop

Apply uniform descriptions to all client commands

<GRNET name>/<OS name> API <actuall api> commands

e.g.
  Cyclades/Compute API server commands
or
  Pithos+/Storage API commands

Commands file names are named after the API they implement, not the command interface.
It cyclades, astakos, pithos, etc. instead of server, user, file, although the command
names they expose are "server *", "user *", "file *", etc.

Cyclades is a pretty good example: it exposes a set of commands with different prefixes
(server, network, flavor) and they all use the cyclades client.

Fix astakos client functional test

Use 'user.token' instead of 'astakos.token'

Remove quotaholder from kamaki

This affects the cli:
- remove the quotaholder commands set
- remove the commissioning system (automatic command retrieval)

This affevts the clients:
- remove the quotaholder client
- remove the clients commissioning system

Save the ordereddict backport to clients.utils (still useful)

Update documentation and setup

Merge branch 'feature-rename' into develop

Update docs, rename kamaki.cli.commands/*

Documentation updates: reflect the changes in command groups
    astakos --> user, store --> file

File renaming: remove the _cli suffix from modules in kamaki.cli.commands

Feature #3566

Rename store command group to file

Feature #3566

Rename command group astakos to user

The client is still called 'astakos', but the command group is now 'user'

Feature #3566

Add if-etag-match to pithos client upload

Merge branch 'feature-store' into develop

Add option to fail upload if remote file exists

The if-none-match header option with '*' is used in that case.
This is exposed as 'if_not_exist' in PithosClient.upload_object

Feature #3574

Merge branch 'feature-logging' into develop

Update documentation for logger changes

Pametrize log file, make it globaly available

Kamaki logger module is now available to both cli and clients packages
Users may set the log_file option in configuration file
   kamaki config set log_file ...

Support #3441

Merge branch 'develop' into feature-logging

Merge branch 'feature-image' into develop

Return image details as headers, in image register

Feature #3512

Merge branch 'develop' into feature-image

Increase timeout in upload thread canceling

Make download canceling more responsive

This does not make download canceling faster, if anything, it makes it slower
but probably more gracefull for end users. Instead of just waiting the threads
to finish, users now see messages that descibe the attempts made by kamaki to
cancel them. Each cancelation gets a timeout of 0.5 seconds, so that users
will not wait too long (although they might wait more overall)

Bug #3457

Make --public and --sharing to work in upload

Bug #3509

Fix typo in commands.errors (self-->this)

This typo caused undesired behavior when deleting a deleted network

Bug #3547

Merge branch 'feature-threads' into develop

Allow users to set maximum thread limit

This is implemented as a configuration option in cli
Developers may set it as kamaki.clients.Client.MAX_THREADS = <limit>

Adjust documentation acoordingly

Feature #3546

Fix typo in kamaki quick setup guide

WAS: kamaki set token ....
NOW: kamaki config set token ...

Stop create_server from crushing by a faulty image

If the image is missing the (os, users) metadata, the create_server method
used to crush anexpectingly

Add a NL to logs to make them more readable

Merge branch 'feature-store' into develop

Fix typo in using download progress bar

Minimize requeests whn dnlding same block

If a file has multiple same blocks, download one of them and copy it to local
file locations

fixbug 3555: blcks missing if same to other blcks

Create a livetest that catches bug #3555

A boring file is a file with at least two same blocks
Kamaki fails to download more than 1 same blocks, therefore the downloaded
file is corrupted
This test fixes the bug

Merge branch 'develop' into feature-store

Merge branch 'feature-logging' into develop

DISABLE config log options in interactive shell

to avoid kamaki failures due to logging problems

Merge branch 'feature-logging' into develop

Allow config to switch some options on or off

- LOG_TOKEN: whether to log user token in http requests (default: off)
- LOG_DATA: whether to log http body (send or secv - default: off)

config options: log_token=off, log_data=off

Fix typos in logging mechanism

Move http response logging to ResponseManager

Move http request logging to RequestManager

Merge branch 'develop' into feature-logging

Merge branch 'feature-connection' into develop

Adjust docs to recent changes, fix missing config

Missing config: at setup, in the first example (Quick Setup) it was
kamaki set ...
while it should have been
kamaki config set

Wip kamaki.clients.test.py

Unittest ResponseManager

Unittest kamaki.clients.RequestManager

Redesign http connection module

Merge everything to kamaki.clients

Remove multiple hierarchies of connection classes (== abandon support for
    alternative connection methods, e.g. for requests from pypi)

New connection classes are
- RequestManager
- ResponseManager
Semantics:
    RequestManager constructor commits a request without performing it
      but it performs all sanity checks for url, path, method and params
    RequestManager.perform will perform the commited request, if called
    ResponseManager constructor needs a RequestManager instance
    ResponseManager.(various properties)
        request is pooled from a ContextManagerPool (objpool) when needed.
        Results are cached and used as long as the ResponseManager instance
        is alive

Remove KamakiConnection/ResponseErrors, use ClientError wrapers for everything

Remove the connection livetest

TODO: Adjust unittests

Enforce objpool>=0.2, break kamaki, fix it soon

Merge branch 'develop' into feature-connection

Remove testing code

Remove invalid header values in image register

Merge branch 'develop' of https://code.grnet.gr/git/kamaki into develop

Merge branch 'feature-separate-image-commands' into develop

Cover image-compute command group in documentation

Create an image compute cmd group, make it work

- image compute group contains all Compute Image API commands, as oposed to
Plankton API commands.

- definition of a kamaki cli command slightly changed: a command with
subcommands can have a class without being a command itself, as long as it has
subcommands! Thus a subcommand group can be defined with docs and everything.

- image public is not image list (docs not updated yet)

Fix store_upload typo in progress argument

Merge branch 'feature-logging' into develop

Add a ClientError logger to kamaki.clients

Move logger operations to a seperate file/pkg

Disable token logging (synnefo bug #3480)

Add logging to file functionality (#3441)

Create get_logger, add_logger methods in clients

Merge branch 'feature-tests' into develop

Apply a simple naming convention for unit tests

Naming convention:

Actual functionality:

In package kamaki.clients.pkg there is class C containing a method M
Test it in a package kamaki.clients.pkg.test, with a class C + a method test_M
Command line run:
    python ${kamaki}/kamaki/clients/pkg/test.py C M
or
    python ${kamaki}/kamaki/clients/test.py C M

In package kamaki.clients there is a module mod containing a method M
Test it in a package kamaki.clients.mod, with a class Mod + a method test_M
Command line run:
    python ${kamaki}/kamaki/clients/mod/test.py Mod M
or
    python ${kamaki}/kamaki/clients/test.py Mod M

Merge branch 'develop' into feature-tests

Document unittest mechanism, dependency changes

New dependency changes: progress is required, mock is optional
Changes are also documented

Ensure uniform runtime args in cli (feature #3456)

Add redudant -c argument to mean --config (global)

Re-allow empty paths to clients.Client.request

Fix typo in shell intro (bug #3444)

Merge branch 'feature-tests' into develop

Unittest full kamaki.clients.Client

Remove unused method set_default_headers

Unittest kamaki.clients.Client.set_param

Unittest kamaki.clients.Client.set_header