Bump version to 0.12.0

Merge branch 'develop'

Introduce a helper script to analyze tcpdumps

1) # tcpdump -i tap10 -vvv -w tcpdump.pcap to save capture in a tmp file
2) # python analyze_pcap.py tcpdump.pcap to see on-liner logs
3) # python analyze_pcap.py tcpdump.pcap -n 14 to see a packet's details

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Support ra-stateless IPv6 configuration

This means that IPv6 will be auto-configured but DNS info
will be obtained via DHCPv6 requests.

With other words our router advertisements have the "O" flag set
and we add another handler that serves DHCPv6 requests by
passing DNS info.

Use a separate NFQUEUE to mangle the DHCPv6 traffic. Add another
ferm rule to achieve that.

This is done because Windows do not support RFC 6101:

http://tools.ietf.org/search/rfc6106
http://social.technet.microsoft.com/Forums/windowsserver/en-US/5757980a-5983-4efc-a5f3-27687b90fe41/does-win7-or-w2k8-server-support-rfc-6106?forum=ipv6

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Bump version to 0.11.8

Merge branch 'develop'

Allow binding files without IP entry

This is needed for NIC that obtain only IPv6.

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Bump version to 0.11.7

Merge branch 'develop'

Conflicts:
version

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Some pylint fixes

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Support nfqueue of squeeze and wheezy

Support both callback function signatures.

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Bump version to 0.11.6next

Bump version to 0.11.6

Use devflow

* add devflow.conf
* add base version file

Use devflow

* add devflow.conf
* add base version file

Revert "Change nameservers in nfdhcpd.conf"

This reverts commit be1030abdbce3fb12eb9682c7260b55c31786fa2.

All IPv4 and IPv6 examples should use the documentation/test
ranges, see
https://tools.ietf.org/html/rfc5737 and
https://tools.ietf.org/html/rfc3849.

Conflicts:
nfdhcpd.conf

Signed-off-by: Vangelis Koukis <vkoukis@grnet.gr>

One socket per client and few logging fixes

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

process_pending(num) depending on nfqueue

dhcp - process_pending(5000)
rs - process_pending(10)
ns - process_pending(10)

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Minor changes in logging and process_pending(10)

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Add handler for SIGUSR1 to show current state

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Add logrotate file

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Change RotatingFileHAndler to WatchedFileHandler

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Change id before becoming a daemon

This will create a logfile with proper permitions and the RotatingFileHandler
will not produce any error when bytes exceed maxBytes.

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Only set executable name with python-setproctitle

Cannot set individual values for arguments using python-setproctitle.
See https://code.google.com/p/py-setproctitle/issues/detail?id=23&can=1.

Change process title to simplify 'ps' display

Use python-setproctitle to change the process title
of the running daemon. Make it appear as a native executable
to simplify administration.

Fix a bug related to capng_update()

We need to update CAP_NET_RAW, CAP_NET_ADMIN separetly.

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Nice logging

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Fix two minor typos in debug messages

Fix bug that causes nfdhcpd to freeze

nfdhcpd opens a socket during init. socket.send() blocks in case
SO_SNDBUF is full. This might happen when packages are pushed to
buffer but never consumed (e.g. VM is shuting down).

To fix this we use non-blocking send with MSG_DONTWAIT and catch
the error when the resource is not available.

In order to empty the socket buffer we close the socket and re-open it.
To this end we need CAP_NET_RAW capability otherwise operation
(socket.socket()) is not permitted.

Add various logging messages (during client creation, opening a
socket, etc.)

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Fix two more logs

Fix bug in log msg

Improve log msgs

Add umask inside daemon context

Add try-except in DaemonContext.open()

It catches locking exceptions.

Signed-off-by: Dimitris Aragriorgs <dimara@grnet.gr>

Fix previous commit concerning pidfile

Signed-off-by: Dimitris Aragriorgs <dimara@grnet.gr>

Catch IPy exceptions for invalid networks/subnets

Signed-off-by: Stratos Psomadakis <psomas@grnet.gr>

Remove stale pid lock file

Signed-off-by: Dimitris Aragriorgs <dimara@grnet.gr>

In case of make_ll64 fails return

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Add try: except: in places of possible exceptions

pkt.lladdr
ns.lladdr
sendp

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Refactor nfdhcpd to support get_physindev()

If get_physindev is supported in nfqueue then the clients are indexed
by their tap ifindex. If not then clients are indexed by their macs.

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Add nice debug messages for nfdhcpd clients

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Change ferm

Mangle packets comming from tap+ and prv+ devices

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Reapply option for serving domain

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Change nfdhcpd.ferm to support bridged clients

Mangle packets comming from all interfaces and not only from taps

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Change nameservers in nfdhcpd.conf

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Refactor nfdhcp

Get all info from binding file. Do not parse routing tables. Keep
track of clients depending on their mac. Support clients connected
on bridges. Insteed of patching NFQUEUE add new slot in bindings
that shows the physical device the incomming request originates (tap).

Signed-off-by: Dimitris Aragiorgis <dimara@grnet.gr>

Changed pidfile location in configfile by vkoukis

Small typo introduced on df3e8face1cf

Option for serving domain from nfdhcpd to clients

    On some occasions the clients do not send an fqdn as hostname,
    so another way to send a domain is needed.

    For that, a new optional config directive is introduced, called
    "domain", as a way to hardcode the domain we serve.

    If this directive is not defined, the traditional
    'find domain through hostname' technique is used.

mac2eui64: exit on an invalid IPv6 prefix

Handle pidfile properly, redirect stderr in daemon

Handle pidfile creation properly, as part of daemonization process.
Parse config file and setup logging before daemonization.
Redirect stderr to logfile upon daemonization, otherwise numerous
unexpected exceptions get lost.

Enable logging of unhandled exceptions

Use the traceback module to log unhandled exceptions to the logfile when
running as a daemon.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Do not send periodic RAs on IPv6-less interfaces

Ignore interfaces with no IPv6 subnets on the respective routing tables and log
a debug message.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Ignore requests on unknown interfaces

We ignore requests on interfaces we don't have any information about.
Furthermore, we set a verdict of ACCEPT on these packets and let the kernel
handle them.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Ignore link-local IPv6 routing table entries

If we have a client on the "main" routing table, then we must ignore all IPv6
link-local subnet declarations that appear in this routing table, possibly
"masking out" the intended network route.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Small fixes to kvm-vif-bridge

Update kvm-vif-bridge to use mac2eui64 and also fix default nfdhcpd paths.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Add simple mac2eui64 utility

Add a small utility to generate EUI-64 addresses from MAC-48 + IPv6 prefix.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Fix error handling during binding file parsing

In case something went wrong during parse_binding_file, return None instead
of an obsolete tuple.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Clean up resources upon exit

Wrap the main loop in a try..finally statement, calling our cleanup handler to
free all obtained resources.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Handle the AF_PACKET socket instead of using scapy

Implement our own sendp() method, which has the following benefits:

 * Keep a single socket and re-use it for all outgoing packets
 * Speed up send operations by 2x
 * Get rid of CAP_NET_RAW as we setup the socket during initialization

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Also keep CAP_NET_ADMIN for nfqueue verdicts

This is needed for nfqueue to work properly. Without this, the kernel
never acknowledges the verdicts we set, the queue fills up and the
kernel drops packets. Worst of all, this happens completely silently.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Fix nasty typo in parse_routing_table

It was meant to be re.group and not re.group*s* all along.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Disable pylint warning for inotify handler methods

The name form for these methods is mandated by pyinotify itself,
so there's nothing we can do about it.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Add pylintrc

Blatantly copy ganeti's pylintrc as a base for our own.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Rename nfdhcp.ferm to nfdhcpd.ferm

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Major code refactoring

Refactor code to meet pylint's recommendations

* Pass format string arguments as such in logging functions
* Move parse_binding_file and parse_routing_table to top-level functions
* Clean-up imports
* Update docstrings

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Fix typo (vaildate -> validate)

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Code refactoring to remove overlong lines

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Improve error handling

Catch and handle specific exception families where possible and provide
additional information.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Merge previous changes

Conflicts:
nfdhcpd: merge

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Implement IPv6 RDNSS

Add support for ICMPv6 RDNSS (RFC 5006) to advertise DNS servers over ICMPv6
router advertisements.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

DHCP: use nameservers from config

Use the DNS servers from the config file for DHCP replies.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Disable sending periodic RAs when IPv6 is disabled

Disabling IPv6 from the configuration file causes the server to not respond to
NS and RS, however it still tried to send out periodic RAs (which was a noop).
We explicitly set the timeout of select() to None to avoid this, when IPv6 is
disabled.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Add configurationf file validation

Add a specification of the configuration file and runtime validation, using
configobj's validate.Validator and custom checks for the nameserver lists.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Add configuration file support

Add configuration file parsing using python-configobj. All command line options
except -d and -f have been moved to the configuration file.

A sample configuration file with all accepted options has been added as well.

Warning: validation and type casting is still missing.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Open the logfile after changing uid and set umask

Set the process' umask in daemon.DaemonContext to 0022 (default was
0).

Open the logfile after dropping privileges, so that it is created with
proper perimissions (this also ensures that log rotation will work).

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Refactor the main loop code and increase RA period

Increase RA period to 300s by default

Refactor the main loop to check only once for timeout expiration. This
fixes spurious RA emission because we forgot to properly reset the
start timer.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Use a separate thread for periodic RAs

Periodic RAs can take a _long_ time with many interfaces. The bottleneck
seems to lie in bind() send send() with AF_PACKET sockets. So, we spawn
a separate thread to be able to handle requests in the mean time.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Gracefully handle ICMPv6 NS w/o SrcLLAddr option

Neighbour solicitations sent during interface configuration do not
include a Source Link-Layer Address option. We ignore them as we
shouldn't (and can't) reply anyway.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Warn on NFQUEUE exception

Warn if anything goes wrong during select()

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Whitespace cleanup

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Gracefully handle dead interfaces on periodic RA

Remove any interfaces that are not there during periodic RA emission.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Rename nfdhcp.py to nfdhcpd

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Add sample ferm rules

Add rules for the ferm firewall management framework.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Properly calculate the new timeout for select()

The elapsed time did not take into account the time needed to actually
send the RAs (which currently with scapy is long enough).

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Added periodic RA functionality

The daemon now sends out ICMPv6 RAs periodically (every 30s)
to all configured interfaces.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Add sample kvm-vif-bridge for use with ganeti

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Proxy NDP support

Proxy all ICMPv6 Neighbor Solicitations on behalf of the connected
clients.

Signed-off-by: root <apollon@noc.grnet.gr>

ICMPv6 RA support

The daemon now listens for router solicitations on a dedicated NFQUEUE
and responds with the appropriate router adverisement as needed.

TODO: implement periodic RAs

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Namespace changes to facilitate DHCP/RA merging

Changes required to merge ICMPv6 RA functionality.

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>

Initial commit: nfdhcp.py

Promiscuous DHCP with NFQUEUE support

Signed-off-by: Apollon Oikonomopoulos <apollon@noc.grnet.gr>