/mandos/trunk

To get this branch, use:
bzr branch http://bzr.recompile.se/loggerhead/mandos/trunk

« back to all changes in this revision

Viewing changes to TODO

  • Committer: Teddy Hogeborn
  • Date: 2015-05-23 20:18:34 UTC
  • mto: This revision was merged to the branch mainline in revision 756.
  • Revision ID: teddy@recompile.se-20150523201834-e89ex4ito93yni8x
mandos: Use multiprocessing module to run checkers.

For a long time, the Mandos server has occasionally logged the message
"ERROR: Child process vanished".  This was never a fatal error, but it
has been annoying and slightly worrying, since a definite cause was
not found.  One potential cause could be the "multiprocessing" and
"subprocess" modules conflicting w.r.t. SIGCHLD.  To avoid this,
change the running of checkers from using subprocess.Popen
asynchronously to instead first create a multiprocessing.Process()
(which is asynchronous) calling a function, and have that function
then call subprocess.call() (which is synchronous).  In this way, the
only thing using any asynchronous subprocesses is the multiprocessing
module.

This makes it necessary to change one small thing in the D-Bus API,
since the subprocesses.call() function does not expose the raw wait(2)
status value.

DBUS-API (CheckerCompleted): Change the second value provided by this
                             D-Bus signal from the raw wait(2) status
                             to the actual terminating signal number.
mandos (subprocess_call_pipe): New function to be called by
                               multiprocessing.Process (starting a
                               separate process).
(Client.last_checker signal): New attribute for signal which
                              terminated last checker.  Like
                              last_checker_status, only not accessible
                              via D-Bus.
(Client.checker_callback): Take new "connection" argument and use it
                           to get returncode; set last_checker_signal.
                           Return False so gobject does not call this
                           callback again.
(Client.start_checker): Start checker using a multiprocessing.Process
                        instead of a subprocess.Popen.
(ClientDBus.checker_callback): Take new "connection" argument.        Call
                               Client.checker_callback early to have
                               it set last_checker_status and
                               last_checker_signal; use those.  Change
                               second value provided to D-Bus signal
                               CheckerCompleted to use
                               last_checker_signal if checker was
                               terminated by signal.
mandos-monitor: Update to reflect DBus API change.
(MandosClientWidget.checker_completed): Take "signal" instead of
                                        "condition" argument.  Use it
                                        accordingly.  Remove dead code
                                        (os.WCOREDUMP case).

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
1
-*- org -*-
2
2
 
 
3
* GIT
 
4
** General: [[https://www.atlassian.com/git/workflows][Git Workflows]], [[http://gitimmersion.com/][Git Immersion]], [[https://news.ycombinator.com/item?id=7036628][Simple git workflow is simple]]
 
5
** Intro: [[http://www.eyrie.org/~eagle/notes/debian/git.html#combine][Using Git for Debian Packaging]]
 
6
** Use: [[https://honk.sigxcpu.org/piki/projects/git-buildpackage/][git-buildpackage]]
 
7
** Migration
 
8
   tailor?
 
9
   Using bzr-fastimport: [[http://www.fusonic.net/en/blog/2013/03/26/migrating-from-bazaar-to-git/][Migrating from Bazaar to Git]]
 
10
** Unresolved: [[http://jameswestby.net/bzr/builddeb/user_manual/split.html][bzr builddeb split mode]]
 
11
   Maybe: [[http://honk.sigxcpu.org/projects/git-buildpackage/manual-html/gbp.import.html#GBP.IMPORT.UPSTREAM.GIT.NOTARBALL][git-buildpackage - No upstream tarballs]]
 
12
   [[http://www.python.org/dev/peps/pep-0374/][PEP 374 - Choosing a distributed VCS for the Python project]]
 
13
   [[http://www.emacswiki.org/emacs/GitForEmacsDevs][Git For Emacs Devs]]
 
14
 
 
15
* [[http://www.undeadly.org/cgi?action=article&sid=20110530221728][OpenBSD]]
 
16
 
3
17
* Testing
4
18
** python-nemu
5
19
 
6
20
* mandos-applet
7
21
 
8
22
* mandos-client
9
 
** TODO A --server option which only adds to the server list.
10
 
   (Unlike --connect, which implicitly disables zeroconf.)
 
23
** TODO [#A] --dh-params=FILE
11
24
** TODO [#B] Use capabilities instead of seteuid().
12
25
   https://forums.grsecurity.net/viewtopic.php?f=7&t=2522
13
26
** TODO [#B] Use getaddrinfo(hints=AI_NUMERICHOST) instead of inet_pton()
14
27
** TODO [#C] Make start_mandos_communication() take "struct server".
15
28
** TODO [#C] --interfaces=regex,eth*,noregex (bridge-utils-interfaces(5))
16
 
** TODO [#A] Detect partial writes to stdout and exit with EX_TEMPFAIL
17
29
 
18
30
* splashy
19
31
** TODO [#B] use scandir(3) instead of readdir(3)
20
 
** TODO [#A] Detect partial writes to stdout and exit with EX_TEMPFAIL
21
32
 
22
33
* usplash (Deprecated)
23
 
** TODO [#B] Make it work again
 
34
** TODO [#A] Make it work again
24
35
** TODO [#B] use scandir(3) instead of readdir(3)
25
 
** TODO [#A] Detect partial writes to stdout and exit with EX_TEMPFAIL
26
36
 
27
37
* askpass-fifo
28
 
** TODO [#A] Detect partial writes to stdout and exit with EX_TEMPFAIL
29
38
 
30
39
* password-prompt
31
40
** TODO [#B] lock stdin (with flock()?)
32
 
** TODO [#A] Detect partial writes to stdout and exit with EX_TEMPFAIL
33
41
 
34
42
* plymouth
35
 
** TODO [#A] Detect partial writes to stdout and exit with EX_TEMPFAIL
36
43
 
37
44
* TODO [#B] passdev
38
45
 
41
48
*** Hook up stderr of plugins, buffer them, and prepend "Mandos Plugin [plugin name]"
42
49
** TODO [#C] use same file name rules as run-parts(8)
43
50
** kernel command line option for debug info
44
 
** TODO [#A] Restart plugins which exit with EX_TEMPFAIL
45
51
 
46
52
* mandos (server)
 
53
** TODO [#B] Work around Avahi issue
 
54
   Avahi does not announce link-local addresses if any global
 
55
   addresses exist: http://lists.freedesktop.org/archives/avahi/2010-March/001863.html
47
56
** TODO [#B] --notify-command
48
57
   This would allow the mandos.service to use
49
 
   --notify-command="systemd-notify --pid --ready"
50
 
** TODO [#B] python-systemd
51
 
*** import systemd.daemon; systemd.daemon.notify()
 
58
   --notify-command="systemd-notify --pid READY=1"
52
59
** TODO [#B] Log level                                                    :BUGS:
53
60
*** TODO /etc/mandos/clients.d/*.conf
54
61
    Watch this directory and add/remove/update clients?
63
70
    + Approve(False) -> Close client connection immediately
64
71
** TODO [#C] python-parsedatetime
65
72
** TODO Separate logging logic to own object
66
 
** TODO [#B] Limit approval_delay to max gnutls/tls timeout value
 
73
** TODO [#A] Limit approval_delay to max gnutls/tls timeout value
67
74
** TODO [#B] break the wait on approval_delay if connection dies
68
75
** TODO Generate Client.runtime_expansions from client options + extra
69
76
** TODO Allow %%(checker)s as a runtime expansion
 
77
** TODO Use python-tlslite?
70
78
** TODO D-Bus AddClient() method on server object
71
79
** TODO Use org.freedesktop.DBus.Method.NoReply annotation on async methods. :2:
 
80
** TODO Support [[http://dbus.freedesktop.org/doc/dbus-specification.html#standard-interfaces-objectmanager][org.freedesktop.DBus.ObjectManager]] interface on server object :2:
 
81
   Deprecate methods GetAllClients(), GetAllClientsWithProperties()
 
82
   and signals ClientAdded and ClientRemoved.
72
83
** TODO Save state periodically to recover better from hard shutdowns
73
84
** TODO CheckerCompleted method, deprecate CheckedOK
74
85
** TODO Secret Service API?
75
 
   https://standards.freedesktop.org/secret-service/
 
86
   http://standards.freedesktop.org/secret-service/
76
87
** TODO Remove D-Bus interfaces with old domain name                      :2:
77
 
** TODO Remove old string_to_delta format                                 :2:
 
88
** TODO Remove old string_to_delta format                                    :2:
78
89
** TODO http://0pointer.de/blog/projects/stateless.html
 
90
*** tmpfiles snippet to create /var/lib/mandos with right user+perms
79
91
*** File in /usr/lib/sysusers.d to create user+group "_mandos"
80
92
** TODO Error handling on error parsing config files
81
93
** TODO init.d script error handling
82
 
** TODO D-Bus server properties; address, port, interface, etc.           :2:
83
 
** Python 3                                                               :2:
84
 
*** TODO [#C] In Python 3.3, use shlex.quote() instead of re.escape()
 
94
** TODO D-Bus server properties; address, port, interface, etc.              :2:
 
95
** TODO [#C] In Python 3.3, use shlex.quote() instead of re.escape()
 
96
 
 
97
* mandos.xml
 
98
** Add mandos contact info in manual pages
85
99
 
86
100
* mandos-ctl
87
101
*** Handle "no D-Bus server" and/or "no Mandos server found" better
88
 
** TODO Remove old string_to_delta format                                 :2:
 
102
*** [#B] --dump option
 
103
** TODO Remove old string_to_delta format                                    :2:
89
104
 
90
105
* TODO mandos-dispatch
91
106
  Listens for specified D-Bus signals and spawns shell commands with
92
107
  arguments.
93
108
 
94
109
* mandos-monitor
95
 
** TODO --servicename                                                  :BUGS:
96
110
** TODO help should be toggleable
97
111
** Urwid client data displayer
98
112
   Better view of client data in the listing
99
113
*** Properties popup
100
114
** Print a nice "We are sorry" message, save stack trace to log.
 
115
** Rename module "gobject" to "GObject".
101
116
 
102
117
* mandos-keygen
103
118
** TODO "--secfile" option
110
125
*** TODO [#C] use same file name rules as run-parts(8)
111
126
*** TODO [#C] Do not install in initrd.img if configured not to.
112
127
    Use "/etc/initramfs-tools/hooksconf.d/mandos"?
113
 
** TODO [#C] $(pkg-config --variable=completionsdir bash-completion)
 
128
** TODO [#C] /etc/bash_completion.d/mandos
114
129
   From XML sources directly?
115
130
 
116
131
* Side Stuff
117
132
** TODO Locate which package moves the other bin/sh when busybox is deactivated
118
133
** TODO contact owner of package, and ask them to have that shell static in position regardless of busybox
119
134
 
120
 
* [[http://www.undeadly.org/cgi?action=article&sid=20110530221728][OpenBSD]]
121
 
 
122
 
* TODO Use raw public keys (RFC 7250) for TLS communications              :2:
123
 
** Support for this is planned for GnuTLS version 3.6
124
 
   https://gitlab.com/gnutls/gnutls/issues/26
125
 
** Rationale
126
 
*** The client key is used both for communication and encryption
127
 
    Using raw keys in GnuTLS instead uses separate keys for
128
 
    communication and password decryption.
129
 
*** GnuTLS 3.5.9 has deprecated the OpenPGP functions
130
 
    The functions are still available, but deprecated:
131
 
    https://gitlab.com/gnutls/gnutls/issues/102
132
 
 
133
135
 
134
136
#+STARTUP: showall