/mandos/trunk

To get this branch, use:
bzr branch http://bzr.recompile.se/loggerhead/mandos/trunk

« back to all changes in this revision

Viewing changes to TODO

  • Committer: Teddy Hogeborn
  • Date: 2015-05-23 20:18:34 UTC
  • mto: This revision was merged to the branch mainline in revision 756.
  • Revision ID: teddy@recompile.se-20150523201834-e89ex4ito93yni8x
mandos: Use multiprocessing module to run checkers.

For a long time, the Mandos server has occasionally logged the message
"ERROR: Child process vanished".  This was never a fatal error, but it
has been annoying and slightly worrying, since a definite cause was
not found.  One potential cause could be the "multiprocessing" and
"subprocess" modules conflicting w.r.t. SIGCHLD.  To avoid this,
change the running of checkers from using subprocess.Popen
asynchronously to instead first create a multiprocessing.Process()
(which is asynchronous) calling a function, and have that function
then call subprocess.call() (which is synchronous).  In this way, the
only thing using any asynchronous subprocesses is the multiprocessing
module.

This makes it necessary to change one small thing in the D-Bus API,
since the subprocesses.call() function does not expose the raw wait(2)
status value.

DBUS-API (CheckerCompleted): Change the second value provided by this
                             D-Bus signal from the raw wait(2) status
                             to the actual terminating signal number.
mandos (subprocess_call_pipe): New function to be called by
                               multiprocessing.Process (starting a
                               separate process).
(Client.last_checker signal): New attribute for signal which
                              terminated last checker.  Like
                              last_checker_status, only not accessible
                              via D-Bus.
(Client.checker_callback): Take new "connection" argument and use it
                           to get returncode; set last_checker_signal.
                           Return False so gobject does not call this
                           callback again.
(Client.start_checker): Start checker using a multiprocessing.Process
                        instead of a subprocess.Popen.
(ClientDBus.checker_callback): Take new "connection" argument.        Call
                               Client.checker_callback early to have
                               it set last_checker_status and
                               last_checker_signal; use those.  Change
                               second value provided to D-Bus signal
                               CheckerCompleted to use
                               last_checker_signal if checker was
                               terminated by signal.
mandos-monitor: Update to reflect DBus API change.
(MandosClientWidget.checker_completed): Take "signal" instead of
                                        "condition" argument.  Use it
                                        accordingly.  Remove dead code
                                        (os.WCOREDUMP case).

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
1
-*- org -*-
2
2
 
3
 
* _attribute_((nonnull))
4
 
 
5
 
* Release critical
6
 
** TODO Change make-run-server to not include --no-dbus
 
3
* GIT
 
4
** General: [[https://www.atlassian.com/git/workflows][Git Workflows]], [[http://gitimmersion.com/][Git Immersion]], [[https://news.ycombinator.com/item?id=7036628][Simple git workflow is simple]]
 
5
** Intro: [[http://www.eyrie.org/~eagle/notes/debian/git.html#combine][Using Git for Debian Packaging]]
 
6
** Use: [[https://honk.sigxcpu.org/piki/projects/git-buildpackage/][git-buildpackage]]
 
7
** Migration
 
8
   tailor?
 
9
   Using bzr-fastimport: [[http://www.fusonic.net/en/blog/2013/03/26/migrating-from-bazaar-to-git/][Migrating from Bazaar to Git]]
 
10
** Unresolved: [[http://jameswestby.net/bzr/builddeb/user_manual/split.html][bzr builddeb split mode]]
 
11
   Maybe: [[http://honk.sigxcpu.org/projects/git-buildpackage/manual-html/gbp.import.html#GBP.IMPORT.UPSTREAM.GIT.NOTARBALL][git-buildpackage - No upstream tarballs]]
 
12
   [[http://www.python.org/dev/peps/pep-0374/][PEP 374 - Choosing a distributed VCS for the Python project]]
 
13
   [[http://www.emacswiki.org/emacs/GitForEmacsDevs][Git For Emacs Devs]]
 
14
 
 
15
* [[http://www.undeadly.org/cgi?action=article&sid=20110530221728][OpenBSD]]
 
16
 
 
17
* Testing
 
18
** python-nemu
 
19
 
 
20
* mandos-applet
7
21
 
8
22
* mandos-client
9
 
** TODO [#B] use scandir(3) instead of readdir(3)
10
 
** TODO [#B] Prefix all debug output with "Mandos plugin " + program_invocation_short_name
11
 
** TODO [#B] Retry a server which has a non-definite reply:
12
 
*** A closed connection during the TLS handshake
13
 
*** A TCP timeout
 
23
** TODO [#A] --dh-params=FILE
14
24
** TODO [#B] Use capabilities instead of seteuid().
15
 
** TODO [#A] Retry --connect forever
 
25
   https://forums.grsecurity.net/viewtopic.php?f=7&t=2522
 
26
** TODO [#B] Use getaddrinfo(hints=AI_NUMERICHOST) instead of inet_pton()
 
27
** TODO [#C] Make start_mandos_communication() take "struct server".
 
28
** TODO [#C] --interfaces=regex,eth*,noregex (bridge-utils-interfaces(5))
16
29
 
17
30
* splashy
18
31
** TODO [#B] use scandir(3) instead of readdir(3)
19
 
** TODO [#B] Prefix all debug output with "Mandos plugin " + program_invocation_short_name
20
32
 
21
 
* usplash
 
33
* usplash (Deprecated)
22
34
** TODO [#A] Make it work again
23
35
** TODO [#B] use scandir(3) instead of readdir(3)
24
 
** TODO [#B] Prefix all debug output with "Mandos plugin " + program_invocation_short_name
25
 
** TODO Use [[info:libc:Argz%20Functions][argz_extract]]
26
36
 
27
37
* askpass-fifo
28
 
** TODO [#B] Prefix all debug output with "Mandos plugin " + program_invocation_short_name
29
 
** TODO [#B] Drop privileges after opening FIFO.
30
38
 
31
39
* password-prompt
32
 
** TODO [#B] Prefix all debug output with "Mandos plugin " + program_invocation_short_name
33
40
** TODO [#B] lock stdin (with flock()?)
34
41
 
35
42
* plymouth
36
 
** TODO Use [[info:libc:Argz%20Functions][argz_extract]]
37
43
 
38
44
* TODO [#B] passdev
39
45
 
40
46
* plugin-runner
41
 
** TODO [#B] use scandir(3) instead of readdir(3)
 
47
** TODO handle printing for errors for plugins
 
48
*** Hook up stderr of plugins, buffer them, and prepend "Mandos Plugin [plugin name]"
42
49
** TODO [#C] use same file name rules as run-parts(8)
43
50
** kernel command line option for debug info
44
 
** TODO [$B] Use openat() and readdir64()
45
 
   http://udrepper.livejournal.com/19395.html
46
51
 
47
52
* mandos (server)
 
53
** TODO [#B] Work around Avahi issue
 
54
   Avahi does not announce link-local addresses if any global
 
55
   addresses exist: http://lists.freedesktop.org/archives/avahi/2010-March/001863.html
 
56
** TODO [#B] --notify-command
 
57
   This would allow the mandos.service to use
 
58
   --notify-command="systemd-notify --pid READY=1"
48
59
** TODO [#B] Log level                                                    :BUGS:
49
 
** TODO Persistent state                                                  :BUGS:
50
 
   /var/lib/mandos/*
51
60
*** TODO /etc/mandos/clients.d/*.conf
52
61
    Watch this directory and add/remove/update clients?
53
62
** TODO [#C] config for TXT record
54
 
** TODO Log level option
55
 
   syslogger.setLevel(logging.WARNING)
56
 
   + SetLogLevel D-Bus call
57
 
** TODO Implement --foreground                                            :BUGS:
58
 
   [[info:standards:Option%20Table][Table of Long Options]]
59
 
** TODO Implement --socket
60
 
   [[info:standards:Option%20Table][Table of Long Options]]
61
 
** TODO Date+time on console log messages                                 :BUGS:
62
 
   Is this the default?
 
63
** TODO Log level dbus option
 
64
   SetLogLevel D-Bus call
63
65
** TODO [#C] DBusServiceObjectUsingSuper
64
66
** TODO [#B] Global enable/disable flag
65
 
** TODO [#B] By-client countdown on secrets given
66
 
** TODO [#B] Fix problem with fsck taking a really long time
67
 
   Whenever a client successfully gets a secret it could get a
68
 
   one-time timeout boost to allow for an fsck-incurred delay
69
 
** TODO [#A] Delay before client receives key
70
 
   This would give an operator opportunity to cancel the request if
71
 
   desired.
72
 
** TODO [#A] Client manual approval mode
73
 
   A client needs manual approval on the server before it gets the
74
 
   secret
75
 
** TODO [#B] Support RFC 3339 time duration syntax
76
 
** More D-Bus methods
77
 
*** NeedsApproval(50, True) -> timeout, default approve
78
 
    Default approval is configurable, but True by default
79
 
    + Approval(True) -> approve sending saved
80
 
    + Approval(False) -> Close client connection immediately
81
 
*** NeedsPassword(50) - Timeout, default disapprove
 
67
** TODO [#B] By-client countdown on number of secrets given
 
68
** D-Bus Client method NeedsPassword(50) - Timeout, default disapprove
82
69
    + SetPass(u"gazonk", True) -> Approval, persistent
83
 
    + Approval(False) -> Close client connection immediately
 
70
    + Approve(False) -> Close client connection immediately
84
71
** TODO [#C] python-parsedatetime
85
 
** TODO [#C] systemd/launchd
86
 
   http://0pointer.de/blog/projects/systemd.html
87
72
** TODO Separate logging logic to own object
88
 
** TODO make clients to a dict!
89
 
** TODO [#A] Limit approved_delay to max gnutls/tls timeout value
 
73
** TODO [#A] Limit approval_delay to max gnutls/tls timeout value
 
74
** TODO [#B] break the wait on approval_delay if connection dies
 
75
** TODO Generate Client.runtime_expansions from client options + extra
 
76
** TODO Allow %%(checker)s as a runtime expansion
 
77
** TODO Use python-tlslite?
 
78
** TODO D-Bus AddClient() method on server object
 
79
** TODO Use org.freedesktop.DBus.Method.NoReply annotation on async methods. :2:
 
80
** TODO Support [[http://dbus.freedesktop.org/doc/dbus-specification.html#standard-interfaces-objectmanager][org.freedesktop.DBus.ObjectManager]] interface on server object :2:
 
81
   Deprecate methods GetAllClients(), GetAllClientsWithProperties()
 
82
   and signals ClientAdded and ClientRemoved.
 
83
** TODO Save state periodically to recover better from hard shutdowns
 
84
** TODO CheckerCompleted method, deprecate CheckedOK
 
85
** TODO Secret Service API?
 
86
   http://standards.freedesktop.org/secret-service/
 
87
** TODO Remove D-Bus interfaces with old domain name                      :2:
 
88
** TODO Remove old string_to_delta format                                    :2:
 
89
** TODO http://0pointer.de/blog/projects/stateless.html
 
90
*** tmpfiles snippet to create /var/lib/mandos with right user+perms
 
91
*** File in /usr/lib/sysusers.d to create user+group "_mandos"
 
92
** TODO Error handling on error parsing config files
 
93
** TODO init.d script error handling
 
94
** TODO D-Bus server properties; address, port, interface, etc.              :2:
 
95
** TODO [#C] In Python 3.3, use shlex.quote() instead of re.escape()
90
96
 
91
97
* mandos.xml
92
 
** [[file:mandos.xml::XXX][Document D-Bus interface]]
93
 
   Remove mention of lack of such interface in BUGS section
94
98
** Add mandos contact info in manual pages
95
99
 
96
 
* TODO [#A] Provide and install /etc/dbus-1/system.d/mandos.conf
97
 
 
98
100
* mandos-ctl
99
101
*** Handle "no D-Bus server" and/or "no Mandos server found" better
100
102
*** [#B] --dump option
101
 
** TODO Support RFC 3339 time duration syntax
 
103
** TODO Remove old string_to_delta format                                    :2:
102
104
 
103
105
* TODO mandos-dispatch
104
106
  Listens for specified D-Bus signals and spawns shell commands with
105
107
  arguments.
106
108
 
107
109
* mandos-monitor
108
 
** TODO help should be toggable
 
110
** TODO help should be toggleable
109
111
** Urwid client data displayer
110
112
   Better view of client data in the listing
111
113
*** Properties popup
112
 
** Nicer crashes. Stack traces Messes up shell.
113
 
*** Print a nice "We are sorry" message, save stack trace to log.
 
114
** Print a nice "We are sorry" message, save stack trace to log.
 
115
** Rename module "gobject" to "GObject".
114
116
 
115
117
* mandos-keygen
116
 
** TODO Loop until passwords match when run interactively
117
118
** TODO "--secfile" option
118
119
   Using the "secfile" option instead of "secret"
119
120
** TODO [#B] "--test" option
120
121
   For testing decryption before rebooting.
121
122
 
122
 
* Makefile
123
 
** TODO Add "--Xlinker --as-needed"
124
 
   http://udrepper.livejournal.com/19395.html
125
 
** TODO [#C] Implement DEB_BUILD_OPTIONS
126
 
   http://www.debian.org/doc/debian-policy/ch-source.html#s-debianrules-options
127
 
 
128
123
* Package
129
124
** /usr/share/initramfs-tools/hooks/mandos
130
125
*** TODO [#C] use same file name rules as run-parts(8)
134
129
   From XML sources directly?
135
130
 
136
131
* Side Stuff
137
 
** TODO Locate which packet move the other bin/sh when busy box is deactivated
138
 
** TODO contact owner of packet, and ask them to have that shell static in position regardless of busybox
 
132
** TODO Locate which package moves the other bin/sh when busybox is deactivated
 
133
** TODO contact owner of package, and ask them to have that shell static in position regardless of busybox
139
134
 
140
135
 
141
136
#+STARTUP: showall