/mandos/trunk

To get this branch, use:
bzr branch http://bzr.recompile.se/loggerhead/mandos/trunk

« back to all changes in this revision

Viewing changes to TODO

  • Committer: Teddy Hogeborn
  • Date: 2015-05-23 20:18:34 UTC
  • mto: This revision was merged to the branch mainline in revision 756.
  • Revision ID: teddy@recompile.se-20150523201834-e89ex4ito93yni8x
mandos: Use multiprocessing module to run checkers.

For a long time, the Mandos server has occasionally logged the message
"ERROR: Child process vanished".  This was never a fatal error, but it
has been annoying and slightly worrying, since a definite cause was
not found.  One potential cause could be the "multiprocessing" and
"subprocess" modules conflicting w.r.t. SIGCHLD.  To avoid this,
change the running of checkers from using subprocess.Popen
asynchronously to instead first create a multiprocessing.Process()
(which is asynchronous) calling a function, and have that function
then call subprocess.call() (which is synchronous).  In this way, the
only thing using any asynchronous subprocesses is the multiprocessing
module.

This makes it necessary to change one small thing in the D-Bus API,
since the subprocesses.call() function does not expose the raw wait(2)
status value.

DBUS-API (CheckerCompleted): Change the second value provided by this
                             D-Bus signal from the raw wait(2) status
                             to the actual terminating signal number.
mandos (subprocess_call_pipe): New function to be called by
                               multiprocessing.Process (starting a
                               separate process).
(Client.last_checker signal): New attribute for signal which
                              terminated last checker.  Like
                              last_checker_status, only not accessible
                              via D-Bus.
(Client.checker_callback): Take new "connection" argument and use it
                           to get returncode; set last_checker_signal.
                           Return False so gobject does not call this
                           callback again.
(Client.start_checker): Start checker using a multiprocessing.Process
                        instead of a subprocess.Popen.
(ClientDBus.checker_callback): Take new "connection" argument.        Call
                               Client.checker_callback early to have
                               it set last_checker_status and
                               last_checker_signal; use those.  Change
                               second value provided to D-Bus signal
                               CheckerCompleted to use
                               last_checker_signal if checker was
                               terminated by signal.
mandos-monitor: Update to reflect DBus API change.
(MandosClientWidget.checker_completed): Take "signal" instead of
                                        "condition" argument.  Use it
                                        accordingly.  Remove dead code
                                        (os.WCOREDUMP case).

Show diffs side-by-side

added added

removed removed

Lines of Context:
1
1
-*- org -*-
2
2
 
3
 
* [#A] README file
4
 
 
5
 
* [#A] COPYING file
6
 
  [[file:/usr/share/common-licenses/GPL-3][GPLv3]]
7
 
 
8
 
* Mandos-client
9
 
** [#A] Man page: man8/mandos-client.8mandos
10
 
*** EXIT STATUS
11
 
    Create this section
12
 
*** USAGE
13
 
    Describe the plus sign syntax for passing options from crypttab
14
 
*** EXAMPLES
15
 
    Examples of normal usage, debug usage, debugging single or all
16
 
    plugins, examples of crypttab lines with plus syntax, etc.
17
 
*** FILES
18
 
    Describe plugin directory
19
 
*** DIAGNOSTICS
20
 
    Create this section
21
 
*** SECURITY
22
 
    Create this section
23
 
*** NOTES
24
 
    Create this section (if needed)
25
 
*** BUGS
26
 
    Create this section
27
 
*** SEE ALSO
28
 
    Refer to mandos(8), password-request(8mandos), and
29
 
    password-prompt(8mandos)
30
 
** [#B] Fix %d format strings to use [[https://secure.wikimedia.org/wikipedia/en/wiki/Inttypes.h][<inttypes.h>]]
31
 
** use strsep instead of strtok?
32
 
** use config file in addition to arguments
33
 
** pass things in environment, like device name, etc
34
 
** Fallback
35
 
   As a fallback, if no plugins can be found or if all of them failed,
36
 
   run getpass(3) itself.
37
 
 
38
 
* Password-request
39
 
** [#A] Man page: man8/password-request.8mandos
40
 
*** DESCRIPTION
41
 
    Move options to new OPTIONS section.
42
 
    State that this command is not meant to be invoked directly, but
43
 
    is run as a plugin from mandos-client(8) and only run in the
44
 
    initrd environment, not the real system.
45
 
*** EXIT STATUS
46
 
    Create this section
47
 
*** EXAMPLES
48
 
    Examples of normal usage, debug usage, debugging by connecting
49
 
    directly, etc.
50
 
*** FILES
51
 
    Describe the key files and the key ring files.  Also note that
52
 
    they should normally have been automatically created.
53
 
*** DIAGNOSTICS
54
 
    Create this section
55
 
*** SECURITY
56
 
    Create this section
57
 
*** NOTES
58
 
    Create this section (if needed)
59
 
*** BUGS
60
 
    Create this section
61
 
*** SEE ALSO
62
 
    Refer to mandos-client(8mandos) and password-prompt(8mandos)
63
 
** [#B] Fix %d format strings to use [[https://secure.wikimedia.org/wikipedia/en/wiki/Inttypes.h][<inttypes.h>]]
64
 
** start_mandos_communication: loop around gnutls_handshake
65
 
   [[info:gnutls.info.gz:Core%20functions][gnutls_handshake]]
66
 
** IPv4 support
67
 
** use strsep instead of strtok?
68
 
** Do not depend on GPG key rings on disk
69
 
   This would mean creating new GPG key rings with GPGME by importing
70
 
   the key files from scratch on every program start.
71
 
 
72
 
* Password-prompt
73
 
** [#A] Man page: man8/password-prompt.8mandos
74
 
*** DESCRIPTION
75
 
    Move options to new OPTIONS section.
76
 
*** EXIT STATUS
77
 
    Create this section
78
 
*** EXAMPLES
79
 
    Examples of normal usage, debug usage, with a prefix, etc.
80
 
*** DIAGNOSTICS
81
 
    Create this section
82
 
*** SECURITY
83
 
    Create this section
84
 
    Not much to do here but it is noteworthy to state the danger of
85
 
    not having a fallback option.
86
 
*** NOTES
87
 
    Note that this is more or less a simple getpass(3) wrapper, even
88
 
    though actual use of getpass(3) is not guaranteed.
89
 
*** BUGS
90
 
    Create this section
91
 
*** SEE ALSO
92
 
    Refer to mandos-client(8mandos) and password-request(8mandos)
93
 
** Use getpass(3)?
94
 
   Man page says "obsolete", but [[info:libc:getpass][GNU LibC Manual: Reading Passwords]]
95
 
   does not.  See also [[http://sources.redhat.com/ml/libc-alpha/2003-05/msg00251.html][Marcus Brinkmann: Re: getpass obsolete?]] and
96
 
   [[http://article.gmane.org/gmane.comp.lib.glibc.alpha/4906][Petter Reinholdtsen: Re: getpass obsolete?]], and especially also
97
 
   [[http://www.steve.org.uk/Reference/Unix/faq_4.html#SEC48][Unix Programming FAQ 3.1 How can I make my program not echo input?]]
98
 
 
99
 
* Mandos (server)
100
 
** [#A] Command man page: man8/mandos.8
101
 
*** DESCRIPTION
102
 
    Move options to new OPTIONS section
103
 
*** EXIT STATUS
104
 
    Create this section
105
 
*** EXAMPLES
106
 
    Create this section
107
 
*** FILES
108
 
    Describe briefly that the server gets global settings from
109
 
    mandos.conf and clients from clients.conf, but refer to their man
110
 
    pages for more details.
111
 
*** DIAGNOSTICS
112
 
    Create this section
113
 
*** SECURITY
114
 
    Create this section
115
 
*** NOTES
116
 
    Create this section (if needed)
117
 
*** BUGS
118
 
    Create this section
119
 
*** SEE ALSO
120
 
    Refer to the client man page
121
 
** [#A] Config file man page: man5/mandos.conf (mandos.conf)
122
 
** [#A] Config file man page: man5/mandos-clients.conf (clients.conf)
123
 
** [#A] /etc/init.d/mandos-server               :teddy:
124
 
** Log level
125
 
** /etc/mandos/clients.d/*.conf
126
 
   Watch this directory and add/remove/update clients?
127
 
** config for TXT record
128
 
** Run-time communication with server
129
 
   Probably using D-Bus
130
 
   See also [[*Mandos-tools]]
131
 
** Implement --foreground
132
 
   [[info:standards:Option%20Table][Table of Long Options]]
133
 
** Implement --socket
134
 
   [[info:standards:Option%20Table][Table of Long Options]]
135
 
 
136
 
* Mandos-tools/utilities
137
 
  All of this probably using D-Bus
138
 
** List clients
139
 
** Disable client
140
 
** Enable client
141
 
 
142
 
* Installer
143
 
** DONE [#A] Change initrd.img file to not be publically readable
144
 
   /etc/initramfs-tools/conf.d/mandos
145
 
   UMASK=027
146
 
** Update initrd.img after installation
147
 
** [#A] Create mandos user and group for server
148
 
** [#A] Create /var/run/mandos directory with perm and ownership
149
 
 
150
 
* [#A] Package
151
 
** /etc/bash_completion.d/mandos
152
 
** /etc/initramfs-tools/hooks/mandos
153
 
   [[file:/usr/share/doc/initramfs-tools/examples/example_hook][Example initramfs-tools hook script]]
154
 
*** Create GPG key ring files in initrd
155
 
 
156
 
* INSTALL file
157
 
 
158
 
* Web site
159
 
 
160
 
* Mailing list
161
 
 
162
 
* Announce project on news
163
 
  [[news:comp.os.linux.announce]]
 
3
* GIT
 
4
** General: [[https://www.atlassian.com/git/workflows][Git Workflows]], [[http://gitimmersion.com/][Git Immersion]], [[https://news.ycombinator.com/item?id=7036628][Simple git workflow is simple]]
 
5
** Intro: [[http://www.eyrie.org/~eagle/notes/debian/git.html#combine][Using Git for Debian Packaging]]
 
6
** Use: [[https://honk.sigxcpu.org/piki/projects/git-buildpackage/][git-buildpackage]]
 
7
** Migration
 
8
   tailor?
 
9
   Using bzr-fastimport: [[http://www.fusonic.net/en/blog/2013/03/26/migrating-from-bazaar-to-git/][Migrating from Bazaar to Git]]
 
10
** Unresolved: [[http://jameswestby.net/bzr/builddeb/user_manual/split.html][bzr builddeb split mode]]
 
11
   Maybe: [[http://honk.sigxcpu.org/projects/git-buildpackage/manual-html/gbp.import.html#GBP.IMPORT.UPSTREAM.GIT.NOTARBALL][git-buildpackage - No upstream tarballs]]
 
12
   [[http://www.python.org/dev/peps/pep-0374/][PEP 374 - Choosing a distributed VCS for the Python project]]
 
13
   [[http://www.emacswiki.org/emacs/GitForEmacsDevs][Git For Emacs Devs]]
 
14
 
 
15
* [[http://www.undeadly.org/cgi?action=article&sid=20110530221728][OpenBSD]]
 
16
 
 
17
* Testing
 
18
** python-nemu
 
19
 
 
20
* mandos-applet
 
21
 
 
22
* mandos-client
 
23
** TODO [#A] --dh-params=FILE
 
24
** TODO [#B] Use capabilities instead of seteuid().
 
25
   https://forums.grsecurity.net/viewtopic.php?f=7&t=2522
 
26
** TODO [#B] Use getaddrinfo(hints=AI_NUMERICHOST) instead of inet_pton()
 
27
** TODO [#C] Make start_mandos_communication() take "struct server".
 
28
** TODO [#C] --interfaces=regex,eth*,noregex (bridge-utils-interfaces(5))
 
29
 
 
30
* splashy
 
31
** TODO [#B] use scandir(3) instead of readdir(3)
 
32
 
 
33
* usplash (Deprecated)
 
34
** TODO [#A] Make it work again
 
35
** TODO [#B] use scandir(3) instead of readdir(3)
 
36
 
 
37
* askpass-fifo
 
38
 
 
39
* password-prompt
 
40
** TODO [#B] lock stdin (with flock()?)
 
41
 
 
42
* plymouth
 
43
 
 
44
* TODO [#B] passdev
 
45
 
 
46
* plugin-runner
 
47
** TODO handle printing for errors for plugins
 
48
*** Hook up stderr of plugins, buffer them, and prepend "Mandos Plugin [plugin name]"
 
49
** TODO [#C] use same file name rules as run-parts(8)
 
50
** kernel command line option for debug info
 
51
 
 
52
* mandos (server)
 
53
** TODO [#B] Work around Avahi issue
 
54
   Avahi does not announce link-local addresses if any global
 
55
   addresses exist: http://lists.freedesktop.org/archives/avahi/2010-March/001863.html
 
56
** TODO [#B] --notify-command
 
57
   This would allow the mandos.service to use
 
58
   --notify-command="systemd-notify --pid READY=1"
 
59
** TODO [#B] Log level                                                    :BUGS:
 
60
*** TODO /etc/mandos/clients.d/*.conf
 
61
    Watch this directory and add/remove/update clients?
 
62
** TODO [#C] config for TXT record
 
63
** TODO Log level dbus option
 
64
   SetLogLevel D-Bus call
 
65
** TODO [#C] DBusServiceObjectUsingSuper
 
66
** TODO [#B] Global enable/disable flag
 
67
** TODO [#B] By-client countdown on number of secrets given
 
68
** D-Bus Client method NeedsPassword(50) - Timeout, default disapprove
 
69
    + SetPass(u"gazonk", True) -> Approval, persistent
 
70
    + Approve(False) -> Close client connection immediately
 
71
** TODO [#C] python-parsedatetime
 
72
** TODO Separate logging logic to own object
 
73
** TODO [#A] Limit approval_delay to max gnutls/tls timeout value
 
74
** TODO [#B] break the wait on approval_delay if connection dies
 
75
** TODO Generate Client.runtime_expansions from client options + extra
 
76
** TODO Allow %%(checker)s as a runtime expansion
 
77
** TODO Use python-tlslite?
 
78
** TODO D-Bus AddClient() method on server object
 
79
** TODO Use org.freedesktop.DBus.Method.NoReply annotation on async methods. :2:
 
80
** TODO Support [[http://dbus.freedesktop.org/doc/dbus-specification.html#standard-interfaces-objectmanager][org.freedesktop.DBus.ObjectManager]] interface on server object :2:
 
81
   Deprecate methods GetAllClients(), GetAllClientsWithProperties()
 
82
   and signals ClientAdded and ClientRemoved.
 
83
** TODO Save state periodically to recover better from hard shutdowns
 
84
** TODO CheckerCompleted method, deprecate CheckedOK
 
85
** TODO Secret Service API?
 
86
   http://standards.freedesktop.org/secret-service/
 
87
** TODO Remove D-Bus interfaces with old domain name                      :2:
 
88
** TODO Remove old string_to_delta format                                    :2:
 
89
** TODO http://0pointer.de/blog/projects/stateless.html
 
90
*** tmpfiles snippet to create /var/lib/mandos with right user+perms
 
91
*** File in /usr/lib/sysusers.d to create user+group "_mandos"
 
92
** TODO Error handling on error parsing config files
 
93
** TODO init.d script error handling
 
94
** TODO D-Bus server properties; address, port, interface, etc.              :2:
 
95
** TODO [#C] In Python 3.3, use shlex.quote() instead of re.escape()
 
96
 
 
97
* mandos.xml
 
98
** Add mandos contact info in manual pages
 
99
 
 
100
* mandos-ctl
 
101
*** Handle "no D-Bus server" and/or "no Mandos server found" better
 
102
*** [#B] --dump option
 
103
** TODO Remove old string_to_delta format                                    :2:
 
104
 
 
105
* TODO mandos-dispatch
 
106
  Listens for specified D-Bus signals and spawns shell commands with
 
107
  arguments.
 
108
 
 
109
* mandos-monitor
 
110
** TODO help should be toggleable
 
111
** Urwid client data displayer
 
112
   Better view of client data in the listing
 
113
*** Properties popup
 
114
** Print a nice "We are sorry" message, save stack trace to log.
 
115
** Rename module "gobject" to "GObject".
 
116
 
 
117
* mandos-keygen
 
118
** TODO "--secfile" option
 
119
   Using the "secfile" option instead of "secret"
 
120
** TODO [#B] "--test" option
 
121
   For testing decryption before rebooting.
 
122
 
 
123
* Package
 
124
** /usr/share/initramfs-tools/hooks/mandos
 
125
*** TODO [#C] use same file name rules as run-parts(8)
 
126
*** TODO [#C] Do not install in initrd.img if configured not to.
 
127
    Use "/etc/initramfs-tools/hooksconf.d/mandos"?
 
128
** TODO [#C] /etc/bash_completion.d/mandos
 
129
   From XML sources directly?
 
130
 
 
131
* Side Stuff
 
132
** TODO Locate which package moves the other bin/sh when busybox is deactivated
 
133
** TODO contact owner of package, and ask them to have that shell static in position regardless of busybox
164
134
 
165
135
 
166
136
#+STARTUP: showall