Add support for dumping filesystem state for debugging purposes.
[bluesky.git] / nfs3 / rpc.c
1 /* Blue Sky: File Systems in the Cloud
2  *
3  * Copyright (C) 2009  The Regents of the University of California
4  * Written by Michael Vrable <mvrable@cs.ucsd.edu>
5  *
6  * TODO: Licensing
7  */
8
9 /* RPC handling: registration, marshalling and unmarshalling of messages.  For
10  * now this uses the standard Sun RPC mechanisms in the standard C library.
11  * Later, it might be changed to use something better.  Much of this code was
12  * generated with rpcgen from the XDR specifications, but has been hand-edited
13  * slightly. */
14
15 #include "mount_prot.h"
16 #include "nfs3_prot.h"
17 #include <stdio.h>
18 #include <stdlib.h>
19 #include <rpc/pmap_clnt.h>
20 #include <string.h>
21 #include <memory.h>
22 #include <sys/socket.h>
23 #include <netinet/in.h>
24 #include <netinet/ip.h>
25
26 #include "bluesky.h"
27 extern BlueSkyFS *fs;
28
29 /* TCP port number to use for NFS protocol.  (Should be 2049.) */
30 #define NFS_SERVICE_PORT 2051
31
32 /* Maximum size of a single RPC message that we will accept (8 MB). */
33 #define MAX_RPC_MSGSIZE (8 << 20)
34
35 static void
36 mount_program_3(struct svc_req *rqstp, register SVCXPRT *transp)
37 {
38     union {
39         dirpath mountproc3_mnt_3_arg;
40         dirpath mountproc3_umnt_3_arg;
41     } argument;
42     char *result;
43     xdrproc_t _xdr_argument, _xdr_result;
44     char *(*local)(char *, struct svc_req *);
45
46     switch (rqstp->rq_proc) {
47     case MOUNTPROC3_NULL:
48         _xdr_argument = (xdrproc_t) xdr_void;
49         _xdr_result = (xdrproc_t) xdr_void;
50         local = (char *(*)(char *, struct svc_req *)) mountproc3_null_3_svc;
51         break;
52
53     case MOUNTPROC3_MNT:
54         _xdr_argument = (xdrproc_t) xdr_dirpath;
55         _xdr_result = (xdrproc_t) xdr_mountres3;
56         local = (char *(*)(char *, struct svc_req *)) mountproc3_mnt_3_svc;
57         break;
58
59     case MOUNTPROC3_DUMP:
60         _xdr_argument = (xdrproc_t) xdr_void;
61         _xdr_result = (xdrproc_t) xdr_mountlist;
62         local = (char *(*)(char *, struct svc_req *)) mountproc3_dump_3_svc;
63         break;
64
65     case MOUNTPROC3_UMNT:
66         _xdr_argument = (xdrproc_t) xdr_dirpath;
67         _xdr_result = (xdrproc_t) xdr_void;
68         local = (char *(*)(char *, struct svc_req *)) mountproc3_umnt_3_svc;
69         break;
70
71     case MOUNTPROC3_UMNTALL:
72         _xdr_argument = (xdrproc_t) xdr_void;
73         _xdr_result = (xdrproc_t) xdr_void;
74         local = (char *(*)(char *, struct svc_req *)) mountproc3_umntall_3_svc;
75         break;
76
77     case MOUNTPROC3_EXPORT:
78         _xdr_argument = (xdrproc_t) xdr_void;
79         _xdr_result = (xdrproc_t) xdr_exports;
80         local = (char *(*)(char *, struct svc_req *)) mountproc3_export_3_svc;
81         break;
82
83     default:
84         svcerr_noproc (transp);
85         return;
86     }
87     memset ((char *)&argument, 0, sizeof (argument));
88     if (!svc_getargs (transp, (xdrproc_t) _xdr_argument, (caddr_t) &argument)) {
89         svcerr_decode (transp);
90         return;
91     }
92     result = (*local)((char *)&argument, rqstp);
93     if (result != NULL && !svc_sendreply(transp, (xdrproc_t) _xdr_result, result)) {
94         svcerr_systemerr (transp);
95     }
96     if (!svc_freeargs (transp, (xdrproc_t) _xdr_argument, (caddr_t) &argument)) {
97         fprintf (stderr, "%s", "unable to free arguments");
98         exit (1);
99     }
100     return;
101 }
102
103 struct rpc_reply {
104     uint32_t xid;
105     uint32_t type;
106     uint32_t stat;
107     uint32_t verf_flavor;
108     uint32_t verf_len;
109     uint32_t accept_stat;
110 };
111
112 static void async_rpc_write(RPCConnection *rpc,
113                             const char *buf, gsize len);
114
115 struct rpc_fail_reply {
116     uint32_t xid;
117     uint32_t type;
118     uint32_t stat;
119     uint32_t verf_flavor;
120     uint32_t verf_len;
121     uint32_t accept_stat;
122 };
123
124 /* Routines for XDR-encoding to a growable string. */
125 static bool_t xdr_string_putlong(XDR *xdrs, const long *lp)
126 {
127     GString *str = (GString *)xdrs->x_private;
128     uint32_t data = htonl(*lp);
129     g_string_set_size(str, str->len + 4);
130     memcpy(str->str + str->len - 4, &data, 4);
131     return TRUE;
132 }
133
134 static bool_t xdr_string_putbytes(XDR *xdrs, const char *addr, u_int len)
135 {
136     GString *str = (GString *)xdrs->x_private;
137     g_string_set_size(str, str->len + len);
138     memcpy(str->str + str->len - len, addr, len);
139     return TRUE;
140 }
141
142 static u_int xdr_string_getpos(const XDR *xdrs)
143 {
144     GString *str = (GString *)xdrs->x_private;
145     return str->len;
146 }
147
148 static bool_t xdr_string_putint32(XDR *xdrs, const int32_t *ip)
149 {
150     GString *str = (GString *)xdrs->x_private;
151     uint32_t data = htonl(*ip);
152     g_string_set_size(str, str->len + 4);
153     memcpy(str->str + str->len - 4, &data, 4);
154     return TRUE;
155 }
156
157 static int32_t *xdr_string_inline(XDR *xdrs, u_int len)
158 {
159     GString *str = (GString *)xdrs->x_private;
160     g_string_set_size(str, str->len + len);
161     return (int32_t *)(str->str + str->len - len);
162 }
163
164 static void xdr_string_destroy(XDR *xdrs)
165 {
166 }
167
168 static struct xdr_ops xdr_string_ops = {
169     .x_putlong = xdr_string_putlong,
170     .x_putbytes = xdr_string_putbytes,
171     .x_getpostn = xdr_string_getpos,
172     .x_putint32 = xdr_string_putint32,
173     .x_inline = xdr_string_inline,
174     .x_destroy = xdr_string_destroy,
175 };
176
177 static void xdr_string_create(XDR *xdrs, GString *string, enum xdr_op op)
178 {
179     xdrs->x_op = op;
180     xdrs->x_ops = &xdr_string_ops;
181     xdrs->x_private = (char *)string;
182     xdrs->x_base = NULL;
183     xdrs->x_handy = 0;
184 }
185
186 static void
187 async_rpc_send_failure(RPCRequest *req, enum accept_stat stat)
188 {
189     struct rpc_fail_reply header;
190
191     header.xid = htonl(req->xid);
192     header.type = htonl(1);     /* REPLY */
193     header.stat = htonl(MSG_ACCEPTED);
194     header.verf_flavor = 0;
195     header.verf_len = 0;
196     header.accept_stat = htonl(stat);
197
198     uint32_t fragment = htonl(sizeof(header) | 0x80000000);
199     async_rpc_write(req->connection, (const char *)&fragment, sizeof(fragment));
200     async_rpc_write(req->connection, (const char *)&header, sizeof(header));
201     g_io_channel_flush(req->connection->channel, NULL);
202
203     if (req->args != NULL) {
204         char buf[4];
205         XDR xdr;
206         xdrmem_create(&xdr, buf, sizeof(buf), XDR_FREE);
207         if (!req->xdr_args_free(&xdr, req->args)) {
208             fprintf(stderr, "unable to free arguments");
209         }
210     }
211
212     if (req->raw_args != NULL)
213         g_string_free(req->raw_args, TRUE);
214
215     g_free(req);
216 }
217
218 void
219 async_rpc_send_reply(RPCRequest *req, void *result)
220 {
221     GString *str = g_string_new("");
222     XDR xdr_out;
223     xdr_string_create(&xdr_out, str, XDR_ENCODE);
224     if (!req->xdr_result(&xdr_out, result)) {
225         async_rpc_send_failure(req, SYSTEM_ERR);
226         g_string_free(str, TRUE);
227         return;
228     }
229
230     struct rpc_reply header;
231     header.xid = htonl(req->xid);
232     header.type = htonl(1);     /* REPLY */
233     header.stat = htonl(MSG_ACCEPTED);
234     header.verf_flavor = 0;
235     header.verf_len = 0;
236     header.accept_stat = 0;
237
238     gsize msg_size = str->len;
239     uint32_t fragment = htonl((msg_size + sizeof(header)) | 0x80000000);
240     async_rpc_write(req->connection, (const char *)&fragment, sizeof(fragment));
241     async_rpc_write(req->connection, (const char *)&header, sizeof(header));
242     async_rpc_write(req->connection, str->str, str->len);
243     g_io_channel_flush(req->connection->channel, NULL);
244
245     /* Clean up. */
246     g_string_free(str, TRUE);
247
248     if (req->args != NULL) {
249         char buf[4];
250         XDR xdr;
251         xdrmem_create(&xdr, buf, sizeof(buf), XDR_FREE);
252         if (!req->xdr_args_free(&xdr, req->args)) {
253             fprintf(stderr, "unable to free arguments");
254         }
255     }
256
257     if (req->raw_args != NULL)
258         g_string_free(req->raw_args, TRUE);
259
260     g_free(req);
261 }
262
263 static void
264 nfs_program_3(RPCRequest *req)
265 {
266     RPCConnection *connection = req->connection;
267     uint32_t xid = req->xid;
268     const char *msg_buf = req->raw_args->str + req->raw_args_header_bytes;
269     size_t msg_len = req->raw_args->len - req->raw_args_header_bytes;
270
271     union argtype {
272         nfs_fh3 nfsproc3_getattr_3_arg;
273         setattr3args nfsproc3_setattr_3_arg;
274         diropargs3 nfsproc3_lookup_3_arg;
275         access3args nfsproc3_access_3_arg;
276         nfs_fh3 nfsproc3_readlink_3_arg;
277         read3args nfsproc3_read_3_arg;
278         write3args nfsproc3_write_3_arg;
279         create3args nfsproc3_create_3_arg;
280         mkdir3args nfsproc3_mkdir_3_arg;
281         symlink3args nfsproc3_symlink_3_arg;
282         mknod3args nfsproc3_mknod_3_arg;
283         diropargs3 nfsproc3_remove_3_arg;
284         diropargs3 nfsproc3_rmdir_3_arg;
285         rename3args nfsproc3_rename_3_arg;
286         link3args nfsproc3_link_3_arg;
287         readdir3args nfsproc3_readdir_3_arg;
288         readdirplus3args nfsproc3_readdirplus_3_arg;
289         nfs_fh3 nfsproc3_fsstat_3_arg;
290         nfs_fh3 nfsproc3_fsinfo_3_arg;
291         nfs_fh3 nfsproc3_pathconf_3_arg;
292         commit3args nfsproc3_commit_3_arg;
293     };
294     char *result;
295     xdrproc_t _xdr_argument, _xdr_result;
296     char *(*local)(char *, RPCRequest *);
297
298     printf("Dispatched NFS RPC message type %d\n", req->req_proc);
299
300     switch (req->req_proc) {
301     case NFSPROC3_NULL:
302         _xdr_argument = (xdrproc_t) xdr_void;
303         _xdr_result = (xdrproc_t) xdr_void;
304         local = (char *(*)(char *, RPCRequest *)) nfsproc3_null_3_svc;
305         break;
306
307     case NFSPROC3_GETATTR:
308         _xdr_argument = (xdrproc_t) xdr_nfs_fh3;
309         _xdr_result = (xdrproc_t) xdr_getattr3res;
310         local = (char *(*)(char *, RPCRequest *)) nfsproc3_getattr_3_svc;
311         break;
312
313     case NFSPROC3_SETATTR:
314         _xdr_argument = (xdrproc_t) xdr_setattr3args;
315         _xdr_result = (xdrproc_t) xdr_wccstat3;
316         local = (char *(*)(char *, RPCRequest *)) nfsproc3_setattr_3_svc;
317         break;
318
319     case NFSPROC3_LOOKUP:
320         _xdr_argument = (xdrproc_t) xdr_diropargs3;
321         _xdr_result = (xdrproc_t) xdr_lookup3res;
322         local = (char *(*)(char *, RPCRequest *)) nfsproc3_lookup_3_svc;
323         break;
324
325     case NFSPROC3_ACCESS:
326         _xdr_argument = (xdrproc_t) xdr_access3args;
327         _xdr_result = (xdrproc_t) xdr_access3res;
328         local = (char *(*)(char *, RPCRequest *)) nfsproc3_access_3_svc;
329         break;
330
331     case NFSPROC3_READLINK:
332         _xdr_argument = (xdrproc_t) xdr_nfs_fh3;
333         _xdr_result = (xdrproc_t) xdr_readlink3res;
334         local = (char *(*)(char *, RPCRequest *)) nfsproc3_readlink_3_svc;
335         break;
336
337     case NFSPROC3_READ:
338         _xdr_argument = (xdrproc_t) xdr_read3args;
339         _xdr_result = (xdrproc_t) xdr_read3res;
340         local = (char *(*)(char *, RPCRequest *)) nfsproc3_read_3_svc;
341         break;
342
343     case NFSPROC3_WRITE:
344         _xdr_argument = (xdrproc_t) xdr_write3args;
345         _xdr_result = (xdrproc_t) xdr_write3res;
346         local = (char *(*)(char *, RPCRequest *)) nfsproc3_write_3_svc;
347         break;
348
349     case NFSPROC3_CREATE:
350         _xdr_argument = (xdrproc_t) xdr_create3args;
351         _xdr_result = (xdrproc_t) xdr_diropres3;
352         local = (char *(*)(char *, RPCRequest *)) nfsproc3_create_3_svc;
353         break;
354
355     case NFSPROC3_MKDIR:
356         _xdr_argument = (xdrproc_t) xdr_mkdir3args;
357         _xdr_result = (xdrproc_t) xdr_diropres3;
358         local = (char *(*)(char *, RPCRequest *)) nfsproc3_mkdir_3_svc;
359         break;
360
361     case NFSPROC3_SYMLINK:
362         _xdr_argument = (xdrproc_t) xdr_symlink3args;
363         _xdr_result = (xdrproc_t) xdr_diropres3;
364         local = (char *(*)(char *, RPCRequest *)) nfsproc3_symlink_3_svc;
365         break;
366
367     case NFSPROC3_MKNOD:
368         _xdr_argument = (xdrproc_t) xdr_mknod3args;
369         _xdr_result = (xdrproc_t) xdr_diropres3;
370         local = (char *(*)(char *, RPCRequest *)) nfsproc3_mknod_3_svc;
371         break;
372
373     case NFSPROC3_REMOVE:
374         _xdr_argument = (xdrproc_t) xdr_diropargs3;
375         _xdr_result = (xdrproc_t) xdr_wccstat3;
376         local = (char *(*)(char *, RPCRequest *)) nfsproc3_remove_3_svc;
377         break;
378
379     case NFSPROC3_RMDIR:
380         _xdr_argument = (xdrproc_t) xdr_diropargs3;
381         _xdr_result = (xdrproc_t) xdr_wccstat3;
382         local = (char *(*)(char *, RPCRequest *)) nfsproc3_rmdir_3_svc;
383         break;
384
385     case NFSPROC3_RENAME:
386         _xdr_argument = (xdrproc_t) xdr_rename3args;
387         _xdr_result = (xdrproc_t) xdr_rename3res;
388         local = (char *(*)(char *, RPCRequest *)) nfsproc3_rename_3_svc;
389         break;
390
391     case NFSPROC3_LINK:
392         _xdr_argument = (xdrproc_t) xdr_link3args;
393         _xdr_result = (xdrproc_t) xdr_link3res;
394         local = (char *(*)(char *, RPCRequest *)) nfsproc3_link_3_svc;
395         break;
396
397     case NFSPROC3_READDIR:
398         _xdr_argument = (xdrproc_t) xdr_readdir3args;
399         _xdr_result = (xdrproc_t) xdr_readdir3res;
400         local = (char *(*)(char *, RPCRequest *)) nfsproc3_readdir_3_svc;
401         break;
402
403     case NFSPROC3_READDIRPLUS:
404         _xdr_argument = (xdrproc_t) xdr_readdirplus3args;
405         _xdr_result = (xdrproc_t) xdr_readdirplus3res;
406         local = (char *(*)(char *, RPCRequest *)) nfsproc3_readdirplus_3_svc;
407         break;
408
409     case NFSPROC3_FSSTAT:
410         _xdr_argument = (xdrproc_t) xdr_nfs_fh3;
411         _xdr_result = (xdrproc_t) xdr_fsstat3res;
412         local = (char *(*)(char *, RPCRequest *)) nfsproc3_fsstat_3_svc;
413         break;
414
415     case NFSPROC3_FSINFO:
416         _xdr_argument = (xdrproc_t) xdr_nfs_fh3;
417         _xdr_result = (xdrproc_t) xdr_fsinfo3res;
418         local = (char *(*)(char *, RPCRequest *)) nfsproc3_fsinfo_3_svc;
419         break;
420
421     case NFSPROC3_PATHCONF:
422         _xdr_argument = (xdrproc_t) xdr_nfs_fh3;
423         _xdr_result = (xdrproc_t) xdr_pathconf3res;
424         local = (char *(*)(char *, RPCRequest *)) nfsproc3_pathconf_3_svc;
425         break;
426
427     case NFSPROC3_COMMIT:
428         _xdr_argument = (xdrproc_t) xdr_commit3args;
429         _xdr_result = (xdrproc_t) xdr_commit3res;
430         local = (char *(*)(char *, RPCRequest *)) nfsproc3_commit_3_svc;
431         break;
432
433     default:
434         async_rpc_send_failure(req, PROC_UNAVAIL);
435         return;
436     }
437
438     /* Decode incoming message */
439     req->xdr_args_free = _xdr_argument;
440     req->args = g_new0(union argtype, 1);
441     XDR xdr_in;
442     xdrmem_create(&xdr_in, (char *)msg_buf, msg_len, XDR_DECODE);
443     if (!_xdr_argument(&xdr_in, req->args)) {
444         async_rpc_send_failure(req, GARBAGE_ARGS);
445         fprintf(stderr, "RPC decode error!\n");
446         return;
447     }
448
449     /* Perform the call. */
450     req->xdr_result = _xdr_result;
451     result = (*local)((char *)req->args, req);
452
453     bluesky_flushd_invoke(fs);
454     bluesky_debug_dump(fs);
455
456     return;
457 }
458
459 /* Enhanced, asynchronous-friendly RPC layer.  This is a replacement for the
460  * built-in sunrpc parsing and dispatch that will allow for processing multiple
461  * requests at the same time. */
462 static GMainContext *main_context;
463 static GMainLoop *main_loop;
464
465 static async_rpc_init()
466 {
467     main_context = g_main_context_new();
468     main_loop = g_main_loop_new(main_context, FALSE);
469 }
470
471 struct rpc_call_header {
472     uint32_t xid;
473     uint32_t mtype;
474     uint32_t rpcvers;
475     uint32_t prog;
476     uint32_t vers;
477     uint32_t proc;
478 };
479
480 struct rpc_auth {
481     uint32_t flavor;
482     uint32_t len;
483 };
484
485 /* Decode an RPC message and process it.  Returns a boolean indicating whether
486  * the message could be processed; if false, an unrecoverable error occurred
487  * and the transport should be closed. */
488 static gboolean async_rpc_dispatch(RPCConnection *rpc)
489 {
490     int i;
491     GString *msg = rpc->msgbuf;
492     const char *buf = msg->str;
493
494     if (msg->len < sizeof(struct rpc_call_header)) {
495         fprintf(stderr, "Short RPC message: only %zd bytes!\n", msg->len);
496         return FALSE;
497     }
498
499     struct rpc_call_header *header = (struct rpc_call_header *)(msg->str);
500     uint32_t xid = ntohl(header->xid);
501
502     if (ntohl(header->mtype) != 0) {
503         /* Not an RPC call */
504         return FALSE;
505     }
506
507     if (ntohl(header->rpcvers) != 2) {
508         return FALSE;
509     }
510
511     RPCRequest *req = g_new0(RPCRequest, 1);
512     req->connection = rpc;
513     req->xid = xid;
514
515     if (ntohl(header->prog) != NFS_PROGRAM) {
516         async_rpc_send_failure(req, PROG_UNAVAIL);
517         return TRUE;
518     } else if (ntohl(header->vers) != NFS_V3) {
519         /* FIXME: Should be PROG_MISMATCH */
520         async_rpc_send_failure(req, PROG_UNAVAIL);
521         return TRUE;
522     }
523
524     uint32_t proc = ntohl(header->proc);
525
526     /* Next, skip over authentication headers. */
527     buf += sizeof(struct rpc_call_header);
528     for (i = 0; i < 2; i++) {
529         struct rpc_auth *auth = (struct rpc_auth *)buf;
530         if (buf - msg->str + sizeof(struct rpc_auth) > msg->len)
531             return FALSE;
532
533         gsize authsize = ntohl(auth->len) + sizeof(struct rpc_auth);
534         if (authsize > MAX_RPC_MSGSIZE)
535             return FALSE;
536
537         buf += authsize;
538     }
539
540     if (buf - msg->str > msg->len)
541         return FALSE;
542
543     req->raw_args = msg;
544     req->raw_args_header_bytes = buf - msg->str;
545     req->req_proc = ntohl(header->proc);
546     rpc->msgbuf = g_string_new("");
547
548     nfs_program_3(req);
549
550     return TRUE;
551 }
552
553 /* Write the given data to the RPC socket. */
554 static void async_rpc_write(RPCConnection *rpc,
555                             const char *buf, gsize len)
556 {
557     while (len > 0) {
558         gsize written = 0;
559         switch (g_io_channel_write_chars(rpc->channel, buf, len,
560                                          &written, NULL)) {
561         case G_IO_STATUS_ERROR:
562         case G_IO_STATUS_EOF:
563         case G_IO_STATUS_AGAIN:
564             fprintf(stderr, "Error writing to socket!\n");
565             return;
566         case G_IO_STATUS_NORMAL:
567             len -= written;
568             buf += written;
569             break;
570         }
571     }
572
573     // g_io_channel_flush(rpc->channel, NULL);
574 }
575
576 static gboolean async_rpc_do_read(GIOChannel *channel,
577                                   GIOCondition condition,
578                                   gpointer data)
579 {
580     RPCConnection *rpc = (RPCConnection *)data;
581
582     gsize bytes_to_read = 0;    /* Number of bytes to attempt to read. */
583
584     /* If we have not yet read in the fragment header, do that first.  This is
585      * 4 bytes that indicates the number of bytes in the message to follow
586      * (with the high bit set if this is the last fragment making up the
587      * message). */
588     if (rpc->frag_len == 0) {
589         bytes_to_read = 4 - rpc->frag_hdr_bytes;
590     } else {
591         bytes_to_read = rpc->frag_len & 0x7fffffff;
592     }
593
594     if (bytes_to_read > MAX_RPC_MSGSIZE
595         || rpc->msgbuf->len + bytes_to_read > MAX_RPC_MSGSIZE)
596     {
597         fprintf(stderr, "Excessive fragment size for RPC: %zd bytes\n",
598                 bytes_to_read);
599         g_io_channel_shutdown(rpc->channel, TRUE, NULL);
600         return FALSE;
601     }
602
603     gsize bytes_read = 0;
604     g_string_set_size(rpc->msgbuf, rpc->msgbuf->len + bytes_to_read);
605     char *buf = &rpc->msgbuf->str[rpc->msgbuf->len - bytes_to_read];
606     switch (g_io_channel_read_chars(rpc->channel, buf,
607                                     bytes_to_read, &bytes_read, NULL)) {
608     case G_IO_STATUS_NORMAL:
609         break;
610     case G_IO_STATUS_AGAIN:
611         return TRUE;
612     case G_IO_STATUS_EOF:
613         if (bytes_read == bytes_to_read)
614             break;
615         /* else fall through */
616     case G_IO_STATUS_ERROR:
617         fprintf(stderr, "Unexpected error or end of file on RPC stream %d!\n",
618                 g_io_channel_unix_get_fd(rpc->channel));
619         g_io_channel_shutdown(rpc->channel, TRUE, NULL);
620         return FALSE;
621     }
622
623     g_assert(bytes_read >= 0 && bytes_read <= bytes_to_read);
624
625     g_string_set_size(rpc->msgbuf,
626                       rpc->msgbuf->len - (bytes_to_read - bytes_read));
627
628     if (rpc->frag_len == 0) {
629         /* Handle reading in the fragment header.  If we've read the complete
630          * header, store the fragment size. */
631         rpc->frag_hdr_bytes += bytes_read;
632         if (rpc->frag_hdr_bytes == 4) {
633             memcpy((char *)&rpc->frag_len,
634                    &rpc->msgbuf->str[rpc->msgbuf->len - 4], 4);
635             rpc->frag_len = ntohl(rpc->frag_len);
636             g_string_set_size(rpc->msgbuf, rpc->msgbuf->len - 4);
637             rpc->frag_hdr_bytes = 0;
638         }
639     } else {
640         /* We were reading in the fragment body. */
641         rpc->frag_len -= bytes_read;
642
643         if (rpc->frag_len = 0x80000000) {
644             /* We have a complete message since this was the last fragment and
645              * there are no more bytes in it.  Dispatch the message. */
646             if (!async_rpc_dispatch(rpc)) {
647                 fprintf(stderr, "Invalid RPC message, closing channel\n");
648                 g_io_channel_shutdown(rpc->channel, TRUE, NULL);
649                 return FALSE;
650             }
651             rpc->frag_len = 0;
652             g_string_set_size(rpc->msgbuf, 0);
653         }
654     }
655
656     return TRUE;
657 }
658
659 static gboolean async_rpc_do_accept(GIOChannel *channel,
660                                     GIOCondition condition,
661                                     gpointer data)
662 {
663     int fd = g_io_channel_unix_get_fd(channel);
664     struct sockaddr_in addr;
665     socklen_t addrlen = sizeof(addr);
666
667     g_print("Received new connection on fd %d!\n", fd);
668     int nfd = accept(fd, (struct sockaddr *)&addr, &addrlen);
669     if (nfd < 0) {
670         fprintf(stderr, "Error accepting connection: %m\n");
671         return TRUE;
672     }
673
674     RPCConnection *rpc = g_new0(RPCConnection, 1);
675     rpc->channel = g_io_channel_unix_new(nfd);
676     rpc->msgbuf = g_string_new("");
677     g_io_channel_set_encoding(rpc->channel, NULL, NULL);
678     GSource *source = g_io_create_watch(rpc->channel, G_IO_IN);
679     g_source_set_callback(source, (GSourceFunc)async_rpc_do_read,
680                           rpc, NULL);
681     g_source_attach(source, main_context);
682     g_source_unref(source);
683
684     return TRUE;
685 }
686
687 static async_rpc_register_listening(int fd)
688 {
689     GIOChannel *channel = g_io_channel_unix_new(fd);
690     g_io_channel_set_encoding(channel, NULL, NULL);
691     GSource *source = g_io_create_watch(channel, G_IO_IN);
692     g_source_set_callback(source, (GSourceFunc)async_rpc_do_accept,
693                           NULL, NULL);
694     g_source_attach(source, main_context);
695     g_source_unref(source);
696 }
697
698 static gpointer async_rpc_run(gpointer data)
699 {
700     g_print("Starting NFS main loop...\n");
701     g_main_loop_run(main_loop);
702 }
703
704 void register_rpc()
705 {
706     SVCXPRT *transp;
707
708     async_rpc_init();
709
710     /* MOUNT protocol */
711     pmap_unset (MOUNT_PROGRAM, MOUNT_V3);
712
713     transp = svcudp_create(RPC_ANYSOCK);
714     if (transp == NULL) {
715         fprintf(stderr, "%s", "cannot create udp service.");
716         exit(1);
717     }
718     if (!svc_register(transp, MOUNT_PROGRAM, MOUNT_V3, mount_program_3, IPPROTO_UDP)) {
719         fprintf(stderr, "%s", "unable to register (MOUNT_PROGRAM, MOUNT_V3, udp).");
720         exit(1);
721     }
722
723     transp = svctcp_create(RPC_ANYSOCK, 0, 0);
724     if (transp == NULL) {
725         fprintf(stderr, "%s", "cannot create tcp service.");
726         exit(1);
727     }
728     if (!svc_register(transp, MOUNT_PROGRAM, MOUNT_V3, mount_program_3, IPPROTO_TCP)) {
729         fprintf(stderr, "%s", "unable to register (MOUNT_PROGRAM, MOUNT_V3, tcp).");
730         exit(1);
731     }
732
733     /* NFS protocol (version 3) */
734     pmap_unset (NFS_PROGRAM, NFS_V3);
735
736     int fd = socket(AF_INET, SOCK_STREAM, IPPROTO_TCP);
737     if (fd < 0) {
738         fprintf(stderr, "Unable to create NFS TCP socket: %m\n");
739         exit(1);
740     }
741
742     int n = 1;
743     setsockopt(fd, SOL_SOCKET, SO_REUSEADDR, (char *)&n, sizeof(n));
744
745     struct sockaddr_in addr;
746     addr.sin_family = AF_INET;
747     addr.sin_port = htons(NFS_SERVICE_PORT);
748     addr.sin_addr.s_addr = INADDR_ANY;
749     if (bind(fd, (struct sockaddr *)&addr, sizeof(addr)) < 0) {
750         fprintf(stderr, "Unable to bind to NFS TCP address: %m\n");
751         exit(1);
752     }
753
754     if (listen(fd, SOMAXCONN) < 0) {
755         fprintf(stderr, "Unable to listen on NFS TCP socket: %m\n");
756         exit(1);
757     }
758
759     if (!pmap_set(NFS_PROGRAM, NFS_V3, IPPROTO_TCP, NFS_SERVICE_PORT)) {
760         fprintf(stderr, "Could not register NFS RPC service!\n");
761         exit(1);
762     }
763
764     async_rpc_register_listening(fd);
765
766     g_thread_create(async_rpc_run, NULL, TRUE, NULL);
767 }