generator.ml: do not emit unused print_*_list functions
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table below), and
25  * daemon/<somefile>.c to write the implementation.
26  *
27  * After editing this file, run it (./src/generator.ml) to regenerate all the
28  * output files.  Note that if you are using a separate build directory you
29  * must run generator.ml from the _source_ directory.
30  *
31  * IMPORTANT: This script should NOT print any warnings.  If it prints
32  * warnings, you should treat them as errors.
33  *)
34
35 #load "unix.cma";;
36 #load "str.cma";;
37
38 open Printf
39
40 type style = ret * args
41 and ret =
42     (* "RErr" as a return value means an int used as a simple error
43      * indication, ie. 0 or -1.
44      *)
45   | RErr
46
47     (* "RInt" as a return value means an int which is -1 for error
48      * or any value >= 0 on success.  Only use this for smallish
49      * positive ints (0 <= i < 2^30).
50      *)
51   | RInt of string
52
53     (* "RInt64" is the same as RInt, but is guaranteed to be able
54      * to return a full 64 bit value, _except_ that -1 means error
55      * (so -1 cannot be a valid, non-error return value).
56      *)
57   | RInt64 of string
58
59     (* "RBool" is a bool return value which can be true/false or
60      * -1 for error.
61      *)
62   | RBool of string
63
64     (* "RConstString" is a string that refers to a constant value.
65      * The return value must NOT be NULL (since NULL indicates
66      * an error).
67      *
68      * Try to avoid using this.  In particular you cannot use this
69      * for values returned from the daemon, because there is no
70      * thread-safe way to return them in the C API.
71      *)
72   | RConstString of string
73
74     (* "RConstOptString" is an even more broken version of
75      * "RConstString".  The returned string may be NULL and there
76      * is no way to return an error indication.  Avoid using this!
77      *)
78   | RConstOptString of string
79
80     (* "RString" is a returned string.  It must NOT be NULL, since
81      * a NULL return indicates an error.  The caller frees this.
82      *)
83   | RString of string
84
85     (* "RStringList" is a list of strings.  No string in the list
86      * can be NULL.  The caller frees the strings and the array.
87      *)
88   | RStringList of string
89
90     (* "RStruct" is a function which returns a single named structure
91      * or an error indication (in C, a struct, and in other languages
92      * with varying representations, but usually very efficient).  See
93      * after the function list below for the structures.
94      *)
95   | RStruct of string * string          (* name of retval, name of struct *)
96
97     (* "RStructList" is a function which returns either a list/array
98      * of structures (could be zero-length), or an error indication.
99      *)
100   | RStructList of string * string      (* name of retval, name of struct *)
101
102     (* Key-value pairs of untyped strings.  Turns into a hashtable or
103      * dictionary in languages which support it.  DON'T use this as a
104      * general "bucket" for results.  Prefer a stronger typed return
105      * value if one is available, or write a custom struct.  Don't use
106      * this if the list could potentially be very long, since it is
107      * inefficient.  Keys should be unique.  NULLs are not permitted.
108      *)
109   | RHashtable of string
110
111     (* "RBufferOut" is handled almost exactly like RString, but
112      * it allows the string to contain arbitrary 8 bit data including
113      * ASCII NUL.  In the C API this causes an implicit extra parameter
114      * to be added of type <size_t *size_r>.  The extra parameter
115      * returns the actual size of the return buffer in bytes.
116      *
117      * Other programming languages support strings with arbitrary 8 bit
118      * data.
119      *
120      * At the RPC layer we have to use the opaque<> type instead of
121      * string<>.  Returned data is still limited to the max message
122      * size (ie. ~ 2 MB).
123      *)
124   | RBufferOut of string
125
126 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
127
128     (* Note in future we should allow a "variable args" parameter as
129      * the final parameter, to allow commands like
130      *   chmod mode file [file(s)...]
131      * This is not implemented yet, but many commands (such as chmod)
132      * are currently defined with the argument order keeping this future
133      * possibility in mind.
134      *)
135 and argt =
136   | String of string    (* const char *name, cannot be NULL *)
137   | Device of string    (* /dev device name, cannot be NULL *)
138   | Pathname of string  (* file name, cannot be NULL *)
139   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
140   | OptString of string (* const char *name, may be NULL *)
141   | StringList of string(* list of strings (each string cannot be NULL) *)
142   | DeviceList of string(* list of Device names (each cannot be NULL) *)
143   | Bool of string      (* boolean *)
144   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
145     (* These are treated as filenames (simple string parameters) in
146      * the C API and bindings.  But in the RPC protocol, we transfer
147      * the actual file content up to or down from the daemon.
148      * FileIn: local machine -> daemon (in request)
149      * FileOut: daemon -> local machine (in reply)
150      * In guestfish (only), the special name "-" means read from
151      * stdin or write to stdout.
152      *)
153   | FileIn of string
154   | FileOut of string
155 (* Not implemented:
156     (* Opaque buffer which can contain arbitrary 8 bit data.
157      * In the C API, this is expressed as <char *, int> pair.
158      * Most other languages have a string type which can contain
159      * ASCII NUL.  We use whatever type is appropriate for each
160      * language.
161      * Buffers are limited by the total message size.  To transfer
162      * large blocks of data, use FileIn/FileOut parameters instead.
163      * To return an arbitrary buffer, use RBufferOut.
164      *)
165   | BufferIn of string
166 *)
167
168 type flags =
169   | ProtocolLimitWarning  (* display warning about protocol size limits *)
170   | DangerWillRobinson    (* flags particularly dangerous commands *)
171   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
172   | FishAction of string  (* call this function in guestfish *)
173   | NotInFish             (* do not export via guestfish *)
174   | NotInDocs             (* do not add this function to documentation *)
175   | DeprecatedBy of string (* function is deprecated, use .. instead *)
176
177 (* You can supply zero or as many tests as you want per API call.
178  *
179  * Note that the test environment has 3 block devices, of size 500MB,
180  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
181  * a fourth squashfs block device with some known files on it (/dev/sdd).
182  *
183  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
184  * Number of cylinders was 63 for IDE emulated disks with precisely
185  * the same size.  How exactly this is calculated is a mystery.
186  *
187  * The squashfs block device (/dev/sdd) comes from images/test.sqsh.
188  *
189  * To be able to run the tests in a reasonable amount of time,
190  * the virtual machine and block devices are reused between tests.
191  * So don't try testing kill_subprocess :-x
192  *
193  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
194  *
195  * Don't assume anything about the previous contents of the block
196  * devices.  Use 'Init*' to create some initial scenarios.
197  *
198  * You can add a prerequisite clause to any individual test.  This
199  * is a run-time check, which, if it fails, causes the test to be
200  * skipped.  Useful if testing a command which might not work on
201  * all variations of libguestfs builds.  A test that has prerequisite
202  * of 'Always' is run unconditionally.
203  *
204  * In addition, packagers can skip individual tests by setting the
205  * environment variables:     eg:
206  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
207  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
208  *)
209 type tests = (test_init * test_prereq * test) list
210 and test =
211     (* Run the command sequence and just expect nothing to fail. *)
212   | TestRun of seq
213
214     (* Run the command sequence and expect the output of the final
215      * command to be the string.
216      *)
217   | TestOutput of seq * string
218
219     (* Run the command sequence and expect the output of the final
220      * command to be the list of strings.
221      *)
222   | TestOutputList of seq * string list
223
224     (* Run the command sequence and expect the output of the final
225      * command to be the list of block devices (could be either
226      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
227      * character of each string).
228      *)
229   | TestOutputListOfDevices of seq * string list
230
231     (* Run the command sequence and expect the output of the final
232      * command to be the integer.
233      *)
234   | TestOutputInt of seq * int
235
236     (* Run the command sequence and expect the output of the final
237      * command to be <op> <int>, eg. ">=", "1".
238      *)
239   | TestOutputIntOp of seq * string * int
240
241     (* Run the command sequence and expect the output of the final
242      * command to be a true value (!= 0 or != NULL).
243      *)
244   | TestOutputTrue of seq
245
246     (* Run the command sequence and expect the output of the final
247      * command to be a false value (== 0 or == NULL, but not an error).
248      *)
249   | TestOutputFalse of seq
250
251     (* Run the command sequence and expect the output of the final
252      * command to be a list of the given length (but don't care about
253      * content).
254      *)
255   | TestOutputLength of seq * int
256
257     (* Run the command sequence and expect the output of the final
258      * command to be a buffer (RBufferOut), ie. string + size.
259      *)
260   | TestOutputBuffer of seq * string
261
262     (* Run the command sequence and expect the output of the final
263      * command to be a structure.
264      *)
265   | TestOutputStruct of seq * test_field_compare list
266
267     (* Run the command sequence and expect the final command (only)
268      * to fail.
269      *)
270   | TestLastFail of seq
271
272 and test_field_compare =
273   | CompareWithInt of string * int
274   | CompareWithIntOp of string * string * int
275   | CompareWithString of string * string
276   | CompareFieldsIntEq of string * string
277   | CompareFieldsStrEq of string * string
278
279 (* Test prerequisites. *)
280 and test_prereq =
281     (* Test always runs. *)
282   | Always
283
284     (* Test is currently disabled - eg. it fails, or it tests some
285      * unimplemented feature.
286      *)
287   | Disabled
288
289     (* 'string' is some C code (a function body) that should return
290      * true or false.  The test will run if the code returns true.
291      *)
292   | If of string
293
294     (* As for 'If' but the test runs _unless_ the code returns true. *)
295   | Unless of string
296
297 (* Some initial scenarios for testing. *)
298 and test_init =
299     (* Do nothing, block devices could contain random stuff including
300      * LVM PVs, and some filesystems might be mounted.  This is usually
301      * a bad idea.
302      *)
303   | InitNone
304
305     (* Block devices are empty and no filesystems are mounted. *)
306   | InitEmpty
307
308     (* /dev/sda contains a single partition /dev/sda1, with random
309      * content.  /dev/sdb and /dev/sdc may have random content.
310      * No LVM.
311      *)
312   | InitPartition
313
314     (* /dev/sda contains a single partition /dev/sda1, which is formatted
315      * as ext2, empty [except for lost+found] and mounted on /.
316      * /dev/sdb and /dev/sdc may have random content.
317      * No LVM.
318      *)
319   | InitBasicFS
320
321     (* /dev/sda:
322      *   /dev/sda1 (is a PV):
323      *     /dev/VG/LV (size 8MB):
324      *       formatted as ext2, empty [except for lost+found], mounted on /
325      * /dev/sdb and /dev/sdc may have random content.
326      *)
327   | InitBasicFSonLVM
328
329     (* /dev/sdd (the squashfs, see images/ directory in source)
330      * is mounted on /
331      *)
332   | InitSquashFS
333
334 (* Sequence of commands for testing. *)
335 and seq = cmd list
336 and cmd = string list
337
338 (* Note about long descriptions: When referring to another
339  * action, use the format C<guestfs_other> (ie. the full name of
340  * the C function).  This will be replaced as appropriate in other
341  * language bindings.
342  *
343  * Apart from that, long descriptions are just perldoc paragraphs.
344  *)
345
346 (* Generate a random UUID (used in tests). *)
347 let uuidgen () =
348   let chan = Unix.open_process_in "uuidgen" in
349   let uuid = input_line chan in
350   (match Unix.close_process_in chan with
351    | Unix.WEXITED 0 -> ()
352    | Unix.WEXITED _ ->
353        failwith "uuidgen: process exited with non-zero status"
354    | Unix.WSIGNALED _ | Unix.WSTOPPED _ ->
355        failwith "uuidgen: process signalled or stopped by signal"
356   );
357   uuid
358
359 (* These test functions are used in the language binding tests. *)
360
361 let test_all_args = [
362   String "str";
363   OptString "optstr";
364   StringList "strlist";
365   Bool "b";
366   Int "integer";
367   FileIn "filein";
368   FileOut "fileout";
369 ]
370
371 let test_all_rets = [
372   (* except for RErr, which is tested thoroughly elsewhere *)
373   "test0rint",         RInt "valout";
374   "test0rint64",       RInt64 "valout";
375   "test0rbool",        RBool "valout";
376   "test0rconststring", RConstString "valout";
377   "test0rconstoptstring", RConstOptString "valout";
378   "test0rstring",      RString "valout";
379   "test0rstringlist",  RStringList "valout";
380   "test0rstruct",      RStruct ("valout", "lvm_pv");
381   "test0rstructlist",  RStructList ("valout", "lvm_pv");
382   "test0rhashtable",   RHashtable "valout";
383 ]
384
385 let test_functions = [
386   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
387    [],
388    "internal test function - do not use",
389    "\
390 This is an internal test function which is used to test whether
391 the automatically generated bindings can handle every possible
392 parameter type correctly.
393
394 It echos the contents of each parameter to stdout.
395
396 You probably don't want to call this function.");
397 ] @ List.flatten (
398   List.map (
399     fun (name, ret) ->
400       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
401         [],
402         "internal test function - do not use",
403         "\
404 This is an internal test function which is used to test whether
405 the automatically generated bindings can handle every possible
406 return type correctly.
407
408 It converts string C<val> to the return type.
409
410 You probably don't want to call this function.");
411        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
412         [],
413         "internal test function - do not use",
414         "\
415 This is an internal test function which is used to test whether
416 the automatically generated bindings can handle every possible
417 return type correctly.
418
419 This function always returns an error.
420
421 You probably don't want to call this function.")]
422   ) test_all_rets
423 )
424
425 (* non_daemon_functions are any functions which don't get processed
426  * in the daemon, eg. functions for setting and getting local
427  * configuration values.
428  *)
429
430 let non_daemon_functions = test_functions @ [
431   ("launch", (RErr, []), -1, [FishAlias "run"; FishAction "launch"],
432    [],
433    "launch the qemu subprocess",
434    "\
435 Internally libguestfs is implemented by running a virtual machine
436 using L<qemu(1)>.
437
438 You should call this after configuring the handle
439 (eg. adding drives) but before performing any actions.");
440
441   ("wait_ready", (RErr, []), -1, [NotInFish],
442    [],
443    "wait until the qemu subprocess launches",
444    "\
445 Internally libguestfs is implemented by running a virtual machine
446 using L<qemu(1)>.
447
448 You should call this after C<guestfs_launch> to wait for the launch
449 to complete.");
450
451   ("kill_subprocess", (RErr, []), -1, [],
452    [],
453    "kill the qemu subprocess",
454    "\
455 This kills the qemu subprocess.  You should never need to call this.");
456
457   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
458    [],
459    "add an image to examine or modify",
460    "\
461 This function adds a virtual machine disk image C<filename> to the
462 guest.  The first time you call this function, the disk appears as IDE
463 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
464 so on.
465
466 You don't necessarily need to be root when using libguestfs.  However
467 you obviously do need sufficient permissions to access the filename
468 for whatever operations you want to perform (ie. read access if you
469 just want to read the image or write access if you want to modify the
470 image).
471
472 This is equivalent to the qemu parameter
473 C<-drive file=filename,cache=off,if=...>.
474 C<cache=off> is omitted in cases where it is not supported by
475 the underlying filesystem.
476
477 Note that this call checks for the existence of C<filename>.  This
478 stops you from specifying other types of drive which are supported
479 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
480 the general C<guestfs_config> call instead.");
481
482   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
483    [],
484    "add a CD-ROM disk image to examine",
485    "\
486 This function adds a virtual CD-ROM disk image to the guest.
487
488 This is equivalent to the qemu parameter C<-cdrom filename>.
489
490 Note that this call checks for the existence of C<filename>.  This
491 stops you from specifying other types of drive which are supported
492 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
493 the general C<guestfs_config> call instead.");
494
495   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
496    [],
497    "add a drive in snapshot mode (read-only)",
498    "\
499 This adds a drive in snapshot mode, making it effectively
500 read-only.
501
502 Note that writes to the device are allowed, and will be seen for
503 the duration of the guestfs handle, but they are written
504 to a temporary file which is discarded as soon as the guestfs
505 handle is closed.  We don't currently have any method to enable
506 changes to be committed, although qemu can support this.
507
508 This is equivalent to the qemu parameter
509 C<-drive file=filename,snapshot=on,if=...>.
510
511 Note that this call checks for the existence of C<filename>.  This
512 stops you from specifying other types of drive which are supported
513 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
514 the general C<guestfs_config> call instead.");
515
516   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
517    [],
518    "add qemu parameters",
519    "\
520 This can be used to add arbitrary qemu command line parameters
521 of the form C<-param value>.  Actually it's not quite arbitrary - we
522 prevent you from setting some parameters which would interfere with
523 parameters that we use.
524
525 The first character of C<param> string must be a C<-> (dash).
526
527 C<value> can be NULL.");
528
529   ("set_qemu", (RErr, [String "qemu"]), -1, [FishAlias "qemu"],
530    [],
531    "set the qemu binary",
532    "\
533 Set the qemu binary that we will use.
534
535 The default is chosen when the library was compiled by the
536 configure script.
537
538 You can also override this by setting the C<LIBGUESTFS_QEMU>
539 environment variable.
540
541 Setting C<qemu> to C<NULL> restores the default qemu binary.");
542
543   ("get_qemu", (RConstString "qemu", []), -1, [],
544    [InitNone, Always, TestRun (
545       [["get_qemu"]])],
546    "get the qemu binary",
547    "\
548 Return the current qemu binary.
549
550 This is always non-NULL.  If it wasn't set already, then this will
551 return the default qemu binary name.");
552
553   ("set_path", (RErr, [String "searchpath"]), -1, [FishAlias "path"],
554    [],
555    "set the search path",
556    "\
557 Set the path that libguestfs searches for kernel and initrd.img.
558
559 The default is C<$libdir/guestfs> unless overridden by setting
560 C<LIBGUESTFS_PATH> environment variable.
561
562 Setting C<path> to C<NULL> restores the default path.");
563
564   ("get_path", (RConstString "path", []), -1, [],
565    [InitNone, Always, TestRun (
566       [["get_path"]])],
567    "get the search path",
568    "\
569 Return the current search path.
570
571 This is always non-NULL.  If it wasn't set already, then this will
572 return the default path.");
573
574   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
575    [],
576    "add options to kernel command line",
577    "\
578 This function is used to add additional options to the
579 guest kernel command line.
580
581 The default is C<NULL> unless overridden by setting
582 C<LIBGUESTFS_APPEND> environment variable.
583
584 Setting C<append> to C<NULL> means I<no> additional options
585 are passed (libguestfs always adds a few of its own).");
586
587   ("get_append", (RConstOptString "append", []), -1, [],
588    (* This cannot be tested with the current framework.  The
589     * function can return NULL in normal operations, which the
590     * test framework interprets as an error.
591     *)
592    [],
593    "get the additional kernel options",
594    "\
595 Return the additional kernel options which are added to the
596 guest kernel command line.
597
598 If C<NULL> then no options are added.");
599
600   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
601    [],
602    "set autosync mode",
603    "\
604 If C<autosync> is true, this enables autosync.  Libguestfs will make a
605 best effort attempt to run C<guestfs_umount_all> followed by
606 C<guestfs_sync> when the handle is closed
607 (also if the program exits without closing handles).
608
609 This is disabled by default (except in guestfish where it is
610 enabled by default).");
611
612   ("get_autosync", (RBool "autosync", []), -1, [],
613    [InitNone, Always, TestRun (
614       [["get_autosync"]])],
615    "get autosync mode",
616    "\
617 Get the autosync flag.");
618
619   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
620    [],
621    "set verbose mode",
622    "\
623 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
624
625 Verbose messages are disabled unless the environment variable
626 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
627
628   ("get_verbose", (RBool "verbose", []), -1, [],
629    [],
630    "get verbose mode",
631    "\
632 This returns the verbose messages flag.");
633
634   ("is_ready", (RBool "ready", []), -1, [],
635    [InitNone, Always, TestOutputTrue (
636       [["is_ready"]])],
637    "is ready to accept commands",
638    "\
639 This returns true iff this handle is ready to accept commands
640 (in the C<READY> state).
641
642 For more information on states, see L<guestfs(3)>.");
643
644   ("is_config", (RBool "config", []), -1, [],
645    [InitNone, Always, TestOutputFalse (
646       [["is_config"]])],
647    "is in configuration state",
648    "\
649 This returns true iff this handle is being configured
650 (in the C<CONFIG> state).
651
652 For more information on states, see L<guestfs(3)>.");
653
654   ("is_launching", (RBool "launching", []), -1, [],
655    [InitNone, Always, TestOutputFalse (
656       [["is_launching"]])],
657    "is launching subprocess",
658    "\
659 This returns true iff this handle is launching the subprocess
660 (in the C<LAUNCHING> state).
661
662 For more information on states, see L<guestfs(3)>.");
663
664   ("is_busy", (RBool "busy", []), -1, [],
665    [InitNone, Always, TestOutputFalse (
666       [["is_busy"]])],
667    "is busy processing a command",
668    "\
669 This returns true iff this handle is busy processing a command
670 (in the C<BUSY> state).
671
672 For more information on states, see L<guestfs(3)>.");
673
674   ("get_state", (RInt "state", []), -1, [],
675    [],
676    "get the current state",
677    "\
678 This returns the current state as an opaque integer.  This is
679 only useful for printing debug and internal error messages.
680
681 For more information on states, see L<guestfs(3)>.");
682
683   ("set_busy", (RErr, []), -1, [NotInFish],
684    [],
685    "set state to busy",
686    "\
687 This sets the state to C<BUSY>.  This is only used when implementing
688 actions using the low-level API.
689
690 For more information on states, see L<guestfs(3)>.");
691
692   ("set_ready", (RErr, []), -1, [NotInFish],
693    [],
694    "set state to ready",
695    "\
696 This sets the state to C<READY>.  This is only used when implementing
697 actions using the low-level API.
698
699 For more information on states, see L<guestfs(3)>.");
700
701   ("end_busy", (RErr, []), -1, [NotInFish],
702    [],
703    "leave the busy state",
704    "\
705 This sets the state to C<READY>, or if in C<CONFIG> then it leaves the
706 state as is.  This is only used when implementing
707 actions using the low-level API.
708
709 For more information on states, see L<guestfs(3)>.");
710
711   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
712    [InitNone, Always, TestOutputInt (
713       [["set_memsize"; "500"];
714        ["get_memsize"]], 500)],
715    "set memory allocated to the qemu subprocess",
716    "\
717 This sets the memory size in megabytes allocated to the
718 qemu subprocess.  This only has any effect if called before
719 C<guestfs_launch>.
720
721 You can also change this by setting the environment
722 variable C<LIBGUESTFS_MEMSIZE> before the handle is
723 created.
724
725 For more information on the architecture of libguestfs,
726 see L<guestfs(3)>.");
727
728   ("get_memsize", (RInt "memsize", []), -1, [],
729    [InitNone, Always, TestOutputIntOp (
730       [["get_memsize"]], ">=", 256)],
731    "get memory allocated to the qemu subprocess",
732    "\
733 This gets the memory size in megabytes allocated to the
734 qemu subprocess.
735
736 If C<guestfs_set_memsize> was not called
737 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
738 then this returns the compiled-in default value for memsize.
739
740 For more information on the architecture of libguestfs,
741 see L<guestfs(3)>.");
742
743   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
744    [InitNone, Always, TestOutputIntOp (
745       [["get_pid"]], ">=", 1)],
746    "get PID of qemu subprocess",
747    "\
748 Return the process ID of the qemu subprocess.  If there is no
749 qemu subprocess, then this will return an error.
750
751 This is an internal call used for debugging and testing.");
752
753   ("version", (RStruct ("version", "version"), []), -1, [],
754    [InitNone, Always, TestOutputStruct (
755       [["version"]], [CompareWithInt ("major", 1)])],
756    "get the library version number",
757    "\
758 Return the libguestfs version number that the program is linked
759 against.
760
761 Note that because of dynamic linking this is not necessarily
762 the version of libguestfs that you compiled against.  You can
763 compile the program, and then at runtime dynamically link
764 against a completely different C<libguestfs.so> library.
765
766 This call was added in version C<1.0.58>.  In previous
767 versions of libguestfs there was no way to get the version
768 number.  From C code you can use ELF weak linking tricks to find out if
769 this symbol exists (if it doesn't, then it's an earlier version).
770
771 The call returns a structure with four elements.  The first
772 three (C<major>, C<minor> and C<release>) are numbers and
773 correspond to the usual version triplet.  The fourth element
774 (C<extra>) is a string and is normally empty, but may be
775 used for distro-specific information.
776
777 To construct the original version string:
778 C<$major.$minor.$release$extra>
779
780 I<Note:> Don't use this call to test for availability
781 of features.  Distro backports makes this unreliable.");
782
783   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
784    [InitNone, Always, TestOutputTrue (
785       [["set_selinux"; "true"];
786        ["get_selinux"]])],
787    "set SELinux enabled or disabled at appliance boot",
788    "\
789 This sets the selinux flag that is passed to the appliance
790 at boot time.  The default is C<selinux=0> (disabled).
791
792 Note that if SELinux is enabled, it is always in
793 Permissive mode (C<enforcing=0>).
794
795 For more information on the architecture of libguestfs,
796 see L<guestfs(3)>.");
797
798   ("get_selinux", (RBool "selinux", []), -1, [],
799    [],
800    "get SELinux enabled flag",
801    "\
802 This returns the current setting of the selinux flag which
803 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
804
805 For more information on the architecture of libguestfs,
806 see L<guestfs(3)>.");
807
808 ]
809
810 (* daemon_functions are any functions which cause some action
811  * to take place in the daemon.
812  *)
813
814 let daemon_functions = [
815   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
816    [InitEmpty, Always, TestOutput (
817       [["sfdiskM"; "/dev/sda"; ","];
818        ["mkfs"; "ext2"; "/dev/sda1"];
819        ["mount"; "/dev/sda1"; "/"];
820        ["write_file"; "/new"; "new file contents"; "0"];
821        ["cat"; "/new"]], "new file contents")],
822    "mount a guest disk at a position in the filesystem",
823    "\
824 Mount a guest disk at a position in the filesystem.  Block devices
825 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
826 the guest.  If those block devices contain partitions, they will have
827 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
828 names can be used.
829
830 The rules are the same as for L<mount(2)>:  A filesystem must
831 first be mounted on C</> before others can be mounted.  Other
832 filesystems can only be mounted on directories which already
833 exist.
834
835 The mounted filesystem is writable, if we have sufficient permissions
836 on the underlying device.
837
838 The filesystem options C<sync> and C<noatime> are set with this
839 call, in order to improve reliability.");
840
841   ("sync", (RErr, []), 2, [],
842    [ InitEmpty, Always, TestRun [["sync"]]],
843    "sync disks, writes are flushed through to the disk image",
844    "\
845 This syncs the disk, so that any writes are flushed through to the
846 underlying disk image.
847
848 You should always call this if you have modified a disk image, before
849 closing the handle.");
850
851   ("touch", (RErr, [Pathname "path"]), 3, [],
852    [InitBasicFS, Always, TestOutputTrue (
853       [["touch"; "/new"];
854        ["exists"; "/new"]])],
855    "update file timestamps or create a new file",
856    "\
857 Touch acts like the L<touch(1)> command.  It can be used to
858 update the timestamps on a file, or, if the file does not exist,
859 to create a new zero-length file.");
860
861   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
862    [InitSquashFS, Always, TestOutput (
863       [["cat"; "/known-2"]], "abcdef\n")],
864    "list the contents of a file",
865    "\
866 Return the contents of the file named C<path>.
867
868 Note that this function cannot correctly handle binary files
869 (specifically, files containing C<\\0> character which is treated
870 as end of string).  For those you need to use the C<guestfs_read_file>
871 or C<guestfs_download> functions which have a more complex interface.");
872
873   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
874    [], (* XXX Tricky to test because it depends on the exact format
875         * of the 'ls -l' command, which changes between F10 and F11.
876         *)
877    "list the files in a directory (long format)",
878    "\
879 List the files in C<directory> (relative to the root directory,
880 there is no cwd) in the format of 'ls -la'.
881
882 This command is mostly useful for interactive sessions.  It
883 is I<not> intended that you try to parse the output string.");
884
885   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
886    [InitBasicFS, Always, TestOutputList (
887       [["touch"; "/new"];
888        ["touch"; "/newer"];
889        ["touch"; "/newest"];
890        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
891    "list the files in a directory",
892    "\
893 List the files in C<directory> (relative to the root directory,
894 there is no cwd).  The '.' and '..' entries are not returned, but
895 hidden files are shown.
896
897 This command is mostly useful for interactive sessions.  Programs
898 should probably use C<guestfs_readdir> instead.");
899
900   ("list_devices", (RStringList "devices", []), 7, [],
901    [InitEmpty, Always, TestOutputListOfDevices (
902       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
903    "list the block devices",
904    "\
905 List all the block devices.
906
907 The full block device names are returned, eg. C</dev/sda>");
908
909   ("list_partitions", (RStringList "partitions", []), 8, [],
910    [InitBasicFS, Always, TestOutputListOfDevices (
911       [["list_partitions"]], ["/dev/sda1"]);
912     InitEmpty, Always, TestOutputListOfDevices (
913       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
914        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
915    "list the partitions",
916    "\
917 List all the partitions detected on all block devices.
918
919 The full partition device names are returned, eg. C</dev/sda1>
920
921 This does not return logical volumes.  For that you will need to
922 call C<guestfs_lvs>.");
923
924   ("pvs", (RStringList "physvols", []), 9, [],
925    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
926       [["pvs"]], ["/dev/sda1"]);
927     InitEmpty, Always, TestOutputListOfDevices (
928       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
929        ["pvcreate"; "/dev/sda1"];
930        ["pvcreate"; "/dev/sda2"];
931        ["pvcreate"; "/dev/sda3"];
932        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
933    "list the LVM physical volumes (PVs)",
934    "\
935 List all the physical volumes detected.  This is the equivalent
936 of the L<pvs(8)> command.
937
938 This returns a list of just the device names that contain
939 PVs (eg. C</dev/sda2>).
940
941 See also C<guestfs_pvs_full>.");
942
943   ("vgs", (RStringList "volgroups", []), 10, [],
944    [InitBasicFSonLVM, Always, TestOutputList (
945       [["vgs"]], ["VG"]);
946     InitEmpty, Always, TestOutputList (
947       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
948        ["pvcreate"; "/dev/sda1"];
949        ["pvcreate"; "/dev/sda2"];
950        ["pvcreate"; "/dev/sda3"];
951        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
952        ["vgcreate"; "VG2"; "/dev/sda3"];
953        ["vgs"]], ["VG1"; "VG2"])],
954    "list the LVM volume groups (VGs)",
955    "\
956 List all the volumes groups detected.  This is the equivalent
957 of the L<vgs(8)> command.
958
959 This returns a list of just the volume group names that were
960 detected (eg. C<VolGroup00>).
961
962 See also C<guestfs_vgs_full>.");
963
964   ("lvs", (RStringList "logvols", []), 11, [],
965    [InitBasicFSonLVM, Always, TestOutputList (
966       [["lvs"]], ["/dev/VG/LV"]);
967     InitEmpty, Always, TestOutputList (
968       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
969        ["pvcreate"; "/dev/sda1"];
970        ["pvcreate"; "/dev/sda2"];
971        ["pvcreate"; "/dev/sda3"];
972        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
973        ["vgcreate"; "VG2"; "/dev/sda3"];
974        ["lvcreate"; "LV1"; "VG1"; "50"];
975        ["lvcreate"; "LV2"; "VG1"; "50"];
976        ["lvcreate"; "LV3"; "VG2"; "50"];
977        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
978    "list the LVM logical volumes (LVs)",
979    "\
980 List all the logical volumes detected.  This is the equivalent
981 of the L<lvs(8)> command.
982
983 This returns a list of the logical volume device names
984 (eg. C</dev/VolGroup00/LogVol00>).
985
986 See also C<guestfs_lvs_full>.");
987
988   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [],
989    [], (* XXX how to test? *)
990    "list the LVM physical volumes (PVs)",
991    "\
992 List all the physical volumes detected.  This is the equivalent
993 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
994
995   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [],
996    [], (* XXX how to test? *)
997    "list the LVM volume groups (VGs)",
998    "\
999 List all the volumes groups detected.  This is the equivalent
1000 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1001
1002   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [],
1003    [], (* XXX how to test? *)
1004    "list the LVM logical volumes (LVs)",
1005    "\
1006 List all the logical volumes detected.  This is the equivalent
1007 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1008
1009   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1010    [InitSquashFS, Always, TestOutputList (
1011       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1012     InitSquashFS, Always, TestOutputList (
1013       [["read_lines"; "/empty"]], [])],
1014    "read file as lines",
1015    "\
1016 Return the contents of the file named C<path>.
1017
1018 The file contents are returned as a list of lines.  Trailing
1019 C<LF> and C<CRLF> character sequences are I<not> returned.
1020
1021 Note that this function cannot correctly handle binary files
1022 (specifically, files containing C<\\0> character which is treated
1023 as end of line).  For those you need to use the C<guestfs_read_file>
1024 function which has a more complex interface.");
1025
1026   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [],
1027    [], (* XXX Augeas code needs tests. *)
1028    "create a new Augeas handle",
1029    "\
1030 Create a new Augeas handle for editing configuration files.
1031 If there was any previous Augeas handle associated with this
1032 guestfs session, then it is closed.
1033
1034 You must call this before using any other C<guestfs_aug_*>
1035 commands.
1036
1037 C<root> is the filesystem root.  C<root> must not be NULL,
1038 use C</> instead.
1039
1040 The flags are the same as the flags defined in
1041 E<lt>augeas.hE<gt>, the logical I<or> of the following
1042 integers:
1043
1044 =over 4
1045
1046 =item C<AUG_SAVE_BACKUP> = 1
1047
1048 Keep the original file with a C<.augsave> extension.
1049
1050 =item C<AUG_SAVE_NEWFILE> = 2
1051
1052 Save changes into a file with extension C<.augnew>, and
1053 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1054
1055 =item C<AUG_TYPE_CHECK> = 4
1056
1057 Typecheck lenses (can be expensive).
1058
1059 =item C<AUG_NO_STDINC> = 8
1060
1061 Do not use standard load path for modules.
1062
1063 =item C<AUG_SAVE_NOOP> = 16
1064
1065 Make save a no-op, just record what would have been changed.
1066
1067 =item C<AUG_NO_LOAD> = 32
1068
1069 Do not load the tree in C<guestfs_aug_init>.
1070
1071 =back
1072
1073 To close the handle, you can call C<guestfs_aug_close>.
1074
1075 To find out more about Augeas, see L<http://augeas.net/>.");
1076
1077   ("aug_close", (RErr, []), 26, [],
1078    [], (* XXX Augeas code needs tests. *)
1079    "close the current Augeas handle",
1080    "\
1081 Close the current Augeas handle and free up any resources
1082 used by it.  After calling this, you have to call
1083 C<guestfs_aug_init> again before you can use any other
1084 Augeas functions.");
1085
1086   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [],
1087    [], (* XXX Augeas code needs tests. *)
1088    "define an Augeas variable",
1089    "\
1090 Defines an Augeas variable C<name> whose value is the result
1091 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1092 undefined.
1093
1094 On success this returns the number of nodes in C<expr>, or
1095 C<0> if C<expr> evaluates to something which is not a nodeset.");
1096
1097   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [],
1098    [], (* XXX Augeas code needs tests. *)
1099    "define an Augeas node",
1100    "\
1101 Defines a variable C<name> whose value is the result of
1102 evaluating C<expr>.
1103
1104 If C<expr> evaluates to an empty nodeset, a node is created,
1105 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1106 C<name> will be the nodeset containing that single node.
1107
1108 On success this returns a pair containing the
1109 number of nodes in the nodeset, and a boolean flag
1110 if a node was created.");
1111
1112   ("aug_get", (RString "val", [String "augpath"]), 19, [],
1113    [], (* XXX Augeas code needs tests. *)
1114    "look up the value of an Augeas path",
1115    "\
1116 Look up the value associated with C<path>.  If C<path>
1117 matches exactly one node, the C<value> is returned.");
1118
1119   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [],
1120    [], (* XXX Augeas code needs tests. *)
1121    "set Augeas path to value",
1122    "\
1123 Set the value associated with C<path> to C<value>.");
1124
1125   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [],
1126    [], (* XXX Augeas code needs tests. *)
1127    "insert a sibling Augeas node",
1128    "\
1129 Create a new sibling C<label> for C<path>, inserting it into
1130 the tree before or after C<path> (depending on the boolean
1131 flag C<before>).
1132
1133 C<path> must match exactly one existing node in the tree, and
1134 C<label> must be a label, ie. not contain C</>, C<*> or end
1135 with a bracketed index C<[N]>.");
1136
1137   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [],
1138    [], (* XXX Augeas code needs tests. *)
1139    "remove an Augeas path",
1140    "\
1141 Remove C<path> and all of its children.
1142
1143 On success this returns the number of entries which were removed.");
1144
1145   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [],
1146    [], (* XXX Augeas code needs tests. *)
1147    "move Augeas node",
1148    "\
1149 Move the node C<src> to C<dest>.  C<src> must match exactly
1150 one node.  C<dest> is overwritten if it exists.");
1151
1152   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [],
1153    [], (* XXX Augeas code needs tests. *)
1154    "return Augeas nodes which match augpath",
1155    "\
1156 Returns a list of paths which match the path expression C<path>.
1157 The returned paths are sufficiently qualified so that they match
1158 exactly one node in the current tree.");
1159
1160   ("aug_save", (RErr, []), 25, [],
1161    [], (* XXX Augeas code needs tests. *)
1162    "write all pending Augeas changes to disk",
1163    "\
1164 This writes all pending changes to disk.
1165
1166 The flags which were passed to C<guestfs_aug_init> affect exactly
1167 how files are saved.");
1168
1169   ("aug_load", (RErr, []), 27, [],
1170    [], (* XXX Augeas code needs tests. *)
1171    "load files into the tree",
1172    "\
1173 Load files into the tree.
1174
1175 See C<aug_load> in the Augeas documentation for the full gory
1176 details.");
1177
1178   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [],
1179    [], (* XXX Augeas code needs tests. *)
1180    "list Augeas nodes under augpath",
1181    "\
1182 This is just a shortcut for listing C<guestfs_aug_match>
1183 C<path/*> and sorting the resulting nodes into alphabetical order.");
1184
1185   ("rm", (RErr, [Pathname "path"]), 29, [],
1186    [InitBasicFS, Always, TestRun
1187       [["touch"; "/new"];
1188        ["rm"; "/new"]];
1189     InitBasicFS, Always, TestLastFail
1190       [["rm"; "/new"]];
1191     InitBasicFS, Always, TestLastFail
1192       [["mkdir"; "/new"];
1193        ["rm"; "/new"]]],
1194    "remove a file",
1195    "\
1196 Remove the single file C<path>.");
1197
1198   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1199    [InitBasicFS, Always, TestRun
1200       [["mkdir"; "/new"];
1201        ["rmdir"; "/new"]];
1202     InitBasicFS, Always, TestLastFail
1203       [["rmdir"; "/new"]];
1204     InitBasicFS, Always, TestLastFail
1205       [["touch"; "/new"];
1206        ["rmdir"; "/new"]]],
1207    "remove a directory",
1208    "\
1209 Remove the single directory C<path>.");
1210
1211   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1212    [InitBasicFS, Always, TestOutputFalse
1213       [["mkdir"; "/new"];
1214        ["mkdir"; "/new/foo"];
1215        ["touch"; "/new/foo/bar"];
1216        ["rm_rf"; "/new"];
1217        ["exists"; "/new"]]],
1218    "remove a file or directory recursively",
1219    "\
1220 Remove the file or directory C<path>, recursively removing the
1221 contents if its a directory.  This is like the C<rm -rf> shell
1222 command.");
1223
1224   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1225    [InitBasicFS, Always, TestOutputTrue
1226       [["mkdir"; "/new"];
1227        ["is_dir"; "/new"]];
1228     InitBasicFS, Always, TestLastFail
1229       [["mkdir"; "/new/foo/bar"]]],
1230    "create a directory",
1231    "\
1232 Create a directory named C<path>.");
1233
1234   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1235    [InitBasicFS, Always, TestOutputTrue
1236       [["mkdir_p"; "/new/foo/bar"];
1237        ["is_dir"; "/new/foo/bar"]];
1238     InitBasicFS, Always, TestOutputTrue
1239       [["mkdir_p"; "/new/foo/bar"];
1240        ["is_dir"; "/new/foo"]];
1241     InitBasicFS, Always, TestOutputTrue
1242       [["mkdir_p"; "/new/foo/bar"];
1243        ["is_dir"; "/new"]];
1244     (* Regression tests for RHBZ#503133: *)
1245     InitBasicFS, Always, TestRun
1246       [["mkdir"; "/new"];
1247        ["mkdir_p"; "/new"]];
1248     InitBasicFS, Always, TestLastFail
1249       [["touch"; "/new"];
1250        ["mkdir_p"; "/new"]]],
1251    "create a directory and parents",
1252    "\
1253 Create a directory named C<path>, creating any parent directories
1254 as necessary.  This is like the C<mkdir -p> shell command.");
1255
1256   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1257    [], (* XXX Need stat command to test *)
1258    "change file mode",
1259    "\
1260 Change the mode (permissions) of C<path> to C<mode>.  Only
1261 numeric modes are supported.");
1262
1263   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1264    [], (* XXX Need stat command to test *)
1265    "change file owner and group",
1266    "\
1267 Change the file owner to C<owner> and group to C<group>.
1268
1269 Only numeric uid and gid are supported.  If you want to use
1270 names, you will need to locate and parse the password file
1271 yourself (Augeas support makes this relatively easy).");
1272
1273   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1274    [InitSquashFS, Always, TestOutputTrue (
1275       [["exists"; "/empty"]]);
1276     InitSquashFS, Always, TestOutputTrue (
1277       [["exists"; "/directory"]])],
1278    "test if file or directory exists",
1279    "\
1280 This returns C<true> if and only if there is a file, directory
1281 (or anything) with the given C<path> name.
1282
1283 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1284
1285   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1286    [InitSquashFS, Always, TestOutputTrue (
1287       [["is_file"; "/known-1"]]);
1288     InitSquashFS, Always, TestOutputFalse (
1289       [["is_file"; "/directory"]])],
1290    "test if file exists",
1291    "\
1292 This returns C<true> if and only if there is a file
1293 with the given C<path> name.  Note that it returns false for
1294 other objects like directories.
1295
1296 See also C<guestfs_stat>.");
1297
1298   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1299    [InitSquashFS, Always, TestOutputFalse (
1300       [["is_dir"; "/known-3"]]);
1301     InitSquashFS, Always, TestOutputTrue (
1302       [["is_dir"; "/directory"]])],
1303    "test if file exists",
1304    "\
1305 This returns C<true> if and only if there is a directory
1306 with the given C<path> name.  Note that it returns false for
1307 other objects like files.
1308
1309 See also C<guestfs_stat>.");
1310
1311   ("pvcreate", (RErr, [Device "device"]), 39, [],
1312    [InitEmpty, Always, TestOutputListOfDevices (
1313       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1314        ["pvcreate"; "/dev/sda1"];
1315        ["pvcreate"; "/dev/sda2"];
1316        ["pvcreate"; "/dev/sda3"];
1317        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1318    "create an LVM physical volume",
1319    "\
1320 This creates an LVM physical volume on the named C<device>,
1321 where C<device> should usually be a partition name such
1322 as C</dev/sda1>.");
1323
1324   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [],
1325    [InitEmpty, Always, TestOutputList (
1326       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1327        ["pvcreate"; "/dev/sda1"];
1328        ["pvcreate"; "/dev/sda2"];
1329        ["pvcreate"; "/dev/sda3"];
1330        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1331        ["vgcreate"; "VG2"; "/dev/sda3"];
1332        ["vgs"]], ["VG1"; "VG2"])],
1333    "create an LVM volume group",
1334    "\
1335 This creates an LVM volume group called C<volgroup>
1336 from the non-empty list of physical volumes C<physvols>.");
1337
1338   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [],
1339    [InitEmpty, Always, TestOutputList (
1340       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1341        ["pvcreate"; "/dev/sda1"];
1342        ["pvcreate"; "/dev/sda2"];
1343        ["pvcreate"; "/dev/sda3"];
1344        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1345        ["vgcreate"; "VG2"; "/dev/sda3"];
1346        ["lvcreate"; "LV1"; "VG1"; "50"];
1347        ["lvcreate"; "LV2"; "VG1"; "50"];
1348        ["lvcreate"; "LV3"; "VG2"; "50"];
1349        ["lvcreate"; "LV4"; "VG2"; "50"];
1350        ["lvcreate"; "LV5"; "VG2"; "50"];
1351        ["lvs"]],
1352       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1353        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1354    "create an LVM volume group",
1355    "\
1356 This creates an LVM volume group called C<logvol>
1357 on the volume group C<volgroup>, with C<size> megabytes.");
1358
1359   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1360    [InitEmpty, Always, TestOutput (
1361       [["sfdiskM"; "/dev/sda"; ","];
1362        ["mkfs"; "ext2"; "/dev/sda1"];
1363        ["mount"; "/dev/sda1"; "/"];
1364        ["write_file"; "/new"; "new file contents"; "0"];
1365        ["cat"; "/new"]], "new file contents")],
1366    "make a filesystem",
1367    "\
1368 This creates a filesystem on C<device> (usually a partition
1369 or LVM logical volume).  The filesystem type is C<fstype>, for
1370 example C<ext3>.");
1371
1372   ("sfdisk", (RErr, [Device "device";
1373                      Int "cyls"; Int "heads"; Int "sectors";
1374                      StringList "lines"]), 43, [DangerWillRobinson],
1375    [],
1376    "create partitions on a block device",
1377    "\
1378 This is a direct interface to the L<sfdisk(8)> program for creating
1379 partitions on block devices.
1380
1381 C<device> should be a block device, for example C</dev/sda>.
1382
1383 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1384 and sectors on the device, which are passed directly to sfdisk as
1385 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1386 of these, then the corresponding parameter is omitted.  Usually for
1387 'large' disks, you can just pass C<0> for these, but for small
1388 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1389 out the right geometry and you will need to tell it.
1390
1391 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1392 information refer to the L<sfdisk(8)> manpage.
1393
1394 To create a single partition occupying the whole disk, you would
1395 pass C<lines> as a single element list, when the single element being
1396 the string C<,> (comma).
1397
1398 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>");
1399
1400   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning],
1401    [InitBasicFS, Always, TestOutput (
1402       [["write_file"; "/new"; "new file contents"; "0"];
1403        ["cat"; "/new"]], "new file contents");
1404     InitBasicFS, Always, TestOutput (
1405       [["write_file"; "/new"; "\nnew file contents\n"; "0"];
1406        ["cat"; "/new"]], "\nnew file contents\n");
1407     InitBasicFS, Always, TestOutput (
1408       [["write_file"; "/new"; "\n\n"; "0"];
1409        ["cat"; "/new"]], "\n\n");
1410     InitBasicFS, Always, TestOutput (
1411       [["write_file"; "/new"; ""; "0"];
1412        ["cat"; "/new"]], "");
1413     InitBasicFS, Always, TestOutput (
1414       [["write_file"; "/new"; "\n\n\n"; "0"];
1415        ["cat"; "/new"]], "\n\n\n");
1416     InitBasicFS, Always, TestOutput (
1417       [["write_file"; "/new"; "\n"; "0"];
1418        ["cat"; "/new"]], "\n")],
1419    "create a file",
1420    "\
1421 This call creates a file called C<path>.  The contents of the
1422 file is the string C<content> (which can contain any 8 bit data),
1423 with length C<size>.
1424
1425 As a special case, if C<size> is C<0>
1426 then the length is calculated using C<strlen> (so in this case
1427 the content cannot contain embedded ASCII NULs).
1428
1429 I<NB.> Owing to a bug, writing content containing ASCII NUL
1430 characters does I<not> work, even if the length is specified.
1431 We hope to resolve this bug in a future version.  In the meantime
1432 use C<guestfs_upload>.");
1433
1434   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1435    [InitEmpty, Always, TestOutputListOfDevices (
1436       [["sfdiskM"; "/dev/sda"; ","];
1437        ["mkfs"; "ext2"; "/dev/sda1"];
1438        ["mount"; "/dev/sda1"; "/"];
1439        ["mounts"]], ["/dev/sda1"]);
1440     InitEmpty, Always, TestOutputList (
1441       [["sfdiskM"; "/dev/sda"; ","];
1442        ["mkfs"; "ext2"; "/dev/sda1"];
1443        ["mount"; "/dev/sda1"; "/"];
1444        ["umount"; "/"];
1445        ["mounts"]], [])],
1446    "unmount a filesystem",
1447    "\
1448 This unmounts the given filesystem.  The filesystem may be
1449 specified either by its mountpoint (path) or the device which
1450 contains the filesystem.");
1451
1452   ("mounts", (RStringList "devices", []), 46, [],
1453    [InitBasicFS, Always, TestOutputListOfDevices (
1454       [["mounts"]], ["/dev/sda1"])],
1455    "show mounted filesystems",
1456    "\
1457 This returns the list of currently mounted filesystems.  It returns
1458 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1459
1460 Some internal mounts are not shown.
1461
1462 See also: C<guestfs_mountpoints>");
1463
1464   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1465    [InitBasicFS, Always, TestOutputList (
1466       [["umount_all"];
1467        ["mounts"]], []);
1468     (* check that umount_all can unmount nested mounts correctly: *)
1469     InitEmpty, Always, TestOutputList (
1470       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1471        ["mkfs"; "ext2"; "/dev/sda1"];
1472        ["mkfs"; "ext2"; "/dev/sda2"];
1473        ["mkfs"; "ext2"; "/dev/sda3"];
1474        ["mount"; "/dev/sda1"; "/"];
1475        ["mkdir"; "/mp1"];
1476        ["mount"; "/dev/sda2"; "/mp1"];
1477        ["mkdir"; "/mp1/mp2"];
1478        ["mount"; "/dev/sda3"; "/mp1/mp2"];
1479        ["mkdir"; "/mp1/mp2/mp3"];
1480        ["umount_all"];
1481        ["mounts"]], [])],
1482    "unmount all filesystems",
1483    "\
1484 This unmounts all mounted filesystems.
1485
1486 Some internal mounts are not unmounted by this call.");
1487
1488   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson],
1489    [],
1490    "remove all LVM LVs, VGs and PVs",
1491    "\
1492 This command removes all LVM logical volumes, volume groups
1493 and physical volumes.");
1494
1495   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1496    [InitSquashFS, Always, TestOutput (
1497       [["file"; "/empty"]], "empty");
1498     InitSquashFS, Always, TestOutput (
1499       [["file"; "/known-1"]], "ASCII text");
1500     InitSquashFS, Always, TestLastFail (
1501       [["file"; "/notexists"]])],
1502    "determine file type",
1503    "\
1504 This call uses the standard L<file(1)> command to determine
1505 the type or contents of the file.  This also works on devices,
1506 for example to find out whether a partition contains a filesystem.
1507
1508 This call will also transparently look inside various types
1509 of compressed file.
1510
1511 The exact command which runs is C<file -zbsL path>.  Note in
1512 particular that the filename is not prepended to the output
1513 (the C<-b> option).");
1514
1515   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1516    [InitBasicFS, Always, TestOutput (
1517       [["upload"; "test-command"; "/test-command"];
1518        ["chmod"; "0o755"; "/test-command"];
1519        ["command"; "/test-command 1"]], "Result1");
1520     InitBasicFS, Always, TestOutput (
1521       [["upload"; "test-command"; "/test-command"];
1522        ["chmod"; "0o755"; "/test-command"];
1523        ["command"; "/test-command 2"]], "Result2\n");
1524     InitBasicFS, Always, TestOutput (
1525       [["upload"; "test-command"; "/test-command"];
1526        ["chmod"; "0o755"; "/test-command"];
1527        ["command"; "/test-command 3"]], "\nResult3");
1528     InitBasicFS, Always, TestOutput (
1529       [["upload"; "test-command"; "/test-command"];
1530        ["chmod"; "0o755"; "/test-command"];
1531        ["command"; "/test-command 4"]], "\nResult4\n");
1532     InitBasicFS, Always, TestOutput (
1533       [["upload"; "test-command"; "/test-command"];
1534        ["chmod"; "0o755"; "/test-command"];
1535        ["command"; "/test-command 5"]], "\nResult5\n\n");
1536     InitBasicFS, Always, TestOutput (
1537       [["upload"; "test-command"; "/test-command"];
1538        ["chmod"; "0o755"; "/test-command"];
1539        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1540     InitBasicFS, Always, TestOutput (
1541       [["upload"; "test-command"; "/test-command"];
1542        ["chmod"; "0o755"; "/test-command"];
1543        ["command"; "/test-command 7"]], "");
1544     InitBasicFS, Always, TestOutput (
1545       [["upload"; "test-command"; "/test-command"];
1546        ["chmod"; "0o755"; "/test-command"];
1547        ["command"; "/test-command 8"]], "\n");
1548     InitBasicFS, Always, TestOutput (
1549       [["upload"; "test-command"; "/test-command"];
1550        ["chmod"; "0o755"; "/test-command"];
1551        ["command"; "/test-command 9"]], "\n\n");
1552     InitBasicFS, Always, TestOutput (
1553       [["upload"; "test-command"; "/test-command"];
1554        ["chmod"; "0o755"; "/test-command"];
1555        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1556     InitBasicFS, Always, TestOutput (
1557       [["upload"; "test-command"; "/test-command"];
1558        ["chmod"; "0o755"; "/test-command"];
1559        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1560     InitBasicFS, Always, TestLastFail (
1561       [["upload"; "test-command"; "/test-command"];
1562        ["chmod"; "0o755"; "/test-command"];
1563        ["command"; "/test-command"]])],
1564    "run a command from the guest filesystem",
1565    "\
1566 This call runs a command from the guest filesystem.  The
1567 filesystem must be mounted, and must contain a compatible
1568 operating system (ie. something Linux, with the same
1569 or compatible processor architecture).
1570
1571 The single parameter is an argv-style list of arguments.
1572 The first element is the name of the program to run.
1573 Subsequent elements are parameters.  The list must be
1574 non-empty (ie. must contain a program name).  Note that
1575 the command runs directly, and is I<not> invoked via
1576 the shell (see C<guestfs_sh>).
1577
1578 The return value is anything printed to I<stdout> by
1579 the command.
1580
1581 If the command returns a non-zero exit status, then
1582 this function returns an error message.  The error message
1583 string is the content of I<stderr> from the command.
1584
1585 The C<$PATH> environment variable will contain at least
1586 C</usr/bin> and C</bin>.  If you require a program from
1587 another location, you should provide the full path in the
1588 first parameter.
1589
1590 Shared libraries and data files required by the program
1591 must be available on filesystems which are mounted in the
1592 correct places.  It is the caller's responsibility to ensure
1593 all filesystems that are needed are mounted at the right
1594 locations.");
1595
1596   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1597    [InitBasicFS, Always, TestOutputList (
1598       [["upload"; "test-command"; "/test-command"];
1599        ["chmod"; "0o755"; "/test-command"];
1600        ["command_lines"; "/test-command 1"]], ["Result1"]);
1601     InitBasicFS, Always, TestOutputList (
1602       [["upload"; "test-command"; "/test-command"];
1603        ["chmod"; "0o755"; "/test-command"];
1604        ["command_lines"; "/test-command 2"]], ["Result2"]);
1605     InitBasicFS, Always, TestOutputList (
1606       [["upload"; "test-command"; "/test-command"];
1607        ["chmod"; "0o755"; "/test-command"];
1608        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1609     InitBasicFS, Always, TestOutputList (
1610       [["upload"; "test-command"; "/test-command"];
1611        ["chmod"; "0o755"; "/test-command"];
1612        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1613     InitBasicFS, Always, TestOutputList (
1614       [["upload"; "test-command"; "/test-command"];
1615        ["chmod"; "0o755"; "/test-command"];
1616        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1617     InitBasicFS, Always, TestOutputList (
1618       [["upload"; "test-command"; "/test-command"];
1619        ["chmod"; "0o755"; "/test-command"];
1620        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1621     InitBasicFS, Always, TestOutputList (
1622       [["upload"; "test-command"; "/test-command"];
1623        ["chmod"; "0o755"; "/test-command"];
1624        ["command_lines"; "/test-command 7"]], []);
1625     InitBasicFS, Always, TestOutputList (
1626       [["upload"; "test-command"; "/test-command"];
1627        ["chmod"; "0o755"; "/test-command"];
1628        ["command_lines"; "/test-command 8"]], [""]);
1629     InitBasicFS, Always, TestOutputList (
1630       [["upload"; "test-command"; "/test-command"];
1631        ["chmod"; "0o755"; "/test-command"];
1632        ["command_lines"; "/test-command 9"]], ["";""]);
1633     InitBasicFS, Always, TestOutputList (
1634       [["upload"; "test-command"; "/test-command"];
1635        ["chmod"; "0o755"; "/test-command"];
1636        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1637     InitBasicFS, Always, TestOutputList (
1638       [["upload"; "test-command"; "/test-command"];
1639        ["chmod"; "0o755"; "/test-command"];
1640        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1641    "run a command, returning lines",
1642    "\
1643 This is the same as C<guestfs_command>, but splits the
1644 result into a list of lines.
1645
1646 See also: C<guestfs_sh_lines>");
1647
1648   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1649    [InitSquashFS, Always, TestOutputStruct (
1650       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1651    "get file information",
1652    "\
1653 Returns file information for the given C<path>.
1654
1655 This is the same as the C<stat(2)> system call.");
1656
1657   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1658    [InitSquashFS, Always, TestOutputStruct (
1659       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1660    "get file information for a symbolic link",
1661    "\
1662 Returns file information for the given C<path>.
1663
1664 This is the same as C<guestfs_stat> except that if C<path>
1665 is a symbolic link, then the link is stat-ed, not the file it
1666 refers to.
1667
1668 This is the same as the C<lstat(2)> system call.");
1669
1670   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1671    [InitSquashFS, Always, TestOutputStruct (
1672       [["statvfs"; "/"]], [CompareWithInt ("namemax", 256)])],
1673    "get file system statistics",
1674    "\
1675 Returns file system statistics for any mounted file system.
1676 C<path> should be a file or directory in the mounted file system
1677 (typically it is the mount point itself, but it doesn't need to be).
1678
1679 This is the same as the C<statvfs(2)> system call.");
1680
1681   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1682    [], (* XXX test *)
1683    "get ext2/ext3/ext4 superblock details",
1684    "\
1685 This returns the contents of the ext2, ext3 or ext4 filesystem
1686 superblock on C<device>.
1687
1688 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1689 manpage for more details.  The list of fields returned isn't
1690 clearly defined, and depends on both the version of C<tune2fs>
1691 that libguestfs was built against, and the filesystem itself.");
1692
1693   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1694    [InitEmpty, Always, TestOutputTrue (
1695       [["blockdev_setro"; "/dev/sda"];
1696        ["blockdev_getro"; "/dev/sda"]])],
1697    "set block device to read-only",
1698    "\
1699 Sets the block device named C<device> to read-only.
1700
1701 This uses the L<blockdev(8)> command.");
1702
1703   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1704    [InitEmpty, Always, TestOutputFalse (
1705       [["blockdev_setrw"; "/dev/sda"];
1706        ["blockdev_getro"; "/dev/sda"]])],
1707    "set block device to read-write",
1708    "\
1709 Sets the block device named C<device> to read-write.
1710
1711 This uses the L<blockdev(8)> command.");
1712
1713   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1714    [InitEmpty, Always, TestOutputTrue (
1715       [["blockdev_setro"; "/dev/sda"];
1716        ["blockdev_getro"; "/dev/sda"]])],
1717    "is block device set to read-only",
1718    "\
1719 Returns a boolean indicating if the block device is read-only
1720 (true if read-only, false if not).
1721
1722 This uses the L<blockdev(8)> command.");
1723
1724   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1725    [InitEmpty, Always, TestOutputInt (
1726       [["blockdev_getss"; "/dev/sda"]], 512)],
1727    "get sectorsize of block device",
1728    "\
1729 This returns the size of sectors on a block device.
1730 Usually 512, but can be larger for modern devices.
1731
1732 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1733 for that).
1734
1735 This uses the L<blockdev(8)> command.");
1736
1737   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1738    [InitEmpty, Always, TestOutputInt (
1739       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1740    "get blocksize of block device",
1741    "\
1742 This returns the block size of a device.
1743
1744 (Note this is different from both I<size in blocks> and
1745 I<filesystem block size>).
1746
1747 This uses the L<blockdev(8)> command.");
1748
1749   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1750    [], (* XXX test *)
1751    "set blocksize of block device",
1752    "\
1753 This sets the block size of a device.
1754
1755 (Note this is different from both I<size in blocks> and
1756 I<filesystem block size>).
1757
1758 This uses the L<blockdev(8)> command.");
1759
1760   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1761    [InitEmpty, Always, TestOutputInt (
1762       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1763    "get total size of device in 512-byte sectors",
1764    "\
1765 This returns the size of the device in units of 512-byte sectors
1766 (even if the sectorsize isn't 512 bytes ... weird).
1767
1768 See also C<guestfs_blockdev_getss> for the real sector size of
1769 the device, and C<guestfs_blockdev_getsize64> for the more
1770 useful I<size in bytes>.
1771
1772 This uses the L<blockdev(8)> command.");
1773
1774   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1775    [InitEmpty, Always, TestOutputInt (
1776       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1777    "get total size of device in bytes",
1778    "\
1779 This returns the size of the device in bytes.
1780
1781 See also C<guestfs_blockdev_getsz>.
1782
1783 This uses the L<blockdev(8)> command.");
1784
1785   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1786    [InitEmpty, Always, TestRun
1787       [["blockdev_flushbufs"; "/dev/sda"]]],
1788    "flush device buffers",
1789    "\
1790 This tells the kernel to flush internal buffers associated
1791 with C<device>.
1792
1793 This uses the L<blockdev(8)> command.");
1794
1795   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1796    [InitEmpty, Always, TestRun
1797       [["blockdev_rereadpt"; "/dev/sda"]]],
1798    "reread partition table",
1799    "\
1800 Reread the partition table on C<device>.
1801
1802 This uses the L<blockdev(8)> command.");
1803
1804   ("upload", (RErr, [FileIn "filename"; String "remotefilename"]), 66, [],
1805    [InitBasicFS, Always, TestOutput (
1806       (* Pick a file from cwd which isn't likely to change. *)
1807       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1808        ["checksum"; "md5"; "/COPYING.LIB"]],
1809         Digest.to_hex (Digest.file "COPYING.LIB"))],
1810    "upload a file from the local machine",
1811    "\
1812 Upload local file C<filename> to C<remotefilename> on the
1813 filesystem.
1814
1815 C<filename> can also be a named pipe.
1816
1817 See also C<guestfs_download>.");
1818
1819   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1820    [InitBasicFS, Always, TestOutput (
1821       (* Pick a file from cwd which isn't likely to change. *)
1822       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1823        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1824        ["upload"; "testdownload.tmp"; "/upload"];
1825        ["checksum"; "md5"; "/upload"]],
1826         Digest.to_hex (Digest.file "COPYING.LIB"))],
1827    "download a file to the local machine",
1828    "\
1829 Download file C<remotefilename> and save it as C<filename>
1830 on the local machine.
1831
1832 C<filename> can also be a named pipe.
1833
1834 See also C<guestfs_upload>, C<guestfs_cat>.");
1835
1836   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1837    [InitSquashFS, Always, TestOutput (
1838       [["checksum"; "crc"; "/known-3"]], "2891671662");
1839     InitSquashFS, Always, TestLastFail (
1840       [["checksum"; "crc"; "/notexists"]]);
1841     InitSquashFS, Always, TestOutput (
1842       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1843     InitSquashFS, Always, TestOutput (
1844       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1845     InitSquashFS, Always, TestOutput (
1846       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
1847     InitSquashFS, Always, TestOutput (
1848       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
1849     InitSquashFS, Always, TestOutput (
1850       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
1851     InitSquashFS, Always, TestOutput (
1852       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6")],
1853    "compute MD5, SHAx or CRC checksum of file",
1854    "\
1855 This call computes the MD5, SHAx or CRC checksum of the
1856 file named C<path>.
1857
1858 The type of checksum to compute is given by the C<csumtype>
1859 parameter which must have one of the following values:
1860
1861 =over 4
1862
1863 =item C<crc>
1864
1865 Compute the cyclic redundancy check (CRC) specified by POSIX
1866 for the C<cksum> command.
1867
1868 =item C<md5>
1869
1870 Compute the MD5 hash (using the C<md5sum> program).
1871
1872 =item C<sha1>
1873
1874 Compute the SHA1 hash (using the C<sha1sum> program).
1875
1876 =item C<sha224>
1877
1878 Compute the SHA224 hash (using the C<sha224sum> program).
1879
1880 =item C<sha256>
1881
1882 Compute the SHA256 hash (using the C<sha256sum> program).
1883
1884 =item C<sha384>
1885
1886 Compute the SHA384 hash (using the C<sha384sum> program).
1887
1888 =item C<sha512>
1889
1890 Compute the SHA512 hash (using the C<sha512sum> program).
1891
1892 =back
1893
1894 The checksum is returned as a printable string.");
1895
1896   ("tar_in", (RErr, [FileIn "tarfile"; String "directory"]), 69, [],
1897    [InitBasicFS, Always, TestOutput (
1898       [["tar_in"; "../images/helloworld.tar"; "/"];
1899        ["cat"; "/hello"]], "hello\n")],
1900    "unpack tarfile to directory",
1901    "\
1902 This command uploads and unpacks local file C<tarfile> (an
1903 I<uncompressed> tar file) into C<directory>.
1904
1905 To upload a compressed tarball, use C<guestfs_tgz_in>.");
1906
1907   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
1908    [],
1909    "pack directory into tarfile",
1910    "\
1911 This command packs the contents of C<directory> and downloads
1912 it to local file C<tarfile>.
1913
1914 To download a compressed tarball, use C<guestfs_tgz_out>.");
1915
1916   ("tgz_in", (RErr, [FileIn "tarball"; String "directory"]), 71, [],
1917    [InitBasicFS, Always, TestOutput (
1918       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
1919        ["cat"; "/hello"]], "hello\n")],
1920    "unpack compressed tarball to directory",
1921    "\
1922 This command uploads and unpacks local file C<tarball> (a
1923 I<gzip compressed> tar file) into C<directory>.
1924
1925 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
1926
1927   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
1928    [],
1929    "pack directory into compressed tarball",
1930    "\
1931 This command packs the contents of C<directory> and downloads
1932 it to local file C<tarball>.
1933
1934 To download an uncompressed tarball, use C<guestfs_tar_out>.");
1935
1936   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
1937    [InitBasicFS, Always, TestLastFail (
1938       [["umount"; "/"];
1939        ["mount_ro"; "/dev/sda1"; "/"];
1940        ["touch"; "/new"]]);
1941     InitBasicFS, Always, TestOutput (
1942       [["write_file"; "/new"; "data"; "0"];
1943        ["umount"; "/"];
1944        ["mount_ro"; "/dev/sda1"; "/"];
1945        ["cat"; "/new"]], "data")],
1946    "mount a guest disk, read-only",
1947    "\
1948 This is the same as the C<guestfs_mount> command, but it
1949 mounts the filesystem with the read-only (I<-o ro>) flag.");
1950
1951   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
1952    [],
1953    "mount a guest disk with mount options",
1954    "\
1955 This is the same as the C<guestfs_mount> command, but it
1956 allows you to set the mount options as for the
1957 L<mount(8)> I<-o> flag.");
1958
1959   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
1960    [],
1961    "mount a guest disk with mount options and vfstype",
1962    "\
1963 This is the same as the C<guestfs_mount> command, but it
1964 allows you to set both the mount options and the vfstype
1965 as for the L<mount(8)> I<-o> and I<-t> flags.");
1966
1967   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
1968    [],
1969    "debugging and internals",
1970    "\
1971 The C<guestfs_debug> command exposes some internals of
1972 C<guestfsd> (the guestfs daemon) that runs inside the
1973 qemu subprocess.
1974
1975 There is no comprehensive help for this command.  You have
1976 to look at the file C<daemon/debug.c> in the libguestfs source
1977 to find out what you can do.");
1978
1979   ("lvremove", (RErr, [Device "device"]), 77, [],
1980    [InitEmpty, Always, TestOutputList (
1981       [["sfdiskM"; "/dev/sda"; ","];
1982        ["pvcreate"; "/dev/sda1"];
1983        ["vgcreate"; "VG"; "/dev/sda1"];
1984        ["lvcreate"; "LV1"; "VG"; "50"];
1985        ["lvcreate"; "LV2"; "VG"; "50"];
1986        ["lvremove"; "/dev/VG/LV1"];
1987        ["lvs"]], ["/dev/VG/LV2"]);
1988     InitEmpty, Always, TestOutputList (
1989       [["sfdiskM"; "/dev/sda"; ","];
1990        ["pvcreate"; "/dev/sda1"];
1991        ["vgcreate"; "VG"; "/dev/sda1"];
1992        ["lvcreate"; "LV1"; "VG"; "50"];
1993        ["lvcreate"; "LV2"; "VG"; "50"];
1994        ["lvremove"; "/dev/VG"];
1995        ["lvs"]], []);
1996     InitEmpty, Always, TestOutputList (
1997       [["sfdiskM"; "/dev/sda"; ","];
1998        ["pvcreate"; "/dev/sda1"];
1999        ["vgcreate"; "VG"; "/dev/sda1"];
2000        ["lvcreate"; "LV1"; "VG"; "50"];
2001        ["lvcreate"; "LV2"; "VG"; "50"];
2002        ["lvremove"; "/dev/VG"];
2003        ["vgs"]], ["VG"])],
2004    "remove an LVM logical volume",
2005    "\
2006 Remove an LVM logical volume C<device>, where C<device> is
2007 the path to the LV, such as C</dev/VG/LV>.
2008
2009 You can also remove all LVs in a volume group by specifying
2010 the VG name, C</dev/VG>.");
2011
2012   ("vgremove", (RErr, [String "vgname"]), 78, [],
2013    [InitEmpty, Always, TestOutputList (
2014       [["sfdiskM"; "/dev/sda"; ","];
2015        ["pvcreate"; "/dev/sda1"];
2016        ["vgcreate"; "VG"; "/dev/sda1"];
2017        ["lvcreate"; "LV1"; "VG"; "50"];
2018        ["lvcreate"; "LV2"; "VG"; "50"];
2019        ["vgremove"; "VG"];
2020        ["lvs"]], []);
2021     InitEmpty, Always, TestOutputList (
2022       [["sfdiskM"; "/dev/sda"; ","];
2023        ["pvcreate"; "/dev/sda1"];
2024        ["vgcreate"; "VG"; "/dev/sda1"];
2025        ["lvcreate"; "LV1"; "VG"; "50"];
2026        ["lvcreate"; "LV2"; "VG"; "50"];
2027        ["vgremove"; "VG"];
2028        ["vgs"]], [])],
2029    "remove an LVM volume group",
2030    "\
2031 Remove an LVM volume group C<vgname>, (for example C<VG>).
2032
2033 This also forcibly removes all logical volumes in the volume
2034 group (if any).");
2035
2036   ("pvremove", (RErr, [Device "device"]), 79, [],
2037    [InitEmpty, Always, TestOutputListOfDevices (
2038       [["sfdiskM"; "/dev/sda"; ","];
2039        ["pvcreate"; "/dev/sda1"];
2040        ["vgcreate"; "VG"; "/dev/sda1"];
2041        ["lvcreate"; "LV1"; "VG"; "50"];
2042        ["lvcreate"; "LV2"; "VG"; "50"];
2043        ["vgremove"; "VG"];
2044        ["pvremove"; "/dev/sda1"];
2045        ["lvs"]], []);
2046     InitEmpty, Always, TestOutputListOfDevices (
2047       [["sfdiskM"; "/dev/sda"; ","];
2048        ["pvcreate"; "/dev/sda1"];
2049        ["vgcreate"; "VG"; "/dev/sda1"];
2050        ["lvcreate"; "LV1"; "VG"; "50"];
2051        ["lvcreate"; "LV2"; "VG"; "50"];
2052        ["vgremove"; "VG"];
2053        ["pvremove"; "/dev/sda1"];
2054        ["vgs"]], []);
2055     InitEmpty, Always, TestOutputListOfDevices (
2056       [["sfdiskM"; "/dev/sda"; ","];
2057        ["pvcreate"; "/dev/sda1"];
2058        ["vgcreate"; "VG"; "/dev/sda1"];
2059        ["lvcreate"; "LV1"; "VG"; "50"];
2060        ["lvcreate"; "LV2"; "VG"; "50"];
2061        ["vgremove"; "VG"];
2062        ["pvremove"; "/dev/sda1"];
2063        ["pvs"]], [])],
2064    "remove an LVM physical volume",
2065    "\
2066 This wipes a physical volume C<device> so that LVM will no longer
2067 recognise it.
2068
2069 The implementation uses the C<pvremove> command which refuses to
2070 wipe physical volumes that contain any volume groups, so you have
2071 to remove those first.");
2072
2073   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2074    [InitBasicFS, Always, TestOutput (
2075       [["set_e2label"; "/dev/sda1"; "testlabel"];
2076        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2077    "set the ext2/3/4 filesystem label",
2078    "\
2079 This sets the ext2/3/4 filesystem label of the filesystem on
2080 C<device> to C<label>.  Filesystem labels are limited to
2081 16 characters.
2082
2083 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2084 to return the existing label on a filesystem.");
2085
2086   ("get_e2label", (RString "label", [Device "device"]), 81, [],
2087    [],
2088    "get the ext2/3/4 filesystem label",
2089    "\
2090 This returns the ext2/3/4 filesystem label of the filesystem on
2091 C<device>.");
2092
2093   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2094    (let uuid = uuidgen () in
2095     [InitBasicFS, Always, TestOutput (
2096        [["set_e2uuid"; "/dev/sda1"; uuid];
2097         ["get_e2uuid"; "/dev/sda1"]], uuid);
2098      InitBasicFS, Always, TestOutput (
2099        [["set_e2uuid"; "/dev/sda1"; "clear"];
2100         ["get_e2uuid"; "/dev/sda1"]], "");
2101      (* We can't predict what UUIDs will be, so just check the commands run. *)
2102      InitBasicFS, Always, TestRun (
2103        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2104      InitBasicFS, Always, TestRun (
2105        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2106    "set the ext2/3/4 filesystem UUID",
2107    "\
2108 This sets the ext2/3/4 filesystem UUID of the filesystem on
2109 C<device> to C<uuid>.  The format of the UUID and alternatives
2110 such as C<clear>, C<random> and C<time> are described in the
2111 L<tune2fs(8)> manpage.
2112
2113 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2114 to return the existing UUID of a filesystem.");
2115
2116   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [],
2117    [],
2118    "get the ext2/3/4 filesystem UUID",
2119    "\
2120 This returns the ext2/3/4 filesystem UUID of the filesystem on
2121 C<device>.");
2122
2123   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [],
2124    [InitBasicFS, Always, TestOutputInt (
2125       [["umount"; "/dev/sda1"];
2126        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2127     InitBasicFS, Always, TestOutputInt (
2128       [["umount"; "/dev/sda1"];
2129        ["zero"; "/dev/sda1"];
2130        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2131    "run the filesystem checker",
2132    "\
2133 This runs the filesystem checker (fsck) on C<device> which
2134 should have filesystem type C<fstype>.
2135
2136 The returned integer is the status.  See L<fsck(8)> for the
2137 list of status codes from C<fsck>.
2138
2139 Notes:
2140
2141 =over 4
2142
2143 =item *
2144
2145 Multiple status codes can be summed together.
2146
2147 =item *
2148
2149 A non-zero return code can mean \"success\", for example if
2150 errors have been corrected on the filesystem.
2151
2152 =item *
2153
2154 Checking or repairing NTFS volumes is not supported
2155 (by linux-ntfs).
2156
2157 =back
2158
2159 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2160
2161   ("zero", (RErr, [Device "device"]), 85, [],
2162    [InitBasicFS, Always, TestOutput (
2163       [["umount"; "/dev/sda1"];
2164        ["zero"; "/dev/sda1"];
2165        ["file"; "/dev/sda1"]], "data")],
2166    "write zeroes to the device",
2167    "\
2168 This command writes zeroes over the first few blocks of C<device>.
2169
2170 How many blocks are zeroed isn't specified (but it's I<not> enough
2171 to securely wipe the device).  It should be sufficient to remove
2172 any partition tables, filesystem superblocks and so on.
2173
2174 See also: C<guestfs_scrub_device>.");
2175
2176   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2177    (* Test disabled because grub-install incompatible with virtio-blk driver.
2178     * See also: https://bugzilla.redhat.com/show_bug.cgi?id=479760
2179     *)
2180    [InitBasicFS, Disabled, TestOutputTrue (
2181       [["grub_install"; "/"; "/dev/sda1"];
2182        ["is_dir"; "/boot"]])],
2183    "install GRUB",
2184    "\
2185 This command installs GRUB (the Grand Unified Bootloader) on
2186 C<device>, with the root directory being C<root>.");
2187
2188   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2189    [InitBasicFS, Always, TestOutput (
2190       [["write_file"; "/old"; "file content"; "0"];
2191        ["cp"; "/old"; "/new"];
2192        ["cat"; "/new"]], "file content");
2193     InitBasicFS, Always, TestOutputTrue (
2194       [["write_file"; "/old"; "file content"; "0"];
2195        ["cp"; "/old"; "/new"];
2196        ["is_file"; "/old"]]);
2197     InitBasicFS, Always, TestOutput (
2198       [["write_file"; "/old"; "file content"; "0"];
2199        ["mkdir"; "/dir"];
2200        ["cp"; "/old"; "/dir/new"];
2201        ["cat"; "/dir/new"]], "file content")],
2202    "copy a file",
2203    "\
2204 This copies a file from C<src> to C<dest> where C<dest> is
2205 either a destination filename or destination directory.");
2206
2207   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2208    [InitBasicFS, Always, TestOutput (
2209       [["mkdir"; "/olddir"];
2210        ["mkdir"; "/newdir"];
2211        ["write_file"; "/olddir/file"; "file content"; "0"];
2212        ["cp_a"; "/olddir"; "/newdir"];
2213        ["cat"; "/newdir/olddir/file"]], "file content")],
2214    "copy a file or directory recursively",
2215    "\
2216 This copies a file or directory from C<src> to C<dest>
2217 recursively using the C<cp -a> command.");
2218
2219   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2220    [InitBasicFS, Always, TestOutput (
2221       [["write_file"; "/old"; "file content"; "0"];
2222        ["mv"; "/old"; "/new"];
2223        ["cat"; "/new"]], "file content");
2224     InitBasicFS, Always, TestOutputFalse (
2225       [["write_file"; "/old"; "file content"; "0"];
2226        ["mv"; "/old"; "/new"];
2227        ["is_file"; "/old"]])],
2228    "move a file",
2229    "\
2230 This moves a file from C<src> to C<dest> where C<dest> is
2231 either a destination filename or destination directory.");
2232
2233   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2234    [InitEmpty, Always, TestRun (
2235       [["drop_caches"; "3"]])],
2236    "drop kernel page cache, dentries and inodes",
2237    "\
2238 This instructs the guest kernel to drop its page cache,
2239 and/or dentries and inode caches.  The parameter C<whattodrop>
2240 tells the kernel what precisely to drop, see
2241 L<http://linux-mm.org/Drop_Caches>
2242
2243 Setting C<whattodrop> to 3 should drop everything.
2244
2245 This automatically calls L<sync(2)> before the operation,
2246 so that the maximum guest memory is freed.");
2247
2248   ("dmesg", (RString "kmsgs", []), 91, [],
2249    [InitEmpty, Always, TestRun (
2250       [["dmesg"]])],
2251    "return kernel messages",
2252    "\
2253 This returns the kernel messages (C<dmesg> output) from
2254 the guest kernel.  This is sometimes useful for extended
2255 debugging of problems.
2256
2257 Another way to get the same information is to enable
2258 verbose messages with C<guestfs_set_verbose> or by setting
2259 the environment variable C<LIBGUESTFS_DEBUG=1> before
2260 running the program.");
2261
2262   ("ping_daemon", (RErr, []), 92, [],
2263    [InitEmpty, Always, TestRun (
2264       [["ping_daemon"]])],
2265    "ping the guest daemon",
2266    "\
2267 This is a test probe into the guestfs daemon running inside
2268 the qemu subprocess.  Calling this function checks that the
2269 daemon responds to the ping message, without affecting the daemon
2270 or attached block device(s) in any other way.");
2271
2272   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2273    [InitBasicFS, Always, TestOutputTrue (
2274       [["write_file"; "/file1"; "contents of a file"; "0"];
2275        ["cp"; "/file1"; "/file2"];
2276        ["equal"; "/file1"; "/file2"]]);
2277     InitBasicFS, Always, TestOutputFalse (
2278       [["write_file"; "/file1"; "contents of a file"; "0"];
2279        ["write_file"; "/file2"; "contents of another file"; "0"];
2280        ["equal"; "/file1"; "/file2"]]);
2281     InitBasicFS, Always, TestLastFail (
2282       [["equal"; "/file1"; "/file2"]])],
2283    "test if two files have equal contents",
2284    "\
2285 This compares the two files C<file1> and C<file2> and returns
2286 true if their content is exactly equal, or false otherwise.
2287
2288 The external L<cmp(1)> program is used for the comparison.");
2289
2290   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2291    [InitSquashFS, Always, TestOutputList (
2292       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2293     InitSquashFS, Always, TestOutputList (
2294       [["strings"; "/empty"]], [])],
2295    "print the printable strings in a file",
2296    "\
2297 This runs the L<strings(1)> command on a file and returns
2298 the list of printable strings found.");
2299
2300   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2301    [InitSquashFS, Always, TestOutputList (
2302       [["strings_e"; "b"; "/known-5"]], []);
2303     InitBasicFS, Disabled, TestOutputList (
2304       [["write_file"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"; "24"];
2305        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2306    "print the printable strings in a file",
2307    "\
2308 This is like the C<guestfs_strings> command, but allows you to
2309 specify the encoding.
2310
2311 See the L<strings(1)> manpage for the full list of encodings.
2312
2313 Commonly useful encodings are C<l> (lower case L) which will
2314 show strings inside Windows/x86 files.
2315
2316 The returned strings are transcoded to UTF-8.");
2317
2318   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2319    [InitSquashFS, Always, TestOutput (
2320       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2321     (* Test for RHBZ#501888c2 regression which caused large hexdump
2322      * commands to segfault.
2323      *)
2324     InitSquashFS, Always, TestRun (
2325       [["hexdump"; "/100krandom"]])],
2326    "dump a file in hexadecimal",
2327    "\
2328 This runs C<hexdump -C> on the given C<path>.  The result is
2329 the human-readable, canonical hex dump of the file.");
2330
2331   ("zerofree", (RErr, [Device "device"]), 97, [],
2332    [InitNone, Always, TestOutput (
2333       [["sfdiskM"; "/dev/sda"; ","];
2334        ["mkfs"; "ext3"; "/dev/sda1"];
2335        ["mount"; "/dev/sda1"; "/"];
2336        ["write_file"; "/new"; "test file"; "0"];
2337        ["umount"; "/dev/sda1"];
2338        ["zerofree"; "/dev/sda1"];
2339        ["mount"; "/dev/sda1"; "/"];
2340        ["cat"; "/new"]], "test file")],
2341    "zero unused inodes and disk blocks on ext2/3 filesystem",
2342    "\
2343 This runs the I<zerofree> program on C<device>.  This program
2344 claims to zero unused inodes and disk blocks on an ext2/3
2345 filesystem, thus making it possible to compress the filesystem
2346 more effectively.
2347
2348 You should B<not> run this program if the filesystem is
2349 mounted.
2350
2351 It is possible that using this program can damage the filesystem
2352 or data on the filesystem.");
2353
2354   ("pvresize", (RErr, [Device "device"]), 98, [],
2355    [],
2356    "resize an LVM physical volume",
2357    "\
2358 This resizes (expands or shrinks) an existing LVM physical
2359 volume to match the new size of the underlying device.");
2360
2361   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2362                        Int "cyls"; Int "heads"; Int "sectors";
2363                        String "line"]), 99, [DangerWillRobinson],
2364    [],
2365    "modify a single partition on a block device",
2366    "\
2367 This runs L<sfdisk(8)> option to modify just the single
2368 partition C<n> (note: C<n> counts from 1).
2369
2370 For other parameters, see C<guestfs_sfdisk>.  You should usually
2371 pass C<0> for the cyls/heads/sectors parameters.");
2372
2373   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2374    [],
2375    "display the partition table",
2376    "\
2377 This displays the partition table on C<device>, in the
2378 human-readable output of the L<sfdisk(8)> command.  It is
2379 not intended to be parsed.");
2380
2381   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2382    [],
2383    "display the kernel geometry",
2384    "\
2385 This displays the kernel's idea of the geometry of C<device>.
2386
2387 The result is in human-readable format, and not designed to
2388 be parsed.");
2389
2390   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2391    [],
2392    "display the disk geometry from the partition table",
2393    "\
2394 This displays the disk geometry of C<device> read from the
2395 partition table.  Especially in the case where the underlying
2396 block device has been resized, this can be different from the
2397 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2398
2399 The result is in human-readable format, and not designed to
2400 be parsed.");
2401
2402   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [],
2403    [],
2404    "activate or deactivate all volume groups",
2405    "\
2406 This command activates or (if C<activate> is false) deactivates
2407 all logical volumes in all volume groups.
2408 If activated, then they are made known to the
2409 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2410 then those devices disappear.
2411
2412 This command is the same as running C<vgchange -a y|n>");
2413
2414   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [],
2415    [],
2416    "activate or deactivate some volume groups",
2417    "\
2418 This command activates or (if C<activate> is false) deactivates
2419 all logical volumes in the listed volume groups C<volgroups>.
2420 If activated, then they are made known to the
2421 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2422 then those devices disappear.
2423
2424 This command is the same as running C<vgchange -a y|n volgroups...>
2425
2426 Note that if C<volgroups> is an empty list then B<all> volume groups
2427 are activated or deactivated.");
2428
2429   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [],
2430    [InitNone, Always, TestOutput (
2431       [["sfdiskM"; "/dev/sda"; ","];
2432        ["pvcreate"; "/dev/sda1"];
2433        ["vgcreate"; "VG"; "/dev/sda1"];
2434        ["lvcreate"; "LV"; "VG"; "10"];
2435        ["mkfs"; "ext2"; "/dev/VG/LV"];
2436        ["mount"; "/dev/VG/LV"; "/"];
2437        ["write_file"; "/new"; "test content"; "0"];
2438        ["umount"; "/"];
2439        ["lvresize"; "/dev/VG/LV"; "20"];
2440        ["e2fsck_f"; "/dev/VG/LV"];
2441        ["resize2fs"; "/dev/VG/LV"];
2442        ["mount"; "/dev/VG/LV"; "/"];
2443        ["cat"; "/new"]], "test content")],
2444    "resize an LVM logical volume",
2445    "\
2446 This resizes (expands or shrinks) an existing LVM logical
2447 volume to C<mbytes>.  When reducing, data in the reduced part
2448 is lost.");
2449
2450   ("resize2fs", (RErr, [Device "device"]), 106, [],
2451    [], (* lvresize tests this *)
2452    "resize an ext2/ext3 filesystem",
2453    "\
2454 This resizes an ext2 or ext3 filesystem to match the size of
2455 the underlying device.
2456
2457 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2458 on the C<device> before calling this command.  For unknown reasons
2459 C<resize2fs> sometimes gives an error about this and sometimes not.
2460 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2461 calling this function.");
2462
2463   ("find", (RStringList "names", [Pathname "directory"]), 107, [],
2464    [InitBasicFS, Always, TestOutputList (
2465       [["find"; "/"]], ["lost+found"]);
2466     InitBasicFS, Always, TestOutputList (
2467       [["touch"; "/a"];
2468        ["mkdir"; "/b"];
2469        ["touch"; "/b/c"];
2470        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2471     InitBasicFS, Always, TestOutputList (
2472       [["mkdir_p"; "/a/b/c"];
2473        ["touch"; "/a/b/c/d"];
2474        ["find"; "/a/b/"]], ["c"; "c/d"])],
2475    "find all files and directories",
2476    "\
2477 This command lists out all files and directories, recursively,
2478 starting at C<directory>.  It is essentially equivalent to
2479 running the shell command C<find directory -print> but some
2480 post-processing happens on the output, described below.
2481
2482 This returns a list of strings I<without any prefix>.  Thus
2483 if the directory structure was:
2484
2485  /tmp/a
2486  /tmp/b
2487  /tmp/c/d
2488
2489 then the returned list from C<guestfs_find> C</tmp> would be
2490 4 elements:
2491
2492  a
2493  b
2494  c
2495  c/d
2496
2497 If C<directory> is not a directory, then this command returns
2498 an error.
2499
2500 The returned list is sorted.");
2501
2502   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2503    [], (* lvresize tests this *)
2504    "check an ext2/ext3 filesystem",
2505    "\
2506 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2507 filesystem checker on C<device>, noninteractively (C<-p>),
2508 even if the filesystem appears to be clean (C<-f>).
2509
2510 This command is only needed because of C<guestfs_resize2fs>
2511 (q.v.).  Normally you should use C<guestfs_fsck>.");
2512
2513   ("sleep", (RErr, [Int "secs"]), 109, [],
2514    [InitNone, Always, TestRun (
2515       [["sleep"; "1"]])],
2516    "sleep for some seconds",
2517    "\
2518 Sleep for C<secs> seconds.");
2519
2520   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [],
2521    [InitNone, Always, TestOutputInt (
2522       [["sfdiskM"; "/dev/sda"; ","];
2523        ["mkfs"; "ntfs"; "/dev/sda1"];
2524        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2525     InitNone, Always, TestOutputInt (
2526       [["sfdiskM"; "/dev/sda"; ","];
2527        ["mkfs"; "ext2"; "/dev/sda1"];
2528        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2529    "probe NTFS volume",
2530    "\
2531 This command runs the L<ntfs-3g.probe(8)> command which probes
2532 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2533 be mounted read-write, and some cannot be mounted at all).
2534
2535 C<rw> is a boolean flag.  Set it to true if you want to test
2536 if the volume can be mounted read-write.  Set it to false if
2537 you want to test if the volume can be mounted read-only.
2538
2539 The return value is an integer which C<0> if the operation
2540 would succeed, or some non-zero value documented in the
2541 L<ntfs-3g.probe(8)> manual page.");
2542
2543   ("sh", (RString "output", [String "command"]), 111, [],
2544    [], (* XXX needs tests *)
2545    "run a command via the shell",
2546    "\
2547 This call runs a command from the guest filesystem via the
2548 guest's C</bin/sh>.
2549
2550 This is like C<guestfs_command>, but passes the command to:
2551
2552  /bin/sh -c \"command\"
2553
2554 Depending on the guest's shell, this usually results in
2555 wildcards being expanded, shell expressions being interpolated
2556 and so on.
2557
2558 All the provisos about C<guestfs_command> apply to this call.");
2559
2560   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2561    [], (* XXX needs tests *)
2562    "run a command via the shell returning lines",
2563    "\
2564 This is the same as C<guestfs_sh>, but splits the result
2565 into a list of lines.
2566
2567 See also: C<guestfs_command_lines>");
2568
2569   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2570    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2571     * code in stubs.c, since all valid glob patterns must start with "/".
2572     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2573     *)
2574    [InitBasicFS, Always, TestOutputList (
2575       [["mkdir_p"; "/a/b/c"];
2576        ["touch"; "/a/b/c/d"];
2577        ["touch"; "/a/b/c/e"];
2578        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2579     InitBasicFS, Always, TestOutputList (
2580       [["mkdir_p"; "/a/b/c"];
2581        ["touch"; "/a/b/c/d"];
2582        ["touch"; "/a/b/c/e"];
2583        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2584     InitBasicFS, Always, TestOutputList (
2585       [["mkdir_p"; "/a/b/c"];
2586        ["touch"; "/a/b/c/d"];
2587        ["touch"; "/a/b/c/e"];
2588        ["glob_expand"; "/a/*/x/*"]], [])],
2589    "expand a wildcard path",
2590    "\
2591 This command searches for all the pathnames matching
2592 C<pattern> according to the wildcard expansion rules
2593 used by the shell.
2594
2595 If no paths match, then this returns an empty list
2596 (note: not an error).
2597
2598 It is just a wrapper around the C L<glob(3)> function
2599 with flags C<GLOB_MARK|GLOB_BRACE>.
2600 See that manual page for more details.");
2601
2602   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson],
2603    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2604       [["scrub_device"; "/dev/sdc"]])],
2605    "scrub (securely wipe) a device",
2606    "\
2607 This command writes patterns over C<device> to make data retrieval
2608 more difficult.
2609
2610 It is an interface to the L<scrub(1)> program.  See that
2611 manual page for more details.");
2612
2613   ("scrub_file", (RErr, [Pathname "file"]), 115, [],
2614    [InitBasicFS, Always, TestRun (
2615       [["write_file"; "/file"; "content"; "0"];
2616        ["scrub_file"; "/file"]])],
2617    "scrub (securely wipe) a file",
2618    "\
2619 This command writes patterns over a file to make data retrieval
2620 more difficult.
2621
2622 The file is I<removed> after scrubbing.
2623
2624 It is an interface to the L<scrub(1)> program.  See that
2625 manual page for more details.");
2626
2627   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [],
2628    [], (* XXX needs testing *)
2629    "scrub (securely wipe) free space",
2630    "\
2631 This command creates the directory C<dir> and then fills it
2632 with files until the filesystem is full, and scrubs the files
2633 as for C<guestfs_scrub_file>, and deletes them.
2634 The intention is to scrub any free space on the partition
2635 containing C<dir>.
2636
2637 It is an interface to the L<scrub(1)> program.  See that
2638 manual page for more details.");
2639
2640   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2641    [InitBasicFS, Always, TestRun (
2642       [["mkdir"; "/tmp"];
2643        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2644    "create a temporary directory",
2645    "\
2646 This command creates a temporary directory.  The
2647 C<template> parameter should be a full pathname for the
2648 temporary directory name with the final six characters being
2649 \"XXXXXX\".
2650
2651 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2652 the second one being suitable for Windows filesystems.
2653
2654 The name of the temporary directory that was created
2655 is returned.
2656
2657 The temporary directory is created with mode 0700
2658 and is owned by root.
2659
2660 The caller is responsible for deleting the temporary
2661 directory and its contents after use.
2662
2663 See also: L<mkdtemp(3)>");
2664
2665   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2666    [InitSquashFS, Always, TestOutputInt (
2667       [["wc_l"; "/10klines"]], 10000)],
2668    "count lines in a file",
2669    "\
2670 This command counts the lines in a file, using the
2671 C<wc -l> external command.");
2672
2673   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2674    [InitSquashFS, Always, TestOutputInt (
2675       [["wc_w"; "/10klines"]], 10000)],
2676    "count words in a file",
2677    "\
2678 This command counts the words in a file, using the
2679 C<wc -w> external command.");
2680
2681   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2682    [InitSquashFS, Always, TestOutputInt (
2683       [["wc_c"; "/100kallspaces"]], 102400)],
2684    "count characters in a file",
2685    "\
2686 This command counts the characters in a file, using the
2687 C<wc -c> external command.");
2688
2689   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2690    [InitSquashFS, Always, TestOutputList (
2691       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2692    "return first 10 lines of a file",
2693    "\
2694 This command returns up to the first 10 lines of a file as
2695 a list of strings.");
2696
2697   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2698    [InitSquashFS, Always, TestOutputList (
2699       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2700     InitSquashFS, Always, TestOutputList (
2701       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2702     InitSquashFS, Always, TestOutputList (
2703       [["head_n"; "0"; "/10klines"]], [])],
2704    "return first N lines of a file",
2705    "\
2706 If the parameter C<nrlines> is a positive number, this returns the first
2707 C<nrlines> lines of the file C<path>.
2708
2709 If the parameter C<nrlines> is a negative number, this returns lines
2710 from the file C<path>, excluding the last C<nrlines> lines.
2711
2712 If the parameter C<nrlines> is zero, this returns an empty list.");
2713
2714   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2715    [InitSquashFS, Always, TestOutputList (
2716       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2717    "return last 10 lines of a file",
2718    "\
2719 This command returns up to the last 10 lines of a file as
2720 a list of strings.");
2721
2722   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2723    [InitSquashFS, Always, TestOutputList (
2724       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2725     InitSquashFS, Always, TestOutputList (
2726       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2727     InitSquashFS, Always, TestOutputList (
2728       [["tail_n"; "0"; "/10klines"]], [])],
2729    "return last N lines of a file",
2730    "\
2731 If the parameter C<nrlines> is a positive number, this returns the last
2732 C<nrlines> lines of the file C<path>.
2733
2734 If the parameter C<nrlines> is a negative number, this returns lines
2735 from the file C<path>, starting with the C<-nrlines>th line.
2736
2737 If the parameter C<nrlines> is zero, this returns an empty list.");
2738
2739   ("df", (RString "output", []), 125, [],
2740    [], (* XXX Tricky to test because it depends on the exact format
2741         * of the 'df' command and other imponderables.
2742         *)
2743    "report file system disk space usage",
2744    "\
2745 This command runs the C<df> command to report disk space used.
2746
2747 This command is mostly useful for interactive sessions.  It
2748 is I<not> intended that you try to parse the output string.
2749 Use C<statvfs> from programs.");
2750
2751   ("df_h", (RString "output", []), 126, [],
2752    [], (* XXX Tricky to test because it depends on the exact format
2753         * of the 'df' command and other imponderables.
2754         *)
2755    "report file system disk space usage (human readable)",
2756    "\
2757 This command runs the C<df -h> command to report disk space used
2758 in human-readable format.
2759
2760 This command is mostly useful for interactive sessions.  It
2761 is I<not> intended that you try to parse the output string.
2762 Use C<statvfs> from programs.");
2763
2764   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
2765    [InitSquashFS, Always, TestOutputInt (
2766       [["du"; "/directory"]], 0 (* squashfs doesn't have blocks *))],
2767    "estimate file space usage",
2768    "\
2769 This command runs the C<du -s> command to estimate file space
2770 usage for C<path>.
2771
2772 C<path> can be a file or a directory.  If C<path> is a directory
2773 then the estimate includes the contents of the directory and all
2774 subdirectories (recursively).
2775
2776 The result is the estimated size in I<kilobytes>
2777 (ie. units of 1024 bytes).");
2778
2779   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
2780    [InitSquashFS, Always, TestOutputList (
2781       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
2782    "list files in an initrd",
2783    "\
2784 This command lists out files contained in an initrd.
2785
2786 The files are listed without any initial C</> character.  The
2787 files are listed in the order they appear (not necessarily
2788 alphabetical).  Directory names are listed as separate items.
2789
2790 Old Linux kernels (2.4 and earlier) used a compressed ext2
2791 filesystem as initrd.  We I<only> support the newer initramfs
2792 format (compressed cpio files).");
2793
2794   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
2795    [],
2796    "mount a file using the loop device",
2797    "\
2798 This command lets you mount C<file> (a filesystem image
2799 in a file) on a mount point.  It is entirely equivalent to
2800 the command C<mount -o loop file mountpoint>.");
2801
2802   ("mkswap", (RErr, [Device "device"]), 130, [],
2803    [InitEmpty, Always, TestRun (
2804       [["sfdiskM"; "/dev/sda"; ","];
2805        ["mkswap"; "/dev/sda1"]])],
2806    "create a swap partition",
2807    "\
2808 Create a swap partition on C<device>.");
2809
2810   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
2811    [InitEmpty, Always, TestRun (
2812       [["sfdiskM"; "/dev/sda"; ","];
2813        ["mkswap_L"; "hello"; "/dev/sda1"]])],
2814    "create a swap partition with a label",
2815    "\
2816 Create a swap partition on C<device> with label C<label>.
2817
2818 Note that you cannot attach a swap label to a block device
2819 (eg. C</dev/sda>), just to a partition.  This appears to be
2820 a limitation of the kernel or swap tools.");
2821
2822   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [],
2823    (let uuid = uuidgen () in
2824     [InitEmpty, Always, TestRun (
2825        [["sfdiskM"; "/dev/sda"; ","];
2826         ["mkswap_U"; uuid; "/dev/sda1"]])]),
2827    "create a swap partition with an explicit UUID",
2828    "\
2829 Create a swap partition on C<device> with UUID C<uuid>.");
2830
2831   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [],
2832    [InitBasicFS, Always, TestOutputStruct (
2833       [["mknod"; "0o10777"; "0"; "0"; "/node"];
2834        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
2835        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
2836     InitBasicFS, Always, TestOutputStruct (
2837       [["mknod"; "0o60777"; "66"; "99"; "/node"];
2838        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2839    "make block, character or FIFO devices",
2840    "\
2841 This call creates block or character special devices, or
2842 named pipes (FIFOs).
2843
2844 The C<mode> parameter should be the mode, using the standard
2845 constants.  C<devmajor> and C<devminor> are the
2846 device major and minor numbers, only used when creating block
2847 and character special devices.");
2848
2849   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [],
2850    [InitBasicFS, Always, TestOutputStruct (
2851       [["mkfifo"; "0o777"; "/node"];
2852        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
2853    "make FIFO (named pipe)",
2854    "\
2855 This call creates a FIFO (named pipe) called C<path> with
2856 mode C<mode>.  It is just a convenient wrapper around
2857 C<guestfs_mknod>.");
2858
2859   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [],
2860    [InitBasicFS, Always, TestOutputStruct (
2861       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
2862        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2863    "make block device node",
2864    "\
2865 This call creates a block device node called C<path> with
2866 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2867 It is just a convenient wrapper around C<guestfs_mknod>.");
2868
2869   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [],
2870    [InitBasicFS, Always, TestOutputStruct (
2871       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
2872        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
2873    "make char device node",
2874    "\
2875 This call creates a char device node called C<path> with
2876 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2877 It is just a convenient wrapper around C<guestfs_mknod>.");
2878
2879   ("umask", (RInt "oldmask", [Int "mask"]), 137, [],
2880    [], (* XXX umask is one of those stateful things that we should
2881         * reset between each test.
2882         *)
2883    "set file mode creation mask (umask)",
2884    "\
2885 This function sets the mask used for creating new files and
2886 device nodes to C<mask & 0777>.
2887
2888 Typical umask values would be C<022> which creates new files
2889 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
2890 C<002> which creates new files with permissions like
2891 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
2892
2893 The default umask is C<022>.  This is important because it
2894 means that directories and device nodes will be created with
2895 C<0644> or C<0755> mode even if you specify C<0777>.
2896
2897 See also L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
2898
2899 This call returns the previous umask.");
2900
2901   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
2902    [],
2903    "read directories entries",
2904    "\
2905 This returns the list of directory entries in directory C<dir>.
2906
2907 All entries in the directory are returned, including C<.> and
2908 C<..>.  The entries are I<not> sorted, but returned in the same
2909 order as the underlying filesystem.
2910
2911 Also this call returns basic file type information about each
2912 file.  The C<ftyp> field will contain one of the following characters:
2913
2914 =over 4
2915
2916 =item 'b'
2917
2918 Block special
2919
2920 =item 'c'
2921
2922 Char special
2923
2924 =item 'd'
2925
2926 Directory
2927
2928 =item 'f'
2929
2930 FIFO (named pipe)
2931
2932 =item 'l'
2933
2934 Symbolic link
2935
2936 =item 'r'
2937
2938 Regular file
2939
2940 =item 's'
2941
2942 Socket
2943
2944 =item 'u'
2945
2946 Unknown file type
2947
2948 =item '?'
2949
2950 The L<readdir(3)> returned a C<d_type> field with an
2951 unexpected value
2952
2953 =back
2954
2955 This function is primarily intended for use by programs.  To
2956 get a simple list of names, use C<guestfs_ls>.  To get a printable
2957 directory for human consumption, use C<guestfs_ll>.");
2958
2959   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
2960    [],
2961    "create partitions on a block device",
2962    "\
2963 This is a simplified interface to the C<guestfs_sfdisk>
2964 command, where partition sizes are specified in megabytes
2965 only (rounded to the nearest cylinder) and you don't need
2966 to specify the cyls, heads and sectors parameters which
2967 were rarely if ever used anyway.
2968
2969 See also C<guestfs_sfdisk> and the L<sfdisk(8)> manpage.");
2970
2971   ("zfile", (RString "description", [String "method"; Pathname "path"]), 140, [DeprecatedBy "file"],
2972    [],
2973    "determine file type inside a compressed file",
2974    "\
2975 This command runs C<file> after first decompressing C<path>
2976 using C<method>.
2977
2978 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
2979
2980 Since 1.0.63, use C<guestfs_file> instead which can now
2981 process compressed files.");
2982
2983   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [],
2984    [],
2985    "list extended attributes of a file or directory",
2986    "\
2987 This call lists the extended attributes of the file or directory
2988 C<path>.
2989
2990 At the system call level, this is a combination of the
2991 L<listxattr(2)> and L<getxattr(2)> calls.
2992
2993 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
2994
2995   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [],
2996    [],
2997    "list extended attributes of a file or directory",
2998    "\
2999 This is the same as C<guestfs_getxattrs>, but if C<path>
3000 is a symbolic link, then it returns the extended attributes
3001 of the link itself.");
3002
3003   ("setxattr", (RErr, [String "xattr";
3004                        String "val"; Int "vallen"; (* will be BufferIn *)
3005                        Pathname "path"]), 143, [],
3006    [],
3007    "set extended attribute of a file or directory",
3008    "\
3009 This call sets the extended attribute named C<xattr>
3010 of the file C<path> to the value C<val> (of length C<vallen>).
3011 The value is arbitrary 8 bit data.
3012
3013 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3014
3015   ("lsetxattr", (RErr, [String "xattr";
3016                         String "val"; Int "vallen"; (* will be BufferIn *)
3017                         Pathname "path"]), 144, [],
3018    [],
3019    "set extended attribute of a file or directory",
3020    "\
3021 This is the same as C<guestfs_setxattr>, but if C<path>
3022 is a symbolic link, then it sets an extended attribute
3023 of the link itself.");
3024
3025   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [],
3026    [],
3027    "remove extended attribute of a file or directory",
3028    "\
3029 This call removes the extended attribute named C<xattr>
3030 of the file C<path>.
3031
3032 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3033
3034   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [],
3035    [],
3036    "remove extended attribute of a file or directory",
3037    "\
3038 This is the same as C<guestfs_removexattr>, but if C<path>
3039 is a symbolic link, then it removes an extended attribute
3040 of the link itself.");
3041
3042   ("mountpoints", (RHashtable "mps", []), 147, [],
3043    [],
3044    "show mountpoints",
3045    "\
3046 This call is similar to C<guestfs_mounts>.  That call returns
3047 a list of devices.  This one returns a hash table (map) of
3048 device name to directory where the device is mounted.");
3049
3050   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3051   (* This is a special case: while you would expect a parameter
3052    * of type "Pathname", that doesn't work, because it implies
3053    * NEED_ROOT in the generated calling code in stubs.c, and
3054    * this function cannot use NEED_ROOT.
3055    *)
3056    [],
3057    "create a mountpoint",
3058    "\
3059 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3060 specialized calls that can be used to create extra mountpoints
3061 before mounting the first filesystem.
3062
3063 These calls are I<only> necessary in some very limited circumstances,
3064 mainly the case where you want to mount a mix of unrelated and/or
3065 read-only filesystems together.
3066
3067 For example, live CDs often contain a \"Russian doll\" nest of
3068 filesystems, an ISO outer layer, with a squashfs image inside, with
3069 an ext2/3 image inside that.  You can unpack this as follows
3070 in guestfish:
3071
3072  add-ro Fedora-11-i686-Live.iso
3073  run
3074  mkmountpoint /cd
3075  mkmountpoint /squash
3076  mkmountpoint /ext3
3077  mount /dev/sda /cd
3078  mount-loop /cd/LiveOS/squashfs.img /squash
3079  mount-loop /squash/LiveOS/ext3fs.img /ext3
3080
3081 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3082
3083   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3084    [],
3085    "remove a mountpoint",
3086    "\
3087 This calls removes a mountpoint that was previously created
3088 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3089 for full details.");
3090
3091   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3092    [InitSquashFS, Always, TestOutputBuffer (
3093       [["read_file"; "/known-4"]], "abc\ndef\nghi")],
3094    "read a file",
3095    "\
3096 This calls returns the contents of the file C<path> as a
3097 buffer.
3098
3099 Unlike C<guestfs_cat>, this function can correctly
3100 handle files that contain embedded ASCII NUL characters.
3101 However unlike C<guestfs_download>, this function is limited
3102 in the total size of file that can be handled.");
3103
3104   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3105    [InitSquashFS, Always, TestOutputList (
3106       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3107     InitSquashFS, Always, TestOutputList (
3108       [["grep"; "nomatch"; "/test-grep.txt"]], [])],
3109    "return lines matching a pattern",
3110    "\
3111 This calls the external C<grep> program and returns the
3112 matching lines.");
3113
3114   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3115    [InitSquashFS, Always, TestOutputList (
3116       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3117    "return lines matching a pattern",
3118    "\
3119 This calls the external C<egrep> program and returns the
3120 matching lines.");
3121
3122   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3123    [InitSquashFS, Always, TestOutputList (
3124       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3125    "return lines matching a pattern",
3126    "\
3127 This calls the external C<fgrep> program and returns the
3128 matching lines.");
3129
3130   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3131    [InitSquashFS, Always, TestOutputList (
3132       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3133    "return lines matching a pattern",
3134    "\
3135 This calls the external C<grep -i> program and returns the
3136 matching lines.");
3137
3138   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3139    [InitSquashFS, Always, TestOutputList (
3140       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3141    "return lines matching a pattern",
3142    "\
3143 This calls the external C<egrep -i> program and returns the
3144 matching lines.");
3145
3146   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3147    [InitSquashFS, Always, TestOutputList (
3148       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3149    "return lines matching a pattern",
3150    "\
3151 This calls the external C<fgrep -i> program and returns the
3152 matching lines.");
3153
3154   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3155    [InitSquashFS, Always, TestOutputList (
3156       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3157    "return lines matching a pattern",
3158    "\
3159 This calls the external C<zgrep> program and returns the
3160 matching lines.");
3161
3162   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3163    [InitSquashFS, Always, TestOutputList (
3164       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3165    "return lines matching a pattern",
3166    "\
3167 This calls the external C<zegrep> program and returns the
3168 matching lines.");
3169
3170   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3171    [InitSquashFS, Always, TestOutputList (
3172       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3173    "return lines matching a pattern",
3174    "\
3175 This calls the external C<zfgrep> program and returns the
3176 matching lines.");
3177
3178   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3179    [InitSquashFS, Always, TestOutputList (
3180       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3181    "return lines matching a pattern",
3182    "\
3183 This calls the external C<zgrep -i> program and returns the
3184 matching lines.");
3185
3186   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3187    [InitSquashFS, Always, TestOutputList (
3188       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3189    "return lines matching a pattern",
3190    "\
3191 This calls the external C<zegrep -i> program and returns the
3192 matching lines.");
3193
3194   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3195    [InitSquashFS, Always, TestOutputList (
3196       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3197    "return lines matching a pattern",
3198    "\
3199 This calls the external C<zfgrep -i> program and returns the
3200 matching lines.");
3201
3202   ("realpath", (RString "rpath", [Pathname "path"]), 163, [],
3203    [InitSquashFS, Always, TestOutput (
3204       [["realpath"; "/../directory"]], "/directory")],
3205    "canonicalized absolute pathname",
3206    "\
3207 Return the canonicalized absolute pathname of C<path>.  The
3208 returned path has no C<.>, C<..> or symbolic link path elements.");
3209
3210   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3211    [InitBasicFS, Always, TestOutputStruct (
3212       [["touch"; "/a"];
3213        ["ln"; "/a"; "/b"];
3214        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3215    "create a hard link",
3216    "\
3217 This command creates a hard link using the C<ln> command.");
3218
3219   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3220    [InitBasicFS, Always, TestOutputStruct (
3221       [["touch"; "/a"];
3222        ["touch"; "/b"];
3223        ["ln_f"; "/a"; "/b"];
3224        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3225    "create a hard link",
3226    "\
3227 This command creates a hard link using the C<ln -f> command.
3228 The C<-f> option removes the link (C<linkname>) if it exists already.");
3229
3230   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3231    [InitBasicFS, Always, TestOutputStruct (
3232       [["touch"; "/a"];
3233        ["ln_s"; "a"; "/b"];
3234        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3235    "create a symbolic link",
3236    "\
3237 This command creates a symbolic link using the C<ln -s> command.");
3238
3239   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3240    [InitBasicFS, Always, TestOutput (
3241       [["mkdir_p"; "/a/b"];
3242        ["touch"; "/a/b/c"];
3243        ["ln_sf"; "../d"; "/a/b/c"];
3244        ["readlink"; "/a/b/c"]], "../d")],
3245    "create a symbolic link",
3246    "\
3247 This command creates a symbolic link using the C<ln -sf> command,
3248 The C<-f> option removes the link (C<linkname>) if it exists already.");
3249
3250   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3251    [] (* XXX tested above *),
3252    "read the target of a symbolic link",
3253    "\
3254 This command reads the target of a symbolic link.");
3255
3256   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [],
3257    [InitBasicFS, Always, TestOutputStruct (
3258       [["fallocate"; "/a"; "1000000"];
3259        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3260    "preallocate a file in the guest filesystem",
3261    "\
3262 This command preallocates a file (containing zero bytes) named
3263 C<path> of size C<len> bytes.  If the file exists already, it
3264 is overwritten.
3265
3266 Do not confuse this with the guestfish-specific
3267 C<alloc> command which allocates a file in the host and
3268 attaches it as a device.");
3269
3270   ("swapon_device", (RErr, [Device "device"]), 170, [],
3271    [InitPartition, Always, TestRun (
3272       [["mkswap"; "/dev/sda1"];
3273        ["swapon_device"; "/dev/sda1"];
3274        ["swapoff_device"; "/dev/sda1"]])],
3275    "enable swap on device",
3276    "\
3277 This command enables the libguestfs appliance to use the
3278 swap device or partition named C<device>.  The increased
3279 memory is made available for all commands, for example
3280 those run using C<guestfs_command> or C<guestfs_sh>.
3281
3282 Note that you should not swap to existing guest swap
3283 partitions unless you know what you are doing.  They may
3284 contain hibernation information, or other information that
3285 the guest doesn't want you to trash.  You also risk leaking
3286 information about the host to the guest this way.  Instead,
3287 attach a new host device to the guest and swap on that.");
3288
3289   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3290    [], (* XXX tested by swapon_device *)
3291    "disable swap on device",
3292    "\
3293 This command disables the libguestfs appliance swap
3294 device or partition named C<device>.
3295 See C<guestfs_swapon_device>.");
3296
3297   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3298    [InitBasicFS, Always, TestRun (
3299       [["fallocate"; "/swap"; "8388608"];
3300        ["mkswap_file"; "/swap"];
3301        ["swapon_file"; "/swap"];
3302        ["swapoff_file"; "/swap"]])],
3303    "enable swap on file",
3304    "\
3305 This command enables swap to a file.
3306 See C<guestfs_swapon_device> for other notes.");
3307
3308   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3309    [], (* XXX tested by swapon_file *)
3310    "disable swap on file",
3311    "\
3312 This command disables the libguestfs appliance swap on file.");
3313
3314   ("swapon_label", (RErr, [String "label"]), 174, [],
3315    [InitEmpty, Always, TestRun (
3316       [["sfdiskM"; "/dev/sdb"; ","];
3317        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3318        ["swapon_label"; "swapit"];
3319        ["swapoff_label"; "swapit"];
3320        ["zero"; "/dev/sdb"];
3321        ["blockdev_rereadpt"; "/dev/sdb"]])],
3322    "enable swap on labeled swap partition",
3323    "\
3324 This command enables swap to a labeled swap partition.
3325 See C<guestfs_swapon_device> for other notes.");
3326
3327   ("swapoff_label", (RErr, [String "label"]), 175, [],
3328    [], (* XXX tested by swapon_label *)
3329    "disable swap on labeled swap partition",
3330    "\
3331 This command disables the libguestfs appliance swap on
3332 labeled swap partition.");
3333
3334   ("swapon_uuid", (RErr, [String "uuid"]), 176, [],
3335    (let uuid = uuidgen () in
3336     [InitEmpty, Always, TestRun (
3337        [["mkswap_U"; uuid; "/dev/sdb"];
3338         ["swapon_uuid"; uuid];
3339         ["swapoff_uuid"; uuid]])]),
3340    "enable swap on swap partition by UUID",
3341    "\
3342 This command enables swap to a swap partition with the given UUID.
3343 See C<guestfs_swapon_device> for other notes.");
3344
3345   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [],
3346    [], (* XXX tested by swapon_uuid *)
3347    "disable swap on swap partition by UUID",
3348    "\
3349 This command disables the libguestfs appliance swap partition
3350 with the given UUID.");
3351
3352   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3353    [InitBasicFS, Always, TestRun (
3354       [["fallocate"; "/swap"; "8388608"];
3355        ["mkswap_file"; "/swap"]])],
3356    "create a swap file",
3357    "\
3358 Create a swap file.
3359
3360 This command just writes a swap file signature to an existing
3361 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3362
3363   ("inotify_init", (RErr, [Int "maxevents"]), 179, [],
3364    [InitSquashFS, Always, TestRun (
3365       [["inotify_init"; "0"]])],
3366    "create an inotify handle",
3367    "\
3368 This command creates a new inotify handle.
3369 The inotify subsystem can be used to notify events which happen to
3370 objects in the guest filesystem.
3371
3372 C<maxevents> is the maximum number of events which will be
3373 queued up between calls to C<guestfs_inotify_read> or
3374 C<guestfs_inotify_files>.
3375 If this is passed as C<0>, then the kernel (or previously set)
3376 default is used.  For Linux 2.6.29 the default was 16384 events.
3377 Beyond this limit, the kernel throws away events, but records
3378 the fact that it threw them away by setting a flag
3379 C<IN_Q_OVERFLOW> in the returned structure list (see
3380 C<guestfs_inotify_read>).
3381
3382 Before any events are generated, you have to add some
3383 watches to the internal watch list.  See:
3384 C<guestfs_inotify_add_watch>,
3385 C<guestfs_inotify_rm_watch> and
3386 C<guestfs_inotify_watch_all>.
3387
3388 Queued up events should be read periodically by calling
3389 C<guestfs_inotify_read>
3390 (or C<guestfs_inotify_files> which is just a helpful
3391 wrapper around C<guestfs_inotify_read>).  If you don't
3392 read the events out often enough then you risk the internal
3393 queue overflowing.
3394
3395 The handle should be closed after use by calling
3396 C<guestfs_inotify_close>.  This also removes any
3397 watches automatically.
3398
3399 See also L<inotify(7)> for an overview of the inotify interface
3400 as exposed by the Linux kernel, which is roughly what we expose
3401 via libguestfs.  Note that there is one global inotify handle
3402 per libguestfs instance.");
3403
3404   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [],
3405    [InitBasicFS, Always, TestOutputList (
3406       [["inotify_init"; "0"];
3407        ["inotify_add_watch"; "/"; "1073741823"];
3408        ["touch"; "/a"];
3409        ["touch"; "/b"];
3410        ["inotify_files"]], ["a"; "b"])],
3411    "add an inotify watch",
3412    "\
3413 Watch C<path> for the events listed in C<mask>.
3414
3415 Note that if C<path> is a directory then events within that
3416 directory are watched, but this does I<not> happen recursively
3417 (in subdirectories).
3418
3419 Note for non-C or non-Linux callers: the inotify events are
3420 defined by the Linux kernel ABI and are listed in
3421 C</usr/include/sys/inotify.h>.");
3422
3423   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [],
3424    [],
3425    "remove an inotify watch",
3426    "\
3427 Remove a previously defined inotify watch.
3428 See C<guestfs_inotify_add_watch>.");
3429
3430   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [],
3431    [],
3432    "return list of inotify events",
3433    "\
3434 Return the complete queue of events that have happened
3435 since the previous read call.
3436
3437 If no events have happened, this returns an empty list.
3438
3439 I<Note>: In order to make sure that all events have been
3440 read, you must call this function repeatedly until it
3441 returns an empty list.  The reason is that the call will
3442 read events up to the maximum appliance-to-host message
3443 size and leave remaining events in the queue.");
3444
3445   ("inotify_files", (RStringList "paths", []), 183, [],
3446    [],
3447    "return list of watched files that had events",
3448    "\
3449 This function is a helpful wrapper around C<guestfs_inotify_read>
3450 which just returns a list of pathnames of objects that were
3451 touched.  The returned pathnames are sorted and deduplicated.");
3452
3453   ("inotify_close", (RErr, []), 184, [],
3454    [],
3455    "close the inotify handle",
3456    "\
3457 This closes the inotify handle which was previously
3458 opened by inotify_init.  It removes all watches, throws
3459 away any pending events, and deallocates all resources.");
3460
3461   ("setcon", (RErr, [String "context"]), 185, [],
3462    [],
3463    "set SELinux security context",
3464    "\
3465 This sets the SELinux security context of the daemon
3466 to the string C<context>.
3467
3468 See the documentation about SELINUX in L<guestfs(3)>.");
3469
3470   ("getcon", (RString "context", []), 186, [],
3471    [],
3472    "get SELinux security context",
3473    "\
3474 This gets the SELinux security context of the daemon.
3475
3476 See the documentation about SELINUX in L<guestfs(3)>,
3477 and C<guestfs_setcon>");
3478
3479   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3480    [InitEmpty, Always, TestOutput (
3481       [["sfdiskM"; "/dev/sda"; ","];
3482        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3483        ["mount"; "/dev/sda1"; "/"];
3484        ["write_file"; "/new"; "new file contents"; "0"];
3485        ["cat"; "/new"]], "new file contents")],
3486    "make a filesystem with block size",
3487    "\
3488 This call is similar to C<guestfs_mkfs>, but it allows you to
3489 control the block size of the resulting filesystem.  Supported
3490 block sizes depend on the filesystem type, but typically they
3491 are C<1024>, C<2048> or C<4096> only.");
3492
3493   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3494    [InitEmpty, Always, TestOutput (
3495       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3496        ["mke2journal"; "4096"; "/dev/sda1"];
3497        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3498        ["mount"; "/dev/sda2"; "/"];
3499        ["write_file"; "/new"; "new file contents"; "0"];
3500        ["cat"; "/new"]], "new file contents")],
3501    "make ext2/3/4 external journal",
3502    "\
3503 This creates an ext2 external journal on C<device>.  It is equivalent
3504 to the command:
3505
3506  mke2fs -O journal_dev -b blocksize device");
3507
3508   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3509    [InitEmpty, Always, TestOutput (
3510       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3511        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3512        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3513        ["mount"; "/dev/sda2"; "/"];
3514        ["write_file"; "/new"; "new file contents"; "0"];
3515        ["cat"; "/new"]], "new file contents")],
3516    "make ext2/3/4 external journal with label",
3517    "\
3518 This creates an ext2 external journal on C<device> with label C<label>.");
3519
3520   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [],
3521    (let uuid = uuidgen () in
3522     [InitEmpty, Always, TestOutput (
3523        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3524         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3525         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3526         ["mount"; "/dev/sda2"; "/"];
3527         ["write_file"; "/new"; "new file contents"; "0"];
3528         ["cat"; "/new"]], "new file contents")]),
3529    "make ext2/3/4 external journal with UUID",
3530    "\
3531 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3532
3533   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3534    [],
3535    "make ext2/3/4 filesystem with external journal",
3536    "\
3537 This creates an ext2/3/4 filesystem on C<device> with
3538 an external journal on C<journal>.  It is equivalent
3539 to the command:
3540
3541  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3542
3543 See also C<guestfs_mke2journal>.");
3544
3545   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3546    [],
3547    "make ext2/3/4 filesystem with external journal",
3548    "\
3549 This creates an ext2/3/4 filesystem on C<device> with
3550 an external journal on the journal labeled C<label>.
3551
3552 See also C<guestfs_mke2journal_L>.");
3553
3554   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [],
3555    [],
3556    "make ext2/3/4 filesystem with external journal",
3557    "\
3558 This creates an ext2/3/4 filesystem on C<device> with
3559 an external journal on the journal with UUID C<uuid>.
3560
3561 See also C<guestfs_mke2journal_U>.");
3562
3563 ]
3564
3565 let all_functions = non_daemon_functions @ daemon_functions
3566
3567 (* In some places we want the functions to be displayed sorted
3568  * alphabetically, so this is useful:
3569  *)
3570 let all_functions_sorted =
3571   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
3572                compare n1 n2) all_functions
3573
3574 (* Field types for structures. *)
3575 type field =
3576   | FChar                       (* C 'char' (really, a 7 bit byte). *)
3577   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
3578   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
3579   | FUInt32
3580   | FInt32
3581   | FUInt64
3582   | FInt64
3583   | FBytes                      (* Any int measure that counts bytes. *)
3584   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
3585   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
3586
3587 (* Because we generate extra parsing code for LVM command line tools,
3588  * we have to pull out the LVM columns separately here.
3589  *)
3590 let lvm_pv_cols = [
3591   "pv_name", FString;
3592   "pv_uuid", FUUID;
3593   "pv_fmt", FString;
3594   "pv_size", FBytes;
3595   "dev_size", FBytes;
3596   "pv_free", FBytes;
3597   "pv_used", FBytes;
3598   "pv_attr", FString (* XXX *);
3599   "pv_pe_count", FInt64;
3600   "pv_pe_alloc_count", FInt64;
3601   "pv_tags", FString;
3602   "pe_start", FBytes;
3603   "pv_mda_count", FInt64;
3604   "pv_mda_free", FBytes;
3605   (* Not in Fedora 10:
3606      "pv_mda_size", FBytes;
3607   *)
3608 ]
3609 let lvm_vg_cols = [
3610   "vg_name", FString;
3611   "vg_uuid", FUUID;
3612   "vg_fmt", FString;
3613   "vg_attr", FString (* XXX *);
3614   "vg_size", FBytes;
3615   "vg_free", FBytes;
3616   "vg_sysid", FString;
3617   "vg_extent_size", FBytes;
3618   "vg_extent_count", FInt64;
3619   "vg_free_count", FInt64;
3620   "max_lv", FInt64;
3621   "max_pv", FInt64;
3622   "pv_count", FInt64;
3623   "lv_count", FInt64;
3624   "snap_count", FInt64;
3625   "vg_seqno", FInt64;
3626   "vg_tags", FString;
3627   "vg_mda_count", FInt64;
3628   "vg_mda_free", FBytes;
3629   (* Not in Fedora 10:
3630      "vg_mda_size", FBytes;
3631   *)
3632 ]
3633 let lvm_lv_cols = [
3634   "lv_name", FString;
3635   "lv_uuid", FUUID;
3636   "lv_attr", FString (* XXX *);
3637   "lv_major", FInt64;
3638   "lv_minor", FInt64;
3639   "lv_kernel_major", FInt64;
3640   "lv_kernel_minor", FInt64;
3641   "lv_size", FBytes;
3642   "seg_count", FInt64;
3643   "origin", FString;
3644   "snap_percent", FOptPercent;
3645   "copy_percent", FOptPercent;
3646   "move_pv", FString;
3647   "lv_tags", FString;
3648   "mirror_log", FString;
3649   "modules", FString;
3650 ]
3651
3652 (* Names and fields in all structures (in RStruct and RStructList)
3653  * that we support.
3654  *)
3655 let structs = [
3656   (* The old RIntBool return type, only ever used for aug_defnode.  Do
3657    * not use this struct in any new code.
3658    *)
3659   "int_bool", [
3660     "i", FInt32;                (* for historical compatibility *)
3661     "b", FInt32;                (* for historical compatibility *)
3662   ];
3663
3664   (* LVM PVs, VGs, LVs. *)
3665   "lvm_pv", lvm_pv_cols;
3666   "lvm_vg", lvm_vg_cols;
3667   "lvm_lv", lvm_lv_cols;
3668
3669   (* Column names and types from stat structures.
3670    * NB. Can't use things like 'st_atime' because glibc header files
3671    * define some of these as macros.  Ugh.
3672    *)
3673   "stat", [
3674     "dev", FInt64;
3675     "ino", FInt64;
3676     "mode", FInt64;
3677     "nlink", FInt64;
3678     "uid", FInt64;
3679     "gid", FInt64;
3680     "rdev", FInt64;
3681     "size", FInt64;
3682     "blksize", FInt64;
3683     "blocks", FInt64;
3684     "atime", FInt64;
3685     "mtime", FInt64;
3686     "ctime", FInt64;
3687   ];
3688   "statvfs", [
3689     "bsize", FInt64;
3690     "frsize", FInt64;
3691     "blocks", FInt64;
3692     "bfree", FInt64;
3693     "bavail", FInt64;
3694     "files", FInt64;
3695     "ffree", FInt64;
3696     "favail", FInt64;
3697     "fsid", FInt64;
3698     "flag", FInt64;
3699     "namemax", FInt64;
3700   ];
3701
3702   (* Column names in dirent structure. *)
3703   "dirent", [
3704     "ino", FInt64;
3705     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
3706     "ftyp", FChar;
3707     "name", FString;
3708   ];
3709
3710   (* Version numbers. *)
3711   "version", [
3712     "major", FInt64;
3713     "minor", FInt64;
3714     "release", FInt64;
3715     "extra", FString;
3716   ];
3717
3718   (* Extended attribute. *)
3719   "xattr", [
3720     "attrname", FString;
3721     "attrval", FBuffer;
3722   ];
3723
3724   (* Inotify events. *)
3725   "inotify_event", [
3726     "in_wd", FInt64;
3727     "in_mask", FUInt32;
3728     "in_cookie", FUInt32;
3729     "in_name", FString;
3730   ];
3731 ] (* end of structs *)
3732
3733 (* Ugh, Java has to be different ..
3734  * These names are also used by the Haskell bindings.
3735  *)
3736 let java_structs = [
3737   "int_bool", "IntBool";
3738   "lvm_pv", "PV";
3739   "lvm_vg", "VG";
3740   "lvm_lv", "LV";
3741   "stat", "Stat";
3742   "statvfs", "StatVFS";
3743   "dirent", "Dirent";
3744   "version", "Version";
3745   "xattr", "XAttr";
3746   "inotify_event", "INotifyEvent";
3747 ]
3748
3749 (* What structs are actually returned. *)
3750 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
3751
3752 (* Returns a list of RStruct/RStructList structs that are returned
3753  * by any function.  Each element of returned list is a pair:
3754  *
3755  * (structname, RStructOnly)
3756  *    == there exists function which returns RStruct (_, structname)
3757  * (structname, RStructListOnly)
3758  *    == there exists function which returns RStructList (_, structname)
3759  * (structname, RStructAndList)
3760  *    == there are functions returning both RStruct (_, structname)
3761  *                                      and RStructList (_, structname)
3762  *)
3763 let rstructs_used =
3764   (* ||| is a "logical OR" for rstructs_used_t *)
3765   let (|||) a b =
3766     match a, b with
3767     | RStructAndList, _
3768     | _, RStructAndList -> RStructAndList
3769     | RStructOnly, RStructListOnly
3770     | RStructListOnly, RStructOnly -> RStructAndList
3771     | RStructOnly, RStructOnly -> RStructOnly
3772     | RStructListOnly, RStructListOnly -> RStructListOnly
3773   in
3774
3775   let h = Hashtbl.create 13 in
3776
3777   (* if elem->oldv exists, update entry using ||| operator,
3778    * else just add elem->newv to the hash
3779    *)
3780   let update elem newv =
3781     try  let oldv = Hashtbl.find h elem in
3782          Hashtbl.replace h elem (newv ||| oldv)
3783     with Not_found -> Hashtbl.add h elem newv
3784   in
3785
3786   List.iter (
3787     fun (_, style, _, _, _, _, _) ->
3788       match fst style with
3789       | RStruct (_, structname) -> update structname RStructOnly
3790       | RStructList (_, structname) -> update structname RStructListOnly
3791       | _ -> ()
3792   ) all_functions;
3793
3794   (* return key->values as a list of (key,value) *)
3795   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
3796
3797 (* debug:
3798 let () =
3799   List.iter (
3800     function
3801     | sn, RStructOnly -> printf "%s RStructOnly\n" sn
3802     | sn, RStructListOnly -> printf "%s RStructListOnly\n" sn
3803     | sn, RStructAndList -> printf "%s RStructAndList\n" sn
3804   ) rstructs_used
3805 *)
3806
3807 (* Used for testing language bindings. *)
3808 type callt =
3809   | CallString of string
3810   | CallOptString of string option
3811   | CallStringList of string list
3812   | CallInt of int
3813   | CallBool of bool
3814
3815 (* Used to memoize the result of pod2text. *)
3816 let pod2text_memo_filename = "src/.pod2text.data"
3817 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
3818   try
3819     let chan = open_in pod2text_memo_filename in
3820     let v = input_value chan in
3821     close_in chan;
3822     v
3823   with
3824     _ -> Hashtbl.create 13
3825
3826 (* Useful functions.
3827  * Note we don't want to use any external OCaml libraries which
3828  * makes this a bit harder than it should be.
3829  *)
3830 let failwithf fs = ksprintf failwith fs
3831
3832 let replace_char s c1 c2 =
3833   let s2 = String.copy s in
3834   let r = ref false in
3835   for i = 0 to String.length s2 - 1 do
3836     if String.unsafe_get s2 i = c1 then (
3837       String.unsafe_set s2 i c2;
3838       r := true
3839     )
3840   done;
3841   if not !r then s else s2
3842
3843 let isspace c =
3844   c = ' '
3845   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
3846
3847 let triml ?(test = isspace) str =
3848   let i = ref 0 in
3849   let n = ref (String.length str) in
3850   while !n > 0 && test str.[!i]; do
3851     decr n;
3852     incr i
3853   done;
3854   if !i = 0 then str
3855   else String.sub str !i !n
3856
3857 let trimr ?(test = isspace) str =
3858   let n = ref (String.length str) in
3859   while !n > 0 && test str.[!n-1]; do
3860     decr n
3861   done;
3862   if !n = String.length str then str
3863   else String.sub str 0 !n
3864
3865 let trim ?(test = isspace) str =
3866   trimr ~test (triml ~test str)
3867
3868 let rec find s sub =
3869   let len = String.length s in
3870   let sublen = String.length sub in
3871   let rec loop i =
3872     if i <= len-sublen then (
3873       let rec loop2 j =
3874         if j < sublen then (
3875           if s.[i+j] = sub.[j] then loop2 (j+1)
3876           else -1
3877         ) else
3878           i (* found *)
3879       in
3880       let r = loop2 0 in
3881       if r = -1 then loop (i+1) else r
3882     ) else
3883       -1 (* not found *)
3884   in
3885   loop 0
3886
3887 let rec replace_str s s1 s2 =
3888   let len = String.length s in
3889   let sublen = String.length s1 in
3890   let i = find s s1 in
3891   if i = -1 then s
3892   else (
3893     let s' = String.sub s 0 i in
3894     let s'' = String.sub s (i+sublen) (len-i-sublen) in
3895     s' ^ s2 ^ replace_str s'' s1 s2
3896   )
3897
3898 let rec string_split sep str =
3899   let len = String.length str in
3900   let seplen = String.length sep in
3901   let i = find str sep in
3902   if i = -1 then [str]
3903   else (
3904     let s' = String.sub str 0 i in
3905     let s'' = String.sub str (i+seplen) (len-i-seplen) in
3906     s' :: string_split sep s''
3907   )
3908
3909 let files_equal n1 n2 =
3910   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
3911   match Sys.command cmd with
3912   | 0 -> true
3913   | 1 -> false
3914   | i -> failwithf "%s: failed with error code %d" cmd i
3915
3916 let rec filter_map f = function
3917   | [] -> []
3918   | x :: xs ->
3919       match f x with
3920       | Some y -> y :: filter_map f xs
3921       | None -> filter_map f xs
3922
3923 let rec find_map f = function
3924   | [] -> raise Not_found
3925   | x :: xs ->
3926       match f x with
3927       | Some y -> y
3928       | None -> find_map f xs
3929
3930 let iteri f xs =
3931   let rec loop i = function
3932     | [] -> ()
3933     | x :: xs -> f i x; loop (i+1) xs
3934   in
3935   loop 0 xs
3936
3937 let mapi f xs =
3938   let rec loop i = function
3939     | [] -> []
3940     | x :: xs -> let r = f i x in r :: loop (i+1) xs
3941   in
3942   loop 0 xs
3943
3944 let name_of_argt = function
3945   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
3946   | StringList n | DeviceList n | Bool n | Int n
3947   | FileIn n | FileOut n -> n
3948
3949 let java_name_of_struct typ =
3950   try List.assoc typ java_structs
3951   with Not_found ->
3952     failwithf
3953       "java_name_of_struct: no java_structs entry corresponding to %s" typ
3954
3955 let cols_of_struct typ =
3956   try List.assoc typ structs
3957   with Not_found ->
3958     failwithf "cols_of_struct: unknown struct %s" typ
3959
3960 let seq_of_test = function
3961   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
3962   | TestOutputListOfDevices (s, _)
3963   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
3964   | TestOutputTrue s | TestOutputFalse s
3965   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
3966   | TestOutputStruct (s, _)
3967   | TestLastFail s -> s
3968
3969 (* Handling for function flags. *)
3970 let protocol_limit_warning =
3971   "Because of the message protocol, there is a transfer limit
3972 of somewhere between 2MB and 4MB.  To transfer large files you should use
3973 FTP."
3974
3975 let danger_will_robinson =
3976   "B<This command is dangerous.  Without careful use you
3977 can easily destroy all your data>."
3978
3979 let deprecation_notice flags =
3980   try
3981     let alt =
3982       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
3983     let txt =
3984       sprintf "This function is deprecated.
3985 In new code, use the C<%s> call instead.
3986
3987 Deprecated functions will not be removed from the API, but the
3988 fact that they are deprecated indicates that there are problems
3989 with correct use of these functions." alt in
3990     Some txt
3991   with
3992     Not_found -> None
3993
3994 (* Check function names etc. for consistency. *)
3995 let check_functions () =
3996   let contains_uppercase str =
3997     let len = String.length str in
3998     let rec loop i =
3999       if i >= len then false
4000       else (
4001         let c = str.[i] in
4002         if c >= 'A' && c <= 'Z' then true
4003         else loop (i+1)
4004       )
4005     in
4006     loop 0
4007   in
4008
4009   (* Check function names. *)
4010   List.iter (
4011     fun (name, _, _, _, _, _, _) ->
4012       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
4013         failwithf "function name %s does not need 'guestfs' prefix" name;
4014       if name = "" then
4015         failwithf "function name is empty";
4016       if name.[0] < 'a' || name.[0] > 'z' then
4017         failwithf "function name %s must start with lowercase a-z" name;
4018       if String.contains name '-' then
4019         failwithf "function name %s should not contain '-', use '_' instead."
4020           name
4021   ) all_functions;
4022
4023   (* Check function parameter/return names. *)
4024   List.iter (
4025     fun (name, style, _, _, _, _, _) ->
4026       let check_arg_ret_name n =
4027         if contains_uppercase n then
4028           failwithf "%s param/ret %s should not contain uppercase chars"
4029             name n;
4030         if String.contains n '-' || String.contains n '_' then
4031           failwithf "%s param/ret %s should not contain '-' or '_'"
4032             name n;
4033         if n = "value" then
4034           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
4035         if n = "int" || n = "char" || n = "short" || n = "long" then
4036           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
4037         if n = "i" || n = "n" then
4038           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
4039         if n = "argv" || n = "args" then
4040           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name
4041       in
4042
4043       (match fst style with
4044        | RErr -> ()
4045        | RInt n | RInt64 n | RBool n
4046        | RConstString n | RConstOptString n | RString n
4047        | RStringList n | RStruct (n, _) | RStructList (n, _)
4048        | RHashtable n | RBufferOut n ->
4049            check_arg_ret_name n
4050       );
4051       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
4052   ) all_functions;
4053
4054   (* Check short descriptions. *)
4055   List.iter (
4056     fun (name, _, _, _, _, shortdesc, _) ->
4057       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
4058         failwithf "short description of %s should begin with lowercase." name;
4059       let c = shortdesc.[String.length shortdesc-1] in
4060       if c = '\n' || c = '.' then
4061         failwithf "short description of %s should not end with . or \\n." name
4062   ) all_functions;
4063
4064   (* Check long dscriptions. *)
4065   List.iter (
4066     fun (name, _, _, _, _, _, longdesc) ->
4067       if longdesc.[String.length longdesc-1] = '\n' then
4068         failwithf "long description of %s should not end with \\n." name
4069   ) all_functions;
4070
4071   (* Check proc_nrs. *)
4072   List.iter (
4073     fun (name, _, proc_nr, _, _, _, _) ->
4074       if proc_nr <= 0 then
4075         failwithf "daemon function %s should have proc_nr > 0" name
4076   ) daemon_functions;
4077
4078   List.iter (
4079     fun (name, _, proc_nr, _, _, _, _) ->
4080       if proc_nr <> -1 then
4081         failwithf "non-daemon function %s should have proc_nr -1" name
4082   ) non_daemon_functions;
4083
4084   let proc_nrs =
4085     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
4086       daemon_functions in
4087   let proc_nrs =
4088     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
4089   let rec loop = function
4090     | [] -> ()
4091     | [_] -> ()
4092     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
4093         loop rest
4094     | (name1,nr1) :: (name2,nr2) :: _ ->
4095         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
4096           name1 name2 nr1 nr2
4097   in
4098   loop proc_nrs;
4099
4100   (* Check tests. *)
4101   List.iter (
4102     function
4103       (* Ignore functions that have no tests.  We generate a
4104        * warning when the user does 'make check' instead.
4105        *)
4106     | name, _, _, _, [], _, _ -> ()
4107     | name, _, _, _, tests, _, _ ->
4108         let funcs =
4109           List.map (
4110             fun (_, _, test) ->
4111               match seq_of_test test with
4112               | [] ->
4113                   failwithf "%s has a test containing an empty sequence" name
4114               | cmds -> List.map List.hd cmds
4115           ) tests in
4116         let funcs = List.flatten funcs in
4117
4118         let tested = List.mem name funcs in
4119
4120         if not tested then
4121           failwithf "function %s has tests but does not test itself" name
4122   ) all_functions
4123
4124 (* 'pr' prints to the current output file. *)
4125 let chan = ref stdout
4126 let pr fs = ksprintf (output_string !chan) fs
4127
4128 (* Generate a header block in a number of standard styles. *)
4129 type comment_style = CStyle | HashStyle | OCamlStyle | HaskellStyle
4130 type license = GPLv2 | LGPLv2
4131
4132 let generate_header comment license =
4133   let c = match comment with
4134     | CStyle ->     pr "/* "; " *"
4135     | HashStyle ->  pr "# ";  "#"
4136     | OCamlStyle -> pr "(* "; " *"
4137     | HaskellStyle -> pr "{- "; "  " in
4138   pr "libguestfs generated file\n";
4139   pr "%s WARNING: THIS FILE IS GENERATED BY 'src/generator.ml'.\n" c;
4140   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
4141   pr "%s\n" c;
4142   pr "%s Copyright (C) 2009 Red Hat Inc.\n" c;
4143   pr "%s\n" c;
4144   (match license with
4145    | GPLv2 ->
4146        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
4147        pr "%s it under the terms of the GNU General Public License as published by\n" c;
4148        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
4149        pr "%s (at your option) any later version.\n" c;
4150        pr "%s\n" c;
4151        pr "%s This program is distributed in the hope that it will be useful,\n" c;
4152        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4153        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
4154        pr "%s GNU General Public License for more details.\n" c;
4155        pr "%s\n" c;
4156        pr "%s You should have received a copy of the GNU General Public License along\n" c;
4157        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
4158        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
4159
4160    | LGPLv2 ->
4161        pr "%s This library is free software; you can redistribute it and/or\n" c;
4162        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
4163        pr "%s License as published by the Free Software Foundation; either\n" c;
4164        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
4165        pr "%s\n" c;
4166        pr "%s This library is distributed in the hope that it will be useful,\n" c;
4167        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4168        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
4169        pr "%s Lesser General Public License for more details.\n" c;
4170        pr "%s\n" c;
4171        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
4172        pr "%s License along with this library; if not, write to the Free Software\n" c;
4173        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
4174   );
4175   (match comment with
4176    | CStyle -> pr " */\n"
4177    | HashStyle -> ()
4178    | OCamlStyle -> pr " *)\n"
4179    | HaskellStyle -> pr "-}\n"
4180   );
4181   pr "\n"
4182
4183 (* Start of main code generation functions below this line. *)
4184
4185 (* Generate the pod documentation for the C API. *)
4186 let rec generate_actions_pod () =
4187   List.iter (
4188     fun (shortname, style, _, flags, _, _, longdesc) ->
4189       if not (List.mem NotInDocs flags) then (
4190         let name = "guestfs_" ^ shortname in
4191         pr "=head2 %s\n\n" name;
4192         pr " ";
4193         generate_prototype ~extern:false ~handle:"handle" name style;
4194         pr "\n\n";
4195         pr "%s\n\n" longdesc;
4196         (match fst style with
4197          | RErr ->
4198              pr "This function returns 0 on success or -1 on error.\n\n"
4199          | RInt _ ->
4200              pr "On error this function returns -1.\n\n"
4201          | RInt64 _ ->
4202              pr "On error this function returns -1.\n\n"
4203          | RBool _ ->
4204              pr "This function returns a C truth value on success or -1 on error.\n\n"
4205          | RConstString _ ->
4206              pr "This function returns a string, or NULL on error.
4207 The string is owned by the guest handle and must I<not> be freed.\n\n"
4208          | RConstOptString _ ->
4209              pr "This function returns a string which may be NULL.
4210 There is way to return an error from this function.
4211 The string is owned by the guest handle and must I<not> be freed.\n\n"
4212          | RString _ ->
4213              pr "This function returns a string, or NULL on error.
4214 I<The caller must free the returned string after use>.\n\n"
4215          | RStringList _ ->
4216              pr "This function returns a NULL-terminated array of strings
4217 (like L<environ(3)>), or NULL if there was an error.
4218 I<The caller must free the strings and the array after use>.\n\n"
4219          | RStruct (_, typ) ->
4220              pr "This function returns a C<struct guestfs_%s *>,
4221 or NULL if there was an error.
4222 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
4223          | RStructList (_, typ) ->
4224              pr "This function returns a C<struct guestfs_%s_list *>
4225 (see E<lt>guestfs-structs.hE<gt>),
4226 or NULL if there was an error.
4227 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
4228          | RHashtable _ ->
4229              pr "This function returns a NULL-terminated array of
4230 strings, or NULL if there was an error.
4231 The array of strings will always have length C<2n+1>, where
4232 C<n> keys and values alternate, followed by the trailing NULL entry.
4233 I<The caller must free the strings and the array after use>.\n\n"
4234          | RBufferOut _ ->
4235              pr "This function returns a buffer, or NULL on error.
4236 The size of the returned buffer is written to C<*size_r>.
4237 I<The caller must free the returned buffer after use>.\n\n"
4238         );
4239         if List.mem ProtocolLimitWarning flags then
4240           pr "%s\n\n" protocol_limit_warning;
4241         if List.mem DangerWillRobinson flags then
4242           pr "%s\n\n" danger_will_robinson;
4243         match deprecation_notice flags with
4244         | None -> ()
4245         | Some txt -> pr "%s\n\n" txt
4246       )
4247   ) all_functions_sorted
4248
4249 and generate_structs_pod () =
4250   (* Structs documentation. *)
4251   List.iter (
4252     fun (typ, cols) ->
4253       pr "=head2 guestfs_%s\n" typ;
4254       pr "\n";
4255       pr " struct guestfs_%s {\n" typ;
4256       List.iter (
4257         function
4258         | name, FChar -> pr "   char %s;\n" name
4259         | name, FUInt32 -> pr "   uint32_t %s;\n" name
4260         | name, FInt32 -> pr "   int32_t %s;\n" name
4261         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
4262         | name, FInt64 -> pr "   int64_t %s;\n" name
4263         | name, FString -> pr "   char *%s;\n" name
4264         | name, FBuffer ->
4265             pr "   /* The next two fields describe a byte array. */\n";
4266             pr "   uint32_t %s_len;\n" name;
4267             pr "   char *%s;\n" name
4268         | name, FUUID ->
4269             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
4270             pr "   char %s[32];\n" name
4271         | name, FOptPercent ->
4272             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
4273             pr "   float %s;\n" name
4274       ) cols;
4275       pr " };\n";
4276       pr " \n";
4277       pr " struct guestfs_%s_list {\n" typ;
4278       pr "   uint32_t len; /* Number of elements in list. */\n";
4279       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
4280       pr " };\n";
4281       pr " \n";
4282       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
4283       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
4284         typ typ;
4285       pr "\n"
4286   ) structs
4287
4288 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
4289  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
4290  *
4291  * We have to use an underscore instead of a dash because otherwise
4292  * rpcgen generates incorrect code.
4293  *
4294  * This header is NOT exported to clients, but see also generate_structs_h.
4295  *)
4296 and generate_xdr () =
4297   generate_header CStyle LGPLv2;
4298
4299   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
4300   pr "typedef string str<>;\n";
4301   pr "\n";
4302
4303   (* Internal structures. *)
4304   List.iter (
4305     function
4306     | typ, cols ->
4307         pr "struct guestfs_int_%s {\n" typ;
4308         List.iter (function
4309                    | name, FChar -> pr "  char %s;\n" name
4310                    | name, FString -> pr "  string %s<>;\n" name
4311                    | name, FBuffer -> pr "  opaque %s<>;\n" name
4312                    | name, FUUID -> pr "  opaque %s[32];\n" name
4313                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
4314                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
4315                    | name, FOptPercent -> pr "  float %s;\n" name
4316                   ) cols;
4317         pr "};\n";
4318         pr "\n";
4319         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
4320         pr "\n";
4321   ) structs;
4322
4323   List.iter (
4324     fun (shortname, style, _, _, _, _, _) ->
4325       let name = "guestfs_" ^ shortname in
4326
4327       (match snd style with
4328        | [] -> ()
4329        | args ->
4330            pr "struct %s_args {\n" name;
4331            List.iter (
4332              function
4333              | Pathname n | Device n | Dev_or_Path n | String n -> pr "  string %s<>;\n" n
4334              | OptString n -> pr "  str *%s;\n" n
4335              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
4336              | Bool n -> pr "  bool %s;\n" n
4337              | Int n -> pr "  int %s;\n" n
4338              | FileIn _ | FileOut _ -> ()
4339            ) args;
4340            pr "};\n\n"
4341       );
4342       (match fst style with
4343        | RErr -> ()
4344        | RInt n ->
4345            pr "struct %s_ret {\n" name;
4346            pr "  int %s;\n" n;
4347            pr "};\n\n"
4348        | RInt64 n ->
4349            pr "struct %s_ret {\n" name;
4350            pr "  hyper %s;\n" n;
4351            pr "};\n\n"
4352        | RBool n ->
4353            pr "struct %s_ret {\n" name;
4354            pr "  bool %s;\n" n;
4355            pr "};\n\n"
4356        | RConstString _ | RConstOptString _ ->
4357            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4358        | RString n ->
4359            pr "struct %s_ret {\n" name;
4360            pr "  string %s<>;\n" n;
4361            pr "};\n\n"
4362        | RStringList n ->
4363            pr "struct %s_ret {\n" name;
4364            pr "  str %s<>;\n" n;
4365            pr "};\n\n"
4366        | RStruct (n, typ) ->
4367            pr "struct %s_ret {\n" name;
4368            pr "  guestfs_int_%s %s;\n" typ n;
4369            pr "};\n\n"
4370        | RStructList (n, typ) ->
4371            pr "struct %s_ret {\n" name;
4372            pr "  guestfs_int_%s_list %s;\n" typ n;
4373            pr "};\n\n"
4374        | RHashtable n ->
4375            pr "struct %s_ret {\n" name;
4376            pr "  str %s<>;\n" n;
4377            pr "};\n\n"
4378        | RBufferOut n ->
4379            pr "struct %s_ret {\n" name;
4380            pr "  opaque %s<>;\n" n;
4381            pr "};\n\n"
4382       );
4383   ) daemon_functions;
4384
4385   (* Table of procedure numbers. *)
4386   pr "enum guestfs_procedure {\n";
4387   List.iter (
4388     fun (shortname, _, proc_nr, _, _, _, _) ->
4389       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
4390   ) daemon_functions;
4391   pr "  GUESTFS_PROC_NR_PROCS\n";
4392   pr "};\n";
4393   pr "\n";
4394
4395   (* Having to choose a maximum message size is annoying for several
4396    * reasons (it limits what we can do in the API), but it (a) makes
4397    * the protocol a lot simpler, and (b) provides a bound on the size
4398    * of the daemon which operates in limited memory space.  For large
4399    * file transfers you should use FTP.
4400    *)
4401   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
4402   pr "\n";
4403
4404   (* Message header, etc. *)
4405   pr "\
4406 /* The communication protocol is now documented in the guestfs(3)
4407  * manpage.
4408  */
4409
4410 const GUESTFS_PROGRAM = 0x2000F5F5;
4411 const GUESTFS_PROTOCOL_VERSION = 1;
4412
4413 /* These constants must be larger than any possible message length. */
4414 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
4415 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
4416
4417 enum guestfs_message_direction {
4418   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
4419   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
4420 };
4421
4422 enum guestfs_message_status {
4423   GUESTFS_STATUS_OK = 0,
4424   GUESTFS_STATUS_ERROR = 1
4425 };
4426
4427 const GUESTFS_ERROR_LEN = 256;
4428
4429 struct guestfs_message_error {
4430   string error_message<GUESTFS_ERROR_LEN>;
4431 };
4432
4433 struct guestfs_message_header {
4434   unsigned prog;                     /* GUESTFS_PROGRAM */
4435   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
4436   guestfs_procedure proc;            /* GUESTFS_PROC_x */
4437   guestfs_message_direction direction;
4438   unsigned serial;                   /* message serial number */
4439   guestfs_message_status status;
4440 };
4441
4442 const GUESTFS_MAX_CHUNK_SIZE = 8192;
4443
4444 struct guestfs_chunk {
4445   int cancel;                        /* if non-zero, transfer is cancelled */
4446   /* data size is 0 bytes if the transfer has finished successfully */
4447   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
4448 };
4449 "
4450
4451 (* Generate the guestfs-structs.h file. *)
4452 and generate_structs_h () =
4453   generate_header CStyle LGPLv2;
4454
4455   (* This is a public exported header file containing various
4456    * structures.  The structures are carefully written to have
4457    * exactly the same in-memory format as the XDR structures that
4458    * we use on the wire to the daemon.  The reason for creating
4459    * copies of these structures here is just so we don't have to
4460    * export the whole of guestfs_protocol.h (which includes much
4461    * unrelated and XDR-dependent stuff that we don't want to be
4462    * public, or required by clients).
4463    *
4464    * To reiterate, we will pass these structures to and from the
4465    * client with a simple assignment or memcpy, so the format
4466    * must be identical to what rpcgen / the RFC defines.
4467    *)
4468
4469   (* Public structures. *)
4470   List.iter (
4471     fun (typ, cols) ->
4472       pr "struct guestfs_%s {\n" typ;
4473       List.iter (
4474         function
4475         | name, FChar -> pr "  char %s;\n" name
4476         | name, FString -> pr "  char *%s;\n" name
4477         | name, FBuffer ->
4478             pr "  uint32_t %s_len;\n" name;
4479             pr "  char *%s;\n" name
4480         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
4481         | name, FUInt32 -> pr "  uint32_t %s;\n" name
4482         | name, FInt32 -> pr "  int32_t %s;\n" name
4483         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
4484         | name, FInt64 -> pr "  int64_t %s;\n" name
4485         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
4486       ) cols;
4487       pr "};\n";
4488       pr "\n";
4489       pr "struct guestfs_%s_list {\n" typ;
4490       pr "  uint32_t len;\n";
4491       pr "  struct guestfs_%s *val;\n" typ;
4492       pr "};\n";
4493       pr "\n";
4494       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
4495       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
4496       pr "\n"
4497   ) structs
4498
4499 (* Generate the guestfs-actions.h file. *)
4500 and generate_actions_h () =
4501   generate_header CStyle LGPLv2;
4502   List.iter (
4503     fun (shortname, style, _, _, _, _, _) ->
4504       let name = "guestfs_" ^ shortname in
4505       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
4506         name style
4507   ) all_functions
4508
4509 (* Generate the client-side dispatch stubs. *)
4510 and generate_client_actions () =
4511   generate_header CStyle LGPLv2;
4512
4513   pr "\
4514 #include <stdio.h>
4515 #include <stdlib.h>
4516
4517 #include \"guestfs.h\"
4518 #include \"guestfs_protocol.h\"
4519
4520 #define error guestfs_error
4521 #define perrorf guestfs_perrorf
4522 #define safe_malloc guestfs_safe_malloc
4523 #define safe_realloc guestfs_safe_realloc
4524 #define safe_strdup guestfs_safe_strdup
4525 #define safe_memdup guestfs_safe_memdup
4526
4527 /* Check the return message from a call for validity. */
4528 static int
4529 check_reply_header (guestfs_h *g,
4530                     const struct guestfs_message_header *hdr,
4531                     int proc_nr, int serial)
4532 {
4533   if (hdr->prog != GUESTFS_PROGRAM) {
4534     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
4535     return -1;
4536   }
4537   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
4538     error (g, \"wrong protocol version (%%d/%%d)\",
4539            hdr->vers, GUESTFS_PROTOCOL_VERSION);
4540     return -1;
4541   }
4542   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
4543     error (g, \"unexpected message direction (%%d/%%d)\",
4544            hdr->direction, GUESTFS_DIRECTION_REPLY);
4545     return -1;
4546   }
4547   if (hdr->proc != proc_nr) {
4548     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
4549     return -1;
4550   }
4551   if (hdr->serial != serial) {
4552     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
4553     return -1;
4554   }
4555
4556   return 0;
4557 }
4558
4559 /* Check we are in the right state to run a high-level action. */
4560 static int
4561 check_state (guestfs_h *g, const char *caller)
4562 {
4563   if (!guestfs_is_ready (g)) {
4564     if (guestfs_is_config (g))
4565       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
4566         caller);
4567     else if (guestfs_is_launching (g))
4568       error (g, \"%%s: call wait_ready() before using this function\",
4569         caller);
4570     else
4571       error (g, \"%%s called from the wrong state, %%d != READY\",
4572         caller, guestfs_get_state (g));
4573     return -1;
4574   }
4575   return 0;
4576 }
4577
4578 ";
4579
4580   (* Client-side stubs for each function. *)
4581   List.iter (
4582     fun (shortname, style, _, _, _, _, _) ->
4583       let name = "guestfs_" ^ shortname in
4584
4585       (* Generate the context struct which stores the high-level
4586        * state between callback functions.
4587        *)
4588       pr "struct %s_ctx {\n" shortname;
4589       pr "  /* This flag is set by the callbacks, so we know we've done\n";
4590       pr "   * the callbacks as expected, and in the right sequence.\n";
4591       pr "   * 0 = not called, 1 = reply_cb called.\n";
4592       pr "   */\n";
4593       pr "  int cb_sequence;\n";
4594       pr "  struct guestfs_message_header hdr;\n";
4595       pr "  struct guestfs_message_error err;\n";
4596       (match fst style with
4597        | RErr -> ()
4598        | RConstString _ | RConstOptString _ ->
4599            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4600        | RInt _ | RInt64 _
4601        | RBool _ | RString _ | RStringList _
4602        | RStruct _ | RStructList _
4603        | RHashtable _ | RBufferOut _ ->
4604            pr "  struct %s_ret ret;\n" name
4605       );
4606       pr "};\n";
4607       pr "\n";
4608
4609       (* Generate the reply callback function. *)
4610       pr "static void %s_reply_cb (guestfs_h *g, void *data, XDR *xdr)\n" shortname;
4611       pr "{\n";
4612       pr "  guestfs_main_loop *ml = guestfs_get_main_loop (g);\n";
4613       pr "  struct %s_ctx *ctx = (struct %s_ctx *) data;\n" shortname shortname;
4614       pr "\n";
4615       pr "  /* This should definitely not happen. */\n";
4616       pr "  if (ctx->cb_sequence != 0) {\n";
4617       pr "    ctx->cb_sequence = 9999;\n";
4618       pr "    error (g, \"%%s: internal error: reply callback called twice\", \"%s\");\n" name;
4619       pr "    return;\n";
4620       pr "  }\n";
4621       pr "\n";
4622       pr "  ml->main_loop_quit (ml, g);\n";
4623       pr "\n";
4624       pr "  if (!xdr_guestfs_message_header (xdr, &ctx->hdr)) {\n";
4625       pr "    error (g, \"%%s: failed to parse reply header\", \"%s\");\n" name;
4626       pr "    return;\n";
4627       pr "  }\n";
4628       pr "  if (ctx->hdr.status == GUESTFS_STATUS_ERROR) {\n";
4629       pr "    if (!xdr_guestfs_message_error (xdr, &ctx->err)) {\n";
4630       pr "      error (g, \"%%s: failed to parse reply error\", \"%s\");\n"
4631         name;
4632       pr "      return;\n";
4633       pr "    }\n";
4634       pr "    goto done;\n";
4635       pr "  }\n";
4636
4637       (match fst style with
4638        | RErr -> ()
4639        | RConstString _ | RConstOptString _ ->
4640            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4641        | RInt _ | RInt64 _
4642        | RBool _ | RString _ | RStringList _
4643        | RStruct _ | RStructList _
4644        | RHashtable _ | RBufferOut _ ->
4645            pr "  if (!xdr_%s_ret (xdr, &ctx->ret)) {\n" name;
4646            pr "    error (g, \"%%s: failed to parse reply\", \"%s\");\n" name;
4647            pr "    return;\n";
4648            pr "  }\n";
4649       );
4650
4651       pr " done:\n";
4652       pr "  ctx->cb_sequence = 1;\n";
4653       pr "}\n\n";
4654
4655       (* Generate the action stub. *)
4656       generate_prototype ~extern:false ~semicolon:false ~newline:true
4657         ~handle:"g" name style;
4658
4659       let error_code =
4660         match fst style with
4661         | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
4662         | RConstString _ | RConstOptString _ ->
4663             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4664         | RString _ | RStringList _
4665         | RStruct _ | RStructList _
4666         | RHashtable _ | RBufferOut _ ->
4667             "NULL" in
4668
4669       pr "{\n";
4670
4671       (match snd style with
4672        | [] -> ()
4673        | _ -> pr "  struct %s_args args;\n" name
4674       );
4675
4676       pr "  struct %s_ctx ctx;\n" shortname;
4677       pr "  guestfs_main_loop *ml = guestfs_get_main_loop (g);\n";
4678       pr "  int serial;\n";
4679       pr "\n";
4680       pr "  if (check_state (g, \"%s\") == -1) return %s;\n" name error_code;
4681       pr "  guestfs_set_busy (g);\n";
4682       pr "\n";
4683       pr "  memset (&ctx, 0, sizeof ctx);\n";
4684       pr "\n";
4685
4686       (* Send the main header and arguments. *)
4687       (match snd style with
4688        | [] ->
4689            pr "  serial = guestfs__send_sync (g, GUESTFS_PROC_%s, NULL, NULL);\n"
4690              (String.uppercase shortname)
4691        | args ->
4692            List.iter (
4693              function
4694              | Pathname n | Device n | Dev_or_Path n | String n ->
4695                  pr "  args.%s = (char *) %s;\n" n n
4696              | OptString n ->
4697                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
4698              | StringList n | DeviceList n ->
4699                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
4700                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
4701              | Bool n ->
4702                  pr "  args.%s = %s;\n" n n
4703              | Int n ->
4704                  pr "  args.%s = %s;\n" n n
4705              | FileIn _ | FileOut _ -> ()
4706            ) args;
4707            pr "  serial = guestfs__send_sync (g, GUESTFS_PROC_%s,\n"
4708              (String.uppercase shortname);
4709            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
4710              name;
4711       );
4712       pr "  if (serial == -1) {\n";
4713       pr "    guestfs_end_busy (g);\n";
4714       pr "    return %s;\n" error_code;
4715       pr "  }\n";
4716       pr "\n";
4717
4718       (* Send any additional files (FileIn) requested. *)
4719       let need_read_reply_label = ref false in
4720       List.iter (
4721         function
4722         | FileIn n ->
4723             pr "  {\n";
4724             pr "    int r;\n";
4725             pr "\n";
4726             pr "    r = guestfs__send_file_sync (g, %s);\n" n;
4727             pr "    if (r == -1) {\n";
4728             pr "      guestfs_end_busy (g);\n";
4729             pr "      return %s;\n" error_code;
4730             pr "    }\n";
4731             pr "    if (r == -2) /* daemon cancelled */\n";
4732             pr "      goto read_reply;\n";
4733             need_read_reply_label := true;
4734             pr "  }\n";
4735             pr "\n";
4736         | _ -> ()
4737       ) (snd style);
4738
4739       (* Wait for the reply from the remote end. *)
4740       if !need_read_reply_label then pr " read_reply:\n";
4741       pr "  guestfs__switch_to_receiving (g);\n";
4742       pr "  ctx.cb_sequence = 0;\n";
4743       pr "  guestfs_set_reply_callback (g, %s_reply_cb, &ctx);\n" shortname;
4744       pr "  (void) ml->main_loop_run (ml, g);\n";
4745       pr "  guestfs_set_reply_callback (g, NULL, NULL);\n";
4746       pr "  if (ctx.cb_sequence != 1) {\n";
4747       pr "    error (g, \"%%s reply failed, see earlier error messages\", \"%s\");\n" name;
4748       pr "    guestfs_end_busy (g);\n";
4749       pr "    return %s;\n" error_code;
4750       pr "  }\n";
4751       pr "\n";
4752
4753       pr "  if (check_reply_header (g, &ctx.hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
4754         (String.uppercase shortname);
4755       pr "    guestfs_end_busy (g);\n";
4756       pr "    return %s;\n" error_code;
4757       pr "  }\n";
4758       pr "\n";
4759
4760       pr "  if (ctx.hdr.status == GUESTFS_STATUS_ERROR) {\n";
4761       pr "    error (g, \"%%s\", ctx.err.error_message);\n";
4762       pr "    free (ctx.err.error_message);\n";
4763       pr "    guestfs_end_busy (g);\n";
4764       pr "    return %s;\n" error_code;
4765       pr "  }\n";
4766       pr "\n";
4767
4768       (* Expecting to receive further files (FileOut)? *)
4769       List.iter (
4770         function
4771         | FileOut n ->
4772             pr "  if (guestfs__receive_file_sync (g, %s) == -1) {\n" n;
4773             pr "    guestfs_end_busy (g);\n";
4774             pr "    return %s;\n" error_code;
4775             pr "  }\n";
4776             pr "\n";
4777         | _ -> ()
4778       ) (snd style);
4779
4780       pr "  guestfs_end_busy (g);\n";
4781
4782       (match fst style with
4783        | RErr -> pr "  return 0;\n"
4784        | RInt n | RInt64 n | RBool n ->
4785            pr "  return ctx.ret.%s;\n" n
4786        | RConstString _ | RConstOptString _ ->
4787            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4788        | RString n ->
4789            pr "  return ctx.ret.%s; /* caller will free */\n" n
4790        | RStringList n | RHashtable n ->
4791            pr "  /* caller will free this, but we need to add a NULL entry */\n";
4792            pr "  ctx.ret.%s.%s_val =\n" n n;
4793            pr "    safe_realloc (g, ctx.ret.%s.%s_val,\n" n n;
4794            pr "                  sizeof (char *) * (ctx.ret.%s.%s_len + 1));\n"
4795              n n;
4796            pr "  ctx.ret.%s.%s_val[ctx.ret.%s.%s_len] = NULL;\n" n n n n;
4797            pr "  return ctx.ret.%s.%s_val;\n" n n
4798        | RStruct (n, _) ->
4799            pr "  /* caller will free this */\n";
4800            pr "  return safe_memdup (g, &ctx.ret.%s, sizeof (ctx.ret.%s));\n" n n
4801        | RStructList (n, _) ->
4802            pr "  /* caller will free this */\n";
4803            pr "  return safe_memdup (g, &ctx.ret.%s, sizeof (ctx.ret.%s));\n" n n
4804        | RBufferOut n ->
4805            pr "  *size_r = ctx.ret.%s.%s_len;\n" n n;
4806            pr "  return ctx.ret.%s.%s_val; /* caller will free */\n" n n
4807       );
4808
4809       pr "}\n\n"
4810   ) daemon_functions;
4811
4812   (* Functions to free structures. *)
4813   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
4814   pr " * structure format is identical to the XDR format.  See note in\n";
4815   pr " * generator.ml.\n";
4816   pr " */\n";
4817   pr "\n";
4818
4819   List.iter (
4820     fun (typ, _) ->
4821       pr "void\n";
4822       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
4823       pr "{\n";
4824       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
4825       pr "  free (x);\n";
4826       pr "}\n";
4827       pr "\n";
4828
4829       pr "void\n";
4830       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
4831       pr "{\n";
4832       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
4833       pr "  free (x);\n";
4834       pr "}\n";
4835       pr "\n";
4836
4837   ) structs;
4838
4839 (* Generate daemon/actions.h. *)
4840 and generate_daemon_actions_h () =
4841   generate_header CStyle GPLv2;
4842
4843   pr "#include \"../src/guestfs_protocol.h\"\n";
4844   pr "\n";
4845
4846   List.iter (
4847     fun (name, style, _, _, _, _, _) ->
4848       generate_prototype
4849         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
4850         name style;
4851   ) daemon_functions
4852
4853 (* Generate the server-side stubs. *)
4854 and generate_daemon_actions () =
4855   generate_header CStyle GPLv2;
4856
4857   pr "#include <config.h>\n";
4858   pr "\n";
4859   pr "#include <stdio.h>\n";
4860   pr "#include <stdlib.h>\n";
4861   pr "#include <string.h>\n";
4862   pr "#include <inttypes.h>\n";
4863   pr "#include <ctype.h>\n";
4864   pr "#include <rpc/types.h>\n";
4865   pr "#include <rpc/xdr.h>\n";
4866   pr "\n";
4867   pr "#include \"daemon.h\"\n";
4868   pr "#include \"../src/guestfs_protocol.h\"\n";
4869   pr "#include \"actions.h\"\n";
4870   pr "\n";
4871
4872   List.iter (
4873     fun (name, style, _, _, _, _, _) ->
4874       (* Generate server-side stubs. *)
4875       pr "static void %s_stub (XDR *xdr_in)\n" name;
4876       pr "{\n";
4877       let error_code =
4878         match fst style with
4879         | RErr | RInt _ -> pr "  int r;\n"; "-1"
4880         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
4881         | RBool _ -> pr "  int r;\n"; "-1"
4882         | RConstString _ | RConstOptString _ ->
4883             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4884         | RString _ -> pr "  char *r;\n"; "NULL"
4885         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
4886         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
4887         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
4888         | RBufferOut _ ->
4889             pr "  size_t size;\n";
4890             pr "  char *r;\n";
4891             "NULL" in
4892
4893       (match snd style with
4894        | [] -> ()
4895        | args ->
4896            pr "  struct guestfs_%s_args args;\n" name;
4897            List.iter (
4898              function
4899              | Device n | Dev_or_Path n
4900              | Pathname n
4901              | String n -> ()
4902              | OptString n -> pr "  char *%s;\n" n
4903              | StringList n | DeviceList n -> pr "  char **%s;\n" n
4904              | Bool n -> pr "  int %s;\n" n
4905              | Int n -> pr "  int %s;\n" n
4906              | FileIn _ | FileOut _ -> ()
4907            ) args
4908       );
4909       pr "\n";
4910
4911       (match snd style with
4912        | [] -> ()
4913        | args ->
4914            pr "  memset (&args, 0, sizeof args);\n";
4915            pr "\n";
4916            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
4917            pr "    reply_with_error (\"%%s: daemon failed to decode procedure arguments\", \"%s\");\n" name;
4918            pr "    return;\n";
4919            pr "  }\n";
4920            let pr_args n =
4921              pr "  char *%s = args.%s;\n" n n
4922            in
4923            let pr_list_handling_code n =
4924              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
4925              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
4926              pr "  if (%s == NULL) {\n" n;
4927              pr "    reply_with_perror (\"realloc\");\n";
4928              pr "    goto done;\n";
4929              pr "  }\n";
4930              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
4931              pr "  args.%s.%s_val = %s;\n" n n n;
4932            in
4933            List.iter (
4934              function
4935              | Pathname n ->
4936                  pr_args n;
4937                  pr "  ABS_PATH (%s, goto done);\n" n;
4938              | Device n ->
4939                  pr_args n;
4940                  pr "  RESOLVE_DEVICE (%s, goto done);\n" n;
4941              | Dev_or_Path n ->
4942                  pr_args n;
4943                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, goto done);\n" n;
4944              | String n -> pr_args n
4945              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
4946              | StringList n ->
4947                  pr_list_handling_code n;
4948              | DeviceList n ->
4949                  pr_list_handling_code n;
4950                  pr "  /* Ensure that each is a device,\n";
4951                  pr "   * and perform device name translation. */\n";
4952                  pr "  { int pvi; for (pvi = 0; physvols[pvi] != NULL; ++pvi)\n";
4953                  pr "    RESOLVE_DEVICE (physvols[pvi], goto done);\n";
4954                  pr "  }\n";
4955              | Bool n -> pr "  %s = args.%s;\n" n n
4956              | Int n -> pr "  %s = args.%s;\n" n n
4957              | FileIn _ | FileOut _ -> ()
4958            ) args;
4959            pr "\n"
4960       );
4961
4962
4963       (* this is used at least for do_equal *)
4964       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
4965         (* Emit NEED_ROOT just once, even when there are two or
4966            more Pathname args *)
4967         pr "  NEED_ROOT (goto done);\n";
4968       );
4969
4970       (* Don't want to call the impl with any FileIn or FileOut
4971        * parameters, since these go "outside" the RPC protocol.
4972        *)
4973       let args' =
4974         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
4975           (snd style) in
4976       pr "  r = do_%s " name;
4977       generate_c_call_args (fst style, args');
4978       pr ";\n";
4979
4980       pr "  if (r == %s)\n" error_code;
4981       pr "    /* do_%s has already called reply_with_error */\n" name;
4982       pr "    goto done;\n";
4983       pr "\n";
4984
4985       (* If there are any FileOut parameters, then the impl must
4986        * send its own reply.
4987        *)
4988       let no_reply =
4989         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
4990       if no_reply then
4991         pr "  /* do_%s has already sent a reply */\n" name
4992       else (
4993         match fst style with
4994         | RErr -> pr "  reply (NULL, NULL);\n"
4995         | RInt n | RInt64 n | RBool n ->
4996             pr "  struct guestfs_%s_ret ret;\n" name;
4997             pr "  ret.%s = r;\n" n;
4998             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
4999               name
5000         | RConstString _ | RConstOptString _ ->
5001             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5002         | RString n ->
5003             pr "  struct guestfs_%s_ret ret;\n" name;
5004             pr "  ret.%s = r;\n" n;
5005             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5006               name;
5007             pr "  free (r);\n"
5008         | RStringList n | RHashtable n ->
5009             pr "  struct guestfs_%s_ret ret;\n" name;
5010             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
5011             pr "  ret.%s.%s_val = r;\n" n n;
5012             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5013               name;
5014             pr "  free_strings (r);\n"
5015         | RStruct (n, _) ->
5016             pr "  struct guestfs_%s_ret ret;\n" name;
5017             pr "  ret.%s = *r;\n" n;
5018             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5019               name;
5020             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5021               name
5022         | RStructList (n, _) ->
5023             pr "  struct guestfs_%s_ret ret;\n" name;
5024             pr "  ret.%s = *r;\n" n;
5025             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5026               name;
5027             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5028               name
5029         | RBufferOut n ->
5030             pr "  struct guestfs_%s_ret ret;\n" name;
5031             pr "  ret.%s.%s_val = r;\n" n n;
5032             pr "  ret.%s.%s_len = size;\n" n n;
5033             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5034               name;
5035             pr "  free (r);\n"
5036       );
5037
5038       (* Free the args. *)
5039       (match snd style with
5040        | [] ->
5041            pr "done: ;\n";
5042        | _ ->
5043            pr "done:\n";
5044            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
5045              name
5046       );
5047
5048       pr "}\n\n";
5049   ) daemon_functions;
5050
5051   (* Dispatch function. *)
5052   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
5053   pr "{\n";
5054   pr "  switch (proc_nr) {\n";
5055
5056   List.iter (
5057     fun (name, style, _, _, _, _, _) ->
5058       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
5059       pr "      %s_stub (xdr_in);\n" name;
5060       pr "      break;\n"
5061   ) daemon_functions;
5062
5063   pr "    default:\n";
5064   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
5065   pr "  }\n";
5066   pr "}\n";
5067   pr "\n";
5068
5069   (* LVM columns and tokenization functions. *)
5070   (* XXX This generates crap code.  We should rethink how we
5071    * do this parsing.
5072    *)
5073   List.iter (
5074     function
5075     | typ, cols ->
5076         pr "static const char *lvm_%s_cols = \"%s\";\n"
5077           typ (String.concat "," (List.map fst cols));
5078         pr "\n";
5079
5080         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
5081         pr "{\n";
5082         pr "  char *tok, *p, *next;\n";
5083         pr "  int i, j;\n";
5084         pr "\n";
5085         (*
5086           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
5087           pr "\n";
5088         *)
5089         pr "  if (!str) {\n";
5090         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
5091         pr "    return -1;\n";
5092         pr "  }\n";
5093         pr "  if (!*str || isspace (*str)) {\n";
5094         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
5095         pr "    return -1;\n";
5096         pr "  }\n";
5097         pr "  tok = str;\n";
5098         List.iter (
5099           fun (name, coltype) ->
5100             pr "  if (!tok) {\n";
5101             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
5102             pr "    return -1;\n";
5103             pr "  }\n";
5104             pr "  p = strchrnul (tok, ',');\n";
5105             pr "  if (*p) next = p+1; else next = NULL;\n";
5106             pr "  *p = '\\0';\n";
5107             (match coltype with
5108              | FString ->
5109                  pr "  r->%s = strdup (tok);\n" name;
5110                  pr "  if (r->%s == NULL) {\n" name;
5111                  pr "    perror (\"strdup\");\n";
5112                  pr "    return -1;\n";
5113                  pr "  }\n"
5114              | FUUID ->
5115                  pr "  for (i = j = 0; i < 32; ++j) {\n";
5116                  pr "    if (tok[j] == '\\0') {\n";
5117                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
5118                  pr "      return -1;\n";
5119                  pr "    } else if (tok[j] != '-')\n";
5120                  pr "      r->%s[i++] = tok[j];\n" name;
5121                  pr "  }\n";
5122              | FBytes ->
5123                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
5124                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5125                  pr "    return -1;\n";
5126                  pr "  }\n";
5127              | FInt64 ->
5128                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
5129                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5130                  pr "    return -1;\n";
5131                  pr "  }\n";
5132              | FOptPercent ->
5133                  pr "  if (tok[0] == '\\0')\n";
5134                  pr "    r->%s = -1;\n" name;
5135                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
5136                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5137                  pr "    return -1;\n";
5138                  pr "  }\n";
5139              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
5140                  assert false (* can never be an LVM column *)
5141             );
5142             pr "  tok = next;\n";
5143         ) cols;
5144
5145         pr "  if (tok != NULL) {\n";
5146         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
5147         pr "    return -1;\n";
5148         pr "  }\n";
5149         pr "  return 0;\n";
5150         pr "}\n";
5151         pr "\n";
5152
5153         pr "guestfs_int_lvm_%s_list *\n" typ;
5154         pr "parse_command_line_%ss (void)\n" typ;
5155         pr "{\n";
5156         pr "  char *out, *err;\n";
5157         pr "  char *p, *pend;\n";
5158         pr "  int r, i;\n";
5159         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
5160         pr "  void *newp;\n";
5161         pr "\n";
5162         pr "  ret = malloc (sizeof *ret);\n";
5163         pr "  if (!ret) {\n";
5164         pr "    reply_with_perror (\"malloc\");\n";
5165         pr "    return NULL;\n";
5166         pr "  }\n";
5167         pr "\n";
5168         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
5169         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
5170         pr "\n";
5171         pr "  r = command (&out, &err,\n";
5172         pr "           \"/sbin/lvm\", \"%ss\",\n" typ;
5173         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
5174         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
5175         pr "  if (r == -1) {\n";
5176         pr "    reply_with_error (\"%%s\", err);\n";
5177         pr "    free (out);\n";
5178         pr "    free (err);\n";
5179         pr "    free (ret);\n";
5180         pr "    return NULL;\n";
5181         pr "  }\n";
5182         pr "\n";
5183         pr "  free (err);\n";
5184         pr "\n";
5185         pr "  /* Tokenize each line of the output. */\n";
5186         pr "  p = out;\n";
5187         pr "  i = 0;\n";
5188         pr "  while (p) {\n";
5189         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
5190         pr "    if (pend) {\n";
5191         pr "      *pend = '\\0';\n";
5192         pr "      pend++;\n";
5193         pr "    }\n";
5194         pr "\n";
5195         pr "    while (*p && isspace (*p))      /* Skip any leading whitespace. */\n";
5196         pr "      p++;\n";
5197         pr "\n";
5198         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
5199         pr "      p = pend;\n";
5200         pr "      continue;\n";
5201         pr "    }\n";
5202         pr "\n";
5203         pr "    /* Allocate some space to store this next entry. */\n";
5204         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
5205         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
5206         pr "    if (newp == NULL) {\n";
5207         pr "      reply_with_perror (\"realloc\");\n";
5208         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5209         pr "      free (ret);\n";
5210         pr "      free (out);\n";
5211         pr "      return NULL;\n";
5212         pr "    }\n";
5213         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
5214         pr "\n";
5215         pr "    /* Tokenize the next entry. */\n";
5216         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
5217         pr "    if (r == -1) {\n";
5218         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
5219         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5220         pr "      free (ret);\n";
5221         pr "      free (out);\n";
5222         pr "      return NULL;\n";
5223         pr "    }\n";
5224         pr "\n";
5225         pr "    ++i;\n";
5226         pr "    p = pend;\n";
5227         pr "  }\n";
5228         pr "\n";
5229         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
5230         pr "\n";
5231         pr "  free (out);\n";
5232         pr "  return ret;\n";
5233         pr "}\n"
5234
5235   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
5236
5237 (* Generate a list of function names, for debugging in the daemon.. *)
5238 and generate_daemon_names () =
5239   generate_header CStyle GPLv2;
5240
5241   pr "#include <config.h>\n";
5242   pr "\n";
5243   pr "#include \"daemon.h\"\n";
5244   pr "\n";
5245
5246   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
5247   pr "const char *function_names[] = {\n";
5248   List.iter (
5249     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
5250   ) daemon_functions;
5251   pr "};\n";
5252
5253 (* Generate the tests. *)
5254 and generate_tests () =
5255   generate_header CStyle GPLv2;
5256
5257   pr "\
5258 #include <stdio.h>
5259 #include <stdlib.h>
5260 #include <string.h>
5261 #include <unistd.h>
5262 #include <sys/types.h>
5263 #include <fcntl.h>
5264
5265 #include \"guestfs.h\"
5266
5267 static guestfs_h *g;
5268 static int suppress_error = 0;
5269
5270 static void print_error (guestfs_h *g, void *data, const char *msg)
5271 {
5272   if (!suppress_error)
5273     fprintf (stderr, \"%%s\\n\", msg);
5274 }
5275
5276 /* FIXME: nearly identical code appears in fish.c */
5277 static void print_strings (char *const *argv)
5278 {
5279   int argc;
5280
5281   for (argc = 0; argv[argc] != NULL; ++argc)
5282     printf (\"\\t%%s\\n\", argv[argc]);
5283 }
5284
5285 /*
5286 static void print_table (char const *const *argv)
5287 {
5288   int i;
5289
5290   for (i = 0; argv[i] != NULL; i += 2)
5291     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
5292 }
5293 */
5294
5295 ";
5296
5297   (* Generate a list of commands which are not tested anywhere. *)
5298   pr "static void no_test_warnings (void)\n";
5299   pr "{\n";
5300
5301   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
5302   List.iter (
5303     fun (_, _, _, _, tests, _, _) ->
5304       let tests = filter_map (
5305         function
5306         | (_, (Always|If _|Unless _), test) -> Some test
5307         | (_, Disabled, _) -> None
5308       ) tests in
5309       let seq = List.concat (List.map seq_of_test tests) in
5310       let cmds_tested = List.map List.hd seq in
5311       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
5312   ) all_functions;
5313
5314   List.iter (
5315     fun (name, _, _, _, _, _, _) ->
5316       if not (Hashtbl.mem hash name) then
5317         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
5318   ) all_functions;
5319
5320   pr "}\n";
5321   pr "\n";
5322
5323   (* Generate the actual tests.  Note that we generate the tests
5324    * in reverse order, deliberately, so that (in general) the
5325    * newest tests run first.  This makes it quicker and easier to
5326    * debug them.
5327    *)
5328   let test_names =
5329     List.map (
5330       fun (name, _, _, _, tests, _, _) ->
5331         mapi (generate_one_test name) tests
5332     ) (List.rev all_functions) in
5333   let test_names = List.concat test_names in
5334   let nr_tests = List.length test_names in
5335
5336   pr "\
5337 int main (int argc, char *argv[])
5338 {
5339   char c = 0;
5340   int failed = 0;
5341   const char *filename;
5342   int fd;
5343   int nr_tests, test_num = 0;
5344
5345   setbuf (stdout, NULL);
5346
5347   no_test_warnings ();
5348
5349   g = guestfs_create ();
5350   if (g == NULL) {
5351     printf (\"guestfs_create FAILED\\n\");
5352     exit (1);
5353   }
5354
5355   guestfs_set_error_handler (g, print_error, NULL);
5356
5357   guestfs_set_path (g, \"../appliance\");
5358
5359   filename = \"test1.img\";
5360   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5361   if (fd == -1) {
5362     perror (filename);
5363     exit (1);
5364   }
5365   if (lseek (fd, %d, SEEK_SET) == -1) {
5366     perror (\"lseek\");
5367     close (fd);
5368     unlink (filename);
5369     exit (1);
5370   }
5371   if (write (fd, &c, 1) == -1) {
5372     perror (\"write\");
5373     close (fd);
5374     unlink (filename);
5375     exit (1);
5376   }
5377   if (close (fd) == -1) {
5378     perror (filename);
5379     unlink (filename);
5380     exit (1);
5381   }
5382   if (guestfs_add_drive (g, filename) == -1) {
5383     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5384     exit (1);
5385   }
5386
5387   filename = \"test2.img\";
5388   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5389   if (fd == -1) {
5390     perror (filename);
5391     exit (1);
5392   }
5393   if (lseek (fd, %d, SEEK_SET) == -1) {
5394     perror (\"lseek\");
5395     close (fd);
5396     unlink (filename);
5397     exit (1);
5398   }
5399   if (write (fd, &c, 1) == -1) {
5400     perror (\"write\");
5401     close (fd);
5402     unlink (filename);
5403     exit (1);
5404   }
5405   if (close (fd) == -1) {
5406     perror (filename);
5407     unlink (filename);
5408     exit (1);
5409   }
5410   if (guestfs_add_drive (g, filename) == -1) {
5411     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5412     exit (1);
5413   }
5414
5415   filename = \"test3.img\";
5416   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5417   if (fd == -1) {
5418     perror (filename);
5419     exit (1);
5420   }
5421   if (lseek (fd, %d, SEEK_SET) == -1) {
5422     perror (\"lseek\");
5423     close (fd);
5424     unlink (filename);
5425     exit (1);
5426   }
5427   if (write (fd, &c, 1) == -1) {
5428     perror (\"write\");
5429     close (fd);
5430     unlink (filename);
5431     exit (1);
5432   }
5433   if (close (fd) == -1) {
5434     perror (filename);
5435     unlink (filename);
5436     exit (1);
5437   }
5438   if (guestfs_add_drive (g, filename) == -1) {
5439     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5440     exit (1);
5441   }
5442
5443   if (guestfs_add_drive_ro (g, \"../images/test.sqsh\") == -1) {
5444     printf (\"guestfs_add_drive_ro ../images/test.sqsh FAILED\\n\");
5445     exit (1);
5446   }
5447
5448   if (guestfs_launch (g) == -1) {
5449     printf (\"guestfs_launch FAILED\\n\");
5450     exit (1);
5451   }
5452
5453   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
5454   alarm (600);
5455
5456   if (guestfs_wait_ready (g) == -1) {
5457     printf (\"guestfs_wait_ready FAILED\\n\");
5458     exit (1);
5459   }
5460
5461   /* Cancel previous alarm. */
5462   alarm (0);
5463
5464   nr_tests = %d;
5465
5466 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
5467
5468   iteri (
5469     fun i test_name ->
5470       pr "  test_num++;\n";
5471       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
5472       pr "  if (%s () == -1) {\n" test_name;
5473       pr "    printf (\"%s FAILED\\n\");\n" test_name;
5474       pr "    failed++;\n";
5475       pr "  }\n";
5476   ) test_names;
5477   pr "\n";
5478
5479   pr "  guestfs_close (g);\n";
5480   pr "  unlink (\"test1.img\");\n";
5481   pr "  unlink (\"test2.img\");\n";
5482   pr "  unlink (\"test3.img\");\n";
5483   pr "\n";
5484
5485   pr "  if (failed > 0) {\n";
5486   pr "    printf (\"***** %%d / %%d tests FAILED *****\\n\", failed, nr_tests);\n";
5487   pr "    exit (1);\n";
5488   pr "  }\n";
5489   pr "\n";
5490
5491   pr "  exit (0);\n";
5492   pr "}\n"
5493
5494 and generate_one_test name i (init, prereq, test) =
5495   let test_name = sprintf "test_%s_%d" name i in
5496
5497   pr "\
5498 static int %s_skip (void)
5499 {
5500   const char *str;
5501
5502   str = getenv (\"TEST_ONLY\");
5503   if (str)
5504     return strstr (str, \"%s\") == NULL;
5505   str = getenv (\"SKIP_%s\");
5506   if (str && strcmp (str, \"1\") == 0) return 1;
5507   str = getenv (\"SKIP_TEST_%s\");
5508   if (str && strcmp (str, \"1\") == 0) return 1;
5509   return 0;
5510 }
5511
5512 " test_name name (String.uppercase test_name) (String.uppercase name);
5513
5514   (match prereq with
5515    | Disabled | Always -> ()
5516    | If code | Unless code ->
5517        pr "static int %s_prereq (void)\n" test_name;
5518        pr "{\n";
5519        pr "  %s\n" code;
5520        pr "}\n";
5521        pr "\n";
5522   );
5523
5524   pr "\
5525 static int %s (void)
5526 {
5527   if (%s_skip ()) {
5528     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
5529     return 0;
5530   }
5531
5532 " test_name test_name test_name;
5533
5534   (match prereq with
5535    | Disabled ->
5536        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
5537    | If _ ->
5538        pr "  if (! %s_prereq ()) {\n" test_name;
5539        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
5540        pr "    return 0;\n";
5541        pr "  }\n";
5542        pr "\n";
5543        generate_one_test_body name i test_name init test;
5544    | Unless _ ->
5545        pr "  if (%s_prereq ()) {\n" test_name;
5546        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
5547        pr "    return 0;\n";
5548        pr "  }\n";
5549        pr "\n";
5550        generate_one_test_body name i test_name init test;
5551    | Always ->
5552        generate_one_test_body name i test_name init test
5553   );
5554
5555   pr "  return 0;\n";
5556   pr "}\n";
5557   pr "\n";
5558   test_name
5559
5560 and generate_one_test_body name i test_name init test =
5561   (match init with
5562    | InitNone (* XXX at some point, InitNone and InitEmpty became
5563                * folded together as the same thing.  Really we should
5564                * make InitNone do nothing at all, but the tests may
5565                * need to be checked to make sure this is OK.
5566                *)
5567    | InitEmpty ->
5568        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
5569        List.iter (generate_test_command_call test_name)
5570          [["blockdev_setrw"; "/dev/sda"];
5571           ["umount_all"];
5572           ["lvm_remove_all"]]
5573    | InitPartition ->
5574        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
5575        List.iter (generate_test_command_call test_name)
5576          [["blockdev_setrw"; "/dev/sda"];
5577           ["umount_all"];
5578           ["lvm_remove_all"];
5579           ["sfdiskM"; "/dev/sda"; ","]]
5580    | InitBasicFS ->
5581        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
5582        List.iter (generate_test_command_call test_name)
5583          [["blockdev_setrw"; "/dev/sda"];
5584           ["umount_all"];
5585           ["lvm_remove_all"];
5586           ["sfdiskM"; "/dev/sda"; ","];
5587           ["mkfs"; "ext2"; "/dev/sda1"];
5588           ["mount"; "/dev/sda1"; "/"]]
5589    | InitBasicFSonLVM ->
5590        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
5591          test_name;
5592        List.iter (generate_test_command_call test_name)
5593          [["blockdev_setrw"; "/dev/sda"];
5594           ["umount_all"];
5595           ["lvm_remove_all"];
5596           ["sfdiskM"; "/dev/sda"; ","];
5597           ["pvcreate"; "/dev/sda1"];
5598           ["vgcreate"; "VG"; "/dev/sda1"];
5599           ["lvcreate"; "LV"; "VG"; "8"];
5600           ["mkfs"; "ext2"; "/dev/VG/LV"];
5601           ["mount"; "/dev/VG/LV"; "/"]]
5602    | InitSquashFS ->
5603        pr "  /* InitSquashFS for %s */\n" test_name;
5604        List.iter (generate_test_command_call test_name)
5605          [["blockdev_setrw"; "/dev/sda"];
5606           ["umount_all"];
5607           ["lvm_remove_all"];
5608           ["mount_vfs"; "ro"; "squashfs"; "/dev/sdd"; "/"]]
5609   );
5610
5611   let get_seq_last = function
5612     | [] ->
5613         failwithf "%s: you cannot use [] (empty list) when expecting a command"
5614           test_name
5615     | seq ->
5616         let seq = List.rev seq in
5617         List.rev (List.tl seq), List.hd seq
5618   in
5619
5620   match test with
5621   | TestRun seq ->
5622       pr "  /* TestRun for %s (%d) */\n" name i;
5623       List.iter (generate_test_command_call test_name) seq
5624   | TestOutput (seq, expected) ->
5625       pr "  /* TestOutput for %s (%d) */\n" name i;
5626       pr "  const char *expected = \"%s\";\n" (c_quote expected);
5627       let seq, last = get_seq_last seq in
5628       let test () =
5629         pr "    if (strcmp (r, expected) != 0) {\n";
5630         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
5631         pr "      return -1;\n";
5632         pr "    }\n"
5633       in
5634       List.iter (generate_test_command_call test_name) seq;
5635       generate_test_command_call ~test test_name last
5636   | TestOutputList (seq, expected) ->
5637       pr "  /* TestOutputList for %s (%d) */\n" name i;
5638       let seq, last = get_seq_last seq in
5639       let test () =
5640         iteri (
5641           fun i str ->
5642             pr "    if (!r[%d]) {\n" i;
5643             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
5644             pr "      print_strings (r);\n";
5645             pr "      return -1;\n";
5646             pr "    }\n";
5647             pr "    {\n";
5648             pr "      const char *expected = \"%s\";\n" (c_quote str);
5649             pr "      if (strcmp (r[%d], expected) != 0) {\n" i;
5650             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
5651             pr "        return -1;\n";
5652             pr "      }\n";
5653             pr "    }\n"
5654         ) expected;
5655         pr "    if (r[%d] != NULL) {\n" (List.length expected);
5656         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
5657           test_name;
5658         pr "      print_strings (r);\n";
5659         pr "      return -1;\n";
5660         pr "    }\n"
5661       in
5662       List.iter (generate_test_command_call test_name) seq;
5663       generate_test_command_call ~test test_name last
5664   | TestOutputListOfDevices (seq, expected) ->
5665       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
5666       let seq, last = get_seq_last seq in
5667       let test () =
5668         iteri (
5669           fun i str ->
5670             pr "    if (!r[%d]) {\n" i;
5671             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
5672             pr "      print_strings (r);\n";
5673             pr "      return -1;\n";
5674             pr "    }\n";
5675             pr "    {\n";
5676             pr "      const char *expected = \"%s\";\n" (c_quote str);
5677             pr "      r[%d][5] = 's';\n" i;
5678             pr "      if (strcmp (r[%d], expected) != 0) {\n" i;
5679             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
5680             pr "        return -1;\n";
5681             pr "      }\n";
5682             pr "    }\n"
5683         ) expected;
5684         pr "    if (r[%d] != NULL) {\n" (List.length expected);
5685         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
5686           test_name;
5687         pr "      print_strings (r);\n";
5688         pr "      return -1;\n";
5689         pr "    }\n"
5690       in
5691       List.iter (generate_test_command_call test_name) seq;
5692       generate_test_command_call ~test test_name last
5693   | TestOutputInt (seq, expected) ->
5694       pr "  /* TestOutputInt for %s (%d) */\n" name i;
5695       let seq, last = get_seq_last seq in
5696       let test () =
5697         pr "    if (r != %d) {\n" expected;
5698         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
5699           test_name expected;
5700         pr "               (int) r);\n";
5701         pr "      return -1;\n";
5702         pr "    }\n"
5703       in
5704       List.iter (generate_test_command_call test_name) seq;
5705       generate_test_command_call ~test test_name last
5706   | TestOutputIntOp (seq, op, expected) ->
5707       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
5708       let seq, last = get_seq_last seq in
5709       let test () =
5710         pr "    if (! (r %s %d)) {\n" op expected;
5711         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
5712           test_name op expected;
5713         pr "               (int) r);\n";
5714         pr "      return -1;\n";
5715         pr "    }\n"
5716       in
5717       List.iter (generate_test_command_call test_name) seq;
5718       generate_test_command_call ~test test_name last
5719   | TestOutputTrue seq ->
5720       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
5721       let seq, last = get_seq_last seq in
5722       let test () =
5723         pr "    if (!r) {\n";
5724         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
5725           test_name;
5726         pr "      return -1;\n";
5727         pr "    }\n"
5728       in
5729       List.iter (generate_test_command_call test_name) seq;
5730       generate_test_command_call ~test test_name last
5731   | TestOutputFalse seq ->
5732       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
5733       let seq, last = get_seq_last seq in
5734       let test () =
5735         pr "    if (r) {\n";
5736         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
5737           test_name;
5738         pr "      return -1;\n";
5739         pr "    }\n"
5740       in
5741       List.iter (generate_test_command_call test_name) seq;
5742       generate_test_command_call ~test test_name last
5743   | TestOutputLength (seq, expected) ->
5744       pr "  /* TestOutputLength for %s (%d) */\n" name i;
5745       let seq, last = get_seq_last seq in
5746       let test () =
5747         pr "    int j;\n";
5748         pr "    for (j = 0; j < %d; ++j)\n" expected;
5749         pr "      if (r[j] == NULL) {\n";
5750         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
5751           test_name;
5752         pr "        print_strings (r);\n";
5753         pr "        return -1;\n";
5754         pr "      }\n";
5755         pr "    if (r[j] != NULL) {\n";
5756         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
5757           test_name;
5758         pr "      print_strings (r);\n";
5759         pr "      return -1;\n";
5760         pr "    }\n"
5761       in
5762       List.iter (generate_test_command_call test_name) seq;
5763       generate_test_command_call ~test test_name last
5764   | TestOutputBuffer (seq, expected) ->
5765       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
5766       pr "  const char *expected = \"%s\";\n" (c_quote expected);
5767       let seq, last = get_seq_last seq in
5768       let len = String.length expected in
5769       let test () =
5770         pr "    if (size != %d) {\n" len;
5771         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
5772         pr "      return -1;\n";
5773         pr "    }\n";
5774         pr "    if (strncmp (r, expected, size) != 0) {\n";
5775         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
5776         pr "      return -1;\n";
5777         pr "    }\n"
5778       in
5779       List.iter (generate_test_command_call test_name) seq;
5780       generate_test_command_call ~test test_name last
5781   | TestOutputStruct (seq, checks) ->
5782       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
5783       let seq, last = get_seq_last seq in
5784       let test () =
5785         List.iter (
5786           function
5787           | CompareWithInt (field, expected) ->
5788               pr "    if (r->%s != %d) {\n" field expected;
5789               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
5790                 test_name field expected;
5791               pr "               (int) r->%s);\n" field;
5792               pr "      return -1;\n";
5793               pr "    }\n"
5794           | CompareWithIntOp (field, op, expected) ->
5795               pr "    if (!(r->%s %s %d)) {\n" field op expected;
5796               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
5797                 test_name field op expected;
5798               pr "               (int) r->%s);\n" field;
5799               pr "      return -1;\n";
5800               pr "    }\n"
5801           | CompareWithString (field, expected) ->
5802               pr "    if (strcmp (r->%s, \"%s\") != 0) {\n" field expected;
5803               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
5804                 test_name field expected;
5805               pr "               r->%s);\n" field;
5806               pr "      return -1;\n";
5807               pr "    }\n"
5808           | CompareFieldsIntEq (field1, field2) ->
5809               pr "    if (r->%s != r->%s) {\n" field1 field2;
5810               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
5811                 test_name field1 field2;
5812               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
5813               pr "      return -1;\n";
5814               pr "    }\n"
5815           | CompareFieldsStrEq (field1, field2) ->
5816               pr "    if (strcmp (r->%s, r->%s) != 0) {\n" field1 field2;
5817               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
5818                 test_name field1 field2;
5819               pr "               r->%s, r->%s);\n" field1 field2;
5820               pr "      return -1;\n";
5821               pr "    }\n"
5822         ) checks
5823       in
5824       List.iter (generate_test_command_call test_name) seq;
5825       generate_test_command_call ~test test_name last
5826   | TestLastFail seq ->
5827       pr "  /* TestLastFail for %s (%d) */\n" name i;
5828       let seq, last = get_seq_last seq in
5829       List.iter (generate_test_command_call test_name) seq;
5830       generate_test_command_call test_name ~expect_error:true last
5831
5832 (* Generate the code to run a command, leaving the result in 'r'.
5833  * If you expect to get an error then you should set expect_error:true.
5834  *)
5835 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
5836   match cmd with
5837   | [] -> assert false
5838   | name :: args ->
5839       (* Look up the command to find out what args/ret it has. *)
5840       let style =
5841         try
5842           let _, style, _, _, _, _, _ =
5843             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
5844           style
5845         with Not_found ->
5846           failwithf "%s: in test, command %s was not found" test_name name in
5847
5848       if List.length (snd style) <> List.length args then
5849         failwithf "%s: in test, wrong number of args given to %s"
5850           test_name name;
5851
5852       pr "  {\n";
5853
5854       List.iter (
5855         function
5856         | OptString n, "NULL" -> ()
5857         | Pathname n, arg
5858         | Device n, arg
5859         | Dev_or_Path n, arg
5860         | String n, arg
5861         | OptString n, arg ->
5862             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
5863         | Int _, _
5864         | Bool _, _
5865         | FileIn _, _ | FileOut _, _ -> ()
5866         | StringList n, arg | DeviceList n, arg ->
5867             let strs = string_split " " arg in
5868             iteri (
5869               fun i str ->
5870                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
5871             ) strs;
5872             pr "    const char *const %s[] = {\n" n;
5873             iteri (
5874               fun i _ -> pr "      %s_%d,\n" n i
5875             ) strs;
5876             pr "      NULL\n";
5877             pr "    };\n";
5878       ) (List.combine (snd style) args);
5879
5880       let error_code =
5881         match fst style with
5882         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
5883         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
5884         | RConstString _ | RConstOptString _ ->
5885             pr "    const char *r;\n"; "NULL"
5886         | RString _ -> pr "    char *r;\n"; "NULL"
5887         | RStringList _ | RHashtable _ ->
5888             pr "    char **r;\n";
5889             pr "    int i;\n";
5890             "NULL"
5891         | RStruct (_, typ) ->
5892             pr "    struct guestfs_%s *r;\n" typ; "NULL"
5893         | RStructList (_, typ) ->
5894             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
5895         | RBufferOut _ ->
5896             pr "    char *r;\n";
5897             pr "    size_t size;\n";
5898             "NULL" in
5899
5900       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
5901       pr "    r = guestfs_%s (g" name;
5902
5903       (* Generate the parameters. *)
5904       List.iter (
5905         function
5906         | OptString _, "NULL" -> pr ", NULL"
5907         | Pathname n, _
5908         | Device n, _ | Dev_or_Path n, _
5909         | String n, _
5910         | OptString n, _ ->
5911             pr ", %s" n
5912         | FileIn _, arg | FileOut _, arg ->
5913             pr ", \"%s\"" (c_quote arg)
5914         | StringList n, _ | DeviceList n, _ ->
5915             pr ", (char **) %s" n
5916         | Int _, arg ->
5917             let i =
5918               try int_of_string arg
5919               with Failure "int_of_string" ->
5920                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
5921             pr ", %d" i
5922         | Bool _, arg ->
5923             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
5924       ) (List.combine (snd style) args);
5925
5926       (match fst style with
5927        | RBufferOut _ -> pr ", &size"
5928        | _ -> ()
5929       );
5930
5931       pr ");\n";
5932
5933       if not expect_error then
5934         pr "    if (r == %s)\n" error_code
5935       else
5936         pr "    if (r != %s)\n" error_code;
5937       pr "      return -1;\n";
5938
5939       (* Insert the test code. *)
5940       (match test with
5941        | None -> ()
5942        | Some f -> f ()
5943       );
5944
5945       (match fst style with
5946        | RErr | RInt _ | RInt64 _ | RBool _
5947        | RConstString _ | RConstOptString _ -> ()
5948        | RString _ | RBufferOut _ -> pr "    free (r);\n"
5949        | RStringList _ | RHashtable _ ->
5950            pr "    for (i = 0; r[i] != NULL; ++i)\n";
5951            pr "      free (r[i]);\n";
5952            pr "    free (r);\n"
5953        | RStruct (_, typ) ->
5954            pr "    guestfs_free_%s (r);\n" typ
5955        | RStructList (_, typ) ->
5956            pr "    guestfs_free_%s_list (r);\n" typ
5957       );
5958
5959       pr "  }\n"
5960
5961 and c_quote str =
5962   let str = replace_str str "\r" "\\r" in
5963   let str = replace_str str "\n" "\\n" in
5964   let str = replace_str str "\t" "\\t" in
5965   let str = replace_str str "\000" "\\0" in
5966   str
5967
5968 (* Generate a lot of different functions for guestfish. *)
5969 and generate_fish_cmds () =
5970   generate_header CStyle GPLv2;
5971
5972   let all_functions =
5973     List.filter (
5974       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
5975     ) all_functions in
5976   let all_functions_sorted =
5977     List.filter (
5978       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
5979     ) all_functions_sorted in
5980
5981   pr "#include <stdio.h>\n";
5982   pr "#include <stdlib.h>\n";
5983   pr "#include <string.h>\n";
5984   pr "#include <inttypes.h>\n";
5985   pr "#include <ctype.h>\n";
5986   pr "\n";
5987   pr "#include <guestfs.h>\n";
5988   pr "#include \"fish.h\"\n";
5989   pr "\n";
5990
5991   (* list_commands function, which implements guestfish -h *)
5992   pr "void list_commands (void)\n";
5993   pr "{\n";
5994   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
5995   pr "  list_builtin_commands ();\n";
5996   List.iter (
5997     fun (name, _, _, flags, _, shortdesc, _) ->
5998       let name = replace_char name '_' '-' in
5999       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
6000         name shortdesc
6001   ) all_functions_sorted;
6002   pr "  printf (\"    %%s\\n\",";
6003   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
6004   pr "}\n";
6005   pr "\n";
6006
6007   (* display_command function, which implements guestfish -h cmd *)
6008   pr "void display_command (const char *cmd)\n";
6009   pr "{\n";
6010   List.iter (
6011     fun (name, style, _, flags, _, shortdesc, longdesc) ->
6012       let name2 = replace_char name '_' '-' in
6013       let alias =
6014         try find_map (function FishAlias n -> Some n | _ -> None) flags
6015         with Not_found -> name in
6016       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
6017       let synopsis =
6018         match snd style with
6019         | [] -> name2
6020         | args ->
6021             sprintf "%s <%s>"
6022               name2 (String.concat "> <" (List.map name_of_argt args)) in
6023
6024       let warnings =
6025         if List.mem ProtocolLimitWarning flags then
6026           ("\n\n" ^ protocol_limit_warning)
6027         else "" in
6028
6029       (* For DangerWillRobinson commands, we should probably have
6030        * guestfish prompt before allowing you to use them (especially
6031        * in interactive mode). XXX
6032        *)
6033       let warnings =
6034         warnings ^
6035           if List.mem DangerWillRobinson flags then
6036             ("\n\n" ^ danger_will_robinson)
6037           else "" in
6038
6039       let warnings =
6040         warnings ^
6041           match deprecation_notice flags with
6042           | None -> ""
6043           | Some txt -> "\n\n" ^ txt in
6044
6045       let describe_alias =
6046         if name <> alias then
6047           sprintf "\n\nYou can use '%s' as an alias for this command." alias
6048         else "" in
6049
6050       pr "  if (";
6051       pr "strcasecmp (cmd, \"%s\") == 0" name;
6052       if name <> name2 then
6053         pr " || strcasecmp (cmd, \"%s\") == 0" name2;
6054       if name <> alias then
6055         pr " || strcasecmp (cmd, \"%s\") == 0" alias;
6056       pr ")\n";
6057       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
6058         name2 shortdesc
6059         (" " ^ synopsis ^ "\n\n" ^ longdesc ^ warnings ^ describe_alias);
6060       pr "  else\n"
6061   ) all_functions;
6062   pr "    display_builtin_command (cmd);\n";
6063   pr "}\n";
6064   pr "\n";
6065
6066   let emit_print_list_function typ =
6067     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
6068       typ typ typ;
6069     pr "{\n";
6070     pr "  int i;\n";
6071     pr "\n";
6072     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
6073     pr "    printf (\"[%%d] = {\\n\", i);\n";
6074     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
6075     pr "    printf (\"}\\n\");\n";
6076     pr "  }\n";
6077     pr "}\n";
6078     pr "\n";
6079   in
6080
6081   (* print_* functions *)
6082   List.iter (
6083     fun (typ, cols) ->
6084       let needs_i =
6085         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
6086
6087       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
6088       pr "{\n";
6089       if needs_i then (
6090         pr "  int i;\n";
6091         pr "\n"
6092       );
6093       List.iter (
6094         function
6095         | name, FString ->
6096             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
6097         | name, FUUID ->
6098             pr "  printf (\"%s: \");\n" name;
6099             pr "  for (i = 0; i < 32; ++i)\n";
6100             pr "    printf (\"%%s%%c\", indent, %s->%s[i]);\n" typ name;
6101             pr "  printf (\"\\n\");\n"
6102         | name, FBuffer ->
6103             pr "  printf (\"%%s%s: \", indent);\n" name;
6104             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
6105             pr "    if (isprint (%s->%s[i]))\n" typ name;
6106             pr "      printf (\"%%s%%c\", indent, %s->%s[i]);\n" typ name;
6107             pr "    else\n";
6108             pr "      printf (\"%%s\\\\x%%02x\", indent, %s->%s[i]);\n" typ name;
6109             pr "  printf (\"\\n\");\n"
6110         | name, (FUInt64|FBytes) ->
6111             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
6112               name typ name
6113         | name, FInt64 ->
6114             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
6115               name typ name
6116         | name, FUInt32 ->
6117             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
6118               name typ name
6119         | name, FInt32 ->
6120             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
6121               name typ name
6122         | name, FChar ->
6123             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
6124               name typ name
6125         | name, FOptPercent ->
6126             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
6127               typ name name typ name;
6128             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
6129       ) cols;
6130       pr "}\n";
6131       pr "\n";
6132       pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
6133       pr "{\n";
6134       pr "  print_%s_indent (%s, \"\");\n" typ typ;
6135       pr "}\n";
6136       pr "\n";
6137   ) structs;
6138
6139   (* Emit a print_TYPE_list function definition only if that function is used. *)
6140   List.iter (
6141     function
6142     | typ, (RStructListOnly | RStructAndList) ->
6143         (* generate the function for typ *)
6144         emit_print_list_function typ
6145     | typ, _ -> () (* empty *)
6146   ) rstructs_used;
6147
6148   (* run_<action> actions *)
6149   List.iter (
6150     fun (name, style, _, flags, _, _, _) ->
6151       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
6152       pr "{\n";
6153       (match fst style with
6154        | RErr
6155        | RInt _
6156        | RBool _ -> pr "  int r;\n"
6157        | RInt64 _ -> pr "  int64_t r;\n"
6158        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
6159        | RString _ -> pr "  char *r;\n"
6160        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
6161        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
6162        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
6163        | RBufferOut _ ->
6164            pr "  char *r;\n";
6165            pr "  size_t size;\n";
6166       );
6167       List.iter (
6168         function
6169         | Pathname n
6170         | Device n | Dev_or_Path n
6171         | String n
6172         | OptString n
6173         | FileIn n
6174         | FileOut n -> pr "  const char *%s;\n" n
6175         | StringList n | DeviceList n -> pr "  char *const *%s;\n" n
6176         | Bool n -> pr "  int %s;\n" n
6177         | Int n -> pr "  int %s;\n" n
6178       ) (snd style);
6179
6180       (* Check and convert parameters. *)
6181       let argc_expected = List.length (snd style) in
6182       pr "  if (argc != %d) {\n" argc_expected;
6183       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
6184         argc_expected;
6185       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
6186       pr "    return -1;\n";
6187       pr "  }\n";
6188       iteri (
6189         fun i ->
6190           function
6191           | Pathname name
6192           | Device name | Dev_or_Path name | String name -> pr "  %s = argv[%d];\n" name i
6193           | OptString name ->
6194               pr "  %s = strcmp (argv[%d], \"\") != 0 ? argv[%d] : NULL;\n"
6195                 name i i
6196           | FileIn name ->
6197               pr "  %s = strcmp (argv[%d], \"-\") != 0 ? argv[%d] : \"/dev/stdin\";\n"
6198                 name i i
6199           | FileOut name ->
6200               pr "  %s = strcmp (argv[%d], \"-\") != 0 ? argv[%d] : \"/dev/stdout\";\n"
6201                 name i i
6202           | StringList name | DeviceList name ->
6203               pr "  %s = parse_string_list (argv[%d]);\n" name i
6204           | Bool name ->
6205               pr "  %s = is_true (argv[%d]) ? 1 : 0;\n" name i
6206           | Int name ->
6207               pr "  %s = atoi (argv[%d]);\n" name i
6208       ) (snd style);
6209
6210       (* Call C API function. *)
6211       let fn =
6212         try find_map (function FishAction n -> Some n | _ -> None) flags
6213         with Not_found -> sprintf "guestfs_%s" name in
6214       pr "  r = %s " fn;
6215       generate_c_call_args ~handle:"g" style;
6216       pr ";\n";
6217
6218       (* Check return value for errors and display command results. *)
6219       (match fst style with
6220        | RErr -> pr "  return r;\n"
6221        | RInt _ ->
6222            pr "  if (r == -1) return -1;\n";
6223            pr "  printf (\"%%d\\n\", r);\n";
6224            pr "  return 0;\n"
6225        | RInt64 _ ->
6226            pr "  if (r == -1) return -1;\n";
6227            pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
6228            pr "  return 0;\n"
6229        | RBool _ ->
6230            pr "  if (r == -1) return -1;\n";
6231            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
6232            pr "  return 0;\n"
6233        | RConstString _ ->
6234            pr "  if (r == NULL) return -1;\n";
6235            pr "  printf (\"%%s\\n\", r);\n";
6236            pr "  return 0;\n"
6237        | RConstOptString _ ->
6238            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
6239            pr "  return 0;\n"
6240        | RString _ ->
6241            pr "  if (r == NULL) return -1;\n";
6242            pr "  printf (\"%%s\\n\", r);\n";
6243            pr "  free (r);\n";
6244            pr "  return 0;\n"
6245        | RStringList _ ->
6246            pr "  if (r == NULL) return -1;\n";
6247            pr "  print_strings (r);\n";
6248            pr "  free_strings (r);\n";
6249            pr "  return 0;\n"
6250        | RStruct (_, typ) ->
6251            pr "  if (r == NULL) return -1;\n";
6252            pr "  print_%s (r);\n" typ;
6253            pr "  guestfs_free_%s (r);\n" typ;
6254            pr "  return 0;\n"
6255        | RStructList (_, typ) ->
6256            pr "  if (r == NULL) return -1;\n";
6257            pr "  print_%s_list (r);\n" typ;
6258            pr "  guestfs_free_%s_list (r);\n" typ;
6259            pr "  return 0;\n"
6260        | RHashtable _ ->
6261            pr "  if (r == NULL) return -1;\n";
6262            pr "  print_table (r);\n";
6263            pr "  free_strings (r);\n";
6264            pr "  return 0;\n"
6265        | RBufferOut _ ->
6266            pr "  if (r == NULL) return -1;\n";
6267            pr "  fwrite (r, size, 1, stdout);\n";
6268            pr "  free (r);\n";
6269            pr "  return 0;\n"
6270       );
6271       pr "}\n";
6272       pr "\n"
6273   ) all_functions;
6274
6275   (* run_action function *)
6276   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
6277   pr "{\n";
6278   List.iter (
6279     fun (name, _, _, flags, _, _, _) ->
6280       let name2 = replace_char name '_' '-' in
6281       let alias =
6282         try find_map (function FishAlias n -> Some n | _ -> None) flags
6283         with Not_found -> name in
6284       pr "  if (";
6285       pr "strcasecmp (cmd, \"%s\") == 0" name;
6286       if name <> name2 then
6287         pr " || strcasecmp (cmd, \"%s\") == 0" name2;
6288       if name <> alias then
6289         pr " || strcasecmp (cmd, \"%s\") == 0" alias;
6290       pr ")\n";
6291       pr "    return run_%s (cmd, argc, argv);\n" name;
6292       pr "  else\n";
6293   ) all_functions;
6294   pr "    {\n";
6295   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
6296   pr "      return -1;\n";
6297   pr "    }\n";
6298   pr "  return 0;\n";
6299   pr "}\n";
6300   pr "\n"
6301
6302 (* Readline completion for guestfish. *)
6303 and generate_fish_completion () =
6304   generate_header CStyle GPLv2;
6305
6306   let all_functions =
6307     List.filter (
6308       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
6309     ) all_functions in
6310
6311   pr "\
6312 #include <config.h>
6313
6314 #include <stdio.h>
6315 #include <stdlib.h>
6316 #include <string.h>
6317
6318 #ifdef HAVE_LIBREADLINE
6319 #include <readline/readline.h>
6320 #endif
6321
6322 #include \"fish.h\"
6323
6324 #ifdef HAVE_LIBREADLINE
6325
6326 static const char *const commands[] = {
6327   BUILTIN_COMMANDS_FOR_COMPLETION,
6328 ";
6329
6330   (* Get the commands, including the aliases.  They don't need to be
6331    * sorted - the generator() function just does a dumb linear search.
6332    *)
6333   let commands =
6334     List.map (
6335       fun (name, _, _, flags, _, _, _) ->
6336         let name2 = replace_char name '_' '-' in
6337         let alias =
6338           try find_map (function FishAlias n -> Some n | _ -> None) flags
6339           with Not_found -> name in
6340
6341         if name <> alias then [name2; alias] else [name2]
6342     ) all_functions in
6343   let commands = List.flatten commands in
6344
6345   List.iter (pr "  \"%s\",\n") commands;
6346
6347   pr "  NULL
6348 };
6349
6350 static char *
6351 generator (const char *text, int state)
6352 {
6353   static int index, len;
6354   const char *name;
6355
6356   if (!state) {
6357     index = 0;
6358     len = strlen (text);
6359   }
6360
6361   rl_attempted_completion_over = 1;
6362
6363   while ((name = commands[index]) != NULL) {
6364     index++;
6365     if (strncasecmp (name, text, len) == 0)
6366       return strdup (name);
6367   }
6368
6369   return NULL;
6370 }
6371
6372 #endif /* HAVE_LIBREADLINE */
6373
6374 char **do_completion (const char *text, int start, int end)
6375 {
6376   char **matches = NULL;
6377
6378 #ifdef HAVE_LIBREADLINE
6379   rl_completion_append_character = ' ';
6380
6381   if (start == 0)
6382     matches = rl_completion_matches (text, generator);
6383   else if (complete_dest_paths)
6384     matches = rl_completion_matches (text, complete_dest_paths_generator);
6385 #endif
6386
6387   return matches;
6388 }
6389 ";
6390
6391 (* Generate the POD documentation for guestfish. *)
6392 and generate_fish_actions_pod () =
6393   let all_functions_sorted =
6394     List.filter (
6395       fun (_, _, _, flags, _, _, _) ->
6396         not (List.mem NotInFish flags || List.mem NotInDocs flags)
6397     ) all_functions_sorted in
6398
6399   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
6400
6401   List.iter (
6402     fun (name, style, _, flags, _, _, longdesc) ->
6403       let longdesc =
6404         Str.global_substitute rex (
6405           fun s ->
6406             let sub =
6407               try Str.matched_group 1 s
6408               with Not_found ->
6409                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
6410             "C<" ^ replace_char sub '_' '-' ^ ">"
6411         ) longdesc in
6412       let name = replace_char name '_' '-' in
6413       let alias =
6414         try find_map (function FishAlias n -> Some n | _ -> None) flags
6415         with Not_found -> name in
6416
6417       pr "=head2 %s" name;
6418       if name <> alias then
6419         pr " | %s" alias;
6420       pr "\n";
6421       pr "\n";
6422       pr " %s" name;
6423       List.iter (
6424         function
6425         | Pathname n | Device n | Dev_or_Path n | String n -> pr " %s" n
6426         | OptString n -> pr " %s" n
6427         | StringList n | DeviceList n -> pr " '%s ...'" n
6428         | Bool _ -> pr " true|false"
6429         | Int n -> pr " %s" n
6430         | FileIn n | FileOut n -> pr " (%s|-)" n
6431       ) (snd style);
6432       pr "\n";
6433       pr "\n";
6434       pr "%s\n\n" longdesc;
6435
6436       if List.exists (function FileIn _ | FileOut _ -> true
6437                       | _ -> false) (snd style) then
6438         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
6439
6440       if List.mem ProtocolLimitWarning flags then
6441         pr "%s\n\n" protocol_limit_warning;
6442
6443       if List.mem DangerWillRobinson flags then
6444         pr "%s\n\n" danger_will_robinson;
6445
6446       match deprecation_notice flags with
6447       | None -> ()
6448       | Some txt -> pr "%s\n\n" txt
6449   ) all_functions_sorted
6450
6451 (* Generate a C function prototype. *)
6452 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
6453     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
6454     ?(prefix = "")
6455     ?handle name style =
6456   if extern then pr "extern ";
6457   if static then pr "static ";
6458   (match fst style with
6459    | RErr -> pr "int "
6460    | RInt _ -> pr "int "
6461    | RInt64 _ -> pr "int64_t "
6462    | RBool _ -> pr "int "
6463    | RConstString _ | RConstOptString _ -> pr "const char *"
6464    | RString _ | RBufferOut _ -> pr "char *"
6465    | RStringList _ | RHashtable _ -> pr "char **"
6466    | RStruct (_, typ) ->
6467        if not in_daemon then pr "struct guestfs_%s *" typ
6468        else pr "guestfs_int_%s *" typ
6469    | RStructList (_, typ) ->
6470        if not in_daemon then pr "struct guestfs_%s_list *" typ
6471        else pr "guestfs_int_%s_list *" typ
6472   );
6473   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
6474   pr "%s%s (" prefix name;
6475   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
6476     pr "void"
6477   else (
6478     let comma = ref false in
6479     (match handle with
6480      | None -> ()
6481      | Some handle -> pr "guestfs_h *%s" handle; comma := true
6482     );
6483     let next () =
6484       if !comma then (
6485         if single_line then pr ", " else pr ",\n\t\t"
6486       );
6487       comma := true
6488     in
6489     List.iter (
6490       function
6491       | Pathname n
6492       | Device n | Dev_or_Path n
6493       | String n
6494       | OptString n ->
6495           next ();
6496           pr "const char *%s" n
6497       | StringList n | DeviceList n ->
6498           next ();
6499           pr "char *const *%s" n
6500       | Bool n -> next (); pr "int %s" n
6501       | Int n -> next (); pr "int %s" n
6502       | FileIn n
6503       | FileOut n ->
6504           if not in_daemon then (next (); pr "const char *%s" n)
6505     ) (snd style);
6506     if is_RBufferOut then (next (); pr "size_t *size_r");
6507   );
6508   pr ")";
6509   if semicolon then pr ";";
6510   if newline then pr "\n"
6511
6512 (* Generate C call arguments, eg "(handle, foo, bar)" *)
6513 and generate_c_call_args ?handle ?(decl = false) style =
6514   pr "(";
6515   let comma = ref false in
6516   let next () =
6517     if !comma then pr ", ";
6518     comma := true
6519   in
6520   (match handle with
6521    | None -> ()
6522    | Some handle -> pr "%s" handle; comma := true
6523   );
6524   List.iter (
6525     fun arg ->
6526       next ();
6527       pr "%s" (name_of_argt arg)
6528   ) (snd style);
6529   (* For RBufferOut calls, add implicit &size parameter. *)
6530   if not decl then (
6531     match fst style with
6532     | RBufferOut _ ->
6533         next ();
6534         pr "&size"
6535     | _ -> ()
6536   );
6537   pr ")"
6538
6539 (* Generate the OCaml bindings interface. *)
6540 and generate_ocaml_mli () =
6541   generate_header OCamlStyle LGPLv2;
6542
6543   pr "\
6544 (** For API documentation you should refer to the C API
6545     in the guestfs(3) manual page.  The OCaml API uses almost
6546     exactly the same calls. *)
6547
6548 type t
6549 (** A [guestfs_h] handle. *)
6550
6551 exception Error of string
6552 (** This exception is raised when there is an error. *)
6553
6554 val create : unit -> t
6555
6556 val close : t -> unit
6557 (** Handles are closed by the garbage collector when they become
6558     unreferenced, but callers can also call this in order to
6559     provide predictable cleanup. *)
6560
6561 ";
6562   generate_ocaml_structure_decls ();
6563
6564   (* The actions. *)
6565   List.iter (
6566     fun (name, style, _, _, _, shortdesc, _) ->
6567       generate_ocaml_prototype name style;
6568       pr "(** %s *)\n" shortdesc;
6569       pr "\n"
6570   ) all_functions
6571
6572 (* Generate the OCaml bindings implementation. *)
6573 and generate_ocaml_ml () =
6574   generate_header OCamlStyle LGPLv2;
6575
6576   pr "\
6577 type t
6578 exception Error of string
6579 external create : unit -> t = \"ocaml_guestfs_create\"
6580 external close : t -> unit = \"ocaml_guestfs_close\"
6581
6582 let () =
6583   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\")
6584
6585 ";
6586
6587   generate_ocaml_structure_decls ();
6588
6589   (* The actions. *)
6590   List.iter (
6591     fun (name, style, _, _, _, shortdesc, _) ->
6592       generate_ocaml_prototype ~is_external:true name style;
6593   ) all_functions
6594
6595 (* Generate the OCaml bindings C implementation. *)
6596 and generate_ocaml_c () =
6597   generate_header CStyle LGPLv2;
6598
6599   pr "\
6600 #include <stdio.h>
6601 #include <stdlib.h>
6602 #include <string.h>
6603
6604 #include <caml/config.h>
6605 #include <caml/alloc.h>
6606 #include <caml/callback.h>
6607 #include <caml/fail.h>
6608 #include <caml/memory.h>
6609 #include <caml/mlvalues.h>
6610 #include <caml/signals.h>
6611
6612 #include <guestfs.h>
6613
6614 #include \"guestfs_c.h\"
6615
6616 /* Copy a hashtable of string pairs into an assoc-list.  We return
6617  * the list in reverse order, but hashtables aren't supposed to be
6618  * ordered anyway.
6619  */
6620 static CAMLprim value
6621 copy_table (char * const * argv)
6622 {
6623   CAMLparam0 ();
6624   CAMLlocal5 (rv, pairv, kv, vv, cons);
6625   int i;
6626
6627   rv = Val_int (0);
6628   for (i = 0; argv[i] != NULL; i += 2) {
6629     kv = caml_copy_string (argv[i]);
6630     vv = caml_copy_string (argv[i+1]);
6631     pairv = caml_alloc (2, 0);
6632     Store_field (pairv, 0, kv);
6633     Store_field (pairv, 1, vv);
6634     cons = caml_alloc (2, 0);
6635     Store_field (cons, 1, rv);
6636     rv = cons;
6637     Store_field (cons, 0, pairv);
6638   }
6639
6640   CAMLreturn (rv);
6641 }
6642
6643 ";
6644
6645   (* Struct copy functions. *)
6646   List.iter (
6647     fun (typ, cols) ->
6648       let has_optpercent_col =
6649         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
6650
6651       pr "static CAMLprim value\n";
6652       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
6653       pr "{\n";
6654       pr "  CAMLparam0 ();\n";
6655       if has_optpercent_col then
6656         pr "  CAMLlocal3 (rv, v, v2);\n"
6657       else
6658         pr "  CAMLlocal2 (rv, v);\n";
6659       pr "\n";
6660       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
6661       iteri (
6662         fun i col ->
6663           (match col with
6664            | name, FString ->
6665                pr "  v = caml_copy_string (%s->%s);\n" typ name
6666            | name, FBuffer ->
6667                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
6668                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
6669                  typ name typ name
6670            | name, FUUID ->
6671                pr "  v = caml_alloc_string (32);\n";
6672                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
6673            | name, (FBytes|FInt64|FUInt64) ->
6674                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
6675            | name, (FInt32|FUInt32) ->
6676                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
6677            | name, FOptPercent ->
6678                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
6679                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
6680                pr "    v = caml_alloc (1, 0);\n";
6681                pr "    Store_field (v, 0, v2);\n";
6682                pr "  } else /* None */\n";
6683                pr "    v = Val_int (0);\n";
6684            | name, FChar ->
6685                pr "  v = Val_int (%s->%s);\n" typ name
6686           );
6687           pr "  Store_field (rv, %d, v);\n" i
6688       ) cols;
6689       pr "  CAMLreturn (rv);\n";
6690       pr "}\n";
6691       pr "\n";
6692
6693       pr "static CAMLprim value\n";
6694       pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n"
6695         typ typ typ;
6696       pr "{\n";
6697       pr "  CAMLparam0 ();\n";
6698       pr "  CAMLlocal2 (rv, v);\n";
6699       pr "  int i;\n";
6700       pr "\n";
6701       pr "  if (%ss->len == 0)\n" typ;
6702       pr "    CAMLreturn (Atom (0));\n";
6703       pr "  else {\n";
6704       pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
6705       pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
6706       pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
6707       pr "      caml_modify (&Field (rv, i), v);\n";
6708       pr "    }\n";
6709       pr "    CAMLreturn (rv);\n";
6710       pr "  }\n";
6711       pr "}\n";
6712       pr "\n";
6713   ) structs;
6714
6715   (* The wrappers. *)
6716   List.iter (
6717     fun (name, style, _, _, _, _, _) ->
6718       let params =
6719         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
6720
6721       let needs_extra_vs =
6722         match fst style with RConstOptString _ -> true | _ -> false in
6723
6724       pr "CAMLprim value\n";
6725       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
6726       List.iter (pr ", value %s") (List.tl params);
6727       pr ")\n";
6728       pr "{\n";
6729
6730       (match params with
6731        | [p1; p2; p3; p4; p5] ->
6732            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
6733        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
6734            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
6735            pr "  CAMLxparam%d (%s);\n"
6736              (List.length rest) (String.concat ", " rest)
6737        | ps ->
6738            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
6739       );
6740       if not needs_extra_vs then
6741         pr "  CAMLlocal1 (rv);\n"
6742       else
6743         pr "  CAMLlocal3 (rv, v, v2);\n";
6744       pr "\n";
6745
6746       pr "  guestfs_h *g = Guestfs_val (gv);\n";
6747       pr "  if (g == NULL)\n";
6748       pr "    caml_failwith (\"%s: used handle after closing it\");\n" name;
6749       pr "\n";
6750
6751       List.iter (
6752         function
6753         | Pathname n
6754         | Device n | Dev_or_Path n
6755         | String n
6756         | FileIn n
6757         | FileOut n ->
6758             pr "  const char *%s = String_val (%sv);\n" n n
6759         | OptString n ->
6760             pr "  const char *%s =\n" n;
6761             pr "    %sv != Val_int (0) ? String_val (Field (%sv, 0)) : NULL;\n"
6762               n n
6763         | StringList n | DeviceList n ->
6764             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
6765         | Bool n ->
6766             pr "  int %s = Bool_val (%sv);\n" n n
6767         | Int n ->
6768             pr "  int %s = Int_val (%sv);\n" n n
6769       ) (snd style);
6770       let error_code =
6771         match fst style with
6772         | RErr -> pr "  int r;\n"; "-1"
6773         | RInt _ -> pr "  int r;\n"; "-1"
6774         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6775         | RBool _ -> pr "  int r;\n"; "-1"
6776         | RConstString _ | RConstOptString _ ->
6777             pr "  const char *r;\n"; "NULL"
6778         | RString _ -> pr "  char *r;\n"; "NULL"
6779         | RStringList _ ->
6780             pr "  int i;\n";
6781             pr "  char **r;\n";
6782             "NULL"
6783         | RStruct (_, typ) ->
6784             pr "  struct guestfs_%s *r;\n" typ; "NULL"
6785         | RStructList (_, typ) ->
6786             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
6787         | RHashtable _ ->
6788             pr "  int i;\n";
6789             pr "  char **r;\n";
6790             "NULL"
6791         | RBufferOut _ ->
6792             pr "  char *r;\n";
6793             pr "  size_t size;\n";
6794             "NULL" in
6795       pr "\n";
6796
6797       pr "  caml_enter_blocking_section ();\n";
6798       pr "  r = guestfs_%s " name;
6799       generate_c_call_args ~handle:"g" style;
6800       pr ";\n";
6801       pr "  caml_leave_blocking_section ();\n";
6802
6803       List.iter (
6804         function
6805         | StringList n | DeviceList n ->
6806             pr "  ocaml_guestfs_free_strings (%s);\n" n;
6807         | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _ | Bool _ | Int _
6808         | FileIn _ | FileOut _ -> ()
6809       ) (snd style);
6810
6811       pr "  if (r == %s)\n" error_code;
6812       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
6813       pr "\n";
6814
6815       (match fst style with
6816        | RErr -> pr "  rv = Val_unit;\n"
6817        | RInt _ -> pr "  rv = Val_int (r);\n"
6818        | RInt64 _ ->
6819            pr "  rv = caml_copy_int64 (r);\n"
6820        | RBool _ -> pr "  rv = Val_bool (r);\n"
6821        | RConstString _ ->
6822            pr "  rv = caml_copy_string (r);\n"
6823        | RConstOptString _ ->
6824            pr "  if (r) { /* Some string */\n";
6825            pr "    v = caml_alloc (1, 0);\n";
6826            pr "    v2 = caml_copy_string (r);\n";
6827            pr "    Store_field (v, 0, v2);\n";
6828            pr "  } else /* None */\n";
6829            pr "    v = Val_int (0);\n";
6830        | RString _ ->
6831            pr "  rv = caml_copy_string (r);\n";
6832            pr "  free (r);\n"
6833        | RStringList _ ->
6834            pr "  rv = caml_copy_string_array ((const char **) r);\n";
6835            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
6836            pr "  free (r);\n"
6837        | RStruct (_, typ) ->
6838            pr "  rv = copy_%s (r);\n" typ;
6839            pr "  guestfs_free_%s (r);\n" typ;
6840        | RStructList (_, typ) ->
6841            pr "  rv = copy_%s_list (r);\n" typ;
6842            pr "  guestfs_free_%s_list (r);\n" typ;
6843        | RHashtable _ ->
6844            pr "  rv = copy_table (r);\n";
6845            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
6846            pr "  free (r);\n";
6847        | RBufferOut _ ->
6848            pr "  rv = caml_alloc_string (size);\n";
6849            pr "  memcpy (String_val (rv), r, size);\n";
6850       );
6851
6852       pr "  CAMLreturn (rv);\n";
6853       pr "}\n";
6854       pr "\n";
6855
6856       if List.length params > 5 then (
6857         pr "CAMLprim value\n";
6858         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
6859         pr "{\n";
6860         pr "  return ocaml_guestfs_%s (argv[0]" name;
6861         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
6862         pr ");\n";
6863         pr "}\n";
6864         pr "\n"
6865       )
6866   ) all_functions
6867
6868 and generate_ocaml_structure_decls () =
6869   List.iter (
6870     fun (typ, cols) ->
6871       pr "type %s = {\n" typ;
6872       List.iter (
6873         function
6874         | name, FString -> pr "  %s : string;\n" name
6875         | name, FBuffer -> pr "  %s : string;\n" name
6876         | name, FUUID -> pr "  %s : string;\n" name
6877         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
6878         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
6879         | name, FChar -> pr "  %s : char;\n" name
6880         | name, FOptPercent -> pr "  %s : float option;\n" name
6881       ) cols;
6882       pr "}\n";
6883       pr "\n"
6884   ) structs
6885
6886 and generate_ocaml_prototype ?(is_external = false) name style =
6887   if is_external then pr "external " else pr "val ";
6888   pr "%s : t -> " name;
6889   List.iter (
6890     function
6891     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "string -> "
6892     | OptString _ -> pr "string option -> "
6893     | StringList _ | DeviceList _ -> pr "string array -> "
6894     | Bool _ -> pr "bool -> "
6895     | Int _ -> pr "int -> "
6896   ) (snd style);
6897   (match fst style with
6898    | RErr -> pr "unit" (* all errors are turned into exceptions *)
6899    | RInt _ -> pr "int"
6900    | RInt64 _ -> pr "int64"
6901    | RBool _ -> pr "bool"
6902    | RConstString _ -> pr "string"
6903    | RConstOptString _ -> pr "string option"
6904    | RString _ | RBufferOut _ -> pr "string"
6905    | RStringList _ -> pr "string array"
6906    | RStruct (_, typ) -> pr "%s" typ
6907    | RStructList (_, typ) -> pr "%s array" typ
6908    | RHashtable _ -> pr "(string * string) list"
6909   );
6910   if is_external then (
6911     pr " = ";
6912     if List.length (snd style) + 1 > 5 then
6913       pr "\"ocaml_guestfs_%s_byte\" " name;
6914     pr "\"ocaml_guestfs_%s\"" name
6915   );
6916   pr "\n"
6917
6918 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
6919 and generate_perl_xs () =
6920   generate_header CStyle LGPLv2;
6921
6922   pr "\
6923 #include \"EXTERN.h\"
6924 #include \"perl.h\"
6925 #include \"XSUB.h\"
6926
6927 #include <guestfs.h>
6928
6929 #ifndef PRId64
6930 #define PRId64 \"lld\"
6931 #endif
6932
6933 static SV *
6934 my_newSVll(long long val) {
6935 #ifdef USE_64_BIT_ALL
6936   return newSViv(val);
6937 #else
6938   char buf[100];
6939   int len;
6940   len = snprintf(buf, 100, \"%%\" PRId64, val);
6941   return newSVpv(buf, len);
6942 #endif
6943 }
6944
6945 #ifndef PRIu64
6946 #define PRIu64 \"llu\"
6947 #endif
6948
6949 static SV *
6950 my_newSVull(unsigned long long val) {
6951 #ifdef USE_64_BIT_ALL
6952   return newSVuv(val);
6953 #else
6954   char buf[100];
6955   int len;
6956   len = snprintf(buf, 100, \"%%\" PRIu64, val);
6957   return newSVpv(buf, len);
6958 #endif
6959 }
6960
6961 /* http://www.perlmonks.org/?node_id=680842 */
6962 static char **
6963 XS_unpack_charPtrPtr (SV *arg) {
6964   char **ret;
6965   AV *av;
6966   I32 i;
6967
6968   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
6969     croak (\"array reference expected\");
6970
6971   av = (AV *)SvRV (arg);
6972   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
6973   if (!ret)
6974     croak (\"malloc failed\");
6975
6976   for (i = 0; i <= av_len (av); i++) {
6977     SV **elem = av_fetch (av, i, 0);
6978
6979     if (!elem || !*elem)
6980       croak (\"missing element in list\");
6981
6982     ret[i] = SvPV_nolen (*elem);
6983   }
6984
6985   ret[i] = NULL;
6986
6987   return ret;
6988 }
6989
6990 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
6991
6992 PROTOTYPES: ENABLE
6993
6994 guestfs_h *
6995 _create ()
6996    CODE:
6997       RETVAL = guestfs_create ();
6998       if (!RETVAL)
6999         croak (\"could not create guestfs handle\");
7000       guestfs_set_error_handler (RETVAL, NULL, NULL);
7001  OUTPUT:
7002       RETVAL
7003
7004 void
7005 DESTROY (g)
7006       guestfs_h *g;
7007  PPCODE:
7008       guestfs_close (g);
7009
7010 ";
7011
7012   List.iter (
7013     fun (name, style, _, _, _, _, _) ->
7014       (match fst style with
7015        | RErr -> pr "void\n"
7016        | RInt _ -> pr "SV *\n"
7017        | RInt64 _ -> pr "SV *\n"
7018        | RBool _ -> pr "SV *\n"
7019        | RConstString _ -> pr "SV *\n"
7020        | RConstOptString _ -> pr "SV *\n"
7021        | RString _ -> pr "SV *\n"
7022        | RBufferOut _ -> pr "SV *\n"
7023        | RStringList _
7024        | RStruct _ | RStructList _
7025        | RHashtable _ ->
7026            pr "void\n" (* all lists returned implictly on the stack *)
7027       );
7028       (* Call and arguments. *)
7029       pr "%s " name;
7030       generate_c_call_args ~handle:"g" ~decl:true style;
7031       pr "\n";
7032       pr "      guestfs_h *g;\n";
7033       iteri (
7034         fun i ->
7035           function
7036           | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7037               pr "      char *%s;\n" n
7038           | OptString n ->
7039               (* http://www.perlmonks.org/?node_id=554277
7040                * Note that the implicit handle argument means we have
7041                * to add 1 to the ST(x) operator.
7042                *)
7043               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
7044           | StringList n | DeviceList n -> pr "      char **%s;\n" n
7045           | Bool n -> pr "      int %s;\n" n
7046           | Int n -> pr "      int %s;\n" n
7047       ) (snd style);
7048
7049       let do_cleanups () =
7050         List.iter (
7051           function
7052           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _ | Bool _ | Int _
7053           | FileIn _ | FileOut _ -> ()
7054           | StringList n | DeviceList n -> pr "      free (%s);\n" n
7055         ) (snd style)
7056       in
7057
7058       (* Code. *)
7059       (match fst style with
7060        | RErr ->
7061            pr "PREINIT:\n";
7062            pr "      int r;\n";
7063            pr " PPCODE:\n";
7064            pr "      r = guestfs_%s " name;
7065            generate_c_call_args ~handle:"g" style;
7066            pr ";\n";
7067            do_cleanups ();
7068            pr "      if (r == -1)\n";
7069            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7070        | RInt n
7071        | RBool n ->
7072            pr "PREINIT:\n";
7073            pr "      int %s;\n" n;
7074            pr "   CODE:\n";
7075            pr "      %s = guestfs_%s " n name;
7076            generate_c_call_args ~handle:"g" style;
7077            pr ";\n";
7078            do_cleanups ();
7079            pr "      if (%s == -1)\n" n;
7080            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7081            pr "      RETVAL = newSViv (%s);\n" n;
7082            pr " OUTPUT:\n";
7083            pr "      RETVAL\n"
7084        | RInt64 n ->
7085            pr "PREINIT:\n";
7086            pr "      int64_t %s;\n" n;
7087            pr "   CODE:\n";
7088            pr "      %s = guestfs_%s " n name;
7089            generate_c_call_args ~handle:"g" style;
7090            pr ";\n";
7091            do_cleanups ();
7092            pr "      if (%s == -1)\n" n;
7093            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7094            pr "      RETVAL = my_newSVll (%s);\n" n;
7095            pr " OUTPUT:\n";
7096            pr "      RETVAL\n"
7097        | RConstString n ->
7098            pr "PREINIT:\n";
7099            pr "      const char *%s;\n" n;
7100            pr "   CODE:\n";
7101            pr "      %s = guestfs_%s " n name;
7102            generate_c_call_args ~handle:"g" style;
7103            pr ";\n";
7104            do_cleanups ();
7105            pr "      if (%s == NULL)\n" n;
7106            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7107            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7108            pr " OUTPUT:\n";
7109            pr "      RETVAL\n"
7110        | RConstOptString n ->
7111            pr "PREINIT:\n";
7112            pr "      const char *%s;\n" n;
7113            pr "   CODE:\n";
7114            pr "      %s = guestfs_%s " n name;
7115            generate_c_call_args ~handle:"g" style;
7116            pr ";\n";
7117            do_cleanups ();
7118            pr "      if (%s == NULL)\n" n;
7119            pr "        RETVAL = &PL_sv_undef;\n";
7120            pr "      else\n";
7121            pr "        RETVAL = newSVpv (%s, 0);\n" n;
7122            pr " OUTPUT:\n";
7123            pr "      RETVAL\n"
7124        | RString n ->
7125            pr "PREINIT:\n";
7126            pr "      char *%s;\n" n;
7127            pr "   CODE:\n";
7128            pr "      %s = guestfs_%s " n name;
7129            generate_c_call_args ~handle:"g" style;
7130            pr ";\n";
7131            do_cleanups ();
7132            pr "      if (%s == NULL)\n" n;
7133            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7134            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7135            pr "      free (%s);\n" n;
7136            pr " OUTPUT:\n";
7137            pr "      RETVAL\n"
7138        | RStringList n | RHashtable n ->
7139            pr "PREINIT:\n";
7140            pr "      char **%s;\n" n;
7141            pr "      int i, n;\n";
7142            pr " PPCODE:\n";
7143            pr "      %s = guestfs_%s " n name;
7144            generate_c_call_args ~handle:"g" style;
7145            pr ";\n";
7146            do_cleanups ();
7147            pr "      if (%s == NULL)\n" n;
7148            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7149            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
7150            pr "      EXTEND (SP, n);\n";
7151            pr "      for (i = 0; i < n; ++i) {\n";
7152            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
7153            pr "        free (%s[i]);\n" n;
7154            pr "      }\n";
7155            pr "      free (%s);\n" n;
7156        | RStruct (n, typ) ->
7157            let cols = cols_of_struct typ in
7158            generate_perl_struct_code typ cols name style n do_cleanups
7159        | RStructList (n, typ) ->
7160            let cols = cols_of_struct typ in
7161            generate_perl_struct_list_code typ cols name style n do_cleanups
7162        | RBufferOut n ->
7163            pr "PREINIT:\n";
7164            pr "      char *%s;\n" n;
7165            pr "      size_t size;\n";
7166            pr "   CODE:\n";
7167            pr "      %s = guestfs_%s " n name;
7168            generate_c_call_args ~handle:"g" style;
7169            pr ";\n";
7170            do_cleanups ();
7171            pr "      if (%s == NULL)\n" n;
7172            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7173            pr "      RETVAL = newSVpv (%s, size);\n" n;
7174            pr "      free (%s);\n" n;
7175            pr " OUTPUT:\n";
7176            pr "      RETVAL\n"
7177       );
7178
7179       pr "\n"
7180   ) all_functions
7181
7182 and generate_perl_struct_list_code typ cols name style n do_cleanups =
7183   pr "PREINIT:\n";
7184   pr "      struct guestfs_%s_list *%s;\n" typ n;
7185   pr "      int i;\n";
7186   pr "      HV *hv;\n";
7187   pr " PPCODE:\n";
7188   pr "      %s = guestfs_%s " n name;
7189   generate_c_call_args ~handle:"g" style;
7190   pr ";\n";
7191   do_cleanups ();
7192   pr "      if (%s == NULL)\n" n;
7193   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7194   pr "      EXTEND (SP, %s->len);\n" n;
7195   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
7196   pr "        hv = newHV ();\n";
7197   List.iter (
7198     function
7199     | name, FString ->
7200         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
7201           name (String.length name) n name
7202     | name, FUUID ->
7203         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
7204           name (String.length name) n name
7205     | name, FBuffer ->
7206         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
7207           name (String.length name) n name n name
7208     | name, (FBytes|FUInt64) ->
7209         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
7210           name (String.length name) n name
7211     | name, FInt64 ->
7212         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
7213           name (String.length name) n name
7214     | name, (FInt32|FUInt32) ->
7215         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
7216           name (String.length name) n name
7217     | name, FChar ->
7218         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
7219           name (String.length name) n name
7220     | name, FOptPercent ->
7221         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
7222           name (String.length name) n name
7223   ) cols;
7224   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
7225   pr "      }\n";
7226   pr "      guestfs_free_%s_list (%s);\n" typ n
7227
7228 and generate_perl_struct_code typ cols name style n do_cleanups =
7229   pr "PREINIT:\n";
7230   pr "      struct guestfs_%s *%s;\n" typ n;
7231   pr " PPCODE:\n";
7232   pr "      %s = guestfs_%s " n name;
7233   generate_c_call_args ~handle:"g" style;
7234   pr ";\n";
7235   do_cleanups ();
7236   pr "      if (%s == NULL)\n" n;
7237   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7238   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
7239   List.iter (
7240     fun ((name, _) as col) ->
7241       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
7242
7243       match col with
7244       | name, FString ->
7245           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
7246             n name
7247       | name, FBuffer ->
7248           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, %s->%s_len)));\n"
7249             n name n name
7250       | name, FUUID ->
7251           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
7252             n name
7253       | name, (FBytes|FUInt64) ->
7254           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
7255             n name
7256       | name, FInt64 ->
7257           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
7258             n name
7259       | name, (FInt32|FUInt32) ->
7260           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
7261             n name
7262       | name, FChar ->
7263           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
7264             n name
7265       | name, FOptPercent ->
7266           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
7267             n name
7268   ) cols;
7269   pr "      free (%s);\n" n
7270
7271 (* Generate Sys/Guestfs.pm. *)
7272 and generate_perl_pm () =
7273   generate_header HashStyle LGPLv2;
7274
7275   pr "\
7276 =pod
7277
7278 =head1 NAME
7279
7280 Sys::Guestfs - Perl bindings for libguestfs
7281
7282 =head1 SYNOPSIS
7283
7284  use Sys::Guestfs;
7285
7286  my $h = Sys::Guestfs->new ();
7287  $h->add_drive ('guest.img');
7288  $h->launch ();
7289  $h->wait_ready ();
7290  $h->mount ('/dev/sda1', '/');
7291  $h->touch ('/hello');
7292  $h->sync ();
7293
7294 =head1 DESCRIPTION
7295
7296 The C<Sys::Guestfs> module provides a Perl XS binding to the
7297 libguestfs API for examining and modifying virtual machine
7298 disk images.
7299
7300 Amongst the things this is good for: making batch configuration
7301 changes to guests, getting disk used/free statistics (see also:
7302 virt-df), migrating between virtualization systems (see also:
7303 virt-p2v), performing partial backups, performing partial guest
7304 clones, cloning guests and changing registry/UUID/hostname info, and
7305 much else besides.
7306
7307 Libguestfs uses Linux kernel and qemu code, and can access any type of
7308 guest filesystem that Linux and qemu can, including but not limited
7309 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
7310 schemes, qcow, qcow2, vmdk.
7311
7312 Libguestfs provides ways to enumerate guest storage (eg. partitions,
7313 LVs, what filesystem is in each LV, etc.).  It can also run commands
7314 in the context of the guest.  Also you can access filesystems over FTP.
7315
7316 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
7317 functions for using libguestfs from Perl, including integration
7318 with libvirt.
7319
7320 =head1 ERRORS
7321
7322 All errors turn into calls to C<croak> (see L<Carp(3)>).
7323
7324 =head1 METHODS
7325
7326 =over 4
7327
7328 =cut
7329
7330 package Sys::Guestfs;
7331
7332 use strict;
7333 use warnings;
7334
7335 require XSLoader;
7336 XSLoader::load ('Sys::Guestfs');
7337
7338 =item $h = Sys::Guestfs->new ();
7339
7340 Create a new guestfs handle.
7341
7342 =cut
7343
7344 sub new {
7345   my $proto = shift;
7346   my $class = ref ($proto) || $proto;
7347
7348   my $self = Sys::Guestfs::_create ();
7349   bless $self, $class;
7350   return $self;
7351 }
7352
7353 ";
7354
7355   (* Actions.  We only need to print documentation for these as
7356    * they are pulled in from the XS code automatically.
7357    *)
7358   List.iter (
7359     fun (name, style, _, flags, _, _, longdesc) ->
7360       if not (List.mem NotInDocs flags) then (
7361         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
7362         pr "=item ";
7363         generate_perl_prototype name style;
7364         pr "\n\n";
7365         pr "%s\n\n" longdesc;
7366         if List.mem ProtocolLimitWarning flags then
7367           pr "%s\n\n" protocol_limit_warning;
7368         if List.mem DangerWillRobinson flags then
7369           pr "%s\n\n" danger_will_robinson;
7370         match deprecation_notice flags with
7371         | None -> ()
7372         | Some txt -> pr "%s\n\n" txt
7373       )
7374   ) all_functions_sorted;
7375
7376   (* End of file. *)
7377   pr "\
7378 =cut
7379
7380 1;
7381
7382 =back
7383
7384 =head1 COPYRIGHT
7385
7386 Copyright (C) 2009 Red Hat Inc.
7387
7388 =head1 LICENSE
7389
7390 Please see the file COPYING.LIB for the full license.
7391
7392 =head1 SEE ALSO
7393
7394 L<guestfs(3)>,
7395 L<guestfish(1)>,
7396 L<http://libguestfs.org>,
7397 L<Sys::Guestfs::Lib(3)>.
7398
7399 =cut
7400 "
7401
7402 and generate_perl_prototype name style =
7403   (match fst style with
7404    | RErr -> ()
7405    | RBool n
7406    | RInt n
7407    | RInt64 n
7408    | RConstString n
7409    | RConstOptString n
7410    | RString n
7411    | RBufferOut n -> pr "$%s = " n
7412    | RStruct (n,_)
7413    | RHashtable n -> pr "%%%s = " n
7414    | RStringList n
7415    | RStructList (n,_) -> pr "@%s = " n
7416   );
7417   pr "$h->%s (" name;
7418   let comma = ref false in
7419   List.iter (
7420     fun arg ->
7421       if !comma then pr ", ";
7422       comma := true;
7423       match arg with
7424       | Pathname n | Device n | Dev_or_Path n | String n
7425       | OptString n | Bool n | Int n | FileIn n | FileOut n ->
7426           pr "$%s" n
7427       | StringList n | DeviceList n ->
7428           pr "\\@%s" n
7429   ) (snd style);
7430   pr ");"
7431
7432 (* Generate Python C module. *)
7433 and generate_python_c () =
7434   generate_header CStyle LGPLv2;
7435
7436   pr "\
7437 #include <Python.h>
7438
7439 #include <stdio.h>
7440 #include <stdlib.h>
7441 #include <assert.h>
7442
7443 #include \"guestfs.h\"
7444
7445 typedef struct {
7446   PyObject_HEAD
7447   guestfs_h *g;
7448 } Pyguestfs_Object;
7449
7450 static guestfs_h *
7451 get_handle (PyObject *obj)
7452 {
7453   assert (obj);
7454   assert (obj != Py_None);
7455   return ((Pyguestfs_Object *) obj)->g;
7456 }
7457
7458 static PyObject *
7459 put_handle (guestfs_h *g)
7460 {
7461   assert (g);
7462   return
7463     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
7464 }
7465
7466 /* This list should be freed (but not the strings) after use. */
7467 static char **
7468 get_string_list (PyObject *obj)
7469 {
7470   int i, len;
7471   char **r;
7472
7473   assert (obj);
7474
7475   if (!PyList_Check (obj)) {
7476     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
7477     return NULL;
7478   }
7479
7480   len = PyList_Size (obj);
7481   r = malloc (sizeof (char *) * (len+1));
7482   if (r == NULL) {
7483     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
7484     return NULL;
7485   }
7486
7487   for (i = 0; i < len; ++i)
7488     r[i] = PyString_AsString (PyList_GetItem (obj, i));
7489   r[len] = NULL;
7490
7491   return r;
7492 }
7493
7494 static PyObject *
7495 put_string_list (char * const * const argv)
7496 {
7497   PyObject *list;
7498   int argc, i;
7499
7500   for (argc = 0; argv[argc] != NULL; ++argc)
7501     ;
7502
7503   list = PyList_New (argc);
7504   for (i = 0; i < argc; ++i)
7505     PyList_SetItem (list, i, PyString_FromString (argv[i]));
7506
7507   return list;
7508 }
7509
7510 static PyObject *
7511 put_table (char * const * const argv)
7512 {
7513   PyObject *list, *item;
7514   int argc, i;
7515
7516   for (argc = 0; argv[argc] != NULL; ++argc)
7517     ;
7518
7519   list = PyList_New (argc >> 1);
7520   for (i = 0; i < argc; i += 2) {
7521     item = PyTuple_New (2);
7522     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
7523     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
7524     PyList_SetItem (list, i >> 1, item);
7525   }
7526
7527   return list;
7528 }
7529
7530 static void
7531 free_strings (char **argv)
7532 {
7533   int argc;
7534
7535   for (argc = 0; argv[argc] != NULL; ++argc)
7536     free (argv[argc]);
7537   free (argv);
7538 }
7539
7540 static PyObject *
7541 py_guestfs_create (PyObject *self, PyObject *args)
7542 {
7543   guestfs_h *g;
7544
7545   g = guestfs_create ();
7546   if (g == NULL) {
7547     PyErr_SetString (PyExc_RuntimeError,
7548                      \"guestfs.create: failed to allocate handle\");
7549     return NULL;
7550   }
7551   guestfs_set_error_handler (g, NULL, NULL);
7552   return put_handle (g);
7553 }
7554
7555 static PyObject *
7556 py_guestfs_close (PyObject *self, PyObject *args)
7557 {
7558   PyObject *py_g;
7559   guestfs_h *g;
7560
7561   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
7562     return NULL;
7563   g = get_handle (py_g);
7564
7565   guestfs_close (g);
7566
7567   Py_INCREF (Py_None);
7568   return Py_None;
7569 }
7570
7571 ";
7572
7573   let emit_put_list_function typ =
7574     pr "static PyObject *\n";
7575     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
7576     pr "{\n";
7577     pr "  PyObject *list;\n";
7578     pr "  int i;\n";
7579     pr "\n";
7580     pr "  list = PyList_New (%ss->len);\n" typ;
7581     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
7582     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
7583     pr "  return list;\n";
7584     pr "};\n";
7585     pr "\n"
7586   in
7587
7588   (* Structures, turned into Python dictionaries. *)
7589   List.iter (
7590     fun (typ, cols) ->
7591       pr "static PyObject *\n";
7592       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
7593       pr "{\n";
7594       pr "  PyObject *dict;\n";
7595       pr "\n";
7596       pr "  dict = PyDict_New ();\n";
7597       List.iter (
7598         function
7599         | name, FString ->
7600             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7601             pr "                        PyString_FromString (%s->%s));\n"
7602               typ name
7603         | name, FBuffer ->
7604             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7605             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
7606               typ name typ name
7607         | name, FUUID ->
7608             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7609             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
7610               typ name
7611         | name, (FBytes|FUInt64) ->
7612             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7613             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
7614               typ name
7615         | name, FInt64 ->
7616             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7617             pr "                        PyLong_FromLongLong (%s->%s));\n"
7618               typ name
7619         | name, FUInt32 ->
7620             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7621             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
7622               typ name
7623         | name, FInt32 ->
7624             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7625             pr "                        PyLong_FromLong (%s->%s));\n"
7626               typ name
7627         | name, FOptPercent ->
7628             pr "  if (%s->%s >= 0)\n" typ name;
7629             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
7630             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
7631               typ name;
7632             pr "  else {\n";
7633             pr "    Py_INCREF (Py_None);\n";
7634             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
7635             pr "  }\n"
7636         | name, FChar ->
7637             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7638             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
7639       ) cols;
7640       pr "  return dict;\n";
7641       pr "};\n";
7642       pr "\n";
7643
7644   ) structs;
7645
7646   (* Emit a put_TYPE_list function definition only if that function is used. *)
7647   List.iter (
7648     function
7649     | typ, (RStructListOnly | RStructAndList) ->
7650         (* generate the function for typ *)
7651         emit_put_list_function typ
7652     | typ, _ -> () (* empty *)
7653   ) rstructs_used;
7654
7655   (* Python wrapper functions. *)
7656   List.iter (
7657     fun (name, style, _, _, _, _, _) ->
7658       pr "static PyObject *\n";
7659       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
7660       pr "{\n";
7661
7662       pr "  PyObject *py_g;\n";
7663       pr "  guestfs_h *g;\n";
7664       pr "  PyObject *py_r;\n";
7665
7666       let error_code =
7667         match fst style with
7668         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
7669         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
7670         | RConstString _ | RConstOptString _ ->
7671             pr "  const char *r;\n"; "NULL"
7672         | RString _ -> pr "  char *r;\n"; "NULL"
7673         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
7674         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
7675         | RStructList (_, typ) ->
7676             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
7677         | RBufferOut _ ->
7678             pr "  char *r;\n";
7679             pr "  size_t size;\n";
7680             "NULL" in
7681
7682       List.iter (
7683         function
7684         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7685             pr "  const char *%s;\n" n
7686         | OptString n -> pr "  const char *%s;\n" n
7687         | StringList n | DeviceList n ->
7688             pr "  PyObject *py_%s;\n" n;
7689             pr "  char **%s;\n" n
7690         | Bool n -> pr "  int %s;\n" n
7691         | Int n -> pr "  int %s;\n" n
7692       ) (snd style);
7693
7694       pr "\n";
7695
7696       (* Convert the parameters. *)
7697       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
7698       List.iter (
7699         function
7700         | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "s"
7701         | OptString _ -> pr "z"
7702         | StringList _ | DeviceList _ -> pr "O"
7703         | Bool _ -> pr "i" (* XXX Python has booleans? *)
7704         | Int _ -> pr "i"
7705       ) (snd style);
7706       pr ":guestfs_%s\",\n" name;
7707       pr "                         &py_g";
7708       List.iter (
7709         function
7710         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n -> pr ", &%s" n
7711         | OptString n -> pr ", &%s" n
7712         | StringList n | DeviceList n -> pr ", &py_%s" n
7713         | Bool n -> pr ", &%s" n
7714         | Int n -> pr ", &%s" n
7715       ) (snd style);
7716
7717       pr "))\n";
7718       pr "    return NULL;\n";
7719
7720       pr "  g = get_handle (py_g);\n";
7721       List.iter (
7722         function
7723         | Pathname _ | Device _ | Dev_or_Path _ | String _
7724         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
7725         | StringList n | DeviceList n ->
7726             pr "  %s = get_string_list (py_%s);\n" n n;
7727             pr "  if (!%s) return NULL;\n" n
7728       ) (snd style);
7729
7730       pr "\n";
7731
7732       pr "  r = guestfs_%s " name;
7733       generate_c_call_args ~handle:"g" style;
7734       pr ";\n";
7735
7736       List.iter (
7737         function
7738         | Pathname _ | Device _ | Dev_or_Path _ | String _
7739         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
7740         | StringList n | DeviceList n ->
7741             pr "  free (%s);\n" n
7742       ) (snd style);
7743
7744       pr "  if (r == %s) {\n" error_code;
7745       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
7746       pr "    return NULL;\n";
7747       pr "  }\n";
7748       pr "\n";
7749
7750       (match fst style with
7751        | RErr ->
7752            pr "  Py_INCREF (Py_None);\n";
7753            pr "  py_r = Py_None;\n"
7754        | RInt _
7755        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
7756        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
7757        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
7758        | RConstOptString _ ->
7759            pr "  if (r)\n";
7760            pr "    py_r = PyString_FromString (r);\n";
7761            pr "  else {\n";
7762            pr "    Py_INCREF (Py_None);\n";
7763            pr "    py_r = Py_None;\n";
7764            pr "  }\n"
7765        | RString _ ->
7766            pr "  py_r = PyString_FromString (r);\n";
7767            pr "  free (r);\n"
7768        | RStringList _ ->
7769            pr "  py_r = put_string_list (r);\n";
7770            pr "  free_strings (r);\n"
7771        | RStruct (_, typ) ->
7772            pr "  py_r = put_%s (r);\n" typ;
7773            pr "  guestfs_free_%s (r);\n" typ
7774        | RStructList (_, typ) ->
7775            pr "  py_r = put_%s_list (r);\n" typ;
7776            pr "  guestfs_free_%s_list (r);\n" typ
7777        | RHashtable n ->
7778            pr "  py_r = put_table (r);\n";
7779            pr "  free_strings (r);\n"
7780        | RBufferOut _ ->
7781            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
7782            pr "  free (r);\n"
7783       );
7784
7785       pr "  return py_r;\n";
7786       pr "}\n";
7787       pr "\n"
7788   ) all_functions;
7789
7790   (* Table of functions. *)
7791   pr "static PyMethodDef methods[] = {\n";
7792   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
7793   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
7794   List.iter (
7795     fun (name, _, _, _, _, _, _) ->
7796       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
7797         name name
7798   ) all_functions;
7799   pr "  { NULL, NULL, 0, NULL }\n";
7800   pr "};\n";
7801   pr "\n";
7802
7803   (* Init function. *)
7804   pr "\
7805 void
7806 initlibguestfsmod (void)
7807 {
7808   static int initialized = 0;
7809
7810   if (initialized) return;
7811   Py_InitModule ((char *) \"libguestfsmod\", methods);
7812   initialized = 1;
7813 }
7814 "
7815
7816 (* Generate Python module. *)
7817 and generate_python_py () =
7818   generate_header HashStyle LGPLv2;
7819
7820   pr "\
7821 u\"\"\"Python bindings for libguestfs
7822
7823 import guestfs
7824 g = guestfs.GuestFS ()
7825 g.add_drive (\"guest.img\")
7826 g.launch ()
7827 g.wait_ready ()
7828 parts = g.list_partitions ()
7829
7830 The guestfs module provides a Python binding to the libguestfs API
7831 for examining and modifying virtual machine disk images.
7832
7833 Amongst the things this is good for: making batch configuration
7834 changes to guests, getting disk used/free statistics (see also:
7835 virt-df), migrating between virtualization systems (see also:
7836 virt-p2v), performing partial backups, performing partial guest
7837 clones, cloning guests and changing registry/UUID/hostname info, and
7838 much else besides.
7839
7840 Libguestfs uses Linux kernel and qemu code, and can access any type of
7841 guest filesystem that Linux and qemu can, including but not limited
7842 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
7843 schemes, qcow, qcow2, vmdk.
7844
7845 Libguestfs provides ways to enumerate guest storage (eg. partitions,
7846 LVs, what filesystem is in each LV, etc.).  It can also run commands
7847 in the context of the guest.  Also you can access filesystems over FTP.
7848
7849 Errors which happen while using the API are turned into Python
7850 RuntimeError exceptions.
7851
7852 To create a guestfs handle you usually have to perform the following
7853 sequence of calls:
7854
7855 # Create the handle, call add_drive at least once, and possibly
7856 # several times if the guest has multiple block devices:
7857 g = guestfs.GuestFS ()
7858 g.add_drive (\"guest.img\")
7859
7860 # Launch the qemu subprocess and wait for it to become ready:
7861 g.launch ()
7862 g.wait_ready ()
7863
7864 # Now you can issue commands, for example:
7865 logvols = g.lvs ()
7866
7867 \"\"\"
7868
7869 import libguestfsmod
7870
7871 class GuestFS:
7872     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
7873
7874     def __init__ (self):
7875         \"\"\"Create a new libguestfs handle.\"\"\"
7876         self._o = libguestfsmod.create ()
7877
7878     def __del__ (self):
7879         libguestfsmod.close (self._o)
7880
7881 ";
7882
7883   List.iter (
7884     fun (name, style, _, flags, _, _, longdesc) ->
7885       pr "    def %s " name;
7886       generate_py_call_args ~handle:"self" (snd style);
7887       pr ":\n";
7888
7889       if not (List.mem NotInDocs flags) then (
7890         let doc = replace_str longdesc "C<guestfs_" "C<g." in
7891         let doc =
7892           match fst style with
7893           | RErr | RInt _ | RInt64 _ | RBool _
7894           | RConstOptString _ | RConstString _
7895           | RString _ | RBufferOut _ -> doc
7896           | RStringList _ ->
7897               doc ^ "\n\nThis function returns a list of strings."
7898           | RStruct (_, typ) ->
7899               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
7900           | RStructList (_, typ) ->
7901               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
7902           | RHashtable _ ->
7903               doc ^ "\n\nThis function returns a dictionary." in
7904         let doc =
7905           if List.mem ProtocolLimitWarning flags then
7906             doc ^ "\n\n" ^ protocol_limit_warning
7907           else doc in
7908         let doc =
7909           if List.mem DangerWillRobinson flags then
7910             doc ^ "\n\n" ^ danger_will_robinson
7911           else doc in
7912         let doc =
7913           match deprecation_notice flags with
7914           | None -> doc
7915           | Some txt -> doc ^ "\n\n" ^ txt in
7916         let doc = pod2text ~width:60 name doc in
7917         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
7918         let doc = String.concat "\n        " doc in
7919         pr "        u\"\"\"%s\"\"\"\n" doc;
7920       );
7921       pr "        return libguestfsmod.%s " name;
7922       generate_py_call_args ~handle:"self._o" (snd style);
7923       pr "\n";
7924       pr "\n";
7925   ) all_functions
7926
7927 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
7928 and generate_py_call_args ~handle args =
7929   pr "(%s" handle;
7930   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
7931   pr ")"
7932
7933 (* Useful if you need the longdesc POD text as plain text.  Returns a
7934  * list of lines.
7935  *
7936  * Because this is very slow (the slowest part of autogeneration),
7937  * we memoize the results.
7938  *)
7939 and pod2text ~width name longdesc =
7940   let key = width, name, longdesc in
7941   try Hashtbl.find pod2text_memo key
7942   with Not_found ->
7943     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
7944     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
7945     close_out chan;
7946     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
7947     let chan = Unix.open_process_in cmd in
7948     let lines = ref [] in
7949     let rec loop i =
7950       let line = input_line chan in
7951       if i = 1 then             (* discard the first line of output *)
7952         loop (i+1)
7953       else (
7954         let line = triml line in
7955         lines := line :: !lines;
7956         loop (i+1)
7957       ) in
7958     let lines = try loop 1 with End_of_file -> List.rev !lines in
7959     Unix.unlink filename;
7960     (match Unix.close_process_in chan with
7961      | Unix.WEXITED 0 -> ()
7962      | Unix.WEXITED i ->
7963          failwithf "pod2text: process exited with non-zero status (%d)" i
7964      | Unix.WSIGNALED i | Unix.WSTOPPED i ->
7965          failwithf "pod2text: process signalled or stopped by signal %d" i
7966     );
7967     Hashtbl.add pod2text_memo key lines;
7968     let chan = open_out pod2text_memo_filename in
7969     output_value chan pod2text_memo;
7970     close_out chan;
7971     lines
7972
7973 (* Generate ruby bindings. *)
7974 and generate_ruby_c () =
7975   generate_header CStyle LGPLv2;
7976
7977   pr "\
7978 #include <stdio.h>
7979 #include <stdlib.h>
7980
7981 #include <ruby.h>
7982
7983 #include \"guestfs.h\"
7984
7985 #include \"extconf.h\"
7986
7987 /* For Ruby < 1.9 */
7988 #ifndef RARRAY_LEN
7989 #define RARRAY_LEN(r) (RARRAY((r))->len)
7990 #endif
7991
7992 static VALUE m_guestfs;                 /* guestfs module */
7993 static VALUE c_guestfs;                 /* guestfs_h handle */
7994 static VALUE e_Error;                   /* used for all errors */
7995
7996 static void ruby_guestfs_free (void *p)
7997 {
7998   if (!p) return;
7999   guestfs_close ((guestfs_h *) p);
8000 }
8001
8002 static VALUE ruby_guestfs_create (VALUE m)
8003 {
8004   guestfs_h *g;
8005
8006   g = guestfs_create ();
8007   if (!g)
8008     rb_raise (e_Error, \"failed to create guestfs handle\");
8009
8010   /* Don't print error messages to stderr by default. */
8011   guestfs_set_error_handler (g, NULL, NULL);
8012
8013   /* Wrap it, and make sure the close function is called when the
8014    * handle goes away.
8015    */
8016   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
8017 }
8018
8019 static VALUE ruby_guestfs_close (VALUE gv)
8020 {
8021   guestfs_h *g;
8022   Data_Get_Struct (gv, guestfs_h, g);
8023
8024   ruby_guestfs_free (g);
8025   DATA_PTR (gv) = NULL;
8026
8027   return Qnil;
8028 }
8029
8030 ";
8031
8032   List.iter (
8033     fun (name, style, _, _, _, _, _) ->
8034       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
8035       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
8036       pr ")\n";
8037       pr "{\n";
8038       pr "  guestfs_h *g;\n";
8039       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
8040       pr "  if (!g)\n";
8041       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
8042         name;
8043       pr "\n";
8044
8045       List.iter (
8046         function
8047         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
8048             pr "  Check_Type (%sv, T_STRING);\n" n;
8049             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
8050             pr "  if (!%s)\n" n;
8051             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
8052             pr "              \"%s\", \"%s\");\n" n name
8053         | OptString n ->
8054             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
8055         | StringList n | DeviceList n ->
8056             pr "  char **%s;\n" n;
8057             pr "  Check_Type (%sv, T_ARRAY);\n" n;
8058             pr "  {\n";
8059             pr "    int i, len;\n";
8060             pr "    len = RARRAY_LEN (%sv);\n" n;
8061             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
8062               n;
8063             pr "    for (i = 0; i < len; ++i) {\n";
8064             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
8065             pr "      %s[i] = StringValueCStr (v);\n" n;
8066             pr "    }\n";
8067             pr "    %s[len] = NULL;\n" n;
8068             pr "  }\n";
8069         | Bool n ->
8070             pr "  int %s = RTEST (%sv);\n" n n
8071         | Int n ->
8072             pr "  int %s = NUM2INT (%sv);\n" n n
8073       ) (snd style);
8074       pr "\n";
8075
8076       let error_code =
8077         match fst style with
8078         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
8079         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8080         | RConstString _ | RConstOptString _ ->
8081             pr "  const char *r;\n"; "NULL"
8082         | RString _ -> pr "  char *r;\n"; "NULL"
8083         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
8084         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
8085         | RStructList (_, typ) ->
8086             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8087         | RBufferOut _ ->
8088             pr "  char *r;\n";
8089             pr "  size_t size;\n";
8090             "NULL" in
8091       pr "\n";
8092
8093       pr "  r = guestfs_%s " name;
8094       generate_c_call_args ~handle:"g" style;
8095       pr ";\n";
8096
8097       List.iter (
8098         function
8099         | Pathname _ | Device _ | Dev_or_Path _ | String _
8100         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
8101         | StringList n | DeviceList n ->
8102             pr "  free (%s);\n" n
8103       ) (snd style);
8104
8105       pr "  if (r == %s)\n" error_code;
8106       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
8107       pr "\n";
8108
8109       (match fst style with
8110        | RErr ->
8111            pr "  return Qnil;\n"
8112        | RInt _ | RBool _ ->
8113            pr "  return INT2NUM (r);\n"
8114        | RInt64 _ ->
8115            pr "  return ULL2NUM (r);\n"
8116        | RConstString _ ->
8117            pr "  return rb_str_new2 (r);\n";
8118        | RConstOptString _ ->
8119            pr "  if (r)\n";
8120            pr "    return rb_str_new2 (r);\n";
8121            pr "  else\n";
8122            pr "    return Qnil;\n";
8123        | RString _ ->
8124            pr "  VALUE rv = rb_str_new2 (r);\n";
8125            pr "  free (r);\n";
8126            pr "  return rv;\n";
8127        | RStringList _ ->
8128            pr "  int i, len = 0;\n";
8129            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
8130            pr "  VALUE rv = rb_ary_new2 (len);\n";
8131            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
8132            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
8133            pr "    free (r[i]);\n";
8134            pr "  }\n";
8135            pr "  free (r);\n";
8136            pr "  return rv;\n"
8137        | RStruct (_, typ) ->
8138            let cols = cols_of_struct typ in
8139            generate_ruby_struct_code typ cols
8140        | RStructList (_, typ) ->
8141            let cols = cols_of_struct typ in
8142            generate_ruby_struct_list_code typ cols
8143        | RHashtable _ ->
8144            pr "  VALUE rv = rb_hash_new ();\n";
8145            pr "  int i;\n";
8146            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
8147            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
8148            pr "    free (r[i]);\n";
8149            pr "    free (r[i+1]);\n";
8150            pr "  }\n";
8151            pr "  free (r);\n";
8152            pr "  return rv;\n"
8153        | RBufferOut _ ->
8154            pr "  VALUE rv = rb_str_new (r, size);\n";
8155            pr "  free (r);\n";
8156            pr "  return rv;\n";
8157       );
8158
8159       pr "}\n";
8160       pr "\n"
8161   ) all_functions;
8162
8163   pr "\
8164 /* Initialize the module. */
8165 void Init__guestfs ()
8166 {
8167   m_guestfs = rb_define_module (\"Guestfs\");
8168   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
8169   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
8170
8171   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
8172   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
8173
8174 ";
8175   (* Define the rest of the methods. *)
8176   List.iter (
8177     fun (name, style, _, _, _, _, _) ->
8178       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
8179       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
8180   ) all_functions;
8181
8182   pr "}\n"
8183
8184 (* Ruby code to return a struct. *)
8185 and generate_ruby_struct_code typ cols =
8186   pr "  VALUE rv = rb_hash_new ();\n";
8187   List.iter (
8188     function
8189     | name, FString ->
8190         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
8191     | name, FBuffer ->
8192         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
8193     | name, FUUID ->
8194         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
8195     | name, (FBytes|FUInt64) ->
8196         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
8197     | name, FInt64 ->
8198         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
8199     | name, FUInt32 ->
8200         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
8201     | name, FInt32 ->
8202         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
8203     | name, FOptPercent ->
8204         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
8205     | name, FChar -> (* XXX wrong? *)
8206         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
8207   ) cols;
8208   pr "  guestfs_free_%s (r);\n" typ;
8209   pr "  return rv;\n"
8210
8211 (* Ruby code to return a struct list. *)
8212 and generate_ruby_struct_list_code typ cols =
8213   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
8214   pr "  int i;\n";
8215   pr "  for (i = 0; i < r->len; ++i) {\n";
8216   pr "    VALUE hv = rb_hash_new ();\n";
8217   List.iter (
8218     function
8219     | name, FString ->
8220         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
8221     | name, FBuffer ->
8222         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
8223     | name, FUUID ->
8224         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
8225     | name, (FBytes|FUInt64) ->
8226         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
8227     | name, FInt64 ->
8228         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
8229     | name, FUInt32 ->
8230         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
8231     | name, FInt32 ->
8232         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
8233     | name, FOptPercent ->
8234         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
8235     | name, FChar -> (* XXX wrong? *)
8236         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
8237   ) cols;
8238   pr "    rb_ary_push (rv, hv);\n";
8239   pr "  }\n";
8240   pr "  guestfs_free_%s_list (r);\n" typ;
8241   pr "  return rv;\n"
8242
8243 (* Generate Java bindings GuestFS.java file. *)
8244 and generate_java_java () =
8245   generate_header CStyle LGPLv2;
8246
8247   pr "\
8248 package com.redhat.et.libguestfs;
8249
8250 import java.util.HashMap;
8251 import com.redhat.et.libguestfs.LibGuestFSException;
8252 import com.redhat.et.libguestfs.PV;
8253 import com.redhat.et.libguestfs.VG;
8254 import com.redhat.et.libguestfs.LV;
8255 import com.redhat.et.libguestfs.Stat;
8256 import com.redhat.et.libguestfs.StatVFS;
8257 import com.redhat.et.libguestfs.IntBool;
8258 import com.redhat.et.libguestfs.Dirent;
8259
8260 /**
8261  * The GuestFS object is a libguestfs handle.
8262  *
8263  * @author rjones
8264  */
8265 public class GuestFS {
8266   // Load the native code.
8267   static {
8268     System.loadLibrary (\"guestfs_jni\");
8269   }
8270
8271   /**
8272    * The native guestfs_h pointer.
8273    */
8274   long g;
8275
8276   /**
8277    * Create a libguestfs handle.
8278    *
8279    * @throws LibGuestFSException
8280    */
8281   public GuestFS () throws LibGuestFSException
8282   {
8283     g = _create ();
8284   }
8285   private native long _create () throws LibGuestFSException;
8286
8287   /**
8288    * Close a libguestfs handle.
8289    *
8290    * You can also leave handles to be collected by the garbage
8291    * collector, but this method ensures that the resources used
8292    * by the handle are freed up immediately.  If you call any
8293    * other methods after closing the handle, you will get an
8294    * exception.
8295    *
8296    * @throws LibGuestFSException
8297    */
8298   public void close () throws LibGuestFSException
8299   {
8300     if (g != 0)
8301       _close (g);
8302     g = 0;
8303   }
8304   private native void _close (long g) throws LibGuestFSException;
8305
8306   public void finalize () throws LibGuestFSException
8307   {
8308     close ();
8309   }
8310
8311 ";
8312
8313   List.iter (
8314     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8315       if not (List.mem NotInDocs flags); then (
8316         let doc = replace_str longdesc "C<guestfs_" "C<g." in
8317         let doc =
8318           if List.mem ProtocolLimitWarning flags then
8319             doc ^ "\n\n" ^ protocol_limit_warning
8320           else doc in
8321         let doc =
8322           if List.mem DangerWillRobinson flags then
8323             doc ^ "\n\n" ^ danger_will_robinson
8324           else doc in
8325         let doc =
8326           match deprecation_notice flags with
8327           | None -> doc
8328           | Some txt -> doc ^ "\n\n" ^ txt in
8329         let doc = pod2text ~width:60 name doc in
8330         let doc = List.map (            (* RHBZ#501883 *)
8331           function
8332           | "" -> "<p>"
8333           | nonempty -> nonempty
8334         ) doc in
8335         let doc = String.concat "\n   * " doc in
8336
8337         pr "  /**\n";
8338         pr "   * %s\n" shortdesc;
8339         pr "   * <p>\n";
8340         pr "   * %s\n" doc;
8341         pr "   * @throws LibGuestFSException\n";
8342         pr "   */\n";
8343         pr "  ";
8344       );
8345       generate_java_prototype ~public:true ~semicolon:false name style;
8346       pr "\n";
8347       pr "  {\n";
8348       pr "    if (g == 0)\n";
8349       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
8350         name;
8351       pr "    ";
8352       if fst style <> RErr then pr "return ";
8353       pr "_%s " name;
8354       generate_java_call_args ~handle:"g" (snd style);
8355       pr ";\n";
8356       pr "  }\n";
8357       pr "  ";
8358       generate_java_prototype ~privat:true ~native:true name style;
8359       pr "\n";
8360       pr "\n";
8361   ) all_functions;
8362
8363   pr "}\n"
8364
8365 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
8366 and generate_java_call_args ~handle args =
8367   pr "(%s" handle;
8368   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
8369   pr ")"
8370
8371 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
8372     ?(semicolon=true) name style =
8373   if privat then pr "private ";
8374   if public then pr "public ";
8375   if native then pr "native ";
8376
8377   (* return type *)
8378   (match fst style with
8379    | RErr -> pr "void ";
8380    | RInt _ -> pr "int ";
8381    | RInt64 _ -> pr "long ";
8382    | RBool _ -> pr "boolean ";
8383    | RConstString _ | RConstOptString _ | RString _
8384    | RBufferOut _ -> pr "String ";
8385    | RStringList _ -> pr "String[] ";
8386    | RStruct (_, typ) ->
8387        let name = java_name_of_struct typ in
8388        pr "%s " name;
8389    | RStructList (_, typ) ->
8390        let name = java_name_of_struct typ in
8391        pr "%s[] " name;
8392    | RHashtable _ -> pr "HashMap<String,String> ";
8393   );
8394
8395   if native then pr "_%s " name else pr "%s " name;
8396   pr "(";
8397   let needs_comma = ref false in
8398   if native then (
8399     pr "long g";
8400     needs_comma := true
8401   );
8402
8403   (* args *)
8404   List.iter (
8405     fun arg ->
8406       if !needs_comma then pr ", ";
8407       needs_comma := true;
8408
8409       match arg with
8410       | Pathname n
8411       | Device n | Dev_or_Path n
8412       | String n
8413       | OptString n
8414       | FileIn n
8415       | FileOut n ->
8416           pr "String %s" n
8417       | StringList n | DeviceList n ->
8418           pr "String[] %s" n
8419       | Bool n ->
8420           pr "boolean %s" n
8421       | Int n ->
8422           pr "int %s" n
8423   ) (snd style);
8424
8425   pr ")\n";
8426   pr "    throws LibGuestFSException";
8427   if semicolon then pr ";"
8428
8429 and generate_java_struct jtyp cols =
8430   generate_header CStyle LGPLv2;
8431
8432   pr "\
8433 package com.redhat.et.libguestfs;
8434
8435 /**
8436  * Libguestfs %s structure.
8437  *
8438  * @author rjones
8439  * @see GuestFS
8440  */
8441 public class %s {
8442 " jtyp jtyp;
8443
8444   List.iter (
8445     function
8446     | name, FString
8447     | name, FUUID
8448     | name, FBuffer -> pr "  public String %s;\n" name
8449     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
8450     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
8451     | name, FChar -> pr "  public char %s;\n" name
8452     | name, FOptPercent ->
8453         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
8454         pr "  public float %s;\n" name
8455   ) cols;
8456
8457   pr "}\n"
8458
8459 and generate_java_c () =
8460   generate_header CStyle LGPLv2;
8461
8462   pr "\
8463 #include <stdio.h>
8464 #include <stdlib.h>
8465 #include <string.h>
8466
8467 #include \"com_redhat_et_libguestfs_GuestFS.h\"
8468 #include \"guestfs.h\"
8469
8470 /* Note that this function returns.  The exception is not thrown
8471  * until after the wrapper function returns.
8472  */
8473 static void
8474 throw_exception (JNIEnv *env, const char *msg)
8475 {
8476   jclass cl;
8477   cl = (*env)->FindClass (env,
8478                           \"com/redhat/et/libguestfs/LibGuestFSException\");
8479   (*env)->ThrowNew (env, cl, msg);
8480 }
8481
8482 JNIEXPORT jlong JNICALL
8483 Java_com_redhat_et_libguestfs_GuestFS__1create
8484   (JNIEnv *env, jobject obj)
8485 {
8486   guestfs_h *g;
8487
8488   g = guestfs_create ();
8489   if (g == NULL) {
8490     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
8491     return 0;
8492   }
8493   guestfs_set_error_handler (g, NULL, NULL);
8494   return (jlong) (long) g;
8495 }
8496
8497 JNIEXPORT void JNICALL
8498 Java_com_redhat_et_libguestfs_GuestFS__1close
8499   (JNIEnv *env, jobject obj, jlong jg)
8500 {
8501   guestfs_h *g = (guestfs_h *) (long) jg;
8502   guestfs_close (g);
8503 }
8504
8505 ";
8506
8507   List.iter (
8508     fun (name, style, _, _, _, _, _) ->
8509       pr "JNIEXPORT ";
8510       (match fst style with
8511        | RErr -> pr "void ";
8512        | RInt _ -> pr "jint ";
8513        | RInt64 _ -> pr "jlong ";
8514        | RBool _ -> pr "jboolean ";
8515        | RConstString _ | RConstOptString _ | RString _
8516        | RBufferOut _ -> pr "jstring ";
8517        | RStruct _ | RHashtable _ ->
8518            pr "jobject ";
8519        | RStringList _ | RStructList _ ->
8520            pr "jobjectArray ";
8521       );
8522       pr "JNICALL\n";
8523       pr "Java_com_redhat_et_libguestfs_GuestFS_";
8524       pr "%s" (replace_str ("_" ^ name) "_" "_1");
8525       pr "\n";
8526       pr "  (JNIEnv *env, jobject obj, jlong jg";
8527       List.iter (
8528         function
8529         | Pathname n
8530         | Device n | Dev_or_Path n
8531         | String n
8532         | OptString n
8533         | FileIn n
8534         | FileOut n ->
8535             pr ", jstring j%s" n
8536         | StringList n | DeviceList n ->
8537             pr ", jobjectArray j%s" n
8538         | Bool n ->
8539             pr ", jboolean j%s" n
8540         | Int n ->
8541             pr ", jint j%s" n
8542       ) (snd style);
8543       pr ")\n";
8544       pr "{\n";
8545       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
8546       let error_code, no_ret =
8547         match fst style with
8548         | RErr -> pr "  int r;\n"; "-1", ""
8549         | RBool _
8550         | RInt _ -> pr "  int r;\n"; "-1", "0"
8551         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
8552         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
8553         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
8554         | RString _ ->
8555             pr "  jstring jr;\n";
8556             pr "  char *r;\n"; "NULL", "NULL"
8557         | RStringList _ ->
8558             pr "  jobjectArray jr;\n";
8559             pr "  int r_len;\n";
8560             pr "  jclass cl;\n";
8561             pr "  jstring jstr;\n";
8562             pr "  char **r;\n"; "NULL", "NULL"
8563         | RStruct (_, typ) ->
8564             pr "  jobject jr;\n";
8565             pr "  jclass cl;\n";
8566             pr "  jfieldID fl;\n";
8567             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
8568         | RStructList (_, typ) ->
8569             pr "  jobjectArray jr;\n";
8570             pr "  jclass cl;\n";
8571             pr "  jfieldID fl;\n";
8572             pr "  jobject jfl;\n";
8573             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
8574         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
8575         | RBufferOut _ ->
8576             pr "  jstring jr;\n";
8577             pr "  char *r;\n";
8578             pr "  size_t size;\n";
8579             "NULL", "NULL" in
8580       List.iter (
8581         function
8582         | Pathname n
8583         | Device n | Dev_or_Path n
8584         | String n
8585         | OptString n
8586         | FileIn n
8587         | FileOut n ->
8588             pr "  const char *%s;\n" n
8589         | StringList n | DeviceList n ->
8590             pr "  int %s_len;\n" n;
8591             pr "  const char **%s;\n" n
8592         | Bool n
8593         | Int n ->
8594             pr "  int %s;\n" n
8595       ) (snd style);
8596
8597       let needs_i =
8598         (match fst style with
8599          | RStringList _ | RStructList _ -> true
8600          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
8601          | RConstOptString _
8602          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
8603           List.exists (function
8604                        | StringList _ -> true
8605                        | DeviceList _ -> true
8606                        | _ -> false) (snd style) in
8607       if needs_i then
8608         pr "  int i;\n";
8609
8610       pr "\n";
8611
8612       (* Get the parameters. *)
8613       List.iter (
8614         function
8615         | Pathname n
8616         | Device n | Dev_or_Path n
8617         | String n
8618         | FileIn n
8619         | FileOut n ->
8620             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
8621         | OptString n ->
8622             (* This is completely undocumented, but Java null becomes
8623              * a NULL parameter.
8624              *)
8625             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
8626         | StringList n | DeviceList n ->
8627             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
8628             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
8629             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
8630             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
8631               n;
8632             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
8633             pr "  }\n";
8634             pr "  %s[%s_len] = NULL;\n" n n;
8635         | Bool n
8636         | Int n ->
8637             pr "  %s = j%s;\n" n n
8638       ) (snd style);
8639
8640       (* Make the call. *)
8641       pr "  r = guestfs_%s " name;
8642       generate_c_call_args ~handle:"g" style;
8643       pr ";\n";
8644
8645       (* Release the parameters. *)
8646       List.iter (
8647         function
8648         | Pathname n
8649         | Device n | Dev_or_Path n
8650         | String n
8651         | FileIn n
8652         | FileOut n ->
8653             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
8654         | OptString n ->
8655             pr "  if (j%s)\n" n;
8656             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
8657         | StringList n | DeviceList n ->
8658             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
8659             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
8660               n;
8661             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
8662             pr "  }\n";
8663             pr "  free (%s);\n" n
8664         | Bool n
8665         | Int n -> ()
8666       ) (snd style);
8667
8668       (* Check for errors. *)
8669       pr "  if (r == %s) {\n" error_code;
8670       pr "    throw_exception (env, guestfs_last_error (g));\n";
8671       pr "    return %s;\n" no_ret;
8672       pr "  }\n";
8673
8674       (* Return value. *)
8675       (match fst style with
8676        | RErr -> ()
8677        | RInt _ -> pr "  return (jint) r;\n"
8678        | RBool _ -> pr "  return (jboolean) r;\n"
8679        | RInt64 _ -> pr "  return (jlong) r;\n"
8680        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
8681        | RConstOptString _ ->
8682            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
8683        | RString _ ->
8684            pr "  jr = (*env)->NewStringUTF (env, r);\n";
8685            pr "  free (r);\n";
8686            pr "  return jr;\n"
8687        | RStringList _ ->
8688            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
8689            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
8690            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
8691            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
8692            pr "  for (i = 0; i < r_len; ++i) {\n";
8693            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
8694            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
8695            pr "    free (r[i]);\n";
8696            pr "  }\n";
8697            pr "  free (r);\n";
8698            pr "  return jr;\n"
8699        | RStruct (_, typ) ->
8700            let jtyp = java_name_of_struct typ in
8701            let cols = cols_of_struct typ in
8702            generate_java_struct_return typ jtyp cols
8703        | RStructList (_, typ) ->
8704            let jtyp = java_name_of_struct typ in
8705            let cols = cols_of_struct typ in
8706            generate_java_struct_list_return typ jtyp cols
8707        | RHashtable _ ->
8708            (* XXX *)
8709            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
8710            pr "  return NULL;\n"
8711        | RBufferOut _ ->
8712            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
8713            pr "  free (r);\n";
8714            pr "  return jr;\n"
8715       );
8716
8717       pr "}\n";
8718       pr "\n"
8719   ) all_functions
8720
8721 and generate_java_struct_return typ jtyp cols =
8722   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
8723   pr "  jr = (*env)->AllocObject (env, cl);\n";
8724   List.iter (
8725     function
8726     | name, FString ->
8727         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8728         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
8729     | name, FUUID ->
8730         pr "  {\n";
8731         pr "    char s[33];\n";
8732         pr "    memcpy (s, r->%s, 32);\n" name;
8733         pr "    s[32] = 0;\n";
8734         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8735         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
8736         pr "  }\n";
8737     | name, FBuffer ->
8738         pr "  {\n";
8739         pr "    int len = r->%s_len;\n" name;
8740         pr "    char s[len+1];\n";
8741         pr "    memcpy (s, r->%s, len);\n" name;
8742         pr "    s[len] = 0;\n";
8743         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8744         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
8745         pr "  }\n";
8746     | name, (FBytes|FUInt64|FInt64) ->
8747         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
8748         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8749     | name, (FUInt32|FInt32) ->
8750         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
8751         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8752     | name, FOptPercent ->
8753         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
8754         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
8755     | name, FChar ->
8756         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
8757         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8758   ) cols;
8759   pr "  free (r);\n";
8760   pr "  return jr;\n"
8761
8762 and generate_java_struct_list_return typ jtyp cols =
8763   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
8764   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
8765   pr "  for (i = 0; i < r->len; ++i) {\n";
8766   pr "    jfl = (*env)->AllocObject (env, cl);\n";
8767   List.iter (
8768     function
8769     | name, FString ->
8770         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8771         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
8772     | name, FUUID ->
8773         pr "    {\n";
8774         pr "      char s[33];\n";
8775         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
8776         pr "      s[32] = 0;\n";
8777         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8778         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
8779         pr "    }\n";
8780     | name, FBuffer ->
8781         pr "    {\n";
8782         pr "      int len = r->val[i].%s_len;\n" name;
8783         pr "      char s[len+1];\n";
8784         pr "      memcpy (s, r->val[i].%s, len);\n" name;
8785         pr "      s[len] = 0;\n";
8786         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8787         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
8788         pr "    }\n";
8789     | name, (FBytes|FUInt64|FInt64) ->
8790         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
8791         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8792     | name, (FUInt32|FInt32) ->
8793         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
8794         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8795     | name, FOptPercent ->
8796         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
8797         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
8798     | name, FChar ->
8799         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
8800         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8801   ) cols;
8802   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
8803   pr "  }\n";
8804   pr "  guestfs_free_%s_list (r);\n" typ;
8805   pr "  return jr;\n"
8806
8807 and generate_java_makefile_inc () =
8808   generate_header HashStyle GPLv2;
8809
8810   pr "java_built_sources = \\\n";
8811   List.iter (
8812     fun (typ, jtyp) ->
8813         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
8814   ) java_structs;
8815   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
8816
8817 and generate_haskell_hs () =
8818   generate_header HaskellStyle LGPLv2;
8819
8820   (* XXX We only know how to generate partial FFI for Haskell
8821    * at the moment.  Please help out!
8822    *)
8823   let can_generate style =
8824     match style with
8825     | RErr, _
8826     | RInt _, _
8827     | RInt64 _, _ -> true
8828     | RBool _, _
8829     | RConstString _, _
8830     | RConstOptString _, _
8831     | RString _, _
8832     | RStringList _, _
8833     | RStruct _, _
8834     | RStructList _, _
8835     | RHashtable _, _
8836     | RBufferOut _, _ -> false in
8837
8838   pr "\
8839 {-# INCLUDE <guestfs.h> #-}
8840 {-# LANGUAGE ForeignFunctionInterface #-}
8841
8842 module Guestfs (
8843   create";
8844
8845   (* List out the names of the actions we want to export. *)
8846   List.iter (
8847     fun (name, style, _, _, _, _, _) ->
8848       if can_generate style then pr ",\n  %s" name
8849   ) all_functions;
8850
8851   pr "
8852   ) where
8853 import Foreign
8854 import Foreign.C
8855 import Foreign.C.Types
8856 import IO
8857 import Control.Exception
8858 import Data.Typeable
8859
8860 data GuestfsS = GuestfsS            -- represents the opaque C struct
8861 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
8862 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
8863
8864 -- XXX define properly later XXX
8865 data PV = PV
8866 data VG = VG
8867 data LV = LV
8868 data IntBool = IntBool
8869 data Stat = Stat
8870 data StatVFS = StatVFS
8871 data Hashtable = Hashtable
8872
8873 foreign import ccall unsafe \"guestfs_create\" c_create
8874   :: IO GuestfsP
8875 foreign import ccall unsafe \"&guestfs_close\" c_close
8876   :: FunPtr (GuestfsP -> IO ())
8877 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
8878   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
8879
8880 create :: IO GuestfsH
8881 create = do
8882   p <- c_create
8883   c_set_error_handler p nullPtr nullPtr
8884   h <- newForeignPtr c_close p
8885   return h
8886
8887 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
8888   :: GuestfsP -> IO CString
8889
8890 -- last_error :: GuestfsH -> IO (Maybe String)
8891 -- last_error h = do
8892 --   str <- withForeignPtr h (\\p -> c_last_error p)
8893 --   maybePeek peekCString str
8894
8895 last_error :: GuestfsH -> IO (String)
8896 last_error h = do
8897   str <- withForeignPtr h (\\p -> c_last_error p)
8898   if (str == nullPtr)
8899     then return \"no error\"
8900     else peekCString str
8901
8902 ";
8903
8904   (* Generate wrappers for each foreign function. *)
8905   List.iter (
8906     fun (name, style, _, _, _, _, _) ->
8907       if can_generate style then (
8908         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
8909         pr "  :: ";
8910         generate_haskell_prototype ~handle:"GuestfsP" style;
8911         pr "\n";
8912         pr "\n";
8913         pr "%s :: " name;
8914         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
8915         pr "\n";
8916         pr "%s %s = do\n" name
8917           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
8918         pr "  r <- ";
8919         (* Convert pointer arguments using with* functions. *)
8920         List.iter (
8921           function
8922           | FileIn n
8923           | FileOut n
8924           | Pathname n | Device n | Dev_or_Path n | String n -> pr "withCString %s $ \\%s -> " n n
8925           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
8926           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
8927           | Bool _ | Int _ -> ()
8928         ) (snd style);
8929         (* Convert integer arguments. *)
8930         let args =
8931           List.map (
8932             function
8933             | Bool n -> sprintf "(fromBool %s)" n
8934             | Int n -> sprintf "(fromIntegral %s)" n
8935             | FileIn n | FileOut n
8936             | Pathname n | Device n | Dev_or_Path n | String n | OptString n | StringList n | DeviceList n -> n
8937           ) (snd style) in
8938         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
8939           (String.concat " " ("p" :: args));
8940         (match fst style with
8941          | RErr | RInt _ | RInt64 _ | RBool _ ->
8942              pr "  if (r == -1)\n";
8943              pr "    then do\n";
8944              pr "      err <- last_error h\n";
8945              pr "      fail err\n";
8946          | RConstString _ | RConstOptString _ | RString _
8947          | RStringList _ | RStruct _
8948          | RStructList _ | RHashtable _ | RBufferOut _ ->
8949              pr "  if (r == nullPtr)\n";
8950              pr "    then do\n";
8951              pr "      err <- last_error h\n";
8952              pr "      fail err\n";
8953         );
8954         (match fst style with
8955          | RErr ->
8956              pr "    else return ()\n"
8957          | RInt _ ->
8958              pr "    else return (fromIntegral r)\n"
8959          | RInt64 _ ->
8960              pr "    else return (fromIntegral r)\n"
8961          | RBool _ ->
8962              pr "    else return (toBool r)\n"
8963          | RConstString _
8964          | RConstOptString _
8965          | RString _
8966          | RStringList _
8967          | RStruct _
8968          | RStructList _
8969          | RHashtable _
8970          | RBufferOut _ ->
8971              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
8972         );
8973         pr "\n";
8974       )
8975   ) all_functions
8976
8977 and generate_haskell_prototype ~handle ?(hs = false) style =
8978   pr "%s -> " handle;
8979   let string = if hs then "String" else "CString" in
8980   let int = if hs then "Int" else "CInt" in
8981   let bool = if hs then "Bool" else "CInt" in
8982   let int64 = if hs then "Integer" else "Int64" in
8983   List.iter (
8984     fun arg ->
8985       (match arg with
8986        | Pathname _ | Device _ | Dev_or_Path _ | String _ -> pr "%s" string
8987        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
8988        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
8989        | Bool _ -> pr "%s" bool
8990        | Int _ -> pr "%s" int
8991        | FileIn _ -> pr "%s" string
8992        | FileOut _ -> pr "%s" string
8993       );
8994       pr " -> ";
8995   ) (snd style);
8996   pr "IO (";
8997   (match fst style with
8998    | RErr -> if not hs then pr "CInt"
8999    | RInt _ -> pr "%s" int
9000    | RInt64 _ -> pr "%s" int64
9001    | RBool _ -> pr "%s" bool
9002    | RConstString _ -> pr "%s" string
9003    | RConstOptString _ -> pr "Maybe %s" string
9004    | RString _ -> pr "%s" string
9005    | RStringList _ -> pr "[%s]" string
9006    | RStruct (_, typ) ->
9007        let name = java_name_of_struct typ in
9008        pr "%s" name
9009    | RStructList (_, typ) ->
9010        let name = java_name_of_struct typ in
9011        pr "[%s]" name
9012    | RHashtable _ -> pr "Hashtable"
9013    | RBufferOut _ -> pr "%s" string
9014   );
9015   pr ")"
9016
9017 and generate_bindtests () =
9018   generate_header CStyle LGPLv2;
9019
9020   pr "\
9021 #include <stdio.h>
9022 #include <stdlib.h>
9023 #include <inttypes.h>
9024 #include <string.h>
9025
9026 #include \"guestfs.h\"
9027 #include \"guestfs_protocol.h\"
9028
9029 #define error guestfs_error
9030 #define safe_calloc guestfs_safe_calloc
9031 #define safe_malloc guestfs_safe_malloc
9032
9033 static void
9034 print_strings (char *const *argv)
9035 {
9036   int argc;
9037
9038   printf (\"[\");
9039   for (argc = 0; argv[argc] != NULL; ++argc) {
9040     if (argc > 0) printf (\", \");
9041     printf (\"\\\"%%s\\\"\", argv[argc]);
9042   }
9043   printf (\"]\\n\");
9044 }
9045
9046 /* The test0 function prints its parameters to stdout. */
9047 ";
9048
9049   let test0, tests =
9050     match test_functions with
9051     | [] -> assert false
9052     | test0 :: tests -> test0, tests in
9053
9054   let () =
9055     let (name, style, _, _, _, _, _) = test0 in
9056     generate_prototype ~extern:false ~semicolon:false ~newline:true
9057       ~handle:"g" ~prefix:"guestfs_" name style;
9058     pr "{\n";
9059     List.iter (
9060       function
9061       | Pathname n
9062       | Device n | Dev_or_Path n
9063       | String n
9064       | FileIn n
9065       | FileOut n -> pr "  printf (\"%%s\\n\", %s);\n" n
9066       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
9067       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
9068       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
9069       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
9070     ) (snd style);
9071     pr "  /* Java changes stdout line buffering so we need this: */\n";
9072     pr "  fflush (stdout);\n";
9073     pr "  return 0;\n";
9074     pr "}\n";
9075     pr "\n" in
9076
9077   List.iter (
9078     fun (name, style, _, _, _, _, _) ->
9079       if String.sub name (String.length name - 3) 3 <> "err" then (
9080         pr "/* Test normal return. */\n";
9081         generate_prototype ~extern:false ~semicolon:false ~newline:true
9082           ~handle:"g" ~prefix:"guestfs_" name style;
9083         pr "{\n";
9084         (match fst style with
9085          | RErr ->
9086              pr "  return 0;\n"
9087          | RInt _ ->
9088              pr "  int r;\n";
9089              pr "  sscanf (val, \"%%d\", &r);\n";
9090              pr "  return r;\n"
9091          | RInt64 _ ->
9092              pr "  int64_t r;\n";
9093              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
9094              pr "  return r;\n"
9095          | RBool _ ->
9096              pr "  return strcmp (val, \"true\") == 0;\n"
9097          | RConstString _
9098          | RConstOptString _ ->
9099              (* Can't return the input string here.  Return a static
9100               * string so we ensure we get a segfault if the caller
9101               * tries to free it.
9102               *)
9103              pr "  return \"static string\";\n"
9104          | RString _ ->
9105              pr "  return strdup (val);\n"
9106          | RStringList _ ->
9107              pr "  char **strs;\n";
9108              pr "  int n, i;\n";
9109              pr "  sscanf (val, \"%%d\", &n);\n";
9110              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
9111              pr "  for (i = 0; i < n; ++i) {\n";
9112              pr "    strs[i] = safe_malloc (g, 16);\n";
9113              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
9114              pr "  }\n";
9115              pr "  strs[n] = NULL;\n";
9116              pr "  return strs;\n"
9117          | RStruct (_, typ) ->
9118              pr "  struct guestfs_%s *r;\n" typ;
9119              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
9120              pr "  return r;\n"
9121          | RStructList (_, typ) ->
9122              pr "  struct guestfs_%s_list *r;\n" typ;
9123              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
9124              pr "  sscanf (val, \"%%d\", &r->len);\n";
9125              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
9126              pr "  return r;\n"
9127          | RHashtable _ ->
9128              pr "  char **strs;\n";
9129              pr "  int n, i;\n";
9130              pr "  sscanf (val, \"%%d\", &n);\n";
9131              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
9132              pr "  for (i = 0; i < n; ++i) {\n";
9133              pr "    strs[i*2] = safe_malloc (g, 16);\n";
9134              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
9135              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
9136              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
9137              pr "  }\n";
9138              pr "  strs[n*2] = NULL;\n";
9139              pr "  return strs;\n"
9140          | RBufferOut _ ->
9141              pr "  return strdup (val);\n"
9142         );
9143         pr "}\n";
9144         pr "\n"
9145       ) else (
9146         pr "/* Test error return. */\n";
9147         generate_prototype ~extern:false ~semicolon:false ~newline:true
9148           ~handle:"g" ~prefix:"guestfs_" name style;
9149         pr "{\n";
9150         pr "  error (g, \"error\");\n";
9151         (match fst style with
9152          | RErr | RInt _ | RInt64 _ | RBool _ ->
9153              pr "  return -1;\n"
9154          | RConstString _ | RConstOptString _
9155          | RString _ | RStringList _ | RStruct _
9156          | RStructList _
9157          | RHashtable _
9158          | RBufferOut _ ->
9159              pr "  return NULL;\n"
9160         );
9161         pr "}\n";
9162         pr "\n"
9163       )
9164   ) tests
9165
9166 and generate_ocaml_bindtests () =
9167   generate_header OCamlStyle GPLv2;
9168
9169   pr "\
9170 let () =
9171   let g = Guestfs.create () in
9172 ";
9173
9174   let mkargs args =
9175     String.concat " " (
9176       List.map (
9177         function
9178         | CallString s -> "\"" ^ s ^ "\""
9179         | CallOptString None -> "None"
9180         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
9181         | CallStringList xs ->
9182             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
9183         | CallInt i when i >= 0 -> string_of_int i
9184         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
9185         | CallBool b -> string_of_bool b
9186       ) args
9187     )
9188   in
9189
9190   generate_lang_bindtests (
9191     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
9192   );
9193
9194   pr "print_endline \"EOF\"\n"
9195
9196 and generate_perl_bindtests () =
9197   pr "#!/usr/bin/perl -w\n";
9198   generate_header HashStyle GPLv2;
9199
9200   pr "\
9201 use strict;
9202
9203 use Sys::Guestfs;
9204
9205 my $g = Sys::Guestfs->new ();
9206 ";
9207
9208   let mkargs args =
9209     String.concat ", " (
9210       List.map (
9211         function
9212         | CallString s -> "\"" ^ s ^ "\""
9213         | CallOptString None -> "undef"
9214         | CallOptString (Some s) -> sprintf "\"%s\"" s
9215         | CallStringList xs ->
9216             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9217         | CallInt i -> string_of_int i
9218         | CallBool b -> if b then "1" else "0"
9219       ) args
9220     )
9221   in
9222
9223   generate_lang_bindtests (
9224     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
9225   );
9226
9227   pr "print \"EOF\\n\"\n"
9228
9229 and generate_python_bindtests () =
9230   generate_header HashStyle GPLv2;
9231
9232   pr "\
9233 import guestfs
9234
9235 g = guestfs.GuestFS ()
9236 ";
9237
9238   let mkargs args =
9239     String.concat ", " (
9240       List.map (
9241         function
9242         | CallString s -> "\"" ^ s ^ "\""
9243         | CallOptString None -> "None"
9244         | CallOptString (Some s) -> sprintf "\"%s\"" s
9245         | CallStringList xs ->
9246             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9247         | CallInt i -> string_of_int i
9248         | CallBool b -> if b then "1" else "0"
9249       ) args
9250     )
9251   in
9252
9253   generate_lang_bindtests (
9254     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
9255   );
9256
9257   pr "print \"EOF\"\n"
9258
9259 and generate_ruby_bindtests () =
9260   generate_header HashStyle GPLv2;
9261
9262   pr "\
9263 require 'guestfs'
9264
9265 g = Guestfs::create()
9266 ";
9267
9268   let mkargs args =
9269     String.concat ", " (
9270       List.map (
9271         function
9272         | CallString s -> "\"" ^ s ^ "\""
9273         | CallOptString None -> "nil"
9274         | CallOptString (Some s) -> sprintf "\"%s\"" s
9275         | CallStringList xs ->
9276             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9277         | CallInt i -> string_of_int i
9278         | CallBool b -> string_of_bool b
9279       ) args
9280     )
9281   in
9282
9283   generate_lang_bindtests (
9284     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
9285   );
9286
9287   pr "print \"EOF\\n\"\n"
9288
9289 and generate_java_bindtests () =
9290   generate_header CStyle GPLv2;
9291
9292   pr "\
9293 import com.redhat.et.libguestfs.*;
9294
9295 public class Bindtests {
9296     public static void main (String[] argv)
9297     {
9298         try {
9299             GuestFS g = new GuestFS ();
9300 ";
9301
9302   let mkargs args =
9303     String.concat ", " (
9304       List.map (
9305         function
9306         | CallString s -> "\"" ^ s ^ "\""
9307         | CallOptString None -> "null"
9308         | CallOptString (Some s) -> sprintf "\"%s\"" s
9309         | CallStringList xs ->
9310             "new String[]{" ^
9311               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
9312         | CallInt i -> string_of_int i
9313         | CallBool b -> string_of_bool b
9314       ) args
9315     )
9316   in
9317
9318   generate_lang_bindtests (
9319     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
9320   );
9321
9322   pr "
9323             System.out.println (\"EOF\");
9324         }
9325         catch (Exception exn) {
9326             System.err.println (exn);
9327             System.exit (1);
9328         }
9329     }
9330 }
9331 "
9332
9333 and generate_haskell_bindtests () =
9334   generate_header HaskellStyle GPLv2;
9335
9336   pr "\
9337 module Bindtests where
9338 import qualified Guestfs
9339
9340 main = do
9341   g <- Guestfs.create
9342 ";
9343
9344   let mkargs args =
9345     String.concat " " (
9346       List.map (
9347         function
9348         | CallString s -> "\"" ^ s ^ "\""
9349         | CallOptString None -> "Nothing"
9350         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
9351         | CallStringList xs ->
9352             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9353         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
9354         | CallInt i -> string_of_int i
9355         | CallBool true -> "True"
9356         | CallBool false -> "False"
9357       ) args
9358     )
9359   in
9360
9361   generate_lang_bindtests (
9362     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
9363   );
9364
9365   pr "  putStrLn \"EOF\"\n"
9366
9367 (* Language-independent bindings tests - we do it this way to
9368  * ensure there is parity in testing bindings across all languages.
9369  *)
9370 and generate_lang_bindtests call =
9371   call "test0" [CallString "abc"; CallOptString (Some "def");
9372                 CallStringList []; CallBool false;
9373                 CallInt 0; CallString "123"; CallString "456"];
9374   call "test0" [CallString "abc"; CallOptString None;
9375                 CallStringList []; CallBool false;
9376                 CallInt 0; CallString "123"; CallString "456"];
9377   call "test0" [CallString ""; CallOptString (Some "def");
9378                 CallStringList []; CallBool false;
9379                 CallInt 0; CallString "123"; CallString "456"];
9380   call "test0" [CallString ""; CallOptString (Some "");
9381                 CallStringList []; CallBool false;
9382                 CallInt 0; CallString "123"; CallString "456"];
9383   call "test0" [CallString "abc"; CallOptString (Some "def");
9384                 CallStringList ["1"]; CallBool false;
9385                 CallInt 0; CallString "123"; CallString "456"];
9386   call "test0" [CallString "abc"; CallOptString (Some "def");
9387                 CallStringList ["1"; "2"]; CallBool false;
9388                 CallInt 0; CallString "123"; CallString "456"];
9389   call "test0" [CallString "abc"; CallOptString (Some "def");
9390                 CallStringList ["1"]; CallBool true;
9391                 CallInt 0; CallString "123"; CallString "456"];
9392   call "test0" [CallString "abc"; CallOptString (Some "def");
9393                 CallStringList ["1"]; CallBool false;
9394                 CallInt (-1); CallString "123"; CallString "456"];
9395   call "test0" [CallString "abc"; CallOptString (Some "def");
9396                 CallStringList ["1"]; CallBool false;
9397                 CallInt (-2); CallString "123"; CallString "456"];
9398   call "test0" [CallString "abc"; CallOptString (Some "def");
9399                 CallStringList ["1"]; CallBool false;
9400                 CallInt 1; CallString "123"; CallString "456"];
9401   call "test0" [CallString "abc"; CallOptString (Some "def");
9402                 CallStringList ["1"]; CallBool false;
9403                 CallInt 2; CallString "123"; CallString "456"];
9404   call "test0" [CallString "abc"; CallOptString (Some "def");
9405                 CallStringList ["1"]; CallBool false;
9406                 CallInt 4095; CallString "123"; CallString "456"];
9407   call "test0" [CallString "abc"; CallOptString (Some "def");
9408                 CallStringList ["1"]; CallBool false;
9409                 CallInt 0; CallString ""; CallString ""]
9410
9411 (* XXX Add here tests of the return and error functions. *)
9412
9413 (* This is used to generate the src/MAX_PROC_NR file which
9414  * contains the maximum procedure number, a surrogate for the
9415  * ABI version number.  See src/Makefile.am for the details.
9416  *)
9417 and generate_max_proc_nr () =
9418   let proc_nrs = List.map (
9419     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
9420   ) daemon_functions in
9421
9422   let max_proc_nr = List.fold_left max 0 proc_nrs in
9423
9424   pr "%d\n" max_proc_nr
9425
9426 let output_to filename =
9427   let filename_new = filename ^ ".new" in
9428   chan := open_out filename_new;
9429   let close () =
9430     close_out !chan;
9431     chan := stdout;
9432
9433     (* Is the new file different from the current file? *)
9434     if Sys.file_exists filename && files_equal filename filename_new then
9435       Unix.unlink filename_new          (* same, so skip it *)
9436     else (
9437       (* different, overwrite old one *)
9438       (try Unix.chmod filename 0o644 with Unix.Unix_error _ -> ());
9439       Unix.rename filename_new filename;
9440       Unix.chmod filename 0o444;
9441       printf "written %s\n%!" filename;
9442     )
9443   in
9444   close
9445
9446 (* Main program. *)
9447 let () =
9448   check_functions ();
9449
9450   if not (Sys.file_exists "HACKING") then (
9451     eprintf "\
9452 You are probably running this from the wrong directory.
9453 Run it from the top source directory using the command
9454   src/generator.ml
9455 ";
9456     exit 1
9457   );
9458
9459   let close = output_to "src/guestfs_protocol.x" in
9460   generate_xdr ();
9461   close ();
9462
9463   let close = output_to "src/guestfs-structs.h" in
9464   generate_structs_h ();
9465   close ();
9466
9467   let close = output_to "src/guestfs-actions.h" in
9468   generate_actions_h ();
9469   close ();
9470
9471   let close = output_to "src/guestfs-actions.c" in
9472   generate_client_actions ();
9473   close ();
9474
9475   let close = output_to "daemon/actions.h" in
9476   generate_daemon_actions_h ();
9477   close ();
9478
9479   let close = output_to "daemon/stubs.c" in
9480   generate_daemon_actions ();
9481   close ();
9482
9483   let close = output_to "daemon/names.c" in
9484   generate_daemon_names ();
9485   close ();
9486
9487   let close = output_to "capitests/tests.c" in
9488   generate_tests ();
9489   close ();
9490
9491   let close = output_to "src/guestfs-bindtests.c" in
9492   generate_bindtests ();
9493   close ();
9494
9495   let close = output_to "fish/cmds.c" in
9496   generate_fish_cmds ();
9497   close ();
9498
9499   let close = output_to "fish/completion.c" in
9500   generate_fish_completion ();
9501   close ();
9502
9503   let close = output_to "guestfs-structs.pod" in
9504   generate_structs_pod ();
9505   close ();
9506
9507   let close = output_to "guestfs-actions.pod" in
9508   generate_actions_pod ();
9509   close ();
9510
9511   let close = output_to "guestfish-actions.pod" in
9512   generate_fish_actions_pod ();
9513   close ();
9514
9515   let close = output_to "ocaml/guestfs.mli" in
9516   generate_ocaml_mli ();
9517   close ();
9518
9519   let close = output_to "ocaml/guestfs.ml" in
9520   generate_ocaml_ml ();
9521   close ();
9522
9523   let close = output_to "ocaml/guestfs_c_actions.c" in
9524   generate_ocaml_c ();
9525   close ();
9526
9527   let close = output_to "ocaml/bindtests.ml" in
9528   generate_ocaml_bindtests ();
9529   close ();
9530
9531   let close = output_to "perl/Guestfs.xs" in
9532   generate_perl_xs ();
9533   close ();
9534
9535   let close = output_to "perl/lib/Sys/Guestfs.pm" in
9536   generate_perl_pm ();
9537   close ();
9538
9539   let close = output_to "perl/bindtests.pl" in
9540   generate_perl_bindtests ();
9541   close ();
9542
9543   let close = output_to "python/guestfs-py.c" in
9544   generate_python_c ();
9545   close ();
9546
9547   let close = output_to "python/guestfs.py" in
9548   generate_python_py ();
9549   close ();
9550
9551   let close = output_to "python/bindtests.py" in
9552   generate_python_bindtests ();
9553   close ();
9554
9555   let close = output_to "ruby/ext/guestfs/_guestfs.c" in
9556   generate_ruby_c ();
9557   close ();
9558
9559   let close = output_to "ruby/bindtests.rb" in
9560   generate_ruby_bindtests ();
9561   close ();
9562
9563   let close = output_to "java/com/redhat/et/libguestfs/GuestFS.java" in
9564   generate_java_java ();
9565   close ();
9566
9567   List.iter (
9568     fun (typ, jtyp) ->
9569       let cols = cols_of_struct typ in
9570       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
9571       let close = output_to filename in
9572       generate_java_struct jtyp cols;
9573       close ();
9574   ) java_structs;
9575
9576   let close = output_to "java/Makefile.inc" in
9577   generate_java_makefile_inc ();
9578   close ();
9579
9580   let close = output_to "java/com_redhat_et_libguestfs_GuestFS.c" in
9581   generate_java_c ();
9582   close ();
9583
9584   let close = output_to "java/Bindtests.java" in
9585   generate_java_bindtests ();
9586   close ();
9587
9588   let close = output_to "haskell/Guestfs.hs" in
9589   generate_haskell_hs ();
9590   close ();
9591
9592   let close = output_to "haskell/Bindtests.hs" in
9593   generate_haskell_bindtests ();
9594   close ();
9595
9596   let close = output_to "src/MAX_PROC_NR" in
9597   generate_max_proc_nr ();
9598   close ();
9599
9600   (* Always generate this file last, and unconditionally.  It's used
9601    * by the Makefile to know when we must re-run the generator.
9602    *)
9603   let chan = open_out "src/stamp-generator" in
9604   fprintf chan "1\n";
9605   close_out chan