c357ca412b3d4f6dd9b3f6507c36111bad673667
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table below), and
25  * daemon/<somefile>.c to write the implementation.
26  *
27  * After editing this file, run it (./src/generator.ml) to regenerate all the
28  * output files.  Note that if you are using a separate build directory you
29  * must run generator.ml from the _source_ directory.
30  *
31  * IMPORTANT: This script should NOT print any warnings.  If it prints
32  * warnings, you should treat them as errors.
33  *)
34
35 #load "unix.cma";;
36 #load "str.cma";;
37
38 open Printf
39
40 type style = ret * args
41 and ret =
42     (* "RErr" as a return value means an int used as a simple error
43      * indication, ie. 0 or -1.
44      *)
45   | RErr
46
47     (* "RInt" as a return value means an int which is -1 for error
48      * or any value >= 0 on success.  Only use this for smallish
49      * positive ints (0 <= i < 2^30).
50      *)
51   | RInt of string
52
53     (* "RInt64" is the same as RInt, but is guaranteed to be able
54      * to return a full 64 bit value, _except_ that -1 means error
55      * (so -1 cannot be a valid, non-error return value).
56      *)
57   | RInt64 of string
58
59     (* "RBool" is a bool return value which can be true/false or
60      * -1 for error.
61      *)
62   | RBool of string
63
64     (* "RConstString" is a string that refers to a constant value.
65      * The return value must NOT be NULL (since NULL indicates
66      * an error).
67      *
68      * Try to avoid using this.  In particular you cannot use this
69      * for values returned from the daemon, because there is no
70      * thread-safe way to return them in the C API.
71      *)
72   | RConstString of string
73
74     (* "RConstOptString" is an even more broken version of
75      * "RConstString".  The returned string may be NULL and there
76      * is no way to return an error indication.  Avoid using this!
77      *)
78   | RConstOptString of string
79
80     (* "RString" is a returned string.  It must NOT be NULL, since
81      * a NULL return indicates an error.  The caller frees this.
82      *)
83   | RString of string
84
85     (* "RStringList" is a list of strings.  No string in the list
86      * can be NULL.  The caller frees the strings and the array.
87      *)
88   | RStringList of string
89
90     (* "RStruct" is a function which returns a single named structure
91      * or an error indication (in C, a struct, and in other languages
92      * with varying representations, but usually very efficient).  See
93      * after the function list below for the structures.
94      *)
95   | RStruct of string * string          (* name of retval, name of struct *)
96
97     (* "RStructList" is a function which returns either a list/array
98      * of structures (could be zero-length), or an error indication.
99      *)
100   | RStructList of string * string      (* name of retval, name of struct *)
101
102     (* Key-value pairs of untyped strings.  Turns into a hashtable or
103      * dictionary in languages which support it.  DON'T use this as a
104      * general "bucket" for results.  Prefer a stronger typed return
105      * value if one is available, or write a custom struct.  Don't use
106      * this if the list could potentially be very long, since it is
107      * inefficient.  Keys should be unique.  NULLs are not permitted.
108      *)
109   | RHashtable of string
110
111     (* "RBufferOut" is handled almost exactly like RString, but
112      * it allows the string to contain arbitrary 8 bit data including
113      * ASCII NUL.  In the C API this causes an implicit extra parameter
114      * to be added of type <size_t *size_r>.  The extra parameter
115      * returns the actual size of the return buffer in bytes.
116      *
117      * Other programming languages support strings with arbitrary 8 bit
118      * data.
119      *
120      * At the RPC layer we have to use the opaque<> type instead of
121      * string<>.  Returned data is still limited to the max message
122      * size (ie. ~ 2 MB).
123      *)
124   | RBufferOut of string
125
126 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
127
128     (* Note in future we should allow a "variable args" parameter as
129      * the final parameter, to allow commands like
130      *   chmod mode file [file(s)...]
131      * This is not implemented yet, but many commands (such as chmod)
132      * are currently defined with the argument order keeping this future
133      * possibility in mind.
134      *)
135 and argt =
136   | String of string    (* const char *name, cannot be NULL *)
137   | Device of string    (* /dev device name, cannot be NULL *)
138   | Pathname of string  (* file name, cannot be NULL *)
139   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
140   | OptString of string (* const char *name, may be NULL *)
141   | StringList of string(* list of strings (each string cannot be NULL) *)
142   | DeviceList of string(* list of Device names (each cannot be NULL) *)
143   | Bool of string      (* boolean *)
144   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
145     (* These are treated as filenames (simple string parameters) in
146      * the C API and bindings.  But in the RPC protocol, we transfer
147      * the actual file content up to or down from the daemon.
148      * FileIn: local machine -> daemon (in request)
149      * FileOut: daemon -> local machine (in reply)
150      * In guestfish (only), the special name "-" means read from
151      * stdin or write to stdout.
152      *)
153   | FileIn of string
154   | FileOut of string
155 (* Not implemented:
156     (* Opaque buffer which can contain arbitrary 8 bit data.
157      * In the C API, this is expressed as <char *, int> pair.
158      * Most other languages have a string type which can contain
159      * ASCII NUL.  We use whatever type is appropriate for each
160      * language.
161      * Buffers are limited by the total message size.  To transfer
162      * large blocks of data, use FileIn/FileOut parameters instead.
163      * To return an arbitrary buffer, use RBufferOut.
164      *)
165   | BufferIn of string
166 *)
167
168 type flags =
169   | ProtocolLimitWarning  (* display warning about protocol size limits *)
170   | DangerWillRobinson    (* flags particularly dangerous commands *)
171   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
172   | FishAction of string  (* call this function in guestfish *)
173   | NotInFish             (* do not export via guestfish *)
174   | NotInDocs             (* do not add this function to documentation *)
175   | DeprecatedBy of string (* function is deprecated, use .. instead *)
176
177 (* You can supply zero or as many tests as you want per API call.
178  *
179  * Note that the test environment has 3 block devices, of size 500MB,
180  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
181  * a fourth squashfs block device with some known files on it (/dev/sdd).
182  *
183  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
184  * Number of cylinders was 63 for IDE emulated disks with precisely
185  * the same size.  How exactly this is calculated is a mystery.
186  *
187  * The squashfs block device (/dev/sdd) comes from images/test.sqsh.
188  *
189  * To be able to run the tests in a reasonable amount of time,
190  * the virtual machine and block devices are reused between tests.
191  * So don't try testing kill_subprocess :-x
192  *
193  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
194  *
195  * Don't assume anything about the previous contents of the block
196  * devices.  Use 'Init*' to create some initial scenarios.
197  *
198  * You can add a prerequisite clause to any individual test.  This
199  * is a run-time check, which, if it fails, causes the test to be
200  * skipped.  Useful if testing a command which might not work on
201  * all variations of libguestfs builds.  A test that has prerequisite
202  * of 'Always' is run unconditionally.
203  *
204  * In addition, packagers can skip individual tests by setting the
205  * environment variables:     eg:
206  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
207  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
208  *)
209 type tests = (test_init * test_prereq * test) list
210 and test =
211     (* Run the command sequence and just expect nothing to fail. *)
212   | TestRun of seq
213
214     (* Run the command sequence and expect the output of the final
215      * command to be the string.
216      *)
217   | TestOutput of seq * string
218
219     (* Run the command sequence and expect the output of the final
220      * command to be the list of strings.
221      *)
222   | TestOutputList of seq * string list
223
224     (* Run the command sequence and expect the output of the final
225      * command to be the list of block devices (could be either
226      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
227      * character of each string).
228      *)
229   | TestOutputListOfDevices of seq * string list
230
231     (* Run the command sequence and expect the output of the final
232      * command to be the integer.
233      *)
234   | TestOutputInt of seq * int
235
236     (* Run the command sequence and expect the output of the final
237      * command to be <op> <int>, eg. ">=", "1".
238      *)
239   | TestOutputIntOp of seq * string * int
240
241     (* Run the command sequence and expect the output of the final
242      * command to be a true value (!= 0 or != NULL).
243      *)
244   | TestOutputTrue of seq
245
246     (* Run the command sequence and expect the output of the final
247      * command to be a false value (== 0 or == NULL, but not an error).
248      *)
249   | TestOutputFalse of seq
250
251     (* Run the command sequence and expect the output of the final
252      * command to be a list of the given length (but don't care about
253      * content).
254      *)
255   | TestOutputLength of seq * int
256
257     (* Run the command sequence and expect the output of the final
258      * command to be a buffer (RBufferOut), ie. string + size.
259      *)
260   | TestOutputBuffer of seq * string
261
262     (* Run the command sequence and expect the output of the final
263      * command to be a structure.
264      *)
265   | TestOutputStruct of seq * test_field_compare list
266
267     (* Run the command sequence and expect the final command (only)
268      * to fail.
269      *)
270   | TestLastFail of seq
271
272 and test_field_compare =
273   | CompareWithInt of string * int
274   | CompareWithIntOp of string * string * int
275   | CompareWithString of string * string
276   | CompareFieldsIntEq of string * string
277   | CompareFieldsStrEq of string * string
278
279 (* Test prerequisites. *)
280 and test_prereq =
281     (* Test always runs. *)
282   | Always
283
284     (* Test is currently disabled - eg. it fails, or it tests some
285      * unimplemented feature.
286      *)
287   | Disabled
288
289     (* 'string' is some C code (a function body) that should return
290      * true or false.  The test will run if the code returns true.
291      *)
292   | If of string
293
294     (* As for 'If' but the test runs _unless_ the code returns true. *)
295   | Unless of string
296
297 (* Some initial scenarios for testing. *)
298 and test_init =
299     (* Do nothing, block devices could contain random stuff including
300      * LVM PVs, and some filesystems might be mounted.  This is usually
301      * a bad idea.
302      *)
303   | InitNone
304
305     (* Block devices are empty and no filesystems are mounted. *)
306   | InitEmpty
307
308     (* /dev/sda contains a single partition /dev/sda1, with random
309      * content.  /dev/sdb and /dev/sdc may have random content.
310      * No LVM.
311      *)
312   | InitPartition
313
314     (* /dev/sda contains a single partition /dev/sda1, which is formatted
315      * as ext2, empty [except for lost+found] and mounted on /.
316      * /dev/sdb and /dev/sdc may have random content.
317      * No LVM.
318      *)
319   | InitBasicFS
320
321     (* /dev/sda:
322      *   /dev/sda1 (is a PV):
323      *     /dev/VG/LV (size 8MB):
324      *       formatted as ext2, empty [except for lost+found], mounted on /
325      * /dev/sdb and /dev/sdc may have random content.
326      *)
327   | InitBasicFSonLVM
328
329     (* /dev/sdd (the squashfs, see images/ directory in source)
330      * is mounted on /
331      *)
332   | InitSquashFS
333
334 (* Sequence of commands for testing. *)
335 and seq = cmd list
336 and cmd = string list
337
338 (* Note about long descriptions: When referring to another
339  * action, use the format C<guestfs_other> (ie. the full name of
340  * the C function).  This will be replaced as appropriate in other
341  * language bindings.
342  *
343  * Apart from that, long descriptions are just perldoc paragraphs.
344  *)
345
346 (* Generate a random UUID (used in tests). *)
347 let uuidgen () =
348   let chan = Unix.open_process_in "uuidgen" in
349   let uuid = input_line chan in
350   (match Unix.close_process_in chan with
351    | Unix.WEXITED 0 -> ()
352    | Unix.WEXITED _ ->
353        failwith "uuidgen: process exited with non-zero status"
354    | Unix.WSIGNALED _ | Unix.WSTOPPED _ ->
355        failwith "uuidgen: process signalled or stopped by signal"
356   );
357   uuid
358
359 (* These test functions are used in the language binding tests. *)
360
361 let test_all_args = [
362   String "str";
363   OptString "optstr";
364   StringList "strlist";
365   Bool "b";
366   Int "integer";
367   FileIn "filein";
368   FileOut "fileout";
369 ]
370
371 let test_all_rets = [
372   (* except for RErr, which is tested thoroughly elsewhere *)
373   "test0rint",         RInt "valout";
374   "test0rint64",       RInt64 "valout";
375   "test0rbool",        RBool "valout";
376   "test0rconststring", RConstString "valout";
377   "test0rconstoptstring", RConstOptString "valout";
378   "test0rstring",      RString "valout";
379   "test0rstringlist",  RStringList "valout";
380   "test0rstruct",      RStruct ("valout", "lvm_pv");
381   "test0rstructlist",  RStructList ("valout", "lvm_pv");
382   "test0rhashtable",   RHashtable "valout";
383 ]
384
385 let test_functions = [
386   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
387    [],
388    "internal test function - do not use",
389    "\
390 This is an internal test function which is used to test whether
391 the automatically generated bindings can handle every possible
392 parameter type correctly.
393
394 It echos the contents of each parameter to stdout.
395
396 You probably don't want to call this function.");
397 ] @ List.flatten (
398   List.map (
399     fun (name, ret) ->
400       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
401         [],
402         "internal test function - do not use",
403         "\
404 This is an internal test function which is used to test whether
405 the automatically generated bindings can handle every possible
406 return type correctly.
407
408 It converts string C<val> to the return type.
409
410 You probably don't want to call this function.");
411        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
412         [],
413         "internal test function - do not use",
414         "\
415 This is an internal test function which is used to test whether
416 the automatically generated bindings can handle every possible
417 return type correctly.
418
419 This function always returns an error.
420
421 You probably don't want to call this function.")]
422   ) test_all_rets
423 )
424
425 (* non_daemon_functions are any functions which don't get processed
426  * in the daemon, eg. functions for setting and getting local
427  * configuration values.
428  *)
429
430 let non_daemon_functions = test_functions @ [
431   ("launch", (RErr, []), -1, [FishAlias "run"; FishAction "launch"],
432    [],
433    "launch the qemu subprocess",
434    "\
435 Internally libguestfs is implemented by running a virtual machine
436 using L<qemu(1)>.
437
438 You should call this after configuring the handle
439 (eg. adding drives) but before performing any actions.");
440
441   ("wait_ready", (RErr, []), -1, [NotInFish],
442    [],
443    "wait until the qemu subprocess launches",
444    "\
445 Internally libguestfs is implemented by running a virtual machine
446 using L<qemu(1)>.
447
448 You should call this after C<guestfs_launch> to wait for the launch
449 to complete.");
450
451   ("kill_subprocess", (RErr, []), -1, [],
452    [],
453    "kill the qemu subprocess",
454    "\
455 This kills the qemu subprocess.  You should never need to call this.");
456
457   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
458    [],
459    "add an image to examine or modify",
460    "\
461 This function adds a virtual machine disk image C<filename> to the
462 guest.  The first time you call this function, the disk appears as IDE
463 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
464 so on.
465
466 You don't necessarily need to be root when using libguestfs.  However
467 you obviously do need sufficient permissions to access the filename
468 for whatever operations you want to perform (ie. read access if you
469 just want to read the image or write access if you want to modify the
470 image).
471
472 This is equivalent to the qemu parameter
473 C<-drive file=filename,cache=off,if=...>.
474 C<cache=off> is omitted in cases where it is not supported by
475 the underlying filesystem.
476
477 Note that this call checks for the existence of C<filename>.  This
478 stops you from specifying other types of drive which are supported
479 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
480 the general C<guestfs_config> call instead.");
481
482   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
483    [],
484    "add a CD-ROM disk image to examine",
485    "\
486 This function adds a virtual CD-ROM disk image to the guest.
487
488 This is equivalent to the qemu parameter C<-cdrom filename>.
489
490 Note that this call checks for the existence of C<filename>.  This
491 stops you from specifying other types of drive which are supported
492 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
493 the general C<guestfs_config> call instead.");
494
495   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
496    [],
497    "add a drive in snapshot mode (read-only)",
498    "\
499 This adds a drive in snapshot mode, making it effectively
500 read-only.
501
502 Note that writes to the device are allowed, and will be seen for
503 the duration of the guestfs handle, but they are written
504 to a temporary file which is discarded as soon as the guestfs
505 handle is closed.  We don't currently have any method to enable
506 changes to be committed, although qemu can support this.
507
508 This is equivalent to the qemu parameter
509 C<-drive file=filename,snapshot=on,if=...>.
510
511 Note that this call checks for the existence of C<filename>.  This
512 stops you from specifying other types of drive which are supported
513 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
514 the general C<guestfs_config> call instead.");
515
516   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
517    [],
518    "add qemu parameters",
519    "\
520 This can be used to add arbitrary qemu command line parameters
521 of the form C<-param value>.  Actually it's not quite arbitrary - we
522 prevent you from setting some parameters which would interfere with
523 parameters that we use.
524
525 The first character of C<param> string must be a C<-> (dash).
526
527 C<value> can be NULL.");
528
529   ("set_qemu", (RErr, [String "qemu"]), -1, [FishAlias "qemu"],
530    [],
531    "set the qemu binary",
532    "\
533 Set the qemu binary that we will use.
534
535 The default is chosen when the library was compiled by the
536 configure script.
537
538 You can also override this by setting the C<LIBGUESTFS_QEMU>
539 environment variable.
540
541 Setting C<qemu> to C<NULL> restores the default qemu binary.");
542
543   ("get_qemu", (RConstString "qemu", []), -1, [],
544    [InitNone, Always, TestRun (
545       [["get_qemu"]])],
546    "get the qemu binary",
547    "\
548 Return the current qemu binary.
549
550 This is always non-NULL.  If it wasn't set already, then this will
551 return the default qemu binary name.");
552
553   ("set_path", (RErr, [String "searchpath"]), -1, [FishAlias "path"],
554    [],
555    "set the search path",
556    "\
557 Set the path that libguestfs searches for kernel and initrd.img.
558
559 The default is C<$libdir/guestfs> unless overridden by setting
560 C<LIBGUESTFS_PATH> environment variable.
561
562 Setting C<path> to C<NULL> restores the default path.");
563
564   ("get_path", (RConstString "path", []), -1, [],
565    [InitNone, Always, TestRun (
566       [["get_path"]])],
567    "get the search path",
568    "\
569 Return the current search path.
570
571 This is always non-NULL.  If it wasn't set already, then this will
572 return the default path.");
573
574   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
575    [],
576    "add options to kernel command line",
577    "\
578 This function is used to add additional options to the
579 guest kernel command line.
580
581 The default is C<NULL> unless overridden by setting
582 C<LIBGUESTFS_APPEND> environment variable.
583
584 Setting C<append> to C<NULL> means I<no> additional options
585 are passed (libguestfs always adds a few of its own).");
586
587   ("get_append", (RConstOptString "append", []), -1, [],
588    (* This cannot be tested with the current framework.  The
589     * function can return NULL in normal operations, which the
590     * test framework interprets as an error.
591     *)
592    [],
593    "get the additional kernel options",
594    "\
595 Return the additional kernel options which are added to the
596 guest kernel command line.
597
598 If C<NULL> then no options are added.");
599
600   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
601    [],
602    "set autosync mode",
603    "\
604 If C<autosync> is true, this enables autosync.  Libguestfs will make a
605 best effort attempt to run C<guestfs_umount_all> followed by
606 C<guestfs_sync> when the handle is closed
607 (also if the program exits without closing handles).
608
609 This is disabled by default (except in guestfish where it is
610 enabled by default).");
611
612   ("get_autosync", (RBool "autosync", []), -1, [],
613    [InitNone, Always, TestRun (
614       [["get_autosync"]])],
615    "get autosync mode",
616    "\
617 Get the autosync flag.");
618
619   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
620    [],
621    "set verbose mode",
622    "\
623 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
624
625 Verbose messages are disabled unless the environment variable
626 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
627
628   ("get_verbose", (RBool "verbose", []), -1, [],
629    [],
630    "get verbose mode",
631    "\
632 This returns the verbose messages flag.");
633
634   ("is_ready", (RBool "ready", []), -1, [],
635    [InitNone, Always, TestOutputTrue (
636       [["is_ready"]])],
637    "is ready to accept commands",
638    "\
639 This returns true iff this handle is ready to accept commands
640 (in the C<READY> state).
641
642 For more information on states, see L<guestfs(3)>.");
643
644   ("is_config", (RBool "config", []), -1, [],
645    [InitNone, Always, TestOutputFalse (
646       [["is_config"]])],
647    "is in configuration state",
648    "\
649 This returns true iff this handle is being configured
650 (in the C<CONFIG> state).
651
652 For more information on states, see L<guestfs(3)>.");
653
654   ("is_launching", (RBool "launching", []), -1, [],
655    [InitNone, Always, TestOutputFalse (
656       [["is_launching"]])],
657    "is launching subprocess",
658    "\
659 This returns true iff this handle is launching the subprocess
660 (in the C<LAUNCHING> state).
661
662 For more information on states, see L<guestfs(3)>.");
663
664   ("is_busy", (RBool "busy", []), -1, [],
665    [InitNone, Always, TestOutputFalse (
666       [["is_busy"]])],
667    "is busy processing a command",
668    "\
669 This returns true iff this handle is busy processing a command
670 (in the C<BUSY> state).
671
672 For more information on states, see L<guestfs(3)>.");
673
674   ("get_state", (RInt "state", []), -1, [],
675    [],
676    "get the current state",
677    "\
678 This returns the current state as an opaque integer.  This is
679 only useful for printing debug and internal error messages.
680
681 For more information on states, see L<guestfs(3)>.");
682
683   ("set_busy", (RErr, []), -1, [NotInFish],
684    [],
685    "set state to busy",
686    "\
687 This sets the state to C<BUSY>.  This is only used when implementing
688 actions using the low-level API.
689
690 For more information on states, see L<guestfs(3)>.");
691
692   ("set_ready", (RErr, []), -1, [NotInFish],
693    [],
694    "set state to ready",
695    "\
696 This sets the state to C<READY>.  This is only used when implementing
697 actions using the low-level API.
698
699 For more information on states, see L<guestfs(3)>.");
700
701   ("end_busy", (RErr, []), -1, [NotInFish],
702    [],
703    "leave the busy state",
704    "\
705 This sets the state to C<READY>, or if in C<CONFIG> then it leaves the
706 state as is.  This is only used when implementing
707 actions using the low-level API.
708
709 For more information on states, see L<guestfs(3)>.");
710
711   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
712    [InitNone, Always, TestOutputInt (
713       [["set_memsize"; "500"];
714        ["get_memsize"]], 500)],
715    "set memory allocated to the qemu subprocess",
716    "\
717 This sets the memory size in megabytes allocated to the
718 qemu subprocess.  This only has any effect if called before
719 C<guestfs_launch>.
720
721 You can also change this by setting the environment
722 variable C<LIBGUESTFS_MEMSIZE> before the handle is
723 created.
724
725 For more information on the architecture of libguestfs,
726 see L<guestfs(3)>.");
727
728   ("get_memsize", (RInt "memsize", []), -1, [],
729    [InitNone, Always, TestOutputIntOp (
730       [["get_memsize"]], ">=", 256)],
731    "get memory allocated to the qemu subprocess",
732    "\
733 This gets the memory size in megabytes allocated to the
734 qemu subprocess.
735
736 If C<guestfs_set_memsize> was not called
737 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
738 then this returns the compiled-in default value for memsize.
739
740 For more information on the architecture of libguestfs,
741 see L<guestfs(3)>.");
742
743   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
744    [InitNone, Always, TestOutputIntOp (
745       [["get_pid"]], ">=", 1)],
746    "get PID of qemu subprocess",
747    "\
748 Return the process ID of the qemu subprocess.  If there is no
749 qemu subprocess, then this will return an error.
750
751 This is an internal call used for debugging and testing.");
752
753   ("version", (RStruct ("version", "version"), []), -1, [],
754    [InitNone, Always, TestOutputStruct (
755       [["version"]], [CompareWithInt ("major", 1)])],
756    "get the library version number",
757    "\
758 Return the libguestfs version number that the program is linked
759 against.
760
761 Note that because of dynamic linking this is not necessarily
762 the version of libguestfs that you compiled against.  You can
763 compile the program, and then at runtime dynamically link
764 against a completely different C<libguestfs.so> library.
765
766 This call was added in version C<1.0.58>.  In previous
767 versions of libguestfs there was no way to get the version
768 number.  From C code you can use ELF weak linking tricks to find out if
769 this symbol exists (if it doesn't, then it's an earlier version).
770
771 The call returns a structure with four elements.  The first
772 three (C<major>, C<minor> and C<release>) are numbers and
773 correspond to the usual version triplet.  The fourth element
774 (C<extra>) is a string and is normally empty, but may be
775 used for distro-specific information.
776
777 To construct the original version string:
778 C<$major.$minor.$release$extra>
779
780 I<Note:> Don't use this call to test for availability
781 of features.  Distro backports makes this unreliable.");
782
783   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
784    [InitNone, Always, TestOutputTrue (
785       [["set_selinux"; "true"];
786        ["get_selinux"]])],
787    "set SELinux enabled or disabled at appliance boot",
788    "\
789 This sets the selinux flag that is passed to the appliance
790 at boot time.  The default is C<selinux=0> (disabled).
791
792 Note that if SELinux is enabled, it is always in
793 Permissive mode (C<enforcing=0>).
794
795 For more information on the architecture of libguestfs,
796 see L<guestfs(3)>.");
797
798   ("get_selinux", (RBool "selinux", []), -1, [],
799    [],
800    "get SELinux enabled flag",
801    "\
802 This returns the current setting of the selinux flag which
803 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
804
805 For more information on the architecture of libguestfs,
806 see L<guestfs(3)>.");
807
808 ]
809
810 (* daemon_functions are any functions which cause some action
811  * to take place in the daemon.
812  *)
813
814 let daemon_functions = [
815   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
816    [InitEmpty, Always, TestOutput (
817       [["sfdiskM"; "/dev/sda"; ","];
818        ["mkfs"; "ext2"; "/dev/sda1"];
819        ["mount"; "/dev/sda1"; "/"];
820        ["write_file"; "/new"; "new file contents"; "0"];
821        ["cat"; "/new"]], "new file contents")],
822    "mount a guest disk at a position in the filesystem",
823    "\
824 Mount a guest disk at a position in the filesystem.  Block devices
825 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
826 the guest.  If those block devices contain partitions, they will have
827 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
828 names can be used.
829
830 The rules are the same as for L<mount(2)>:  A filesystem must
831 first be mounted on C</> before others can be mounted.  Other
832 filesystems can only be mounted on directories which already
833 exist.
834
835 The mounted filesystem is writable, if we have sufficient permissions
836 on the underlying device.
837
838 The filesystem options C<sync> and C<noatime> are set with this
839 call, in order to improve reliability.");
840
841   ("sync", (RErr, []), 2, [],
842    [ InitEmpty, Always, TestRun [["sync"]]],
843    "sync disks, writes are flushed through to the disk image",
844    "\
845 This syncs the disk, so that any writes are flushed through to the
846 underlying disk image.
847
848 You should always call this if you have modified a disk image, before
849 closing the handle.");
850
851   ("touch", (RErr, [Pathname "path"]), 3, [],
852    [InitBasicFS, Always, TestOutputTrue (
853       [["touch"; "/new"];
854        ["exists"; "/new"]])],
855    "update file timestamps or create a new file",
856    "\
857 Touch acts like the L<touch(1)> command.  It can be used to
858 update the timestamps on a file, or, if the file does not exist,
859 to create a new zero-length file.");
860
861   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
862    [InitSquashFS, Always, TestOutput (
863       [["cat"; "/known-2"]], "abcdef\n")],
864    "list the contents of a file",
865    "\
866 Return the contents of the file named C<path>.
867
868 Note that this function cannot correctly handle binary files
869 (specifically, files containing C<\\0> character which is treated
870 as end of string).  For those you need to use the C<guestfs_read_file>
871 or C<guestfs_download> functions which have a more complex interface.");
872
873   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
874    [], (* XXX Tricky to test because it depends on the exact format
875         * of the 'ls -l' command, which changes between F10 and F11.
876         *)
877    "list the files in a directory (long format)",
878    "\
879 List the files in C<directory> (relative to the root directory,
880 there is no cwd) in the format of 'ls -la'.
881
882 This command is mostly useful for interactive sessions.  It
883 is I<not> intended that you try to parse the output string.");
884
885   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
886    [InitBasicFS, Always, TestOutputList (
887       [["touch"; "/new"];
888        ["touch"; "/newer"];
889        ["touch"; "/newest"];
890        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
891    "list the files in a directory",
892    "\
893 List the files in C<directory> (relative to the root directory,
894 there is no cwd).  The '.' and '..' entries are not returned, but
895 hidden files are shown.
896
897 This command is mostly useful for interactive sessions.  Programs
898 should probably use C<guestfs_readdir> instead.");
899
900   ("list_devices", (RStringList "devices", []), 7, [],
901    [InitEmpty, Always, TestOutputListOfDevices (
902       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
903    "list the block devices",
904    "\
905 List all the block devices.
906
907 The full block device names are returned, eg. C</dev/sda>");
908
909   ("list_partitions", (RStringList "partitions", []), 8, [],
910    [InitBasicFS, Always, TestOutputListOfDevices (
911       [["list_partitions"]], ["/dev/sda1"]);
912     InitEmpty, Always, TestOutputListOfDevices (
913       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
914        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
915    "list the partitions",
916    "\
917 List all the partitions detected on all block devices.
918
919 The full partition device names are returned, eg. C</dev/sda1>
920
921 This does not return logical volumes.  For that you will need to
922 call C<guestfs_lvs>.");
923
924   ("pvs", (RStringList "physvols", []), 9, [],
925    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
926       [["pvs"]], ["/dev/sda1"]);
927     InitEmpty, Always, TestOutputListOfDevices (
928       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
929        ["pvcreate"; "/dev/sda1"];
930        ["pvcreate"; "/dev/sda2"];
931        ["pvcreate"; "/dev/sda3"];
932        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
933    "list the LVM physical volumes (PVs)",
934    "\
935 List all the physical volumes detected.  This is the equivalent
936 of the L<pvs(8)> command.
937
938 This returns a list of just the device names that contain
939 PVs (eg. C</dev/sda2>).
940
941 See also C<guestfs_pvs_full>.");
942
943   ("vgs", (RStringList "volgroups", []), 10, [],
944    [InitBasicFSonLVM, Always, TestOutputList (
945       [["vgs"]], ["VG"]);
946     InitEmpty, Always, TestOutputList (
947       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
948        ["pvcreate"; "/dev/sda1"];
949        ["pvcreate"; "/dev/sda2"];
950        ["pvcreate"; "/dev/sda3"];
951        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
952        ["vgcreate"; "VG2"; "/dev/sda3"];
953        ["vgs"]], ["VG1"; "VG2"])],
954    "list the LVM volume groups (VGs)",
955    "\
956 List all the volumes groups detected.  This is the equivalent
957 of the L<vgs(8)> command.
958
959 This returns a list of just the volume group names that were
960 detected (eg. C<VolGroup00>).
961
962 See also C<guestfs_vgs_full>.");
963
964   ("lvs", (RStringList "logvols", []), 11, [],
965    [InitBasicFSonLVM, Always, TestOutputList (
966       [["lvs"]], ["/dev/VG/LV"]);
967     InitEmpty, Always, TestOutputList (
968       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
969        ["pvcreate"; "/dev/sda1"];
970        ["pvcreate"; "/dev/sda2"];
971        ["pvcreate"; "/dev/sda3"];
972        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
973        ["vgcreate"; "VG2"; "/dev/sda3"];
974        ["lvcreate"; "LV1"; "VG1"; "50"];
975        ["lvcreate"; "LV2"; "VG1"; "50"];
976        ["lvcreate"; "LV3"; "VG2"; "50"];
977        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
978    "list the LVM logical volumes (LVs)",
979    "\
980 List all the logical volumes detected.  This is the equivalent
981 of the L<lvs(8)> command.
982
983 This returns a list of the logical volume device names
984 (eg. C</dev/VolGroup00/LogVol00>).
985
986 See also C<guestfs_lvs_full>.");
987
988   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [],
989    [], (* XXX how to test? *)
990    "list the LVM physical volumes (PVs)",
991    "\
992 List all the physical volumes detected.  This is the equivalent
993 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
994
995   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [],
996    [], (* XXX how to test? *)
997    "list the LVM volume groups (VGs)",
998    "\
999 List all the volumes groups detected.  This is the equivalent
1000 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1001
1002   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [],
1003    [], (* XXX how to test? *)
1004    "list the LVM logical volumes (LVs)",
1005    "\
1006 List all the logical volumes detected.  This is the equivalent
1007 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1008
1009   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1010    [InitSquashFS, Always, TestOutputList (
1011       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1012     InitSquashFS, Always, TestOutputList (
1013       [["read_lines"; "/empty"]], [])],
1014    "read file as lines",
1015    "\
1016 Return the contents of the file named C<path>.
1017
1018 The file contents are returned as a list of lines.  Trailing
1019 C<LF> and C<CRLF> character sequences are I<not> returned.
1020
1021 Note that this function cannot correctly handle binary files
1022 (specifically, files containing C<\\0> character which is treated
1023 as end of line).  For those you need to use the C<guestfs_read_file>
1024 function which has a more complex interface.");
1025
1026   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [],
1027    [], (* XXX Augeas code needs tests. *)
1028    "create a new Augeas handle",
1029    "\
1030 Create a new Augeas handle for editing configuration files.
1031 If there was any previous Augeas handle associated with this
1032 guestfs session, then it is closed.
1033
1034 You must call this before using any other C<guestfs_aug_*>
1035 commands.
1036
1037 C<root> is the filesystem root.  C<root> must not be NULL,
1038 use C</> instead.
1039
1040 The flags are the same as the flags defined in
1041 E<lt>augeas.hE<gt>, the logical I<or> of the following
1042 integers:
1043
1044 =over 4
1045
1046 =item C<AUG_SAVE_BACKUP> = 1
1047
1048 Keep the original file with a C<.augsave> extension.
1049
1050 =item C<AUG_SAVE_NEWFILE> = 2
1051
1052 Save changes into a file with extension C<.augnew>, and
1053 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1054
1055 =item C<AUG_TYPE_CHECK> = 4
1056
1057 Typecheck lenses (can be expensive).
1058
1059 =item C<AUG_NO_STDINC> = 8
1060
1061 Do not use standard load path for modules.
1062
1063 =item C<AUG_SAVE_NOOP> = 16
1064
1065 Make save a no-op, just record what would have been changed.
1066
1067 =item C<AUG_NO_LOAD> = 32
1068
1069 Do not load the tree in C<guestfs_aug_init>.
1070
1071 =back
1072
1073 To close the handle, you can call C<guestfs_aug_close>.
1074
1075 To find out more about Augeas, see L<http://augeas.net/>.");
1076
1077   ("aug_close", (RErr, []), 26, [],
1078    [], (* XXX Augeas code needs tests. *)
1079    "close the current Augeas handle",
1080    "\
1081 Close the current Augeas handle and free up any resources
1082 used by it.  After calling this, you have to call
1083 C<guestfs_aug_init> again before you can use any other
1084 Augeas functions.");
1085
1086   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [],
1087    [], (* XXX Augeas code needs tests. *)
1088    "define an Augeas variable",
1089    "\
1090 Defines an Augeas variable C<name> whose value is the result
1091 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1092 undefined.
1093
1094 On success this returns the number of nodes in C<expr>, or
1095 C<0> if C<expr> evaluates to something which is not a nodeset.");
1096
1097   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [],
1098    [], (* XXX Augeas code needs tests. *)
1099    "define an Augeas node",
1100    "\
1101 Defines a variable C<name> whose value is the result of
1102 evaluating C<expr>.
1103
1104 If C<expr> evaluates to an empty nodeset, a node is created,
1105 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1106 C<name> will be the nodeset containing that single node.
1107
1108 On success this returns a pair containing the
1109 number of nodes in the nodeset, and a boolean flag
1110 if a node was created.");
1111
1112   ("aug_get", (RString "val", [String "augpath"]), 19, [],
1113    [], (* XXX Augeas code needs tests. *)
1114    "look up the value of an Augeas path",
1115    "\
1116 Look up the value associated with C<path>.  If C<path>
1117 matches exactly one node, the C<value> is returned.");
1118
1119   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [],
1120    [], (* XXX Augeas code needs tests. *)
1121    "set Augeas path to value",
1122    "\
1123 Set the value associated with C<path> to C<value>.");
1124
1125   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [],
1126    [], (* XXX Augeas code needs tests. *)
1127    "insert a sibling Augeas node",
1128    "\
1129 Create a new sibling C<label> for C<path>, inserting it into
1130 the tree before or after C<path> (depending on the boolean
1131 flag C<before>).
1132
1133 C<path> must match exactly one existing node in the tree, and
1134 C<label> must be a label, ie. not contain C</>, C<*> or end
1135 with a bracketed index C<[N]>.");
1136
1137   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [],
1138    [], (* XXX Augeas code needs tests. *)
1139    "remove an Augeas path",
1140    "\
1141 Remove C<path> and all of its children.
1142
1143 On success this returns the number of entries which were removed.");
1144
1145   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [],
1146    [], (* XXX Augeas code needs tests. *)
1147    "move Augeas node",
1148    "\
1149 Move the node C<src> to C<dest>.  C<src> must match exactly
1150 one node.  C<dest> is overwritten if it exists.");
1151
1152   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [],
1153    [], (* XXX Augeas code needs tests. *)
1154    "return Augeas nodes which match augpath",
1155    "\
1156 Returns a list of paths which match the path expression C<path>.
1157 The returned paths are sufficiently qualified so that they match
1158 exactly one node in the current tree.");
1159
1160   ("aug_save", (RErr, []), 25, [],
1161    [], (* XXX Augeas code needs tests. *)
1162    "write all pending Augeas changes to disk",
1163    "\
1164 This writes all pending changes to disk.
1165
1166 The flags which were passed to C<guestfs_aug_init> affect exactly
1167 how files are saved.");
1168
1169   ("aug_load", (RErr, []), 27, [],
1170    [], (* XXX Augeas code needs tests. *)
1171    "load files into the tree",
1172    "\
1173 Load files into the tree.
1174
1175 See C<aug_load> in the Augeas documentation for the full gory
1176 details.");
1177
1178   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [],
1179    [], (* XXX Augeas code needs tests. *)
1180    "list Augeas nodes under augpath",
1181    "\
1182 This is just a shortcut for listing C<guestfs_aug_match>
1183 C<path/*> and sorting the resulting nodes into alphabetical order.");
1184
1185   ("rm", (RErr, [Pathname "path"]), 29, [],
1186    [InitBasicFS, Always, TestRun
1187       [["touch"; "/new"];
1188        ["rm"; "/new"]];
1189     InitBasicFS, Always, TestLastFail
1190       [["rm"; "/new"]];
1191     InitBasicFS, Always, TestLastFail
1192       [["mkdir"; "/new"];
1193        ["rm"; "/new"]]],
1194    "remove a file",
1195    "\
1196 Remove the single file C<path>.");
1197
1198   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1199    [InitBasicFS, Always, TestRun
1200       [["mkdir"; "/new"];
1201        ["rmdir"; "/new"]];
1202     InitBasicFS, Always, TestLastFail
1203       [["rmdir"; "/new"]];
1204     InitBasicFS, Always, TestLastFail
1205       [["touch"; "/new"];
1206        ["rmdir"; "/new"]]],
1207    "remove a directory",
1208    "\
1209 Remove the single directory C<path>.");
1210
1211   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1212    [InitBasicFS, Always, TestOutputFalse
1213       [["mkdir"; "/new"];
1214        ["mkdir"; "/new/foo"];
1215        ["touch"; "/new/foo/bar"];
1216        ["rm_rf"; "/new"];
1217        ["exists"; "/new"]]],
1218    "remove a file or directory recursively",
1219    "\
1220 Remove the file or directory C<path>, recursively removing the
1221 contents if its a directory.  This is like the C<rm -rf> shell
1222 command.");
1223
1224   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1225    [InitBasicFS, Always, TestOutputTrue
1226       [["mkdir"; "/new"];
1227        ["is_dir"; "/new"]];
1228     InitBasicFS, Always, TestLastFail
1229       [["mkdir"; "/new/foo/bar"]]],
1230    "create a directory",
1231    "\
1232 Create a directory named C<path>.");
1233
1234   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1235    [InitBasicFS, Always, TestOutputTrue
1236       [["mkdir_p"; "/new/foo/bar"];
1237        ["is_dir"; "/new/foo/bar"]];
1238     InitBasicFS, Always, TestOutputTrue
1239       [["mkdir_p"; "/new/foo/bar"];
1240        ["is_dir"; "/new/foo"]];
1241     InitBasicFS, Always, TestOutputTrue
1242       [["mkdir_p"; "/new/foo/bar"];
1243        ["is_dir"; "/new"]];
1244     (* Regression tests for RHBZ#503133: *)
1245     InitBasicFS, Always, TestRun
1246       [["mkdir"; "/new"];
1247        ["mkdir_p"; "/new"]];
1248     InitBasicFS, Always, TestLastFail
1249       [["touch"; "/new"];
1250        ["mkdir_p"; "/new"]]],
1251    "create a directory and parents",
1252    "\
1253 Create a directory named C<path>, creating any parent directories
1254 as necessary.  This is like the C<mkdir -p> shell command.");
1255
1256   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1257    [], (* XXX Need stat command to test *)
1258    "change file mode",
1259    "\
1260 Change the mode (permissions) of C<path> to C<mode>.  Only
1261 numeric modes are supported.");
1262
1263   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1264    [], (* XXX Need stat command to test *)
1265    "change file owner and group",
1266    "\
1267 Change the file owner to C<owner> and group to C<group>.
1268
1269 Only numeric uid and gid are supported.  If you want to use
1270 names, you will need to locate and parse the password file
1271 yourself (Augeas support makes this relatively easy).");
1272
1273   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1274    [InitSquashFS, Always, TestOutputTrue (
1275       [["exists"; "/empty"]]);
1276     InitSquashFS, Always, TestOutputTrue (
1277       [["exists"; "/directory"]])],
1278    "test if file or directory exists",
1279    "\
1280 This returns C<true> if and only if there is a file, directory
1281 (or anything) with the given C<path> name.
1282
1283 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1284
1285   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1286    [InitSquashFS, Always, TestOutputTrue (
1287       [["is_file"; "/known-1"]]);
1288     InitSquashFS, Always, TestOutputFalse (
1289       [["is_file"; "/directory"]])],
1290    "test if file exists",
1291    "\
1292 This returns C<true> if and only if there is a file
1293 with the given C<path> name.  Note that it returns false for
1294 other objects like directories.
1295
1296 See also C<guestfs_stat>.");
1297
1298   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1299    [InitSquashFS, Always, TestOutputFalse (
1300       [["is_dir"; "/known-3"]]);
1301     InitSquashFS, Always, TestOutputTrue (
1302       [["is_dir"; "/directory"]])],
1303    "test if file exists",
1304    "\
1305 This returns C<true> if and only if there is a directory
1306 with the given C<path> name.  Note that it returns false for
1307 other objects like files.
1308
1309 See also C<guestfs_stat>.");
1310
1311   ("pvcreate", (RErr, [Device "device"]), 39, [],
1312    [InitEmpty, Always, TestOutputListOfDevices (
1313       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1314        ["pvcreate"; "/dev/sda1"];
1315        ["pvcreate"; "/dev/sda2"];
1316        ["pvcreate"; "/dev/sda3"];
1317        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1318    "create an LVM physical volume",
1319    "\
1320 This creates an LVM physical volume on the named C<device>,
1321 where C<device> should usually be a partition name such
1322 as C</dev/sda1>.");
1323
1324   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [],
1325    [InitEmpty, Always, TestOutputList (
1326       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1327        ["pvcreate"; "/dev/sda1"];
1328        ["pvcreate"; "/dev/sda2"];
1329        ["pvcreate"; "/dev/sda3"];
1330        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1331        ["vgcreate"; "VG2"; "/dev/sda3"];
1332        ["vgs"]], ["VG1"; "VG2"])],
1333    "create an LVM volume group",
1334    "\
1335 This creates an LVM volume group called C<volgroup>
1336 from the non-empty list of physical volumes C<physvols>.");
1337
1338   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [],
1339    [InitEmpty, Always, TestOutputList (
1340       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1341        ["pvcreate"; "/dev/sda1"];
1342        ["pvcreate"; "/dev/sda2"];
1343        ["pvcreate"; "/dev/sda3"];
1344        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1345        ["vgcreate"; "VG2"; "/dev/sda3"];
1346        ["lvcreate"; "LV1"; "VG1"; "50"];
1347        ["lvcreate"; "LV2"; "VG1"; "50"];
1348        ["lvcreate"; "LV3"; "VG2"; "50"];
1349        ["lvcreate"; "LV4"; "VG2"; "50"];
1350        ["lvcreate"; "LV5"; "VG2"; "50"];
1351        ["lvs"]],
1352       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1353        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1354    "create an LVM volume group",
1355    "\
1356 This creates an LVM volume group called C<logvol>
1357 on the volume group C<volgroup>, with C<size> megabytes.");
1358
1359   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1360    [InitEmpty, Always, TestOutput (
1361       [["sfdiskM"; "/dev/sda"; ","];
1362        ["mkfs"; "ext2"; "/dev/sda1"];
1363        ["mount"; "/dev/sda1"; "/"];
1364        ["write_file"; "/new"; "new file contents"; "0"];
1365        ["cat"; "/new"]], "new file contents")],
1366    "make a filesystem",
1367    "\
1368 This creates a filesystem on C<device> (usually a partition
1369 or LVM logical volume).  The filesystem type is C<fstype>, for
1370 example C<ext3>.");
1371
1372   ("sfdisk", (RErr, [Device "device";
1373                      Int "cyls"; Int "heads"; Int "sectors";
1374                      StringList "lines"]), 43, [DangerWillRobinson],
1375    [],
1376    "create partitions on a block device",
1377    "\
1378 This is a direct interface to the L<sfdisk(8)> program for creating
1379 partitions on block devices.
1380
1381 C<device> should be a block device, for example C</dev/sda>.
1382
1383 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1384 and sectors on the device, which are passed directly to sfdisk as
1385 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1386 of these, then the corresponding parameter is omitted.  Usually for
1387 'large' disks, you can just pass C<0> for these, but for small
1388 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1389 out the right geometry and you will need to tell it.
1390
1391 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1392 information refer to the L<sfdisk(8)> manpage.
1393
1394 To create a single partition occupying the whole disk, you would
1395 pass C<lines> as a single element list, when the single element being
1396 the string C<,> (comma).
1397
1398 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>");
1399
1400   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning],
1401    [InitBasicFS, Always, TestOutput (
1402       [["write_file"; "/new"; "new file contents"; "0"];
1403        ["cat"; "/new"]], "new file contents");
1404     InitBasicFS, Always, TestOutput (
1405       [["write_file"; "/new"; "\nnew file contents\n"; "0"];
1406        ["cat"; "/new"]], "\nnew file contents\n");
1407     InitBasicFS, Always, TestOutput (
1408       [["write_file"; "/new"; "\n\n"; "0"];
1409        ["cat"; "/new"]], "\n\n");
1410     InitBasicFS, Always, TestOutput (
1411       [["write_file"; "/new"; ""; "0"];
1412        ["cat"; "/new"]], "");
1413     InitBasicFS, Always, TestOutput (
1414       [["write_file"; "/new"; "\n\n\n"; "0"];
1415        ["cat"; "/new"]], "\n\n\n");
1416     InitBasicFS, Always, TestOutput (
1417       [["write_file"; "/new"; "\n"; "0"];
1418        ["cat"; "/new"]], "\n")],
1419    "create a file",
1420    "\
1421 This call creates a file called C<path>.  The contents of the
1422 file is the string C<content> (which can contain any 8 bit data),
1423 with length C<size>.
1424
1425 As a special case, if C<size> is C<0>
1426 then the length is calculated using C<strlen> (so in this case
1427 the content cannot contain embedded ASCII NULs).
1428
1429 I<NB.> Owing to a bug, writing content containing ASCII NUL
1430 characters does I<not> work, even if the length is specified.
1431 We hope to resolve this bug in a future version.  In the meantime
1432 use C<guestfs_upload>.");
1433
1434   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1435    [InitEmpty, Always, TestOutputListOfDevices (
1436       [["sfdiskM"; "/dev/sda"; ","];
1437        ["mkfs"; "ext2"; "/dev/sda1"];
1438        ["mount"; "/dev/sda1"; "/"];
1439        ["mounts"]], ["/dev/sda1"]);
1440     InitEmpty, Always, TestOutputList (
1441       [["sfdiskM"; "/dev/sda"; ","];
1442        ["mkfs"; "ext2"; "/dev/sda1"];
1443        ["mount"; "/dev/sda1"; "/"];
1444        ["umount"; "/"];
1445        ["mounts"]], [])],
1446    "unmount a filesystem",
1447    "\
1448 This unmounts the given filesystem.  The filesystem may be
1449 specified either by its mountpoint (path) or the device which
1450 contains the filesystem.");
1451
1452   ("mounts", (RStringList "devices", []), 46, [],
1453    [InitBasicFS, Always, TestOutputListOfDevices (
1454       [["mounts"]], ["/dev/sda1"])],
1455    "show mounted filesystems",
1456    "\
1457 This returns the list of currently mounted filesystems.  It returns
1458 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1459
1460 Some internal mounts are not shown.
1461
1462 See also: C<guestfs_mountpoints>");
1463
1464   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1465    [InitBasicFS, Always, TestOutputList (
1466       [["umount_all"];
1467        ["mounts"]], []);
1468     (* check that umount_all can unmount nested mounts correctly: *)
1469     InitEmpty, Always, TestOutputList (
1470       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1471        ["mkfs"; "ext2"; "/dev/sda1"];
1472        ["mkfs"; "ext2"; "/dev/sda2"];
1473        ["mkfs"; "ext2"; "/dev/sda3"];
1474        ["mount"; "/dev/sda1"; "/"];
1475        ["mkdir"; "/mp1"];
1476        ["mount"; "/dev/sda2"; "/mp1"];
1477        ["mkdir"; "/mp1/mp2"];
1478        ["mount"; "/dev/sda3"; "/mp1/mp2"];
1479        ["mkdir"; "/mp1/mp2/mp3"];
1480        ["umount_all"];
1481        ["mounts"]], [])],
1482    "unmount all filesystems",
1483    "\
1484 This unmounts all mounted filesystems.
1485
1486 Some internal mounts are not unmounted by this call.");
1487
1488   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson],
1489    [],
1490    "remove all LVM LVs, VGs and PVs",
1491    "\
1492 This command removes all LVM logical volumes, volume groups
1493 and physical volumes.");
1494
1495   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1496    [InitSquashFS, Always, TestOutput (
1497       [["file"; "/empty"]], "empty");
1498     InitSquashFS, Always, TestOutput (
1499       [["file"; "/known-1"]], "ASCII text");
1500     InitSquashFS, Always, TestLastFail (
1501       [["file"; "/notexists"]])],
1502    "determine file type",
1503    "\
1504 This call uses the standard L<file(1)> command to determine
1505 the type or contents of the file.  This also works on devices,
1506 for example to find out whether a partition contains a filesystem.
1507
1508 This call will also transparently look inside various types
1509 of compressed file.
1510
1511 The exact command which runs is C<file -zbsL path>.  Note in
1512 particular that the filename is not prepended to the output
1513 (the C<-b> option).");
1514
1515   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1516    [InitBasicFS, Always, TestOutput (
1517       [["upload"; "test-command"; "/test-command"];
1518        ["chmod"; "0o755"; "/test-command"];
1519        ["command"; "/test-command 1"]], "Result1");
1520     InitBasicFS, Always, TestOutput (
1521       [["upload"; "test-command"; "/test-command"];
1522        ["chmod"; "0o755"; "/test-command"];
1523        ["command"; "/test-command 2"]], "Result2\n");
1524     InitBasicFS, Always, TestOutput (
1525       [["upload"; "test-command"; "/test-command"];
1526        ["chmod"; "0o755"; "/test-command"];
1527        ["command"; "/test-command 3"]], "\nResult3");
1528     InitBasicFS, Always, TestOutput (
1529       [["upload"; "test-command"; "/test-command"];
1530        ["chmod"; "0o755"; "/test-command"];
1531        ["command"; "/test-command 4"]], "\nResult4\n");
1532     InitBasicFS, Always, TestOutput (
1533       [["upload"; "test-command"; "/test-command"];
1534        ["chmod"; "0o755"; "/test-command"];
1535        ["command"; "/test-command 5"]], "\nResult5\n\n");
1536     InitBasicFS, Always, TestOutput (
1537       [["upload"; "test-command"; "/test-command"];
1538        ["chmod"; "0o755"; "/test-command"];
1539        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1540     InitBasicFS, Always, TestOutput (
1541       [["upload"; "test-command"; "/test-command"];
1542        ["chmod"; "0o755"; "/test-command"];
1543        ["command"; "/test-command 7"]], "");
1544     InitBasicFS, Always, TestOutput (
1545       [["upload"; "test-command"; "/test-command"];
1546        ["chmod"; "0o755"; "/test-command"];
1547        ["command"; "/test-command 8"]], "\n");
1548     InitBasicFS, Always, TestOutput (
1549       [["upload"; "test-command"; "/test-command"];
1550        ["chmod"; "0o755"; "/test-command"];
1551        ["command"; "/test-command 9"]], "\n\n");
1552     InitBasicFS, Always, TestOutput (
1553       [["upload"; "test-command"; "/test-command"];
1554        ["chmod"; "0o755"; "/test-command"];
1555        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1556     InitBasicFS, Always, TestOutput (
1557       [["upload"; "test-command"; "/test-command"];
1558        ["chmod"; "0o755"; "/test-command"];
1559        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1560     InitBasicFS, Always, TestLastFail (
1561       [["upload"; "test-command"; "/test-command"];
1562        ["chmod"; "0o755"; "/test-command"];
1563        ["command"; "/test-command"]])],
1564    "run a command from the guest filesystem",
1565    "\
1566 This call runs a command from the guest filesystem.  The
1567 filesystem must be mounted, and must contain a compatible
1568 operating system (ie. something Linux, with the same
1569 or compatible processor architecture).
1570
1571 The single parameter is an argv-style list of arguments.
1572 The first element is the name of the program to run.
1573 Subsequent elements are parameters.  The list must be
1574 non-empty (ie. must contain a program name).  Note that
1575 the command runs directly, and is I<not> invoked via
1576 the shell (see C<guestfs_sh>).
1577
1578 The return value is anything printed to I<stdout> by
1579 the command.
1580
1581 If the command returns a non-zero exit status, then
1582 this function returns an error message.  The error message
1583 string is the content of I<stderr> from the command.
1584
1585 The C<$PATH> environment variable will contain at least
1586 C</usr/bin> and C</bin>.  If you require a program from
1587 another location, you should provide the full path in the
1588 first parameter.
1589
1590 Shared libraries and data files required by the program
1591 must be available on filesystems which are mounted in the
1592 correct places.  It is the caller's responsibility to ensure
1593 all filesystems that are needed are mounted at the right
1594 locations.");
1595
1596   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1597    [InitBasicFS, Always, TestOutputList (
1598       [["upload"; "test-command"; "/test-command"];
1599        ["chmod"; "0o755"; "/test-command"];
1600        ["command_lines"; "/test-command 1"]], ["Result1"]);
1601     InitBasicFS, Always, TestOutputList (
1602       [["upload"; "test-command"; "/test-command"];
1603        ["chmod"; "0o755"; "/test-command"];
1604        ["command_lines"; "/test-command 2"]], ["Result2"]);
1605     InitBasicFS, Always, TestOutputList (
1606       [["upload"; "test-command"; "/test-command"];
1607        ["chmod"; "0o755"; "/test-command"];
1608        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1609     InitBasicFS, Always, TestOutputList (
1610       [["upload"; "test-command"; "/test-command"];
1611        ["chmod"; "0o755"; "/test-command"];
1612        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1613     InitBasicFS, Always, TestOutputList (
1614       [["upload"; "test-command"; "/test-command"];
1615        ["chmod"; "0o755"; "/test-command"];
1616        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1617     InitBasicFS, Always, TestOutputList (
1618       [["upload"; "test-command"; "/test-command"];
1619        ["chmod"; "0o755"; "/test-command"];
1620        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1621     InitBasicFS, Always, TestOutputList (
1622       [["upload"; "test-command"; "/test-command"];
1623        ["chmod"; "0o755"; "/test-command"];
1624        ["command_lines"; "/test-command 7"]], []);
1625     InitBasicFS, Always, TestOutputList (
1626       [["upload"; "test-command"; "/test-command"];
1627        ["chmod"; "0o755"; "/test-command"];
1628        ["command_lines"; "/test-command 8"]], [""]);
1629     InitBasicFS, Always, TestOutputList (
1630       [["upload"; "test-command"; "/test-command"];
1631        ["chmod"; "0o755"; "/test-command"];
1632        ["command_lines"; "/test-command 9"]], ["";""]);
1633     InitBasicFS, Always, TestOutputList (
1634       [["upload"; "test-command"; "/test-command"];
1635        ["chmod"; "0o755"; "/test-command"];
1636        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1637     InitBasicFS, Always, TestOutputList (
1638       [["upload"; "test-command"; "/test-command"];
1639        ["chmod"; "0o755"; "/test-command"];
1640        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1641    "run a command, returning lines",
1642    "\
1643 This is the same as C<guestfs_command>, but splits the
1644 result into a list of lines.
1645
1646 See also: C<guestfs_sh_lines>");
1647
1648   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1649    [InitSquashFS, Always, TestOutputStruct (
1650       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1651    "get file information",
1652    "\
1653 Returns file information for the given C<path>.
1654
1655 This is the same as the C<stat(2)> system call.");
1656
1657   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1658    [InitSquashFS, Always, TestOutputStruct (
1659       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1660    "get file information for a symbolic link",
1661    "\
1662 Returns file information for the given C<path>.
1663
1664 This is the same as C<guestfs_stat> except that if C<path>
1665 is a symbolic link, then the link is stat-ed, not the file it
1666 refers to.
1667
1668 This is the same as the C<lstat(2)> system call.");
1669
1670   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1671    [InitSquashFS, Always, TestOutputStruct (
1672       [["statvfs"; "/"]], [CompareWithInt ("namemax", 256)])],
1673    "get file system statistics",
1674    "\
1675 Returns file system statistics for any mounted file system.
1676 C<path> should be a file or directory in the mounted file system
1677 (typically it is the mount point itself, but it doesn't need to be).
1678
1679 This is the same as the C<statvfs(2)> system call.");
1680
1681   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1682    [], (* XXX test *)
1683    "get ext2/ext3/ext4 superblock details",
1684    "\
1685 This returns the contents of the ext2, ext3 or ext4 filesystem
1686 superblock on C<device>.
1687
1688 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1689 manpage for more details.  The list of fields returned isn't
1690 clearly defined, and depends on both the version of C<tune2fs>
1691 that libguestfs was built against, and the filesystem itself.");
1692
1693   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1694    [InitEmpty, Always, TestOutputTrue (
1695       [["blockdev_setro"; "/dev/sda"];
1696        ["blockdev_getro"; "/dev/sda"]])],
1697    "set block device to read-only",
1698    "\
1699 Sets the block device named C<device> to read-only.
1700
1701 This uses the L<blockdev(8)> command.");
1702
1703   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1704    [InitEmpty, Always, TestOutputFalse (
1705       [["blockdev_setrw"; "/dev/sda"];
1706        ["blockdev_getro"; "/dev/sda"]])],
1707    "set block device to read-write",
1708    "\
1709 Sets the block device named C<device> to read-write.
1710
1711 This uses the L<blockdev(8)> command.");
1712
1713   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1714    [InitEmpty, Always, TestOutputTrue (
1715       [["blockdev_setro"; "/dev/sda"];
1716        ["blockdev_getro"; "/dev/sda"]])],
1717    "is block device set to read-only",
1718    "\
1719 Returns a boolean indicating if the block device is read-only
1720 (true if read-only, false if not).
1721
1722 This uses the L<blockdev(8)> command.");
1723
1724   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1725    [InitEmpty, Always, TestOutputInt (
1726       [["blockdev_getss"; "/dev/sda"]], 512)],
1727    "get sectorsize of block device",
1728    "\
1729 This returns the size of sectors on a block device.
1730 Usually 512, but can be larger for modern devices.
1731
1732 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1733 for that).
1734
1735 This uses the L<blockdev(8)> command.");
1736
1737   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1738    [InitEmpty, Always, TestOutputInt (
1739       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1740    "get blocksize of block device",
1741    "\
1742 This returns the block size of a device.
1743
1744 (Note this is different from both I<size in blocks> and
1745 I<filesystem block size>).
1746
1747 This uses the L<blockdev(8)> command.");
1748
1749   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1750    [], (* XXX test *)
1751    "set blocksize of block device",
1752    "\
1753 This sets the block size of a device.
1754
1755 (Note this is different from both I<size in blocks> and
1756 I<filesystem block size>).
1757
1758 This uses the L<blockdev(8)> command.");
1759
1760   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1761    [InitEmpty, Always, TestOutputInt (
1762       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1763    "get total size of device in 512-byte sectors",
1764    "\
1765 This returns the size of the device in units of 512-byte sectors
1766 (even if the sectorsize isn't 512 bytes ... weird).
1767
1768 See also C<guestfs_blockdev_getss> for the real sector size of
1769 the device, and C<guestfs_blockdev_getsize64> for the more
1770 useful I<size in bytes>.
1771
1772 This uses the L<blockdev(8)> command.");
1773
1774   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1775    [InitEmpty, Always, TestOutputInt (
1776       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1777    "get total size of device in bytes",
1778    "\
1779 This returns the size of the device in bytes.
1780
1781 See also C<guestfs_blockdev_getsz>.
1782
1783 This uses the L<blockdev(8)> command.");
1784
1785   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1786    [InitEmpty, Always, TestRun
1787       [["blockdev_flushbufs"; "/dev/sda"]]],
1788    "flush device buffers",
1789    "\
1790 This tells the kernel to flush internal buffers associated
1791 with C<device>.
1792
1793 This uses the L<blockdev(8)> command.");
1794
1795   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1796    [InitEmpty, Always, TestRun
1797       [["blockdev_rereadpt"; "/dev/sda"]]],
1798    "reread partition table",
1799    "\
1800 Reread the partition table on C<device>.
1801
1802 This uses the L<blockdev(8)> command.");
1803
1804   ("upload", (RErr, [FileIn "filename"; String "remotefilename"]), 66, [],
1805    [InitBasicFS, Always, TestOutput (
1806       (* Pick a file from cwd which isn't likely to change. *)
1807       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1808        ["checksum"; "md5"; "/COPYING.LIB"]],
1809         Digest.to_hex (Digest.file "COPYING.LIB"))],
1810    "upload a file from the local machine",
1811    "\
1812 Upload local file C<filename> to C<remotefilename> on the
1813 filesystem.
1814
1815 C<filename> can also be a named pipe.
1816
1817 See also C<guestfs_download>.");
1818
1819   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1820    [InitBasicFS, Always, TestOutput (
1821       (* Pick a file from cwd which isn't likely to change. *)
1822       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1823        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1824        ["upload"; "testdownload.tmp"; "/upload"];
1825        ["checksum"; "md5"; "/upload"]],
1826         Digest.to_hex (Digest.file "COPYING.LIB"))],
1827    "download a file to the local machine",
1828    "\
1829 Download file C<remotefilename> and save it as C<filename>
1830 on the local machine.
1831
1832 C<filename> can also be a named pipe.
1833
1834 See also C<guestfs_upload>, C<guestfs_cat>.");
1835
1836   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1837    [InitSquashFS, Always, TestOutput (
1838       [["checksum"; "crc"; "/known-3"]], "2891671662");
1839     InitSquashFS, Always, TestLastFail (
1840       [["checksum"; "crc"; "/notexists"]]);
1841     InitSquashFS, Always, TestOutput (
1842       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1843     InitSquashFS, Always, TestOutput (
1844       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1845     InitSquashFS, Always, TestOutput (
1846       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
1847     InitSquashFS, Always, TestOutput (
1848       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
1849     InitSquashFS, Always, TestOutput (
1850       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
1851     InitSquashFS, Always, TestOutput (
1852       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6")],
1853    "compute MD5, SHAx or CRC checksum of file",
1854    "\
1855 This call computes the MD5, SHAx or CRC checksum of the
1856 file named C<path>.
1857
1858 The type of checksum to compute is given by the C<csumtype>
1859 parameter which must have one of the following values:
1860
1861 =over 4
1862
1863 =item C<crc>
1864
1865 Compute the cyclic redundancy check (CRC) specified by POSIX
1866 for the C<cksum> command.
1867
1868 =item C<md5>
1869
1870 Compute the MD5 hash (using the C<md5sum> program).
1871
1872 =item C<sha1>
1873
1874 Compute the SHA1 hash (using the C<sha1sum> program).
1875
1876 =item C<sha224>
1877
1878 Compute the SHA224 hash (using the C<sha224sum> program).
1879
1880 =item C<sha256>
1881
1882 Compute the SHA256 hash (using the C<sha256sum> program).
1883
1884 =item C<sha384>
1885
1886 Compute the SHA384 hash (using the C<sha384sum> program).
1887
1888 =item C<sha512>
1889
1890 Compute the SHA512 hash (using the C<sha512sum> program).
1891
1892 =back
1893
1894 The checksum is returned as a printable string.");
1895
1896   ("tar_in", (RErr, [FileIn "tarfile"; String "directory"]), 69, [],
1897    [InitBasicFS, Always, TestOutput (
1898       [["tar_in"; "../images/helloworld.tar"; "/"];
1899        ["cat"; "/hello"]], "hello\n")],
1900    "unpack tarfile to directory",
1901    "\
1902 This command uploads and unpacks local file C<tarfile> (an
1903 I<uncompressed> tar file) into C<directory>.
1904
1905 To upload a compressed tarball, use C<guestfs_tgz_in>.");
1906
1907   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
1908    [],
1909    "pack directory into tarfile",
1910    "\
1911 This command packs the contents of C<directory> and downloads
1912 it to local file C<tarfile>.
1913
1914 To download a compressed tarball, use C<guestfs_tgz_out>.");
1915
1916   ("tgz_in", (RErr, [FileIn "tarball"; String "directory"]), 71, [],
1917    [InitBasicFS, Always, TestOutput (
1918       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
1919        ["cat"; "/hello"]], "hello\n")],
1920    "unpack compressed tarball to directory",
1921    "\
1922 This command uploads and unpacks local file C<tarball> (a
1923 I<gzip compressed> tar file) into C<directory>.
1924
1925 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
1926
1927   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
1928    [],
1929    "pack directory into compressed tarball",
1930    "\
1931 This command packs the contents of C<directory> and downloads
1932 it to local file C<tarball>.
1933
1934 To download an uncompressed tarball, use C<guestfs_tar_out>.");
1935
1936   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
1937    [InitBasicFS, Always, TestLastFail (
1938       [["umount"; "/"];
1939        ["mount_ro"; "/dev/sda1"; "/"];
1940        ["touch"; "/new"]]);
1941     InitBasicFS, Always, TestOutput (
1942       [["write_file"; "/new"; "data"; "0"];
1943        ["umount"; "/"];
1944        ["mount_ro"; "/dev/sda1"; "/"];
1945        ["cat"; "/new"]], "data")],
1946    "mount a guest disk, read-only",
1947    "\
1948 This is the same as the C<guestfs_mount> command, but it
1949 mounts the filesystem with the read-only (I<-o ro>) flag.");
1950
1951   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
1952    [],
1953    "mount a guest disk with mount options",
1954    "\
1955 This is the same as the C<guestfs_mount> command, but it
1956 allows you to set the mount options as for the
1957 L<mount(8)> I<-o> flag.");
1958
1959   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
1960    [],
1961    "mount a guest disk with mount options and vfstype",
1962    "\
1963 This is the same as the C<guestfs_mount> command, but it
1964 allows you to set both the mount options and the vfstype
1965 as for the L<mount(8)> I<-o> and I<-t> flags.");
1966
1967   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
1968    [],
1969    "debugging and internals",
1970    "\
1971 The C<guestfs_debug> command exposes some internals of
1972 C<guestfsd> (the guestfs daemon) that runs inside the
1973 qemu subprocess.
1974
1975 There is no comprehensive help for this command.  You have
1976 to look at the file C<daemon/debug.c> in the libguestfs source
1977 to find out what you can do.");
1978
1979   ("lvremove", (RErr, [Device "device"]), 77, [],
1980    [InitEmpty, Always, TestOutputList (
1981       [["sfdiskM"; "/dev/sda"; ","];
1982        ["pvcreate"; "/dev/sda1"];
1983        ["vgcreate"; "VG"; "/dev/sda1"];
1984        ["lvcreate"; "LV1"; "VG"; "50"];
1985        ["lvcreate"; "LV2"; "VG"; "50"];
1986        ["lvremove"; "/dev/VG/LV1"];
1987        ["lvs"]], ["/dev/VG/LV2"]);
1988     InitEmpty, Always, TestOutputList (
1989       [["sfdiskM"; "/dev/sda"; ","];
1990        ["pvcreate"; "/dev/sda1"];
1991        ["vgcreate"; "VG"; "/dev/sda1"];
1992        ["lvcreate"; "LV1"; "VG"; "50"];
1993        ["lvcreate"; "LV2"; "VG"; "50"];
1994        ["lvremove"; "/dev/VG"];
1995        ["lvs"]], []);
1996     InitEmpty, Always, TestOutputList (
1997       [["sfdiskM"; "/dev/sda"; ","];
1998        ["pvcreate"; "/dev/sda1"];
1999        ["vgcreate"; "VG"; "/dev/sda1"];
2000        ["lvcreate"; "LV1"; "VG"; "50"];
2001        ["lvcreate"; "LV2"; "VG"; "50"];
2002        ["lvremove"; "/dev/VG"];
2003        ["vgs"]], ["VG"])],
2004    "remove an LVM logical volume",
2005    "\
2006 Remove an LVM logical volume C<device>, where C<device> is
2007 the path to the LV, such as C</dev/VG/LV>.
2008
2009 You can also remove all LVs in a volume group by specifying
2010 the VG name, C</dev/VG>.");
2011
2012   ("vgremove", (RErr, [String "vgname"]), 78, [],
2013    [InitEmpty, Always, TestOutputList (
2014       [["sfdiskM"; "/dev/sda"; ","];
2015        ["pvcreate"; "/dev/sda1"];
2016        ["vgcreate"; "VG"; "/dev/sda1"];
2017        ["lvcreate"; "LV1"; "VG"; "50"];
2018        ["lvcreate"; "LV2"; "VG"; "50"];
2019        ["vgremove"; "VG"];
2020        ["lvs"]], []);
2021     InitEmpty, Always, TestOutputList (
2022       [["sfdiskM"; "/dev/sda"; ","];
2023        ["pvcreate"; "/dev/sda1"];
2024        ["vgcreate"; "VG"; "/dev/sda1"];
2025        ["lvcreate"; "LV1"; "VG"; "50"];
2026        ["lvcreate"; "LV2"; "VG"; "50"];
2027        ["vgremove"; "VG"];
2028        ["vgs"]], [])],
2029    "remove an LVM volume group",
2030    "\
2031 Remove an LVM volume group C<vgname>, (for example C<VG>).
2032
2033 This also forcibly removes all logical volumes in the volume
2034 group (if any).");
2035
2036   ("pvremove", (RErr, [Device "device"]), 79, [],
2037    [InitEmpty, Always, TestOutputListOfDevices (
2038       [["sfdiskM"; "/dev/sda"; ","];
2039        ["pvcreate"; "/dev/sda1"];
2040        ["vgcreate"; "VG"; "/dev/sda1"];
2041        ["lvcreate"; "LV1"; "VG"; "50"];
2042        ["lvcreate"; "LV2"; "VG"; "50"];
2043        ["vgremove"; "VG"];
2044        ["pvremove"; "/dev/sda1"];
2045        ["lvs"]], []);
2046     InitEmpty, Always, TestOutputListOfDevices (
2047       [["sfdiskM"; "/dev/sda"; ","];
2048        ["pvcreate"; "/dev/sda1"];
2049        ["vgcreate"; "VG"; "/dev/sda1"];
2050        ["lvcreate"; "LV1"; "VG"; "50"];
2051        ["lvcreate"; "LV2"; "VG"; "50"];
2052        ["vgremove"; "VG"];
2053        ["pvremove"; "/dev/sda1"];
2054        ["vgs"]], []);
2055     InitEmpty, Always, TestOutputListOfDevices (
2056       [["sfdiskM"; "/dev/sda"; ","];
2057        ["pvcreate"; "/dev/sda1"];
2058        ["vgcreate"; "VG"; "/dev/sda1"];
2059        ["lvcreate"; "LV1"; "VG"; "50"];
2060        ["lvcreate"; "LV2"; "VG"; "50"];
2061        ["vgremove"; "VG"];
2062        ["pvremove"; "/dev/sda1"];
2063        ["pvs"]], [])],
2064    "remove an LVM physical volume",
2065    "\
2066 This wipes a physical volume C<device> so that LVM will no longer
2067 recognise it.
2068
2069 The implementation uses the C<pvremove> command which refuses to
2070 wipe physical volumes that contain any volume groups, so you have
2071 to remove those first.");
2072
2073   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2074    [InitBasicFS, Always, TestOutput (
2075       [["set_e2label"; "/dev/sda1"; "testlabel"];
2076        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2077    "set the ext2/3/4 filesystem label",
2078    "\
2079 This sets the ext2/3/4 filesystem label of the filesystem on
2080 C<device> to C<label>.  Filesystem labels are limited to
2081 16 characters.
2082
2083 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2084 to return the existing label on a filesystem.");
2085
2086   ("get_e2label", (RString "label", [Device "device"]), 81, [],
2087    [],
2088    "get the ext2/3/4 filesystem label",
2089    "\
2090 This returns the ext2/3/4 filesystem label of the filesystem on
2091 C<device>.");
2092
2093   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2094    (let uuid = uuidgen () in
2095     [InitBasicFS, Always, TestOutput (
2096        [["set_e2uuid"; "/dev/sda1"; uuid];
2097         ["get_e2uuid"; "/dev/sda1"]], uuid);
2098      InitBasicFS, Always, TestOutput (
2099        [["set_e2uuid"; "/dev/sda1"; "clear"];
2100         ["get_e2uuid"; "/dev/sda1"]], "");
2101      (* We can't predict what UUIDs will be, so just check the commands run. *)
2102      InitBasicFS, Always, TestRun (
2103        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2104      InitBasicFS, Always, TestRun (
2105        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2106    "set the ext2/3/4 filesystem UUID",
2107    "\
2108 This sets the ext2/3/4 filesystem UUID of the filesystem on
2109 C<device> to C<uuid>.  The format of the UUID and alternatives
2110 such as C<clear>, C<random> and C<time> are described in the
2111 L<tune2fs(8)> manpage.
2112
2113 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2114 to return the existing UUID of a filesystem.");
2115
2116   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [],
2117    [],
2118    "get the ext2/3/4 filesystem UUID",
2119    "\
2120 This returns the ext2/3/4 filesystem UUID of the filesystem on
2121 C<device>.");
2122
2123   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [],
2124    [InitBasicFS, Always, TestOutputInt (
2125       [["umount"; "/dev/sda1"];
2126        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2127     InitBasicFS, Always, TestOutputInt (
2128       [["umount"; "/dev/sda1"];
2129        ["zero"; "/dev/sda1"];
2130        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2131    "run the filesystem checker",
2132    "\
2133 This runs the filesystem checker (fsck) on C<device> which
2134 should have filesystem type C<fstype>.
2135
2136 The returned integer is the status.  See L<fsck(8)> for the
2137 list of status codes from C<fsck>.
2138
2139 Notes:
2140
2141 =over 4
2142
2143 =item *
2144
2145 Multiple status codes can be summed together.
2146
2147 =item *
2148
2149 A non-zero return code can mean \"success\", for example if
2150 errors have been corrected on the filesystem.
2151
2152 =item *
2153
2154 Checking or repairing NTFS volumes is not supported
2155 (by linux-ntfs).
2156
2157 =back
2158
2159 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2160
2161   ("zero", (RErr, [Device "device"]), 85, [],
2162    [InitBasicFS, Always, TestOutput (
2163       [["umount"; "/dev/sda1"];
2164        ["zero"; "/dev/sda1"];
2165        ["file"; "/dev/sda1"]], "data")],
2166    "write zeroes to the device",
2167    "\
2168 This command writes zeroes over the first few blocks of C<device>.
2169
2170 How many blocks are zeroed isn't specified (but it's I<not> enough
2171 to securely wipe the device).  It should be sufficient to remove
2172 any partition tables, filesystem superblocks and so on.
2173
2174 See also: C<guestfs_scrub_device>.");
2175
2176   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2177    (* Test disabled because grub-install incompatible with virtio-blk driver.
2178     * See also: https://bugzilla.redhat.com/show_bug.cgi?id=479760
2179     *)
2180    [InitBasicFS, Disabled, TestOutputTrue (
2181       [["grub_install"; "/"; "/dev/sda1"];
2182        ["is_dir"; "/boot"]])],
2183    "install GRUB",
2184    "\
2185 This command installs GRUB (the Grand Unified Bootloader) on
2186 C<device>, with the root directory being C<root>.");
2187
2188   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2189    [InitBasicFS, Always, TestOutput (
2190       [["write_file"; "/old"; "file content"; "0"];
2191        ["cp"; "/old"; "/new"];
2192        ["cat"; "/new"]], "file content");
2193     InitBasicFS, Always, TestOutputTrue (
2194       [["write_file"; "/old"; "file content"; "0"];
2195        ["cp"; "/old"; "/new"];
2196        ["is_file"; "/old"]]);
2197     InitBasicFS, Always, TestOutput (
2198       [["write_file"; "/old"; "file content"; "0"];
2199        ["mkdir"; "/dir"];
2200        ["cp"; "/old"; "/dir/new"];
2201        ["cat"; "/dir/new"]], "file content")],
2202    "copy a file",
2203    "\
2204 This copies a file from C<src> to C<dest> where C<dest> is
2205 either a destination filename or destination directory.");
2206
2207   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2208    [InitBasicFS, Always, TestOutput (
2209       [["mkdir"; "/olddir"];
2210        ["mkdir"; "/newdir"];
2211        ["write_file"; "/olddir/file"; "file content"; "0"];
2212        ["cp_a"; "/olddir"; "/newdir"];
2213        ["cat"; "/newdir/olddir/file"]], "file content")],
2214    "copy a file or directory recursively",
2215    "\
2216 This copies a file or directory from C<src> to C<dest>
2217 recursively using the C<cp -a> command.");
2218
2219   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2220    [InitBasicFS, Always, TestOutput (
2221       [["write_file"; "/old"; "file content"; "0"];
2222        ["mv"; "/old"; "/new"];
2223        ["cat"; "/new"]], "file content");
2224     InitBasicFS, Always, TestOutputFalse (
2225       [["write_file"; "/old"; "file content"; "0"];
2226        ["mv"; "/old"; "/new"];
2227        ["is_file"; "/old"]])],
2228    "move a file",
2229    "\
2230 This moves a file from C<src> to C<dest> where C<dest> is
2231 either a destination filename or destination directory.");
2232
2233   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2234    [InitEmpty, Always, TestRun (
2235       [["drop_caches"; "3"]])],
2236    "drop kernel page cache, dentries and inodes",
2237    "\
2238 This instructs the guest kernel to drop its page cache,
2239 and/or dentries and inode caches.  The parameter C<whattodrop>
2240 tells the kernel what precisely to drop, see
2241 L<http://linux-mm.org/Drop_Caches>
2242
2243 Setting C<whattodrop> to 3 should drop everything.
2244
2245 This automatically calls L<sync(2)> before the operation,
2246 so that the maximum guest memory is freed.");
2247
2248   ("dmesg", (RString "kmsgs", []), 91, [],
2249    [InitEmpty, Always, TestRun (
2250       [["dmesg"]])],
2251    "return kernel messages",
2252    "\
2253 This returns the kernel messages (C<dmesg> output) from
2254 the guest kernel.  This is sometimes useful for extended
2255 debugging of problems.
2256
2257 Another way to get the same information is to enable
2258 verbose messages with C<guestfs_set_verbose> or by setting
2259 the environment variable C<LIBGUESTFS_DEBUG=1> before
2260 running the program.");
2261
2262   ("ping_daemon", (RErr, []), 92, [],
2263    [InitEmpty, Always, TestRun (
2264       [["ping_daemon"]])],
2265    "ping the guest daemon",
2266    "\
2267 This is a test probe into the guestfs daemon running inside
2268 the qemu subprocess.  Calling this function checks that the
2269 daemon responds to the ping message, without affecting the daemon
2270 or attached block device(s) in any other way.");
2271
2272   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2273    [InitBasicFS, Always, TestOutputTrue (
2274       [["write_file"; "/file1"; "contents of a file"; "0"];
2275        ["cp"; "/file1"; "/file2"];
2276        ["equal"; "/file1"; "/file2"]]);
2277     InitBasicFS, Always, TestOutputFalse (
2278       [["write_file"; "/file1"; "contents of a file"; "0"];
2279        ["write_file"; "/file2"; "contents of another file"; "0"];
2280        ["equal"; "/file1"; "/file2"]]);
2281     InitBasicFS, Always, TestLastFail (
2282       [["equal"; "/file1"; "/file2"]])],
2283    "test if two files have equal contents",
2284    "\
2285 This compares the two files C<file1> and C<file2> and returns
2286 true if their content is exactly equal, or false otherwise.
2287
2288 The external L<cmp(1)> program is used for the comparison.");
2289
2290   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2291    [InitSquashFS, Always, TestOutputList (
2292       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2293     InitSquashFS, Always, TestOutputList (
2294       [["strings"; "/empty"]], [])],
2295    "print the printable strings in a file",
2296    "\
2297 This runs the L<strings(1)> command on a file and returns
2298 the list of printable strings found.");
2299
2300   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2301    [InitSquashFS, Always, TestOutputList (
2302       [["strings_e"; "b"; "/known-5"]], []);
2303     InitBasicFS, Disabled, TestOutputList (
2304       [["write_file"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"; "24"];
2305        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2306    "print the printable strings in a file",
2307    "\
2308 This is like the C<guestfs_strings> command, but allows you to
2309 specify the encoding.
2310
2311 See the L<strings(1)> manpage for the full list of encodings.
2312
2313 Commonly useful encodings are C<l> (lower case L) which will
2314 show strings inside Windows/x86 files.
2315
2316 The returned strings are transcoded to UTF-8.");
2317
2318   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2319    [InitSquashFS, Always, TestOutput (
2320       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2321     (* Test for RHBZ#501888c2 regression which caused large hexdump
2322      * commands to segfault.
2323      *)
2324     InitSquashFS, Always, TestRun (
2325       [["hexdump"; "/100krandom"]])],
2326    "dump a file in hexadecimal",
2327    "\
2328 This runs C<hexdump -C> on the given C<path>.  The result is
2329 the human-readable, canonical hex dump of the file.");
2330
2331   ("zerofree", (RErr, [Device "device"]), 97, [],
2332    [InitNone, Always, TestOutput (
2333       [["sfdiskM"; "/dev/sda"; ","];
2334        ["mkfs"; "ext3"; "/dev/sda1"];
2335        ["mount"; "/dev/sda1"; "/"];
2336        ["write_file"; "/new"; "test file"; "0"];
2337        ["umount"; "/dev/sda1"];
2338        ["zerofree"; "/dev/sda1"];
2339        ["mount"; "/dev/sda1"; "/"];
2340        ["cat"; "/new"]], "test file")],
2341    "zero unused inodes and disk blocks on ext2/3 filesystem",
2342    "\
2343 This runs the I<zerofree> program on C<device>.  This program
2344 claims to zero unused inodes and disk blocks on an ext2/3
2345 filesystem, thus making it possible to compress the filesystem
2346 more effectively.
2347
2348 You should B<not> run this program if the filesystem is
2349 mounted.
2350
2351 It is possible that using this program can damage the filesystem
2352 or data on the filesystem.");
2353
2354   ("pvresize", (RErr, [Device "device"]), 98, [],
2355    [],
2356    "resize an LVM physical volume",
2357    "\
2358 This resizes (expands or shrinks) an existing LVM physical
2359 volume to match the new size of the underlying device.");
2360
2361   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2362                        Int "cyls"; Int "heads"; Int "sectors";
2363                        String "line"]), 99, [DangerWillRobinson],
2364    [],
2365    "modify a single partition on a block device",
2366    "\
2367 This runs L<sfdisk(8)> option to modify just the single
2368 partition C<n> (note: C<n> counts from 1).
2369
2370 For other parameters, see C<guestfs_sfdisk>.  You should usually
2371 pass C<0> for the cyls/heads/sectors parameters.");
2372
2373   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2374    [],
2375    "display the partition table",
2376    "\
2377 This displays the partition table on C<device>, in the
2378 human-readable output of the L<sfdisk(8)> command.  It is
2379 not intended to be parsed.");
2380
2381   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2382    [],
2383    "display the kernel geometry",
2384    "\
2385 This displays the kernel's idea of the geometry of C<device>.
2386
2387 The result is in human-readable format, and not designed to
2388 be parsed.");
2389
2390   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2391    [],
2392    "display the disk geometry from the partition table",
2393    "\
2394 This displays the disk geometry of C<device> read from the
2395 partition table.  Especially in the case where the underlying
2396 block device has been resized, this can be different from the
2397 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2398
2399 The result is in human-readable format, and not designed to
2400 be parsed.");
2401
2402   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [],
2403    [],
2404    "activate or deactivate all volume groups",
2405    "\
2406 This command activates or (if C<activate> is false) deactivates
2407 all logical volumes in all volume groups.
2408 If activated, then they are made known to the
2409 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2410 then those devices disappear.
2411
2412 This command is the same as running C<vgchange -a y|n>");
2413
2414   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [],
2415    [],
2416    "activate or deactivate some volume groups",
2417    "\
2418 This command activates or (if C<activate> is false) deactivates
2419 all logical volumes in the listed volume groups C<volgroups>.
2420 If activated, then they are made known to the
2421 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2422 then those devices disappear.
2423
2424 This command is the same as running C<vgchange -a y|n volgroups...>
2425
2426 Note that if C<volgroups> is an empty list then B<all> volume groups
2427 are activated or deactivated.");
2428
2429   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [],
2430    [InitNone, Always, TestOutput (
2431       [["sfdiskM"; "/dev/sda"; ","];
2432        ["pvcreate"; "/dev/sda1"];
2433        ["vgcreate"; "VG"; "/dev/sda1"];
2434        ["lvcreate"; "LV"; "VG"; "10"];
2435        ["mkfs"; "ext2"; "/dev/VG/LV"];
2436        ["mount"; "/dev/VG/LV"; "/"];
2437        ["write_file"; "/new"; "test content"; "0"];
2438        ["umount"; "/"];
2439        ["lvresize"; "/dev/VG/LV"; "20"];
2440        ["e2fsck_f"; "/dev/VG/LV"];
2441        ["resize2fs"; "/dev/VG/LV"];
2442        ["mount"; "/dev/VG/LV"; "/"];
2443        ["cat"; "/new"]], "test content")],
2444    "resize an LVM logical volume",
2445    "\
2446 This resizes (expands or shrinks) an existing LVM logical
2447 volume to C<mbytes>.  When reducing, data in the reduced part
2448 is lost.");
2449
2450   ("resize2fs", (RErr, [Device "device"]), 106, [],
2451    [], (* lvresize tests this *)
2452    "resize an ext2/ext3 filesystem",
2453    "\
2454 This resizes an ext2 or ext3 filesystem to match the size of
2455 the underlying device.
2456
2457 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2458 on the C<device> before calling this command.  For unknown reasons
2459 C<resize2fs> sometimes gives an error about this and sometimes not.
2460 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2461 calling this function.");
2462
2463   ("find", (RStringList "names", [Pathname "directory"]), 107, [],
2464    [InitBasicFS, Always, TestOutputList (
2465       [["find"; "/"]], ["lost+found"]);
2466     InitBasicFS, Always, TestOutputList (
2467       [["touch"; "/a"];
2468        ["mkdir"; "/b"];
2469        ["touch"; "/b/c"];
2470        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2471     InitBasicFS, Always, TestOutputList (
2472       [["mkdir_p"; "/a/b/c"];
2473        ["touch"; "/a/b/c/d"];
2474        ["find"; "/a/b/"]], ["c"; "c/d"])],
2475    "find all files and directories",
2476    "\
2477 This command lists out all files and directories, recursively,
2478 starting at C<directory>.  It is essentially equivalent to
2479 running the shell command C<find directory -print> but some
2480 post-processing happens on the output, described below.
2481
2482 This returns a list of strings I<without any prefix>.  Thus
2483 if the directory structure was:
2484
2485  /tmp/a
2486  /tmp/b
2487  /tmp/c/d
2488
2489 then the returned list from C<guestfs_find> C</tmp> would be
2490 4 elements:
2491
2492  a
2493  b
2494  c
2495  c/d
2496
2497 If C<directory> is not a directory, then this command returns
2498 an error.
2499
2500 The returned list is sorted.");
2501
2502   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2503    [], (* lvresize tests this *)
2504    "check an ext2/ext3 filesystem",
2505    "\
2506 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2507 filesystem checker on C<device>, noninteractively (C<-p>),
2508 even if the filesystem appears to be clean (C<-f>).
2509
2510 This command is only needed because of C<guestfs_resize2fs>
2511 (q.v.).  Normally you should use C<guestfs_fsck>.");
2512
2513   ("sleep", (RErr, [Int "secs"]), 109, [],
2514    [InitNone, Always, TestRun (
2515       [["sleep"; "1"]])],
2516    "sleep for some seconds",
2517    "\
2518 Sleep for C<secs> seconds.");
2519
2520   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [],
2521    [InitNone, Always, TestOutputInt (
2522       [["sfdiskM"; "/dev/sda"; ","];
2523        ["mkfs"; "ntfs"; "/dev/sda1"];
2524        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2525     InitNone, Always, TestOutputInt (
2526       [["sfdiskM"; "/dev/sda"; ","];
2527        ["mkfs"; "ext2"; "/dev/sda1"];
2528        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2529    "probe NTFS volume",
2530    "\
2531 This command runs the L<ntfs-3g.probe(8)> command which probes
2532 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2533 be mounted read-write, and some cannot be mounted at all).
2534
2535 C<rw> is a boolean flag.  Set it to true if you want to test
2536 if the volume can be mounted read-write.  Set it to false if
2537 you want to test if the volume can be mounted read-only.
2538
2539 The return value is an integer which C<0> if the operation
2540 would succeed, or some non-zero value documented in the
2541 L<ntfs-3g.probe(8)> manual page.");
2542
2543   ("sh", (RString "output", [String "command"]), 111, [],
2544    [], (* XXX needs tests *)
2545    "run a command via the shell",
2546    "\
2547 This call runs a command from the guest filesystem via the
2548 guest's C</bin/sh>.
2549
2550 This is like C<guestfs_command>, but passes the command to:
2551
2552  /bin/sh -c \"command\"
2553
2554 Depending on the guest's shell, this usually results in
2555 wildcards being expanded, shell expressions being interpolated
2556 and so on.
2557
2558 All the provisos about C<guestfs_command> apply to this call.");
2559
2560   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2561    [], (* XXX needs tests *)
2562    "run a command via the shell returning lines",
2563    "\
2564 This is the same as C<guestfs_sh>, but splits the result
2565 into a list of lines.
2566
2567 See also: C<guestfs_command_lines>");
2568
2569   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2570    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2571     * code in stubs.c, since all valid glob patterns must start with "/".
2572     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2573     *)
2574    [InitBasicFS, Always, TestOutputList (
2575       [["mkdir_p"; "/a/b/c"];
2576        ["touch"; "/a/b/c/d"];
2577        ["touch"; "/a/b/c/e"];
2578        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2579     InitBasicFS, Always, TestOutputList (
2580       [["mkdir_p"; "/a/b/c"];
2581        ["touch"; "/a/b/c/d"];
2582        ["touch"; "/a/b/c/e"];
2583        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2584     InitBasicFS, Always, TestOutputList (
2585       [["mkdir_p"; "/a/b/c"];
2586        ["touch"; "/a/b/c/d"];
2587        ["touch"; "/a/b/c/e"];
2588        ["glob_expand"; "/a/*/x/*"]], [])],
2589    "expand a wildcard path",
2590    "\
2591 This command searches for all the pathnames matching
2592 C<pattern> according to the wildcard expansion rules
2593 used by the shell.
2594
2595 If no paths match, then this returns an empty list
2596 (note: not an error).
2597
2598 It is just a wrapper around the C L<glob(3)> function
2599 with flags C<GLOB_MARK|GLOB_BRACE>.
2600 See that manual page for more details.");
2601
2602   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson],
2603    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2604       [["scrub_device"; "/dev/sdc"]])],
2605    "scrub (securely wipe) a device",
2606    "\
2607 This command writes patterns over C<device> to make data retrieval
2608 more difficult.
2609
2610 It is an interface to the L<scrub(1)> program.  See that
2611 manual page for more details.");
2612
2613   ("scrub_file", (RErr, [Pathname "file"]), 115, [],
2614    [InitBasicFS, Always, TestRun (
2615       [["write_file"; "/file"; "content"; "0"];
2616        ["scrub_file"; "/file"]])],
2617    "scrub (securely wipe) a file",
2618    "\
2619 This command writes patterns over a file to make data retrieval
2620 more difficult.
2621
2622 The file is I<removed> after scrubbing.
2623
2624 It is an interface to the L<scrub(1)> program.  See that
2625 manual page for more details.");
2626
2627   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [],
2628    [], (* XXX needs testing *)
2629    "scrub (securely wipe) free space",
2630    "\
2631 This command creates the directory C<dir> and then fills it
2632 with files until the filesystem is full, and scrubs the files
2633 as for C<guestfs_scrub_file>, and deletes them.
2634 The intention is to scrub any free space on the partition
2635 containing C<dir>.
2636
2637 It is an interface to the L<scrub(1)> program.  See that
2638 manual page for more details.");
2639
2640   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2641    [InitBasicFS, Always, TestRun (
2642       [["mkdir"; "/tmp"];
2643        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2644    "create a temporary directory",
2645    "\
2646 This command creates a temporary directory.  The
2647 C<template> parameter should be a full pathname for the
2648 temporary directory name with the final six characters being
2649 \"XXXXXX\".
2650
2651 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2652 the second one being suitable for Windows filesystems.
2653
2654 The name of the temporary directory that was created
2655 is returned.
2656
2657 The temporary directory is created with mode 0700
2658 and is owned by root.
2659
2660 The caller is responsible for deleting the temporary
2661 directory and its contents after use.
2662
2663 See also: L<mkdtemp(3)>");
2664
2665   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2666    [InitSquashFS, Always, TestOutputInt (
2667       [["wc_l"; "/10klines"]], 10000)],
2668    "count lines in a file",
2669    "\
2670 This command counts the lines in a file, using the
2671 C<wc -l> external command.");
2672
2673   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2674    [InitSquashFS, Always, TestOutputInt (
2675       [["wc_w"; "/10klines"]], 10000)],
2676    "count words in a file",
2677    "\
2678 This command counts the words in a file, using the
2679 C<wc -w> external command.");
2680
2681   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2682    [InitSquashFS, Always, TestOutputInt (
2683       [["wc_c"; "/100kallspaces"]], 102400)],
2684    "count characters in a file",
2685    "\
2686 This command counts the characters in a file, using the
2687 C<wc -c> external command.");
2688
2689   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2690    [InitSquashFS, Always, TestOutputList (
2691       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2692    "return first 10 lines of a file",
2693    "\
2694 This command returns up to the first 10 lines of a file as
2695 a list of strings.");
2696
2697   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2698    [InitSquashFS, Always, TestOutputList (
2699       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2700     InitSquashFS, Always, TestOutputList (
2701       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2702     InitSquashFS, Always, TestOutputList (
2703       [["head_n"; "0"; "/10klines"]], [])],
2704    "return first N lines of a file",
2705    "\
2706 If the parameter C<nrlines> is a positive number, this returns the first
2707 C<nrlines> lines of the file C<path>.
2708
2709 If the parameter C<nrlines> is a negative number, this returns lines
2710 from the file C<path>, excluding the last C<nrlines> lines.
2711
2712 If the parameter C<nrlines> is zero, this returns an empty list.");
2713
2714   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2715    [InitSquashFS, Always, TestOutputList (
2716       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2717    "return last 10 lines of a file",
2718    "\
2719 This command returns up to the last 10 lines of a file as
2720 a list of strings.");
2721
2722   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2723    [InitSquashFS, Always, TestOutputList (
2724       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2725     InitSquashFS, Always, TestOutputList (
2726       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2727     InitSquashFS, Always, TestOutputList (
2728       [["tail_n"; "0"; "/10klines"]], [])],
2729    "return last N lines of a file",
2730    "\
2731 If the parameter C<nrlines> is a positive number, this returns the last
2732 C<nrlines> lines of the file C<path>.
2733
2734 If the parameter C<nrlines> is a negative number, this returns lines
2735 from the file C<path>, starting with the C<-nrlines>th line.
2736
2737 If the parameter C<nrlines> is zero, this returns an empty list.");
2738
2739   ("df", (RString "output", []), 125, [],
2740    [], (* XXX Tricky to test because it depends on the exact format
2741         * of the 'df' command and other imponderables.
2742         *)
2743    "report file system disk space usage",
2744    "\
2745 This command runs the C<df> command to report disk space used.
2746
2747 This command is mostly useful for interactive sessions.  It
2748 is I<not> intended that you try to parse the output string.
2749 Use C<statvfs> from programs.");
2750
2751   ("df_h", (RString "output", []), 126, [],
2752    [], (* XXX Tricky to test because it depends on the exact format
2753         * of the 'df' command and other imponderables.
2754         *)
2755    "report file system disk space usage (human readable)",
2756    "\
2757 This command runs the C<df -h> command to report disk space used
2758 in human-readable format.
2759
2760 This command is mostly useful for interactive sessions.  It
2761 is I<not> intended that you try to parse the output string.
2762 Use C<statvfs> from programs.");
2763
2764   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
2765    [InitSquashFS, Always, TestOutputInt (
2766       [["du"; "/directory"]], 0 (* squashfs doesn't have blocks *))],
2767    "estimate file space usage",
2768    "\
2769 This command runs the C<du -s> command to estimate file space
2770 usage for C<path>.
2771
2772 C<path> can be a file or a directory.  If C<path> is a directory
2773 then the estimate includes the contents of the directory and all
2774 subdirectories (recursively).
2775
2776 The result is the estimated size in I<kilobytes>
2777 (ie. units of 1024 bytes).");
2778
2779   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
2780    [InitSquashFS, Always, TestOutputList (
2781       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
2782    "list files in an initrd",
2783    "\
2784 This command lists out files contained in an initrd.
2785
2786 The files are listed without any initial C</> character.  The
2787 files are listed in the order they appear (not necessarily
2788 alphabetical).  Directory names are listed as separate items.
2789
2790 Old Linux kernels (2.4 and earlier) used a compressed ext2
2791 filesystem as initrd.  We I<only> support the newer initramfs
2792 format (compressed cpio files).");
2793
2794   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
2795    [],
2796    "mount a file using the loop device",
2797    "\
2798 This command lets you mount C<file> (a filesystem image
2799 in a file) on a mount point.  It is entirely equivalent to
2800 the command C<mount -o loop file mountpoint>.");
2801
2802   ("mkswap", (RErr, [Device "device"]), 130, [],
2803    [InitEmpty, Always, TestRun (
2804       [["sfdiskM"; "/dev/sda"; ","];
2805        ["mkswap"; "/dev/sda1"]])],
2806    "create a swap partition",
2807    "\
2808 Create a swap partition on C<device>.");
2809
2810   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
2811    [InitEmpty, Always, TestRun (
2812       [["sfdiskM"; "/dev/sda"; ","];
2813        ["mkswap_L"; "hello"; "/dev/sda1"]])],
2814    "create a swap partition with a label",
2815    "\
2816 Create a swap partition on C<device> with label C<label>.
2817
2818 Note that you cannot attach a swap label to a block device
2819 (eg. C</dev/sda>), just to a partition.  This appears to be
2820 a limitation of the kernel or swap tools.");
2821
2822   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [],
2823    (let uuid = uuidgen () in
2824     [InitEmpty, Always, TestRun (
2825        [["sfdiskM"; "/dev/sda"; ","];
2826         ["mkswap_U"; uuid; "/dev/sda1"]])]),
2827    "create a swap partition with an explicit UUID",
2828    "\
2829 Create a swap partition on C<device> with UUID C<uuid>.");
2830
2831   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [],
2832    [InitBasicFS, Always, TestOutputStruct (
2833       [["mknod"; "0o10777"; "0"; "0"; "/node"];
2834        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
2835        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
2836     InitBasicFS, Always, TestOutputStruct (
2837       [["mknod"; "0o60777"; "66"; "99"; "/node"];
2838        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2839    "make block, character or FIFO devices",
2840    "\
2841 This call creates block or character special devices, or
2842 named pipes (FIFOs).
2843
2844 The C<mode> parameter should be the mode, using the standard
2845 constants.  C<devmajor> and C<devminor> are the
2846 device major and minor numbers, only used when creating block
2847 and character special devices.");
2848
2849   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [],
2850    [InitBasicFS, Always, TestOutputStruct (
2851       [["mkfifo"; "0o777"; "/node"];
2852        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
2853    "make FIFO (named pipe)",
2854    "\
2855 This call creates a FIFO (named pipe) called C<path> with
2856 mode C<mode>.  It is just a convenient wrapper around
2857 C<guestfs_mknod>.");
2858
2859   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [],
2860    [InitBasicFS, Always, TestOutputStruct (
2861       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
2862        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2863    "make block device node",
2864    "\
2865 This call creates a block device node called C<path> with
2866 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2867 It is just a convenient wrapper around C<guestfs_mknod>.");
2868
2869   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [],
2870    [InitBasicFS, Always, TestOutputStruct (
2871       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
2872        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
2873    "make char device node",
2874    "\
2875 This call creates a char device node called C<path> with
2876 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2877 It is just a convenient wrapper around C<guestfs_mknod>.");
2878
2879   ("umask", (RInt "oldmask", [Int "mask"]), 137, [],
2880    [], (* XXX umask is one of those stateful things that we should
2881         * reset between each test.
2882         *)
2883    "set file mode creation mask (umask)",
2884    "\
2885 This function sets the mask used for creating new files and
2886 device nodes to C<mask & 0777>.
2887
2888 Typical umask values would be C<022> which creates new files
2889 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
2890 C<002> which creates new files with permissions like
2891 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
2892
2893 The default umask is C<022>.  This is important because it
2894 means that directories and device nodes will be created with
2895 C<0644> or C<0755> mode even if you specify C<0777>.
2896
2897 See also L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
2898
2899 This call returns the previous umask.");
2900
2901   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
2902    [],
2903    "read directories entries",
2904    "\
2905 This returns the list of directory entries in directory C<dir>.
2906
2907 All entries in the directory are returned, including C<.> and
2908 C<..>.  The entries are I<not> sorted, but returned in the same
2909 order as the underlying filesystem.
2910
2911 Also this call returns basic file type information about each
2912 file.  The C<ftyp> field will contain one of the following characters:
2913
2914 =over 4
2915
2916 =item 'b'
2917
2918 Block special
2919
2920 =item 'c'
2921
2922 Char special
2923
2924 =item 'd'
2925
2926 Directory
2927
2928 =item 'f'
2929
2930 FIFO (named pipe)
2931
2932 =item 'l'
2933
2934 Symbolic link
2935
2936 =item 'r'
2937
2938 Regular file
2939
2940 =item 's'
2941
2942 Socket
2943
2944 =item 'u'
2945
2946 Unknown file type
2947
2948 =item '?'
2949
2950 The L<readdir(3)> returned a C<d_type> field with an
2951 unexpected value
2952
2953 =back
2954
2955 This function is primarily intended for use by programs.  To
2956 get a simple list of names, use C<guestfs_ls>.  To get a printable
2957 directory for human consumption, use C<guestfs_ll>.");
2958
2959   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
2960    [],
2961    "create partitions on a block device",
2962    "\
2963 This is a simplified interface to the C<guestfs_sfdisk>
2964 command, where partition sizes are specified in megabytes
2965 only (rounded to the nearest cylinder) and you don't need
2966 to specify the cyls, heads and sectors parameters which
2967 were rarely if ever used anyway.
2968
2969 See also C<guestfs_sfdisk> and the L<sfdisk(8)> manpage.");
2970
2971   ("zfile", (RString "description", [String "method"; Pathname "path"]), 140, [DeprecatedBy "file"],
2972    [],
2973    "determine file type inside a compressed file",
2974    "\
2975 This command runs C<file> after first decompressing C<path>
2976 using C<method>.
2977
2978 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
2979
2980 Since 1.0.63, use C<guestfs_file> instead which can now
2981 process compressed files.");
2982
2983   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [],
2984    [],
2985    "list extended attributes of a file or directory",
2986    "\
2987 This call lists the extended attributes of the file or directory
2988 C<path>.
2989
2990 At the system call level, this is a combination of the
2991 L<listxattr(2)> and L<getxattr(2)> calls.
2992
2993 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
2994
2995   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [],
2996    [],
2997    "list extended attributes of a file or directory",
2998    "\
2999 This is the same as C<guestfs_getxattrs>, but if C<path>
3000 is a symbolic link, then it returns the extended attributes
3001 of the link itself.");
3002
3003   ("setxattr", (RErr, [String "xattr";
3004                        String "val"; Int "vallen"; (* will be BufferIn *)
3005                        Pathname "path"]), 143, [],
3006    [],
3007    "set extended attribute of a file or directory",
3008    "\
3009 This call sets the extended attribute named C<xattr>
3010 of the file C<path> to the value C<val> (of length C<vallen>).
3011 The value is arbitrary 8 bit data.
3012
3013 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3014
3015   ("lsetxattr", (RErr, [String "xattr";
3016                         String "val"; Int "vallen"; (* will be BufferIn *)
3017                         Pathname "path"]), 144, [],
3018    [],
3019    "set extended attribute of a file or directory",
3020    "\
3021 This is the same as C<guestfs_setxattr>, but if C<path>
3022 is a symbolic link, then it sets an extended attribute
3023 of the link itself.");
3024
3025   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [],
3026    [],
3027    "remove extended attribute of a file or directory",
3028    "\
3029 This call removes the extended attribute named C<xattr>
3030 of the file C<path>.
3031
3032 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3033
3034   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [],
3035    [],
3036    "remove extended attribute of a file or directory",
3037    "\
3038 This is the same as C<guestfs_removexattr>, but if C<path>
3039 is a symbolic link, then it removes an extended attribute
3040 of the link itself.");
3041
3042   ("mountpoints", (RHashtable "mps", []), 147, [],
3043    [],
3044    "show mountpoints",
3045    "\
3046 This call is similar to C<guestfs_mounts>.  That call returns
3047 a list of devices.  This one returns a hash table (map) of
3048 device name to directory where the device is mounted.");
3049
3050   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3051   (* This is a special case: while you would expect a parameter
3052    * of type "Pathname", that doesn't work, because it implies
3053    * NEED_ROOT in the generated calling code in stubs.c, and
3054    * this function cannot use NEED_ROOT.
3055    *)
3056    [],
3057    "create a mountpoint",
3058    "\
3059 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3060 specialized calls that can be used to create extra mountpoints
3061 before mounting the first filesystem.
3062
3063 These calls are I<only> necessary in some very limited circumstances,
3064 mainly the case where you want to mount a mix of unrelated and/or
3065 read-only filesystems together.
3066
3067 For example, live CDs often contain a \"Russian doll\" nest of
3068 filesystems, an ISO outer layer, with a squashfs image inside, with
3069 an ext2/3 image inside that.  You can unpack this as follows
3070 in guestfish:
3071
3072  add-ro Fedora-11-i686-Live.iso
3073  run
3074  mkmountpoint /cd
3075  mkmountpoint /squash
3076  mkmountpoint /ext3
3077  mount /dev/sda /cd
3078  mount-loop /cd/LiveOS/squashfs.img /squash
3079  mount-loop /squash/LiveOS/ext3fs.img /ext3
3080
3081 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3082
3083   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3084    [],
3085    "remove a mountpoint",
3086    "\
3087 This calls removes a mountpoint that was previously created
3088 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3089 for full details.");
3090
3091   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3092    [InitSquashFS, Always, TestOutputBuffer (
3093       [["read_file"; "/known-4"]], "abc\ndef\nghi")],
3094    "read a file",
3095    "\
3096 This calls returns the contents of the file C<path> as a
3097 buffer.
3098
3099 Unlike C<guestfs_cat>, this function can correctly
3100 handle files that contain embedded ASCII NUL characters.
3101 However unlike C<guestfs_download>, this function is limited
3102 in the total size of file that can be handled.");
3103
3104   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3105    [InitSquashFS, Always, TestOutputList (
3106       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3107     InitSquashFS, Always, TestOutputList (
3108       [["grep"; "nomatch"; "/test-grep.txt"]], [])],
3109    "return lines matching a pattern",
3110    "\
3111 This calls the external C<grep> program and returns the
3112 matching lines.");
3113
3114   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3115    [InitSquashFS, Always, TestOutputList (
3116       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3117    "return lines matching a pattern",
3118    "\
3119 This calls the external C<egrep> program and returns the
3120 matching lines.");
3121
3122   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3123    [InitSquashFS, Always, TestOutputList (
3124       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3125    "return lines matching a pattern",
3126    "\
3127 This calls the external C<fgrep> program and returns the
3128 matching lines.");
3129
3130   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3131    [InitSquashFS, Always, TestOutputList (
3132       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3133    "return lines matching a pattern",
3134    "\
3135 This calls the external C<grep -i> program and returns the
3136 matching lines.");
3137
3138   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3139    [InitSquashFS, Always, TestOutputList (
3140       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3141    "return lines matching a pattern",
3142    "\
3143 This calls the external C<egrep -i> program and returns the
3144 matching lines.");
3145
3146   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3147    [InitSquashFS, Always, TestOutputList (
3148       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3149    "return lines matching a pattern",
3150    "\
3151 This calls the external C<fgrep -i> program and returns the
3152 matching lines.");
3153
3154   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3155    [InitSquashFS, Always, TestOutputList (
3156       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3157    "return lines matching a pattern",
3158    "\
3159 This calls the external C<zgrep> program and returns the
3160 matching lines.");
3161
3162   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3163    [InitSquashFS, Always, TestOutputList (
3164       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3165    "return lines matching a pattern",
3166    "\
3167 This calls the external C<zegrep> program and returns the
3168 matching lines.");
3169
3170   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3171    [InitSquashFS, Always, TestOutputList (
3172       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3173    "return lines matching a pattern",
3174    "\
3175 This calls the external C<zfgrep> program and returns the
3176 matching lines.");
3177
3178   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3179    [InitSquashFS, Always, TestOutputList (
3180       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3181    "return lines matching a pattern",
3182    "\
3183 This calls the external C<zgrep -i> program and returns the
3184 matching lines.");
3185
3186   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3187    [InitSquashFS, Always, TestOutputList (
3188       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3189    "return lines matching a pattern",
3190    "\
3191 This calls the external C<zegrep -i> program and returns the
3192 matching lines.");
3193
3194   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3195    [InitSquashFS, Always, TestOutputList (
3196       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3197    "return lines matching a pattern",
3198    "\
3199 This calls the external C<zfgrep -i> program and returns the
3200 matching lines.");
3201
3202   ("realpath", (RString "rpath", [Pathname "path"]), 163, [],
3203    [InitSquashFS, Always, TestOutput (
3204       [["realpath"; "/../directory"]], "/directory")],
3205    "canonicalized absolute pathname",
3206    "\
3207 Return the canonicalized absolute pathname of C<path>.  The
3208 returned path has no C<.>, C<..> or symbolic link path elements.");
3209
3210   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3211    [InitBasicFS, Always, TestOutputStruct (
3212       [["touch"; "/a"];
3213        ["ln"; "/a"; "/b"];
3214        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3215    "create a hard link",
3216    "\
3217 This command creates a hard link using the C<ln> command.");
3218
3219   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3220    [InitBasicFS, Always, TestOutputStruct (
3221       [["touch"; "/a"];
3222        ["touch"; "/b"];
3223        ["ln_f"; "/a"; "/b"];
3224        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3225    "create a hard link",
3226    "\
3227 This command creates a hard link using the C<ln -f> command.
3228 The C<-f> option removes the link (C<linkname>) if it exists already.");
3229
3230   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3231    [InitBasicFS, Always, TestOutputStruct (
3232       [["touch"; "/a"];
3233        ["ln_s"; "a"; "/b"];
3234        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3235    "create a symbolic link",
3236    "\
3237 This command creates a symbolic link using the C<ln -s> command.");
3238
3239   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3240    [InitBasicFS, Always, TestOutput (
3241       [["mkdir_p"; "/a/b"];
3242        ["touch"; "/a/b/c"];
3243        ["ln_sf"; "../d"; "/a/b/c"];
3244        ["readlink"; "/a/b/c"]], "../d")],
3245    "create a symbolic link",
3246    "\
3247 This command creates a symbolic link using the C<ln -sf> command,
3248 The C<-f> option removes the link (C<linkname>) if it exists already.");
3249
3250   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3251    [] (* XXX tested above *),
3252    "read the target of a symbolic link",
3253    "\
3254 This command reads the target of a symbolic link.");
3255
3256   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [],
3257    [InitBasicFS, Always, TestOutputStruct (
3258       [["fallocate"; "/a"; "1000000"];
3259        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3260    "preallocate a file in the guest filesystem",
3261    "\
3262 This command preallocates a file (containing zero bytes) named
3263 C<path> of size C<len> bytes.  If the file exists already, it
3264 is overwritten.
3265
3266 Do not confuse this with the guestfish-specific
3267 C<alloc> command which allocates a file in the host and
3268 attaches it as a device.");
3269
3270   ("swapon_device", (RErr, [Device "device"]), 170, [],
3271    [InitPartition, Always, TestRun (
3272       [["mkswap"; "/dev/sda1"];
3273        ["swapon_device"; "/dev/sda1"];
3274        ["swapoff_device"; "/dev/sda1"]])],
3275    "enable swap on device",
3276    "\
3277 This command enables the libguestfs appliance to use the
3278 swap device or partition named C<device>.  The increased
3279 memory is made available for all commands, for example
3280 those run using C<guestfs_command> or C<guestfs_sh>.
3281
3282 Note that you should not swap to existing guest swap
3283 partitions unless you know what you are doing.  They may
3284 contain hibernation information, or other information that
3285 the guest doesn't want you to trash.  You also risk leaking
3286 information about the host to the guest this way.  Instead,
3287 attach a new host device to the guest and swap on that.");
3288
3289   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3290    [], (* XXX tested by swapon_device *)
3291    "disable swap on device",
3292    "\
3293 This command disables the libguestfs appliance swap
3294 device or partition named C<device>.
3295 See C<guestfs_swapon_device>.");
3296
3297   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3298    [InitBasicFS, Always, TestRun (
3299       [["fallocate"; "/swap"; "8388608"];
3300        ["mkswap_file"; "/swap"];
3301        ["swapon_file"; "/swap"];
3302        ["swapoff_file"; "/swap"]])],
3303    "enable swap on file",
3304    "\
3305 This command enables swap to a file.
3306 See C<guestfs_swapon_device> for other notes.");
3307
3308   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3309    [], (* XXX tested by swapon_file *)
3310    "disable swap on file",
3311    "\
3312 This command disables the libguestfs appliance swap on file.");
3313
3314   ("swapon_label", (RErr, [String "label"]), 174, [],
3315    [InitEmpty, Always, TestRun (
3316       [["sfdiskM"; "/dev/sdb"; ","];
3317        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3318        ["swapon_label"; "swapit"];
3319        ["swapoff_label"; "swapit"];
3320        ["zero"; "/dev/sdb"];
3321        ["blockdev_rereadpt"; "/dev/sdb"]])],
3322    "enable swap on labeled swap partition",
3323    "\
3324 This command enables swap to a labeled swap partition.
3325 See C<guestfs_swapon_device> for other notes.");
3326
3327   ("swapoff_label", (RErr, [String "label"]), 175, [],
3328    [], (* XXX tested by swapon_label *)
3329    "disable swap on labeled swap partition",
3330    "\
3331 This command disables the libguestfs appliance swap on
3332 labeled swap partition.");
3333
3334   ("swapon_uuid", (RErr, [String "uuid"]), 176, [],
3335    (let uuid = uuidgen () in
3336     [InitEmpty, Always, TestRun (
3337        [["mkswap_U"; uuid; "/dev/sdb"];
3338         ["swapon_uuid"; uuid];
3339         ["swapoff_uuid"; uuid]])]),
3340    "enable swap on swap partition by UUID",
3341    "\
3342 This command enables swap to a swap partition with the given UUID.
3343 See C<guestfs_swapon_device> for other notes.");
3344
3345   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [],
3346    [], (* XXX tested by swapon_uuid *)
3347    "disable swap on swap partition by UUID",
3348    "\
3349 This command disables the libguestfs appliance swap partition
3350 with the given UUID.");
3351
3352   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3353    [InitBasicFS, Always, TestRun (
3354       [["fallocate"; "/swap"; "8388608"];
3355        ["mkswap_file"; "/swap"]])],
3356    "create a swap file",
3357    "\
3358 Create a swap file.
3359
3360 This command just writes a swap file signature to an existing
3361 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3362
3363   ("inotify_init", (RErr, [Int "maxevents"]), 179, [],
3364    [InitSquashFS, Always, TestRun (
3365       [["inotify_init"; "0"]])],
3366    "create an inotify handle",
3367    "\
3368 This command creates a new inotify handle.
3369 The inotify subsystem can be used to notify events which happen to
3370 objects in the guest filesystem.
3371
3372 C<maxevents> is the maximum number of events which will be
3373 queued up between calls to C<guestfs_inotify_read> or
3374 C<guestfs_inotify_files>.
3375 If this is passed as C<0>, then the kernel (or previously set)
3376 default is used.  For Linux 2.6.29 the default was 16384 events.
3377 Beyond this limit, the kernel throws away events, but records
3378 the fact that it threw them away by setting a flag
3379 C<IN_Q_OVERFLOW> in the returned structure list (see
3380 C<guestfs_inotify_read>).
3381
3382 Before any events are generated, you have to add some
3383 watches to the internal watch list.  See:
3384 C<guestfs_inotify_add_watch>,
3385 C<guestfs_inotify_rm_watch> and
3386 C<guestfs_inotify_watch_all>.
3387
3388 Queued up events should be read periodically by calling
3389 C<guestfs_inotify_read>
3390 (or C<guestfs_inotify_files> which is just a helpful
3391 wrapper around C<guestfs_inotify_read>).  If you don't
3392 read the events out often enough then you risk the internal
3393 queue overflowing.
3394
3395 The handle should be closed after use by calling
3396 C<guestfs_inotify_close>.  This also removes any
3397 watches automatically.
3398
3399 See also L<inotify(7)> for an overview of the inotify interface
3400 as exposed by the Linux kernel, which is roughly what we expose
3401 via libguestfs.  Note that there is one global inotify handle
3402 per libguestfs instance.");
3403
3404   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [],
3405    [InitBasicFS, Always, TestOutputList (
3406       [["inotify_init"; "0"];
3407        ["inotify_add_watch"; "/"; "1073741823"];
3408        ["touch"; "/a"];
3409        ["touch"; "/b"];
3410        ["inotify_files"]], ["a"; "b"])],
3411    "add an inotify watch",
3412    "\
3413 Watch C<path> for the events listed in C<mask>.
3414
3415 Note that if C<path> is a directory then events within that
3416 directory are watched, but this does I<not> happen recursively
3417 (in subdirectories).
3418
3419 Note for non-C or non-Linux callers: the inotify events are
3420 defined by the Linux kernel ABI and are listed in
3421 C</usr/include/sys/inotify.h>.");
3422
3423   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [],
3424    [],
3425    "remove an inotify watch",
3426    "\
3427 Remove a previously defined inotify watch.
3428 See C<guestfs_inotify_add_watch>.");
3429
3430   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [],
3431    [],
3432    "return list of inotify events",
3433    "\
3434 Return the complete queue of events that have happened
3435 since the previous read call.
3436
3437 If no events have happened, this returns an empty list.
3438
3439 I<Note>: In order to make sure that all events have been
3440 read, you must call this function repeatedly until it
3441 returns an empty list.  The reason is that the call will
3442 read events up to the maximum appliance-to-host message
3443 size and leave remaining events in the queue.");
3444
3445   ("inotify_files", (RStringList "paths", []), 183, [],
3446    [],
3447    "return list of watched files that had events",
3448    "\
3449 This function is a helpful wrapper around C<guestfs_inotify_read>
3450 which just returns a list of pathnames of objects that were
3451 touched.  The returned pathnames are sorted and deduplicated.");
3452
3453   ("inotify_close", (RErr, []), 184, [],
3454    [],
3455    "close the inotify handle",
3456    "\
3457 This closes the inotify handle which was previously
3458 opened by inotify_init.  It removes all watches, throws
3459 away any pending events, and deallocates all resources.");
3460
3461   ("setcon", (RErr, [String "context"]), 185, [],
3462    [],
3463    "set SELinux security context",
3464    "\
3465 This sets the SELinux security context of the daemon
3466 to the string C<context>.
3467
3468 See the documentation about SELINUX in L<guestfs(3)>.");
3469
3470   ("getcon", (RString "context", []), 186, [],
3471    [],
3472    "get SELinux security context",
3473    "\
3474 This gets the SELinux security context of the daemon.
3475
3476 See the documentation about SELINUX in L<guestfs(3)>,
3477 and C<guestfs_setcon>");
3478
3479   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3480    [InitEmpty, Always, TestOutput (
3481       [["sfdiskM"; "/dev/sda"; ","];
3482        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3483        ["mount"; "/dev/sda1"; "/"];
3484        ["write_file"; "/new"; "new file contents"; "0"];
3485        ["cat"; "/new"]], "new file contents")],
3486    "make a filesystem with block size",
3487    "\
3488 This call is similar to C<guestfs_mkfs>, but it allows you to
3489 control the block size of the resulting filesystem.  Supported
3490 block sizes depend on the filesystem type, but typically they
3491 are C<1024>, C<2048> or C<4096> only.");
3492
3493   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3494    [InitEmpty, Always, TestOutput (
3495       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3496        ["mke2journal"; "4096"; "/dev/sda1"];
3497        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3498        ["mount"; "/dev/sda2"; "/"];
3499        ["write_file"; "/new"; "new file contents"; "0"];
3500        ["cat"; "/new"]], "new file contents")],
3501    "make ext2/3/4 external journal",
3502    "\
3503 This creates an ext2 external journal on C<device>.  It is equivalent
3504 to the command:
3505
3506  mke2fs -O journal_dev -b blocksize device");
3507
3508   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3509    [InitEmpty, Always, TestOutput (
3510       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3511        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3512        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3513        ["mount"; "/dev/sda2"; "/"];
3514        ["write_file"; "/new"; "new file contents"; "0"];
3515        ["cat"; "/new"]], "new file contents")],
3516    "make ext2/3/4 external journal with label",
3517    "\
3518 This creates an ext2 external journal on C<device> with label C<label>.");
3519
3520   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [],
3521    (let uuid = uuidgen () in
3522     [InitEmpty, Always, TestOutput (
3523        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3524         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3525         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3526         ["mount"; "/dev/sda2"; "/"];
3527         ["write_file"; "/new"; "new file contents"; "0"];
3528         ["cat"; "/new"]], "new file contents")]),
3529    "make ext2/3/4 external journal with UUID",
3530    "\
3531 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3532
3533   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3534    [],
3535    "make ext2/3/4 filesystem with external journal",
3536    "\
3537 This creates an ext2/3/4 filesystem on C<device> with
3538 an external journal on C<journal>.  It is equivalent
3539 to the command:
3540
3541  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3542
3543 See also C<guestfs_mke2journal>.");
3544
3545   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3546    [],
3547    "make ext2/3/4 filesystem with external journal",
3548    "\
3549 This creates an ext2/3/4 filesystem on C<device> with
3550 an external journal on the journal labeled C<label>.
3551
3552 See also C<guestfs_mke2journal_L>.");
3553
3554   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [],
3555    [],
3556    "make ext2/3/4 filesystem with external journal",
3557    "\
3558 This creates an ext2/3/4 filesystem on C<device> with
3559 an external journal on the journal with UUID C<uuid>.
3560
3561 See also C<guestfs_mke2journal_U>.");
3562
3563 ]
3564
3565 let all_functions = non_daemon_functions @ daemon_functions
3566
3567 (* In some places we want the functions to be displayed sorted
3568  * alphabetically, so this is useful:
3569  *)
3570 let all_functions_sorted =
3571   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
3572                compare n1 n2) all_functions
3573
3574 (* Field types for structures. *)
3575 type field =
3576   | FChar                       (* C 'char' (really, a 7 bit byte). *)
3577   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
3578   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
3579   | FUInt32
3580   | FInt32
3581   | FUInt64
3582   | FInt64
3583   | FBytes                      (* Any int measure that counts bytes. *)
3584   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
3585   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
3586
3587 (* Because we generate extra parsing code for LVM command line tools,
3588  * we have to pull out the LVM columns separately here.
3589  *)
3590 let lvm_pv_cols = [
3591   "pv_name", FString;
3592   "pv_uuid", FUUID;
3593   "pv_fmt", FString;
3594   "pv_size", FBytes;
3595   "dev_size", FBytes;
3596   "pv_free", FBytes;
3597   "pv_used", FBytes;
3598   "pv_attr", FString (* XXX *);
3599   "pv_pe_count", FInt64;
3600   "pv_pe_alloc_count", FInt64;
3601   "pv_tags", FString;
3602   "pe_start", FBytes;
3603   "pv_mda_count", FInt64;
3604   "pv_mda_free", FBytes;
3605   (* Not in Fedora 10:
3606      "pv_mda_size", FBytes;
3607   *)
3608 ]
3609 let lvm_vg_cols = [
3610   "vg_name", FString;
3611   "vg_uuid", FUUID;
3612   "vg_fmt", FString;
3613   "vg_attr", FString (* XXX *);
3614   "vg_size", FBytes;
3615   "vg_free", FBytes;
3616   "vg_sysid", FString;
3617   "vg_extent_size", FBytes;
3618   "vg_extent_count", FInt64;
3619   "vg_free_count", FInt64;
3620   "max_lv", FInt64;
3621   "max_pv", FInt64;
3622   "pv_count", FInt64;
3623   "lv_count", FInt64;
3624   "snap_count", FInt64;
3625   "vg_seqno", FInt64;
3626   "vg_tags", FString;
3627   "vg_mda_count", FInt64;
3628   "vg_mda_free", FBytes;
3629   (* Not in Fedora 10:
3630      "vg_mda_size", FBytes;
3631   *)
3632 ]
3633 let lvm_lv_cols = [
3634   "lv_name", FString;
3635   "lv_uuid", FUUID;
3636   "lv_attr", FString (* XXX *);
3637   "lv_major", FInt64;
3638   "lv_minor", FInt64;
3639   "lv_kernel_major", FInt64;
3640   "lv_kernel_minor", FInt64;
3641   "lv_size", FBytes;
3642   "seg_count", FInt64;
3643   "origin", FString;
3644   "snap_percent", FOptPercent;
3645   "copy_percent", FOptPercent;
3646   "move_pv", FString;
3647   "lv_tags", FString;
3648   "mirror_log", FString;
3649   "modules", FString;
3650 ]
3651
3652 (* Names and fields in all structures (in RStruct and RStructList)
3653  * that we support.
3654  *)
3655 let structs = [
3656   (* The old RIntBool return type, only ever used for aug_defnode.  Do
3657    * not use this struct in any new code.
3658    *)
3659   "int_bool", [
3660     "i", FInt32;                (* for historical compatibility *)
3661     "b", FInt32;                (* for historical compatibility *)
3662   ];
3663
3664   (* LVM PVs, VGs, LVs. *)
3665   "lvm_pv", lvm_pv_cols;
3666   "lvm_vg", lvm_vg_cols;
3667   "lvm_lv", lvm_lv_cols;
3668
3669   (* Column names and types from stat structures.
3670    * NB. Can't use things like 'st_atime' because glibc header files
3671    * define some of these as macros.  Ugh.
3672    *)
3673   "stat", [
3674     "dev", FInt64;
3675     "ino", FInt64;
3676     "mode", FInt64;
3677     "nlink", FInt64;
3678     "uid", FInt64;
3679     "gid", FInt64;
3680     "rdev", FInt64;
3681     "size", FInt64;
3682     "blksize", FInt64;
3683     "blocks", FInt64;
3684     "atime", FInt64;
3685     "mtime", FInt64;
3686     "ctime", FInt64;
3687   ];
3688   "statvfs", [
3689     "bsize", FInt64;
3690     "frsize", FInt64;
3691     "blocks", FInt64;
3692     "bfree", FInt64;
3693     "bavail", FInt64;
3694     "files", FInt64;
3695     "ffree", FInt64;
3696     "favail", FInt64;
3697     "fsid", FInt64;
3698     "flag", FInt64;
3699     "namemax", FInt64;
3700   ];
3701
3702   (* Column names in dirent structure. *)
3703   "dirent", [
3704     "ino", FInt64;
3705     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
3706     "ftyp", FChar;
3707     "name", FString;
3708   ];
3709
3710   (* Version numbers. *)
3711   "version", [
3712     "major", FInt64;
3713     "minor", FInt64;
3714     "release", FInt64;
3715     "extra", FString;
3716   ];
3717
3718   (* Extended attribute. *)
3719   "xattr", [
3720     "attrname", FString;
3721     "attrval", FBuffer;
3722   ];
3723
3724   (* Inotify events. *)
3725   "inotify_event", [
3726     "in_wd", FInt64;
3727     "in_mask", FUInt32;
3728     "in_cookie", FUInt32;
3729     "in_name", FString;
3730   ];
3731 ] (* end of structs *)
3732
3733 (* Ugh, Java has to be different ..
3734  * These names are also used by the Haskell bindings.
3735  *)
3736 let java_structs = [
3737   "int_bool", "IntBool";
3738   "lvm_pv", "PV";
3739   "lvm_vg", "VG";
3740   "lvm_lv", "LV";
3741   "stat", "Stat";
3742   "statvfs", "StatVFS";
3743   "dirent", "Dirent";
3744   "version", "Version";
3745   "xattr", "XAttr";
3746   "inotify_event", "INotifyEvent";
3747 ]
3748
3749 (* What structs are actually returned. *)
3750 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
3751
3752 (* Returns a list of RStruct/RStructList structs that are returned
3753  * by any function.  Each element of returned list is a pair:
3754  *
3755  * (structname, RStructOnly)
3756  *    == there exists function which returns RStruct (_, structname)
3757  * (structname, RStructListOnly)
3758  *    == there exists function which returns RStructList (_, structname)
3759  * (structname, RStructAndList)
3760  *    == there are functions returning both RStruct (_, structname)
3761  *                                      and RStructList (_, structname)
3762  *)
3763 let rstructs_used =
3764   (* ||| is a "logical OR" for rstructs_used_t *)
3765   let (|||) a b =
3766     match a, b with
3767     | RStructAndList, _
3768     | _, RStructAndList -> RStructAndList
3769     | RStructOnly, RStructListOnly
3770     | RStructListOnly, RStructOnly -> RStructAndList
3771     | RStructOnly, RStructOnly -> RStructOnly
3772     | RStructListOnly, RStructListOnly -> RStructListOnly
3773   in
3774
3775   let h = Hashtbl.create 13 in
3776
3777   (* if elem->oldv exists, update entry using ||| operator,
3778    * else just add elem->newv to the hash
3779    *)
3780   let update elem newv =
3781     try  let oldv = Hashtbl.find h elem in
3782          Hashtbl.replace h elem (newv ||| oldv)
3783     with Not_found -> Hashtbl.add h elem newv
3784   in
3785
3786   List.iter (
3787     fun (_, style, _, _, _, _, _) ->
3788       match fst style with
3789       | RStruct (_, structname) -> update structname RStructOnly
3790       | RStructList (_, structname) -> update structname RStructListOnly
3791       | _ -> ()
3792   ) all_functions;
3793
3794   (* return key->values as a list of (key,value) *)
3795   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
3796
3797 (* debug:
3798 let () =
3799   List.iter (
3800     function
3801     | sn, RStructOnly -> printf "%s RStructOnly\n" sn
3802     | sn, RStructListOnly -> printf "%s RStructListOnly\n" sn
3803     | sn, RStructAndList -> printf "%s RStructAndList\n" sn
3804   ) rstructs_used
3805 *)
3806
3807 (* Used for testing language bindings. *)
3808 type callt =
3809   | CallString of string
3810   | CallOptString of string option
3811   | CallStringList of string list
3812   | CallInt of int
3813   | CallBool of bool
3814
3815 (* Used to memoize the result of pod2text. *)
3816 let pod2text_memo_filename = "src/.pod2text.data"
3817 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
3818   try
3819     let chan = open_in pod2text_memo_filename in
3820     let v = input_value chan in
3821     close_in chan;
3822     v
3823   with
3824     _ -> Hashtbl.create 13
3825
3826 (* Useful functions.
3827  * Note we don't want to use any external OCaml libraries which
3828  * makes this a bit harder than it should be.
3829  *)
3830 let failwithf fs = ksprintf failwith fs
3831
3832 let replace_char s c1 c2 =
3833   let s2 = String.copy s in
3834   let r = ref false in
3835   for i = 0 to String.length s2 - 1 do
3836     if String.unsafe_get s2 i = c1 then (
3837       String.unsafe_set s2 i c2;
3838       r := true
3839     )
3840   done;
3841   if not !r then s else s2
3842
3843 let isspace c =
3844   c = ' '
3845   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
3846
3847 let triml ?(test = isspace) str =
3848   let i = ref 0 in
3849   let n = ref (String.length str) in
3850   while !n > 0 && test str.[!i]; do
3851     decr n;
3852     incr i
3853   done;
3854   if !i = 0 then str
3855   else String.sub str !i !n
3856
3857 let trimr ?(test = isspace) str =
3858   let n = ref (String.length str) in
3859   while !n > 0 && test str.[!n-1]; do
3860     decr n
3861   done;
3862   if !n = String.length str then str
3863   else String.sub str 0 !n
3864
3865 let trim ?(test = isspace) str =
3866   trimr ~test (triml ~test str)
3867
3868 let rec find s sub =
3869   let len = String.length s in
3870   let sublen = String.length sub in
3871   let rec loop i =
3872     if i <= len-sublen then (
3873       let rec loop2 j =
3874         if j < sublen then (
3875           if s.[i+j] = sub.[j] then loop2 (j+1)
3876           else -1
3877         ) else
3878           i (* found *)
3879       in
3880       let r = loop2 0 in
3881       if r = -1 then loop (i+1) else r
3882     ) else
3883       -1 (* not found *)
3884   in
3885   loop 0
3886
3887 let rec replace_str s s1 s2 =
3888   let len = String.length s in
3889   let sublen = String.length s1 in
3890   let i = find s s1 in
3891   if i = -1 then s
3892   else (
3893     let s' = String.sub s 0 i in
3894     let s'' = String.sub s (i+sublen) (len-i-sublen) in
3895     s' ^ s2 ^ replace_str s'' s1 s2
3896   )
3897
3898 let rec string_split sep str =
3899   let len = String.length str in
3900   let seplen = String.length sep in
3901   let i = find str sep in
3902   if i = -1 then [str]
3903   else (
3904     let s' = String.sub str 0 i in
3905     let s'' = String.sub str (i+seplen) (len-i-seplen) in
3906     s' :: string_split sep s''
3907   )
3908
3909 let files_equal n1 n2 =
3910   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
3911   match Sys.command cmd with
3912   | 0 -> true
3913   | 1 -> false
3914   | i -> failwithf "%s: failed with error code %d" cmd i
3915
3916 let rec filter_map f = function
3917   | [] -> []
3918   | x :: xs ->
3919       match f x with
3920       | Some y -> y :: filter_map f xs
3921       | None -> filter_map f xs
3922
3923 let rec find_map f = function
3924   | [] -> raise Not_found
3925   | x :: xs ->
3926       match f x with
3927       | Some y -> y
3928       | None -> find_map f xs
3929
3930 let iteri f xs =
3931   let rec loop i = function
3932     | [] -> ()
3933     | x :: xs -> f i x; loop (i+1) xs
3934   in
3935   loop 0 xs
3936
3937 let mapi f xs =
3938   let rec loop i = function
3939     | [] -> []
3940     | x :: xs -> let r = f i x in r :: loop (i+1) xs
3941   in
3942   loop 0 xs
3943
3944 let name_of_argt = function
3945   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
3946   | StringList n | DeviceList n | Bool n | Int n
3947   | FileIn n | FileOut n -> n
3948
3949 let java_name_of_struct typ =
3950   try List.assoc typ java_structs
3951   with Not_found ->
3952     failwithf
3953       "java_name_of_struct: no java_structs entry corresponding to %s" typ
3954
3955 let cols_of_struct typ =
3956   try List.assoc typ structs
3957   with Not_found ->
3958     failwithf "cols_of_struct: unknown struct %s" typ
3959
3960 let seq_of_test = function
3961   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
3962   | TestOutputListOfDevices (s, _)
3963   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
3964   | TestOutputTrue s | TestOutputFalse s
3965   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
3966   | TestOutputStruct (s, _)
3967   | TestLastFail s -> s
3968
3969 (* Handling for function flags. *)
3970 let protocol_limit_warning =
3971   "Because of the message protocol, there is a transfer limit
3972 of somewhere between 2MB and 4MB.  To transfer large files you should use
3973 FTP."
3974
3975 let danger_will_robinson =
3976   "B<This command is dangerous.  Without careful use you
3977 can easily destroy all your data>."
3978
3979 let deprecation_notice flags =
3980   try
3981     let alt =
3982       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
3983     let txt =
3984       sprintf "This function is deprecated.
3985 In new code, use the C<%s> call instead.
3986
3987 Deprecated functions will not be removed from the API, but the
3988 fact that they are deprecated indicates that there are problems
3989 with correct use of these functions." alt in
3990     Some txt
3991   with
3992     Not_found -> None
3993
3994 (* Check function names etc. for consistency. *)
3995 let check_functions () =
3996   let contains_uppercase str =
3997     let len = String.length str in
3998     let rec loop i =
3999       if i >= len then false
4000       else (
4001         let c = str.[i] in
4002         if c >= 'A' && c <= 'Z' then true
4003         else loop (i+1)
4004       )
4005     in
4006     loop 0
4007   in
4008
4009   (* Check function names. *)
4010   List.iter (
4011     fun (name, _, _, _, _, _, _) ->
4012       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
4013         failwithf "function name %s does not need 'guestfs' prefix" name;
4014       if name = "" then
4015         failwithf "function name is empty";
4016       if name.[0] < 'a' || name.[0] > 'z' then
4017         failwithf "function name %s must start with lowercase a-z" name;
4018       if String.contains name '-' then
4019         failwithf "function name %s should not contain '-', use '_' instead."
4020           name
4021   ) all_functions;
4022
4023   (* Check function parameter/return names. *)
4024   List.iter (
4025     fun (name, style, _, _, _, _, _) ->
4026       let check_arg_ret_name n =
4027         if contains_uppercase n then
4028           failwithf "%s param/ret %s should not contain uppercase chars"
4029             name n;
4030         if String.contains n '-' || String.contains n '_' then
4031           failwithf "%s param/ret %s should not contain '-' or '_'"
4032             name n;
4033         if n = "value" then
4034           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
4035         if n = "int" || n = "char" || n = "short" || n = "long" then
4036           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
4037         if n = "i" || n = "n" then
4038           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
4039         if n = "argv" || n = "args" then
4040           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name
4041       in
4042
4043       (match fst style with
4044        | RErr -> ()
4045        | RInt n | RInt64 n | RBool n
4046        | RConstString n | RConstOptString n | RString n
4047        | RStringList n | RStruct (n, _) | RStructList (n, _)
4048        | RHashtable n | RBufferOut n ->
4049            check_arg_ret_name n
4050       );
4051       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
4052   ) all_functions;
4053
4054   (* Check short descriptions. *)
4055   List.iter (
4056     fun (name, _, _, _, _, shortdesc, _) ->
4057       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
4058         failwithf "short description of %s should begin with lowercase." name;
4059       let c = shortdesc.[String.length shortdesc-1] in
4060       if c = '\n' || c = '.' then
4061         failwithf "short description of %s should not end with . or \\n." name
4062   ) all_functions;
4063
4064   (* Check long dscriptions. *)
4065   List.iter (
4066     fun (name, _, _, _, _, _, longdesc) ->
4067       if longdesc.[String.length longdesc-1] = '\n' then
4068         failwithf "long description of %s should not end with \\n." name
4069   ) all_functions;
4070
4071   (* Check proc_nrs. *)
4072   List.iter (
4073     fun (name, _, proc_nr, _, _, _, _) ->
4074       if proc_nr <= 0 then
4075         failwithf "daemon function %s should have proc_nr > 0" name
4076   ) daemon_functions;
4077
4078   List.iter (
4079     fun (name, _, proc_nr, _, _, _, _) ->
4080       if proc_nr <> -1 then
4081         failwithf "non-daemon function %s should have proc_nr -1" name
4082   ) non_daemon_functions;
4083
4084   let proc_nrs =
4085     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
4086       daemon_functions in
4087   let proc_nrs =
4088     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
4089   let rec loop = function
4090     | [] -> ()
4091     | [_] -> ()
4092     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
4093         loop rest
4094     | (name1,nr1) :: (name2,nr2) :: _ ->
4095         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
4096           name1 name2 nr1 nr2
4097   in
4098   loop proc_nrs;
4099
4100   (* Check tests. *)
4101   List.iter (
4102     function
4103       (* Ignore functions that have no tests.  We generate a
4104        * warning when the user does 'make check' instead.
4105        *)
4106     | name, _, _, _, [], _, _ -> ()
4107     | name, _, _, _, tests, _, _ ->
4108         let funcs =
4109           List.map (
4110             fun (_, _, test) ->
4111               match seq_of_test test with
4112               | [] ->
4113                   failwithf "%s has a test containing an empty sequence" name
4114               | cmds -> List.map List.hd cmds
4115           ) tests in
4116         let funcs = List.flatten funcs in
4117
4118         let tested = List.mem name funcs in
4119
4120         if not tested then
4121           failwithf "function %s has tests but does not test itself" name
4122   ) all_functions
4123
4124 (* 'pr' prints to the current output file. *)
4125 let chan = ref stdout
4126 let pr fs = ksprintf (output_string !chan) fs
4127
4128 (* Generate a header block in a number of standard styles. *)
4129 type comment_style = CStyle | HashStyle | OCamlStyle | HaskellStyle
4130 type license = GPLv2 | LGPLv2
4131
4132 let generate_header comment license =
4133   let c = match comment with
4134     | CStyle ->     pr "/* "; " *"
4135     | HashStyle ->  pr "# ";  "#"
4136     | OCamlStyle -> pr "(* "; " *"
4137     | HaskellStyle -> pr "{- "; "  " in
4138   pr "libguestfs generated file\n";
4139   pr "%s WARNING: THIS FILE IS GENERATED BY 'src/generator.ml'.\n" c;
4140   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
4141   pr "%s\n" c;
4142   pr "%s Copyright (C) 2009 Red Hat Inc.\n" c;
4143   pr "%s\n" c;
4144   (match license with
4145    | GPLv2 ->
4146        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
4147        pr "%s it under the terms of the GNU General Public License as published by\n" c;
4148        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
4149        pr "%s (at your option) any later version.\n" c;
4150        pr "%s\n" c;
4151        pr "%s This program is distributed in the hope that it will be useful,\n" c;
4152        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4153        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
4154        pr "%s GNU General Public License for more details.\n" c;
4155        pr "%s\n" c;
4156        pr "%s You should have received a copy of the GNU General Public License along\n" c;
4157        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
4158        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
4159
4160    | LGPLv2 ->
4161        pr "%s This library is free software; you can redistribute it and/or\n" c;
4162        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
4163        pr "%s License as published by the Free Software Foundation; either\n" c;
4164        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
4165        pr "%s\n" c;
4166        pr "%s This library is distributed in the hope that it will be useful,\n" c;
4167        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4168        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
4169        pr "%s Lesser General Public License for more details.\n" c;
4170        pr "%s\n" c;
4171        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
4172        pr "%s License along with this library; if not, write to the Free Software\n" c;
4173        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
4174   );
4175   (match comment with
4176    | CStyle -> pr " */\n"
4177    | HashStyle -> ()
4178    | OCamlStyle -> pr " *)\n"
4179    | HaskellStyle -> pr "-}\n"
4180   );
4181   pr "\n"
4182
4183 (* Start of main code generation functions below this line. *)
4184
4185 (* Generate the pod documentation for the C API. *)
4186 let rec generate_actions_pod () =
4187   List.iter (
4188     fun (shortname, style, _, flags, _, _, longdesc) ->
4189       if not (List.mem NotInDocs flags) then (
4190         let name = "guestfs_" ^ shortname in
4191         pr "=head2 %s\n\n" name;
4192         pr " ";
4193         generate_prototype ~extern:false ~handle:"handle" name style;
4194         pr "\n\n";
4195         pr "%s\n\n" longdesc;
4196         (match fst style with
4197          | RErr ->
4198              pr "This function returns 0 on success or -1 on error.\n\n"
4199          | RInt _ ->
4200              pr "On error this function returns -1.\n\n"
4201          | RInt64 _ ->
4202              pr "On error this function returns -1.\n\n"
4203          | RBool _ ->
4204              pr "This function returns a C truth value on success or -1 on error.\n\n"
4205          | RConstString _ ->
4206              pr "This function returns a string, or NULL on error.
4207 The string is owned by the guest handle and must I<not> be freed.\n\n"
4208          | RConstOptString _ ->
4209              pr "This function returns a string which may be NULL.
4210 There is way to return an error from this function.
4211 The string is owned by the guest handle and must I<not> be freed.\n\n"
4212          | RString _ ->
4213              pr "This function returns a string, or NULL on error.
4214 I<The caller must free the returned string after use>.\n\n"
4215          | RStringList _ ->
4216              pr "This function returns a NULL-terminated array of strings
4217 (like L<environ(3)>), or NULL if there was an error.
4218 I<The caller must free the strings and the array after use>.\n\n"
4219          | RStruct (_, typ) ->
4220              pr "This function returns a C<struct guestfs_%s *>,
4221 or NULL if there was an error.
4222 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
4223          | RStructList (_, typ) ->
4224              pr "This function returns a C<struct guestfs_%s_list *>
4225 (see E<lt>guestfs-structs.hE<gt>),
4226 or NULL if there was an error.
4227 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
4228          | RHashtable _ ->
4229              pr "This function returns a NULL-terminated array of
4230 strings, or NULL if there was an error.
4231 The array of strings will always have length C<2n+1>, where
4232 C<n> keys and values alternate, followed by the trailing NULL entry.
4233 I<The caller must free the strings and the array after use>.\n\n"
4234          | RBufferOut _ ->
4235              pr "This function returns a buffer, or NULL on error.
4236 The size of the returned buffer is written to C<*size_r>.
4237 I<The caller must free the returned buffer after use>.\n\n"
4238         );
4239         if List.mem ProtocolLimitWarning flags then
4240           pr "%s\n\n" protocol_limit_warning;
4241         if List.mem DangerWillRobinson flags then
4242           pr "%s\n\n" danger_will_robinson;
4243         match deprecation_notice flags with
4244         | None -> ()
4245         | Some txt -> pr "%s\n\n" txt
4246       )
4247   ) all_functions_sorted
4248
4249 and generate_structs_pod () =
4250   (* Structs documentation. *)
4251   List.iter (
4252     fun (typ, cols) ->
4253       pr "=head2 guestfs_%s\n" typ;
4254       pr "\n";
4255       pr " struct guestfs_%s {\n" typ;
4256       List.iter (
4257         function
4258         | name, FChar -> pr "   char %s;\n" name
4259         | name, FUInt32 -> pr "   uint32_t %s;\n" name
4260         | name, FInt32 -> pr "   int32_t %s;\n" name
4261         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
4262         | name, FInt64 -> pr "   int64_t %s;\n" name
4263         | name, FString -> pr "   char *%s;\n" name
4264         | name, FBuffer ->
4265             pr "   /* The next two fields describe a byte array. */\n";
4266             pr "   uint32_t %s_len;\n" name;
4267             pr "   char *%s;\n" name
4268         | name, FUUID ->
4269             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
4270             pr "   char %s[32];\n" name
4271         | name, FOptPercent ->
4272             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
4273             pr "   float %s;\n" name
4274       ) cols;
4275       pr " };\n";
4276       pr " \n";
4277       pr " struct guestfs_%s_list {\n" typ;
4278       pr "   uint32_t len; /* Number of elements in list. */\n";
4279       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
4280       pr " };\n";
4281       pr " \n";
4282       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
4283       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
4284         typ typ;
4285       pr "\n"
4286   ) structs
4287
4288 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
4289  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
4290  *
4291  * We have to use an underscore instead of a dash because otherwise
4292  * rpcgen generates incorrect code.
4293  *
4294  * This header is NOT exported to clients, but see also generate_structs_h.
4295  *)
4296 and generate_xdr () =
4297   generate_header CStyle LGPLv2;
4298
4299   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
4300   pr "typedef string str<>;\n";
4301   pr "\n";
4302
4303   (* Internal structures. *)
4304   List.iter (
4305     function
4306     | typ, cols ->
4307         pr "struct guestfs_int_%s {\n" typ;
4308         List.iter (function
4309                    | name, FChar -> pr "  char %s;\n" name
4310                    | name, FString -> pr "  string %s<>;\n" name
4311                    | name, FBuffer -> pr "  opaque %s<>;\n" name
4312                    | name, FUUID -> pr "  opaque %s[32];\n" name
4313                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
4314                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
4315                    | name, FOptPercent -> pr "  float %s;\n" name
4316                   ) cols;
4317         pr "};\n";
4318         pr "\n";
4319         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
4320         pr "\n";
4321   ) structs;
4322
4323   List.iter (
4324     fun (shortname, style, _, _, _, _, _) ->
4325       let name = "guestfs_" ^ shortname in
4326
4327       (match snd style with
4328        | [] -> ()
4329        | args ->
4330            pr "struct %s_args {\n" name;
4331            List.iter (
4332              function
4333              | Pathname n | Device n | Dev_or_Path n | String n -> pr "  string %s<>;\n" n
4334              | OptString n -> pr "  str *%s;\n" n
4335              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
4336              | Bool n -> pr "  bool %s;\n" n
4337              | Int n -> pr "  int %s;\n" n
4338              | FileIn _ | FileOut _ -> ()
4339            ) args;
4340            pr "};\n\n"
4341       );
4342       (match fst style with
4343        | RErr -> ()
4344        | RInt n ->
4345            pr "struct %s_ret {\n" name;
4346            pr "  int %s;\n" n;
4347            pr "};\n\n"
4348        | RInt64 n ->
4349            pr "struct %s_ret {\n" name;
4350            pr "  hyper %s;\n" n;
4351            pr "};\n\n"
4352        | RBool n ->
4353            pr "struct %s_ret {\n" name;
4354            pr "  bool %s;\n" n;
4355            pr "};\n\n"
4356        | RConstString _ | RConstOptString _ ->
4357            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4358        | RString n ->
4359            pr "struct %s_ret {\n" name;
4360            pr "  string %s<>;\n" n;
4361            pr "};\n\n"
4362        | RStringList n ->
4363            pr "struct %s_ret {\n" name;
4364            pr "  str %s<>;\n" n;
4365            pr "};\n\n"
4366        | RStruct (n, typ) ->
4367            pr "struct %s_ret {\n" name;
4368            pr "  guestfs_int_%s %s;\n" typ n;
4369            pr "};\n\n"
4370        | RStructList (n, typ) ->
4371            pr "struct %s_ret {\n" name;
4372            pr "  guestfs_int_%s_list %s;\n" typ n;
4373            pr "};\n\n"
4374        | RHashtable n ->
4375            pr "struct %s_ret {\n" name;
4376            pr "  str %s<>;\n" n;
4377            pr "};\n\n"
4378        | RBufferOut n ->
4379            pr "struct %s_ret {\n" name;
4380            pr "  opaque %s<>;\n" n;
4381            pr "};\n\n"
4382       );
4383   ) daemon_functions;
4384
4385   (* Table of procedure numbers. *)
4386   pr "enum guestfs_procedure {\n";
4387   List.iter (
4388     fun (shortname, _, proc_nr, _, _, _, _) ->
4389       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
4390   ) daemon_functions;
4391   pr "  GUESTFS_PROC_NR_PROCS\n";
4392   pr "};\n";
4393   pr "\n";
4394
4395   (* Having to choose a maximum message size is annoying for several
4396    * reasons (it limits what we can do in the API), but it (a) makes
4397    * the protocol a lot simpler, and (b) provides a bound on the size
4398    * of the daemon which operates in limited memory space.  For large
4399    * file transfers you should use FTP.
4400    *)
4401   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
4402   pr "\n";
4403
4404   (* Message header, etc. *)
4405   pr "\
4406 /* The communication protocol is now documented in the guestfs(3)
4407  * manpage.
4408  */
4409
4410 const GUESTFS_PROGRAM = 0x2000F5F5;
4411 const GUESTFS_PROTOCOL_VERSION = 1;
4412
4413 /* These constants must be larger than any possible message length. */
4414 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
4415 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
4416
4417 enum guestfs_message_direction {
4418   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
4419   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
4420 };
4421
4422 enum guestfs_message_status {
4423   GUESTFS_STATUS_OK = 0,
4424   GUESTFS_STATUS_ERROR = 1
4425 };
4426
4427 const GUESTFS_ERROR_LEN = 256;
4428
4429 struct guestfs_message_error {
4430   string error_message<GUESTFS_ERROR_LEN>;
4431 };
4432
4433 struct guestfs_message_header {
4434   unsigned prog;                     /* GUESTFS_PROGRAM */
4435   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
4436   guestfs_procedure proc;            /* GUESTFS_PROC_x */
4437   guestfs_message_direction direction;
4438   unsigned serial;                   /* message serial number */
4439   guestfs_message_status status;
4440 };
4441
4442 const GUESTFS_MAX_CHUNK_SIZE = 8192;
4443
4444 struct guestfs_chunk {
4445   int cancel;                        /* if non-zero, transfer is cancelled */
4446   /* data size is 0 bytes if the transfer has finished successfully */
4447   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
4448 };
4449 "
4450
4451 (* Generate the guestfs-structs.h file. *)
4452 and generate_structs_h () =
4453   generate_header CStyle LGPLv2;
4454
4455   (* This is a public exported header file containing various
4456    * structures.  The structures are carefully written to have
4457    * exactly the same in-memory format as the XDR structures that
4458    * we use on the wire to the daemon.  The reason for creating
4459    * copies of these structures here is just so we don't have to
4460    * export the whole of guestfs_protocol.h (which includes much
4461    * unrelated and XDR-dependent stuff that we don't want to be
4462    * public, or required by clients).
4463    *
4464    * To reiterate, we will pass these structures to and from the
4465    * client with a simple assignment or memcpy, so the format
4466    * must be identical to what rpcgen / the RFC defines.
4467    *)
4468
4469   (* Public structures. *)
4470   List.iter (
4471     fun (typ, cols) ->
4472       pr "struct guestfs_%s {\n" typ;
4473       List.iter (
4474         function
4475         | name, FChar -> pr "  char %s;\n" name
4476         | name, FString -> pr "  char *%s;\n" name
4477         | name, FBuffer ->
4478             pr "  uint32_t %s_len;\n" name;
4479             pr "  char *%s;\n" name
4480         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
4481         | name, FUInt32 -> pr "  uint32_t %s;\n" name
4482         | name, FInt32 -> pr "  int32_t %s;\n" name
4483         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
4484         | name, FInt64 -> pr "  int64_t %s;\n" name
4485         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
4486       ) cols;
4487       pr "};\n";
4488       pr "\n";
4489       pr "struct guestfs_%s_list {\n" typ;
4490       pr "  uint32_t len;\n";
4491       pr "  struct guestfs_%s *val;\n" typ;
4492       pr "};\n";
4493       pr "\n";
4494       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
4495       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
4496       pr "\n"
4497   ) structs
4498
4499 (* Generate the guestfs-actions.h file. *)
4500 and generate_actions_h () =
4501   generate_header CStyle LGPLv2;
4502   List.iter (
4503     fun (shortname, style, _, _, _, _, _) ->
4504       let name = "guestfs_" ^ shortname in
4505       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
4506         name style
4507   ) all_functions
4508
4509 (* Generate the client-side dispatch stubs. *)
4510 and generate_client_actions () =
4511   generate_header CStyle LGPLv2;
4512
4513   pr "\
4514 #include <stdio.h>
4515 #include <stdlib.h>
4516
4517 #include \"guestfs.h\"
4518 #include \"guestfs_protocol.h\"
4519
4520 #define error guestfs_error
4521 #define perrorf guestfs_perrorf
4522 #define safe_malloc guestfs_safe_malloc
4523 #define safe_realloc guestfs_safe_realloc
4524 #define safe_strdup guestfs_safe_strdup
4525 #define safe_memdup guestfs_safe_memdup
4526
4527 /* Check the return message from a call for validity. */
4528 static int
4529 check_reply_header (guestfs_h *g,
4530                     const struct guestfs_message_header *hdr,
4531                     int proc_nr, int serial)
4532 {
4533   if (hdr->prog != GUESTFS_PROGRAM) {
4534     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
4535     return -1;
4536   }
4537   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
4538     error (g, \"wrong protocol version (%%d/%%d)\",
4539            hdr->vers, GUESTFS_PROTOCOL_VERSION);
4540     return -1;
4541   }
4542   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
4543     error (g, \"unexpected message direction (%%d/%%d)\",
4544            hdr->direction, GUESTFS_DIRECTION_REPLY);
4545     return -1;
4546   }
4547   if (hdr->proc != proc_nr) {
4548     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
4549     return -1;
4550   }
4551   if (hdr->serial != serial) {
4552     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
4553     return -1;
4554   }
4555
4556   return 0;
4557 }
4558
4559 /* Check we are in the right state to run a high-level action. */
4560 static int
4561 check_state (guestfs_h *g, const char *caller)
4562 {
4563   if (!guestfs_is_ready (g)) {
4564     if (guestfs_is_config (g))
4565       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
4566         caller);
4567     else if (guestfs_is_launching (g))
4568       error (g, \"%%s: call wait_ready() before using this function\",
4569         caller);
4570     else
4571       error (g, \"%%s called from the wrong state, %%d != READY\",
4572         caller, guestfs_get_state (g));
4573     return -1;
4574   }
4575   return 0;
4576 }
4577
4578 ";
4579
4580   (* Client-side stubs for each function. *)
4581   List.iter (
4582     fun (shortname, style, _, _, _, _, _) ->
4583       let name = "guestfs_" ^ shortname in
4584
4585       (* Generate the context struct which stores the high-level
4586        * state between callback functions.
4587        *)
4588       pr "struct %s_ctx {\n" shortname;
4589       pr "  /* This flag is set by the callbacks, so we know we've done\n";
4590       pr "   * the callbacks as expected, and in the right sequence.\n";
4591       pr "   * 0 = not called, 1 = reply_cb called.\n";
4592       pr "   */\n";
4593       pr "  int cb_sequence;\n";
4594       pr "  struct guestfs_message_header hdr;\n";
4595       pr "  struct guestfs_message_error err;\n";
4596       (match fst style with
4597        | RErr -> ()
4598        | RConstString _ | RConstOptString _ ->
4599            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4600        | RInt _ | RInt64 _
4601        | RBool _ | RString _ | RStringList _
4602        | RStruct _ | RStructList _
4603        | RHashtable _ | RBufferOut _ ->
4604            pr "  struct %s_ret ret;\n" name
4605       );
4606       pr "};\n";
4607       pr "\n";
4608
4609       (* Generate the reply callback function. *)
4610       pr "static void %s_reply_cb (guestfs_h *g, void *data, XDR *xdr)\n" shortname;
4611       pr "{\n";
4612       pr "  guestfs_main_loop *ml = guestfs_get_main_loop (g);\n";
4613       pr "  struct %s_ctx *ctx = (struct %s_ctx *) data;\n" shortname shortname;
4614       pr "\n";
4615       pr "  /* This should definitely not happen. */\n";
4616       pr "  if (ctx->cb_sequence != 0) {\n";
4617       pr "    ctx->cb_sequence = 9999;\n";
4618       pr "    error (g, \"%%s: internal error: reply callback called twice\", \"%s\");\n" name;
4619       pr "    return;\n";
4620       pr "  }\n";
4621       pr "\n";
4622       pr "  ml->main_loop_quit (ml, g);\n";
4623       pr "\n";
4624       pr "  if (!xdr_guestfs_message_header (xdr, &ctx->hdr)) {\n";
4625       pr "    error (g, \"%%s: failed to parse reply header\", \"%s\");\n" name;
4626       pr "    return;\n";
4627       pr "  }\n";
4628       pr "  if (ctx->hdr.status == GUESTFS_STATUS_ERROR) {\n";
4629       pr "    if (!xdr_guestfs_message_error (xdr, &ctx->err)) {\n";
4630       pr "      error (g, \"%%s: failed to parse reply error\", \"%s\");\n"
4631         name;
4632       pr "      return;\n";
4633       pr "    }\n";
4634       pr "    goto done;\n";
4635       pr "  }\n";
4636
4637       (match fst style with
4638        | RErr -> ()
4639        | RConstString _ | RConstOptString _ ->
4640            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4641        | RInt _ | RInt64 _
4642        | RBool _ | RString _ | RStringList _
4643        | RStruct _ | RStructList _
4644        | RHashtable _ | RBufferOut _ ->
4645            pr "  if (!xdr_%s_ret (xdr, &ctx->ret)) {\n" name;
4646            pr "    error (g, \"%%s: failed to parse reply\", \"%s\");\n" name;
4647            pr "    return;\n";
4648            pr "  }\n";
4649       );
4650
4651       pr " done:\n";
4652       pr "  ctx->cb_sequence = 1;\n";
4653       pr "}\n\n";
4654
4655       (* Generate the action stub. *)
4656       generate_prototype ~extern:false ~semicolon:false ~newline:true
4657         ~handle:"g" name style;
4658
4659       let error_code =
4660         match fst style with
4661         | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
4662         | RConstString _ | RConstOptString _ ->
4663             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4664         | RString _ | RStringList _
4665         | RStruct _ | RStructList _
4666         | RHashtable _ | RBufferOut _ ->
4667             "NULL" in
4668
4669       pr "{\n";
4670
4671       (match snd style with
4672        | [] -> ()
4673        | _ -> pr "  struct %s_args args;\n" name
4674       );
4675
4676       pr "  struct %s_ctx ctx;\n" shortname;
4677       pr "  guestfs_main_loop *ml = guestfs_get_main_loop (g);\n";
4678       pr "  int serial;\n";
4679       pr "\n";
4680       pr "  if (check_state (g, \"%s\") == -1) return %s;\n" name error_code;
4681       pr "  guestfs_set_busy (g);\n";
4682       pr "\n";
4683       pr "  memset (&ctx, 0, sizeof ctx);\n";
4684       pr "\n";
4685
4686       (* Send the main header and arguments. *)
4687       (match snd style with
4688        | [] ->
4689            pr "  serial = guestfs__send_sync (g, GUESTFS_PROC_%s, NULL, NULL);\n"
4690              (String.uppercase shortname)
4691        | args ->
4692            List.iter (
4693              function
4694              | Pathname n | Device n | Dev_or_Path n | String n ->
4695                  pr "  args.%s = (char *) %s;\n" n n
4696              | OptString n ->
4697                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
4698              | StringList n | DeviceList n ->
4699                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
4700                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
4701              | Bool n ->
4702                  pr "  args.%s = %s;\n" n n
4703              | Int n ->
4704                  pr "  args.%s = %s;\n" n n
4705              | FileIn _ | FileOut _ -> ()
4706            ) args;
4707            pr "  serial = guestfs__send_sync (g, GUESTFS_PROC_%s,\n"
4708              (String.uppercase shortname);
4709            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
4710              name;
4711       );
4712       pr "  if (serial == -1) {\n";
4713       pr "    guestfs_end_busy (g);\n";
4714       pr "    return %s;\n" error_code;
4715       pr "  }\n";
4716       pr "\n";
4717
4718       (* Send any additional files (FileIn) requested. *)
4719       let need_read_reply_label = ref false in
4720       List.iter (
4721         function
4722         | FileIn n ->
4723             pr "  {\n";
4724             pr "    int r;\n";
4725             pr "\n";
4726             pr "    r = guestfs__send_file_sync (g, %s);\n" n;
4727             pr "    if (r == -1) {\n";
4728             pr "      guestfs_end_busy (g);\n";
4729             pr "      return %s;\n" error_code;
4730             pr "    }\n";
4731             pr "    if (r == -2) /* daemon cancelled */\n";
4732             pr "      goto read_reply;\n";
4733             need_read_reply_label := true;
4734             pr "  }\n";
4735             pr "\n";
4736         | _ -> ()
4737       ) (snd style);
4738
4739       (* Wait for the reply from the remote end. *)
4740       if !need_read_reply_label then pr " read_reply:\n";
4741       pr "  guestfs__switch_to_receiving (g);\n";
4742       pr "  ctx.cb_sequence = 0;\n";
4743       pr "  guestfs_set_reply_callback (g, %s_reply_cb, &ctx);\n" shortname;
4744       pr "  (void) ml->main_loop_run (ml, g);\n";
4745       pr "  guestfs_set_reply_callback (g, NULL, NULL);\n";
4746       pr "  if (ctx.cb_sequence != 1) {\n";
4747       pr "    error (g, \"%%s reply failed, see earlier error messages\", \"%s\");\n" name;
4748       pr "    guestfs_end_busy (g);\n";
4749       pr "    return %s;\n" error_code;
4750       pr "  }\n";
4751       pr "\n";
4752
4753       pr "  if (check_reply_header (g, &ctx.hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
4754         (String.uppercase shortname);
4755       pr "    guestfs_end_busy (g);\n";
4756       pr "    return %s;\n" error_code;
4757       pr "  }\n";
4758       pr "\n";
4759
4760       pr "  if (ctx.hdr.status == GUESTFS_STATUS_ERROR) {\n";
4761       pr "    error (g, \"%%s\", ctx.err.error_message);\n";
4762       pr "    free (ctx.err.error_message);\n";
4763       pr "    guestfs_end_busy (g);\n";
4764       pr "    return %s;\n" error_code;
4765       pr "  }\n";
4766       pr "\n";
4767
4768       (* Expecting to receive further files (FileOut)? *)
4769       List.iter (
4770         function
4771         | FileOut n ->
4772             pr "  if (guestfs__receive_file_sync (g, %s) == -1) {\n" n;
4773             pr "    guestfs_end_busy (g);\n";
4774             pr "    return %s;\n" error_code;
4775             pr "  }\n";
4776             pr "\n";
4777         | _ -> ()
4778       ) (snd style);
4779
4780       pr "  guestfs_end_busy (g);\n";
4781
4782       (match fst style with
4783        | RErr -> pr "  return 0;\n"
4784        | RInt n | RInt64 n | RBool n ->
4785            pr "  return ctx.ret.%s;\n" n
4786        | RConstString _ | RConstOptString _ ->
4787            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4788        | RString n ->
4789            pr "  return ctx.ret.%s; /* caller will free */\n" n
4790        | RStringList n | RHashtable n ->
4791            pr "  /* caller will free this, but we need to add a NULL entry */\n";
4792            pr "  ctx.ret.%s.%s_val =\n" n n;
4793            pr "    safe_realloc (g, ctx.ret.%s.%s_val,\n" n n;
4794            pr "                  sizeof (char *) * (ctx.ret.%s.%s_len + 1));\n"
4795              n n;
4796            pr "  ctx.ret.%s.%s_val[ctx.ret.%s.%s_len] = NULL;\n" n n n n;
4797            pr "  return ctx.ret.%s.%s_val;\n" n n
4798        | RStruct (n, _) ->
4799            pr "  /* caller will free this */\n";
4800            pr "  return safe_memdup (g, &ctx.ret.%s, sizeof (ctx.ret.%s));\n" n n
4801        | RStructList (n, _) ->
4802            pr "  /* caller will free this */\n";
4803            pr "  return safe_memdup (g, &ctx.ret.%s, sizeof (ctx.ret.%s));\n" n n
4804        | RBufferOut n ->
4805            pr "  *size_r = ctx.ret.%s.%s_len;\n" n n;
4806            pr "  return ctx.ret.%s.%s_val; /* caller will free */\n" n n
4807       );
4808
4809       pr "}\n\n"
4810   ) daemon_functions;
4811
4812   (* Functions to free structures. *)
4813   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
4814   pr " * structure format is identical to the XDR format.  See note in\n";
4815   pr " * generator.ml.\n";
4816   pr " */\n";
4817   pr "\n";
4818
4819   List.iter (
4820     fun (typ, _) ->
4821       pr "void\n";
4822       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
4823       pr "{\n";
4824       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
4825       pr "  free (x);\n";
4826       pr "}\n";
4827       pr "\n";
4828
4829       pr "void\n";
4830       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
4831       pr "{\n";
4832       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
4833       pr "  free (x);\n";
4834       pr "}\n";
4835       pr "\n";
4836
4837   ) structs;
4838
4839 (* Generate daemon/actions.h. *)
4840 and generate_daemon_actions_h () =
4841   generate_header CStyle GPLv2;
4842
4843   pr "#include \"../src/guestfs_protocol.h\"\n";
4844   pr "\n";
4845
4846   List.iter (
4847     fun (name, style, _, _, _, _, _) ->
4848       generate_prototype
4849         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
4850         name style;
4851   ) daemon_functions
4852
4853 (* Generate the server-side stubs. *)
4854 and generate_daemon_actions () =
4855   generate_header CStyle GPLv2;
4856
4857   pr "#include <config.h>\n";
4858   pr "\n";
4859   pr "#include <stdio.h>\n";
4860   pr "#include <stdlib.h>\n";
4861   pr "#include <string.h>\n";
4862   pr "#include <inttypes.h>\n";
4863   pr "#include <ctype.h>\n";
4864   pr "#include <rpc/types.h>\n";
4865   pr "#include <rpc/xdr.h>\n";
4866   pr "\n";
4867   pr "#include \"daemon.h\"\n";
4868   pr "#include \"../src/guestfs_protocol.h\"\n";
4869   pr "#include \"actions.h\"\n";
4870   pr "\n";
4871
4872   List.iter (
4873     fun (name, style, _, _, _, _, _) ->
4874       (* Generate server-side stubs. *)
4875       pr "static void %s_stub (XDR *xdr_in)\n" name;
4876       pr "{\n";
4877       let error_code =
4878         match fst style with
4879         | RErr | RInt _ -> pr "  int r;\n"; "-1"
4880         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
4881         | RBool _ -> pr "  int r;\n"; "-1"
4882         | RConstString _ | RConstOptString _ ->
4883             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4884         | RString _ -> pr "  char *r;\n"; "NULL"
4885         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
4886         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
4887         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
4888         | RBufferOut _ ->
4889             pr "  size_t size;\n";
4890             pr "  char *r;\n";
4891             "NULL" in
4892
4893       (match snd style with
4894        | [] -> ()
4895        | args ->
4896            pr "  struct guestfs_%s_args args;\n" name;
4897            List.iter (
4898              function
4899              | Device n | Dev_or_Path n
4900              | Pathname n
4901              | String n -> ()
4902              | OptString n -> pr "  char *%s;\n" n
4903              | StringList n | DeviceList n -> pr "  char **%s;\n" n
4904              | Bool n -> pr "  int %s;\n" n
4905              | Int n -> pr "  int %s;\n" n
4906              | FileIn _ | FileOut _ -> ()
4907            ) args
4908       );
4909       pr "\n";
4910
4911       (match snd style with
4912        | [] -> ()
4913        | args ->
4914            pr "  memset (&args, 0, sizeof args);\n";
4915            pr "\n";
4916            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
4917            pr "    reply_with_error (\"%%s: daemon failed to decode procedure arguments\", \"%s\");\n" name;
4918            pr "    return;\n";
4919            pr "  }\n";
4920            let pr_args n =
4921              pr "  char *%s = args.%s;\n" n n
4922            in
4923            let pr_list_handling_code n =
4924              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
4925              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
4926              pr "  if (%s == NULL) {\n" n;
4927              pr "    reply_with_perror (\"realloc\");\n";
4928              pr "    goto done;\n";
4929              pr "  }\n";
4930              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
4931              pr "  args.%s.%s_val = %s;\n" n n n;
4932            in
4933            List.iter (
4934              function
4935              | Pathname n ->
4936                  pr_args n;
4937                  pr "  ABS_PATH (%s, goto done);\n" n;
4938              | Device n ->
4939                  pr_args n;
4940                  pr "  RESOLVE_DEVICE (%s, goto done);\n" n;
4941              | Dev_or_Path n ->
4942                  pr_args n;
4943                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, goto done);\n" n;
4944              | String n -> pr_args n
4945              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
4946              | StringList n ->
4947                  pr_list_handling_code n;
4948              | DeviceList n ->
4949                  pr_list_handling_code n;
4950                  pr "  /* Ensure that each is a device,\n";
4951                  pr "   * and perform device name translation. */\n";
4952                  pr "  { int pvi; for (pvi = 0; physvols[pvi] != NULL; ++pvi)\n";
4953                  pr "    RESOLVE_DEVICE (physvols[pvi], goto done);\n";
4954                  pr "  }\n";
4955              | Bool n -> pr "  %s = args.%s;\n" n n
4956              | Int n -> pr "  %s = args.%s;\n" n n
4957              | FileIn _ | FileOut _ -> ()
4958            ) args;
4959            pr "\n"
4960       );
4961
4962
4963       (* this is used at least for do_equal *)
4964       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
4965         (* Emit NEED_ROOT just once, even when there are two or
4966            more Pathname args *)
4967         pr "  NEED_ROOT (goto done);\n";
4968       );
4969
4970       (* Don't want to call the impl with any FileIn or FileOut
4971        * parameters, since these go "outside" the RPC protocol.
4972        *)
4973       let args' =
4974         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
4975           (snd style) in
4976       pr "  r = do_%s " name;
4977       generate_c_call_args (fst style, args');
4978       pr ";\n";
4979
4980       pr "  if (r == %s)\n" error_code;
4981       pr "    /* do_%s has already called reply_with_error */\n" name;
4982       pr "    goto done;\n";
4983       pr "\n";
4984
4985       (* If there are any FileOut parameters, then the impl must
4986        * send its own reply.
4987        *)
4988       let no_reply =
4989         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
4990       if no_reply then
4991         pr "  /* do_%s has already sent a reply */\n" name
4992       else (
4993         match fst style with
4994         | RErr -> pr "  reply (NULL, NULL);\n"
4995         | RInt n | RInt64 n | RBool n ->
4996             pr "  struct guestfs_%s_ret ret;\n" name;
4997             pr "  ret.%s = r;\n" n;
4998             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
4999               name
5000         | RConstString _ | RConstOptString _ ->
5001             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5002         | RString n ->
5003             pr "  struct guestfs_%s_ret ret;\n" name;
5004             pr "  ret.%s = r;\n" n;
5005             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5006               name;
5007             pr "  free (r);\n"
5008         | RStringList n | RHashtable n ->
5009             pr "  struct guestfs_%s_ret ret;\n" name;
5010             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
5011             pr "  ret.%s.%s_val = r;\n" n n;
5012             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5013               name;
5014             pr "  free_strings (r);\n"
5015         | RStruct (n, _) ->
5016             pr "  struct guestfs_%s_ret ret;\n" name;
5017             pr "  ret.%s = *r;\n" n;
5018             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5019               name;
5020             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5021               name
5022         | RStructList (n, _) ->
5023             pr "  struct guestfs_%s_ret ret;\n" name;
5024             pr "  ret.%s = *r;\n" n;
5025             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5026               name;
5027             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5028               name
5029         | RBufferOut n ->
5030             pr "  struct guestfs_%s_ret ret;\n" name;
5031             pr "  ret.%s.%s_val = r;\n" n n;
5032             pr "  ret.%s.%s_len = size;\n" n n;
5033             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5034               name;
5035             pr "  free (r);\n"
5036       );
5037
5038       (* Free the args. *)
5039       (match snd style with
5040        | [] ->
5041            pr "done: ;\n";
5042        | _ ->
5043            pr "done:\n";
5044            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
5045              name
5046       );
5047
5048       pr "}\n\n";
5049   ) daemon_functions;
5050
5051   (* Dispatch function. *)
5052   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
5053   pr "{\n";
5054   pr "  switch (proc_nr) {\n";
5055
5056   List.iter (
5057     fun (name, style, _, _, _, _, _) ->
5058       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
5059       pr "      %s_stub (xdr_in);\n" name;
5060       pr "      break;\n"
5061   ) daemon_functions;
5062
5063   pr "    default:\n";
5064   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
5065   pr "  }\n";
5066   pr "}\n";
5067   pr "\n";
5068
5069   (* LVM columns and tokenization functions. *)
5070   (* XXX This generates crap code.  We should rethink how we
5071    * do this parsing.
5072    *)
5073   List.iter (
5074     function
5075     | typ, cols ->
5076         pr "static const char *lvm_%s_cols = \"%s\";\n"
5077           typ (String.concat "," (List.map fst cols));
5078         pr "\n";
5079
5080         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
5081         pr "{\n";
5082         pr "  char *tok, *p, *next;\n";
5083         pr "  int i, j;\n";
5084         pr "\n";
5085         (*
5086           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
5087           pr "\n";
5088         *)
5089         pr "  if (!str) {\n";
5090         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
5091         pr "    return -1;\n";
5092         pr "  }\n";
5093         pr "  if (!*str || isspace (*str)) {\n";
5094         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
5095         pr "    return -1;\n";
5096         pr "  }\n";
5097         pr "  tok = str;\n";
5098         List.iter (
5099           fun (name, coltype) ->
5100             pr "  if (!tok) {\n";
5101             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
5102             pr "    return -1;\n";
5103             pr "  }\n";
5104             pr "  p = strchrnul (tok, ',');\n";
5105             pr "  if (*p) next = p+1; else next = NULL;\n";
5106             pr "  *p = '\\0';\n";
5107             (match coltype with
5108              | FString ->
5109                  pr "  r->%s = strdup (tok);\n" name;
5110                  pr "  if (r->%s == NULL) {\n" name;
5111                  pr "    perror (\"strdup\");\n";
5112                  pr "    return -1;\n";
5113                  pr "  }\n"
5114              | FUUID ->
5115                  pr "  for (i = j = 0; i < 32; ++j) {\n";
5116                  pr "    if (tok[j] == '\\0') {\n";
5117                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
5118                  pr "      return -1;\n";
5119                  pr "    } else if (tok[j] != '-')\n";
5120                  pr "      r->%s[i++] = tok[j];\n" name;
5121                  pr "  }\n";
5122              | FBytes ->
5123                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
5124                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5125                  pr "    return -1;\n";
5126                  pr "  }\n";
5127              | FInt64 ->
5128                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
5129                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5130                  pr "    return -1;\n";
5131                  pr "  }\n";
5132              | FOptPercent ->
5133                  pr "  if (tok[0] == '\\0')\n";
5134                  pr "    r->%s = -1;\n" name;
5135                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
5136                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5137                  pr "    return -1;\n";
5138                  pr "  }\n";
5139              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
5140                  assert false (* can never be an LVM column *)
5141             );
5142             pr "  tok = next;\n";
5143         ) cols;
5144
5145         pr "  if (tok != NULL) {\n";
5146         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
5147         pr "    return -1;\n";
5148         pr "  }\n";
5149         pr "  return 0;\n";
5150         pr "}\n";
5151         pr "\n";
5152
5153         pr "guestfs_int_lvm_%s_list *\n" typ;
5154         pr "parse_command_line_%ss (void)\n" typ;
5155         pr "{\n";
5156         pr "  char *out, *err;\n";
5157         pr "  char *p, *pend;\n";
5158         pr "  int r, i;\n";
5159         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
5160         pr "  void *newp;\n";
5161         pr "\n";
5162         pr "  ret = malloc (sizeof *ret);\n";
5163         pr "  if (!ret) {\n";
5164         pr "    reply_with_perror (\"malloc\");\n";
5165         pr "    return NULL;\n";
5166         pr "  }\n";
5167         pr "\n";
5168         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
5169         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
5170         pr "\n";
5171         pr "  r = command (&out, &err,\n";
5172         pr "           \"/sbin/lvm\", \"%ss\",\n" typ;
5173         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
5174         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
5175         pr "  if (r == -1) {\n";
5176         pr "    reply_with_error (\"%%s\", err);\n";
5177         pr "    free (out);\n";
5178         pr "    free (err);\n";
5179         pr "    free (ret);\n";
5180         pr "    return NULL;\n";
5181         pr "  }\n";
5182         pr "\n";
5183         pr "  free (err);\n";
5184         pr "\n";
5185         pr "  /* Tokenize each line of the output. */\n";
5186         pr "  p = out;\n";
5187         pr "  i = 0;\n";
5188         pr "  while (p) {\n";
5189         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
5190         pr "    if (pend) {\n";
5191         pr "      *pend = '\\0';\n";
5192         pr "      pend++;\n";
5193         pr "    }\n";
5194         pr "\n";
5195         pr "    while (*p && isspace (*p))      /* Skip any leading whitespace. */\n";
5196         pr "      p++;\n";
5197         pr "\n";
5198         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
5199         pr "      p = pend;\n";
5200         pr "      continue;\n";
5201         pr "    }\n";
5202         pr "\n";
5203         pr "    /* Allocate some space to store this next entry. */\n";
5204         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
5205         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
5206         pr "    if (newp == NULL) {\n";
5207         pr "      reply_with_perror (\"realloc\");\n";
5208         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5209         pr "      free (ret);\n";
5210         pr "      free (out);\n";
5211         pr "      return NULL;\n";
5212         pr "    }\n";
5213         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
5214         pr "\n";
5215         pr "    /* Tokenize the next entry. */\n";
5216         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
5217         pr "    if (r == -1) {\n";
5218         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
5219         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5220         pr "      free (ret);\n";
5221         pr "      free (out);\n";
5222         pr "      return NULL;\n";
5223         pr "    }\n";
5224         pr "\n";
5225         pr "    ++i;\n";
5226         pr "    p = pend;\n";
5227         pr "  }\n";
5228         pr "\n";
5229         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
5230         pr "\n";
5231         pr "  free (out);\n";
5232         pr "  return ret;\n";
5233         pr "}\n"
5234
5235   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
5236
5237 (* Generate a list of function names, for debugging in the daemon.. *)
5238 and generate_daemon_names () =
5239   generate_header CStyle GPLv2;
5240
5241   pr "#include <config.h>\n";
5242   pr "\n";
5243   pr "#include \"daemon.h\"\n";
5244   pr "\n";
5245
5246   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
5247   pr "const char *function_names[] = {\n";
5248   List.iter (
5249     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
5250   ) daemon_functions;
5251   pr "};\n";
5252
5253 (* Generate the tests. *)
5254 and generate_tests () =
5255   generate_header CStyle GPLv2;
5256
5257   pr "\
5258 #include <stdio.h>
5259 #include <stdlib.h>
5260 #include <string.h>
5261 #include <unistd.h>
5262 #include <sys/types.h>
5263 #include <fcntl.h>
5264
5265 #include \"guestfs.h\"
5266
5267 static guestfs_h *g;
5268 static int suppress_error = 0;
5269
5270 static void print_error (guestfs_h *g, void *data, const char *msg)
5271 {
5272   if (!suppress_error)
5273     fprintf (stderr, \"%%s\\n\", msg);
5274 }
5275
5276 /* FIXME: nearly identical code appears in fish.c */
5277 static void print_strings (char const *const *argv)
5278 {
5279   int argc;
5280
5281   for (argc = 0; argv[argc] != NULL; ++argc)
5282     printf (\"\\t%%s\\n\", argv[argc]);
5283 }
5284
5285 /*
5286 static void print_table (char const *const *argv)
5287 {
5288   int i;
5289
5290   for (i = 0; argv[i] != NULL; i += 2)
5291     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
5292 }
5293 */
5294
5295 ";
5296
5297   (* Generate a list of commands which are not tested anywhere. *)
5298   pr "static void no_test_warnings (void)\n";
5299   pr "{\n";
5300
5301   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
5302   List.iter (
5303     fun (_, _, _, _, tests, _, _) ->
5304       let tests = filter_map (
5305         function
5306         | (_, (Always|If _|Unless _), test) -> Some test
5307         | (_, Disabled, _) -> None
5308       ) tests in
5309       let seq = List.concat (List.map seq_of_test tests) in
5310       let cmds_tested = List.map List.hd seq in
5311       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
5312   ) all_functions;
5313
5314   List.iter (
5315     fun (name, _, _, _, _, _, _) ->
5316       if not (Hashtbl.mem hash name) then
5317         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
5318   ) all_functions;
5319
5320   pr "}\n";
5321   pr "\n";
5322
5323   (* Generate the actual tests.  Note that we generate the tests
5324    * in reverse order, deliberately, so that (in general) the
5325    * newest tests run first.  This makes it quicker and easier to
5326    * debug them.
5327    *)
5328   let test_names =
5329     List.map (
5330       fun (name, _, _, _, tests, _, _) ->
5331         mapi (generate_one_test name) tests
5332     ) (List.rev all_functions) in
5333   let test_names = List.concat test_names in
5334   let nr_tests = List.length test_names in
5335
5336   pr "\
5337 int main (int argc, char *argv[])
5338 {
5339   char c = 0;
5340   int failed = 0;
5341   const char *filename;
5342   int fd;
5343   int nr_tests, test_num = 0;
5344
5345   setbuf (stdout, NULL);
5346
5347   no_test_warnings ();
5348
5349   g = guestfs_create ();
5350   if (g == NULL) {
5351     printf (\"guestfs_create FAILED\\n\");
5352     exit (1);
5353   }
5354
5355   guestfs_set_error_handler (g, print_error, NULL);
5356
5357   guestfs_set_path (g, \"../appliance\");
5358
5359   filename = \"test1.img\";
5360   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5361   if (fd == -1) {
5362     perror (filename);
5363     exit (1);
5364   }
5365   if (lseek (fd, %d, SEEK_SET) == -1) {
5366     perror (\"lseek\");
5367     close (fd);
5368     unlink (filename);
5369     exit (1);
5370   }
5371   if (write (fd, &c, 1) == -1) {
5372     perror (\"write\");
5373     close (fd);
5374     unlink (filename);
5375     exit (1);
5376   }
5377   if (close (fd) == -1) {
5378     perror (filename);
5379     unlink (filename);
5380     exit (1);
5381   }
5382   if (guestfs_add_drive (g, filename) == -1) {
5383     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5384     exit (1);
5385   }
5386
5387   filename = \"test2.img\";
5388   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5389   if (fd == -1) {
5390     perror (filename);
5391     exit (1);
5392   }
5393   if (lseek (fd, %d, SEEK_SET) == -1) {
5394     perror (\"lseek\");
5395     close (fd);
5396     unlink (filename);
5397     exit (1);
5398   }
5399   if (write (fd, &c, 1) == -1) {
5400     perror (\"write\");
5401     close (fd);
5402     unlink (filename);
5403     exit (1);
5404   }
5405   if (close (fd) == -1) {
5406     perror (filename);
5407     unlink (filename);
5408     exit (1);
5409   }
5410   if (guestfs_add_drive (g, filename) == -1) {
5411     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5412     exit (1);
5413   }
5414
5415   filename = \"test3.img\";
5416   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5417   if (fd == -1) {
5418     perror (filename);
5419     exit (1);
5420   }
5421   if (lseek (fd, %d, SEEK_SET) == -1) {
5422     perror (\"lseek\");
5423     close (fd);
5424     unlink (filename);
5425     exit (1);
5426   }
5427   if (write (fd, &c, 1) == -1) {
5428     perror (\"write\");
5429     close (fd);
5430     unlink (filename);
5431     exit (1);
5432   }
5433   if (close (fd) == -1) {
5434     perror (filename);
5435     unlink (filename);
5436     exit (1);
5437   }
5438   if (guestfs_add_drive (g, filename) == -1) {
5439     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5440     exit (1);
5441   }
5442
5443   if (guestfs_add_drive_ro (g, \"../images/test.sqsh\") == -1) {
5444     printf (\"guestfs_add_drive_ro ../images/test.sqsh FAILED\\n\");
5445     exit (1);
5446   }
5447
5448   if (guestfs_launch (g) == -1) {
5449     printf (\"guestfs_launch FAILED\\n\");
5450     exit (1);
5451   }
5452
5453   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
5454   alarm (600);
5455
5456   if (guestfs_wait_ready (g) == -1) {
5457     printf (\"guestfs_wait_ready FAILED\\n\");
5458     exit (1);
5459   }
5460
5461   /* Cancel previous alarm. */
5462   alarm (0);
5463
5464   nr_tests = %d;
5465
5466 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
5467
5468   iteri (
5469     fun i test_name ->
5470       pr "  test_num++;\n";
5471       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
5472       pr "  if (%s () == -1) {\n" test_name;
5473       pr "    printf (\"%s FAILED\\n\");\n" test_name;
5474       pr "    failed++;\n";
5475       pr "  }\n";
5476   ) test_names;
5477   pr "\n";
5478
5479   pr "  guestfs_close (g);\n";
5480   pr "  unlink (\"test1.img\");\n";
5481   pr "  unlink (\"test2.img\");\n";
5482   pr "  unlink (\"test3.img\");\n";
5483   pr "\n";
5484
5485   pr "  if (failed > 0) {\n";
5486   pr "    printf (\"***** %%d / %%d tests FAILED *****\\n\", failed, nr_tests);\n";
5487   pr "    exit (1);\n";
5488   pr "  }\n";
5489   pr "\n";
5490
5491   pr "  exit (0);\n";
5492   pr "}\n"
5493
5494 and generate_one_test name i (init, prereq, test) =
5495   let test_name = sprintf "test_%s_%d" name i in
5496
5497   pr "\
5498 static int %s_skip (void)
5499 {
5500   const char *str;
5501
5502   str = getenv (\"TEST_ONLY\");
5503   if (str)
5504     return strstr (str, \"%s\") == NULL;
5505   str = getenv (\"SKIP_%s\");
5506   if (str && strcmp (str, \"1\") == 0) return 1;
5507   str = getenv (\"SKIP_TEST_%s\");
5508   if (str && strcmp (str, \"1\") == 0) return 1;
5509   return 0;
5510 }
5511
5512 " test_name name (String.uppercase test_name) (String.uppercase name);
5513
5514   (match prereq with
5515    | Disabled | Always -> ()
5516    | If code | Unless code ->
5517        pr "static int %s_prereq (void)\n" test_name;
5518        pr "{\n";
5519        pr "  %s\n" code;
5520        pr "}\n";
5521        pr "\n";
5522   );
5523
5524   pr "\
5525 static int %s (void)
5526 {
5527   if (%s_skip ()) {
5528     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
5529     return 0;
5530   }
5531
5532 " test_name test_name test_name;
5533
5534   (match prereq with
5535    | Disabled ->
5536        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
5537    | If _ ->
5538        pr "  if (! %s_prereq ()) {\n" test_name;
5539        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
5540        pr "    return 0;\n";
5541        pr "  }\n";
5542        pr "\n";
5543        generate_one_test_body name i test_name init test;
5544    | Unless _ ->
5545        pr "  if (%s_prereq ()) {\n" test_name;
5546        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
5547        pr "    return 0;\n";
5548        pr "  }\n";
5549        pr "\n";
5550        generate_one_test_body name i test_name init test;
5551    | Always ->
5552        generate_one_test_body name i test_name init test
5553   );
5554
5555   pr "  return 0;\n";
5556   pr "}\n";
5557   pr "\n";
5558   test_name
5559
5560 and generate_one_test_body name i test_name init test =
5561   (match init with
5562    | InitNone (* XXX at some point, InitNone and InitEmpty became
5563                * folded together as the same thing.  Really we should
5564                * make InitNone do nothing at all, but the tests may
5565                * need to be checked to make sure this is OK.
5566                *)
5567    | InitEmpty ->
5568        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
5569        List.iter (generate_test_command_call test_name)
5570          [["blockdev_setrw"; "/dev/sda"];
5571           ["umount_all"];
5572           ["lvm_remove_all"]]
5573    | InitPartition ->
5574        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
5575        List.iter (generate_test_command_call test_name)
5576          [["blockdev_setrw"; "/dev/sda"];
5577           ["umount_all"];
5578           ["lvm_remove_all"];
5579           ["sfdiskM"; "/dev/sda"; ","]]
5580    | InitBasicFS ->
5581        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
5582        List.iter (generate_test_command_call test_name)
5583          [["blockdev_setrw"; "/dev/sda"];
5584           ["umount_all"];
5585           ["lvm_remove_all"];
5586           ["sfdiskM"; "/dev/sda"; ","];
5587           ["mkfs"; "ext2"; "/dev/sda1"];
5588           ["mount"; "/dev/sda1"; "/"]]
5589    | InitBasicFSonLVM ->
5590        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
5591          test_name;
5592        List.iter (generate_test_command_call test_name)
5593          [["blockdev_setrw"; "/dev/sda"];
5594           ["umount_all"];
5595           ["lvm_remove_all"];
5596           ["sfdiskM"; "/dev/sda"; ","];
5597           ["pvcreate"; "/dev/sda1"];
5598           ["vgcreate"; "VG"; "/dev/sda1"];
5599           ["lvcreate"; "LV"; "VG"; "8"];
5600           ["mkfs"; "ext2"; "/dev/VG/LV"];
5601           ["mount"; "/dev/VG/LV"; "/"]]
5602    | InitSquashFS ->
5603        pr "  /* InitSquashFS for %s */\n" test_name;
5604        List.iter (generate_test_command_call test_name)
5605          [["blockdev_setrw"; "/dev/sda"];
5606           ["umount_all"];
5607           ["lvm_remove_all"];
5608           ["mount_vfs"; "ro"; "squashfs"; "/dev/sdd"; "/"]]
5609   );
5610
5611   let get_seq_last = function
5612     | [] ->
5613         failwithf "%s: you cannot use [] (empty list) when expecting a command"
5614           test_name
5615     | seq ->
5616         let seq = List.rev seq in
5617         List.rev (List.tl seq), List.hd seq
5618   in
5619
5620   match test with
5621   | TestRun seq ->
5622       pr "  /* TestRun for %s (%d) */\n" name i;
5623       List.iter (generate_test_command_call test_name) seq
5624   | TestOutput (seq, expected) ->
5625       pr "  /* TestOutput for %s (%d) */\n" name i;
5626       pr "  const char *expected = \"%s\";\n" (c_quote expected);
5627       let seq, last = get_seq_last seq in
5628       let test () =
5629         pr "    if (strcmp (r, expected) != 0) {\n";
5630         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
5631         pr "      return -1;\n";
5632         pr "    }\n"
5633       in
5634       List.iter (generate_test_command_call test_name) seq;
5635       generate_test_command_call ~test test_name last
5636   | TestOutputList (seq, expected) ->
5637       pr "  /* TestOutputList for %s (%d) */\n" name i;
5638       let seq, last = get_seq_last seq in
5639       let test () =
5640         iteri (
5641           fun i str ->
5642             pr "    if (!r[%d]) {\n" i;
5643             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
5644             pr "      print_strings (r);\n";
5645             pr "      return -1;\n";
5646             pr "    }\n";
5647             pr "    {\n";
5648             pr "      const char *expected = \"%s\";\n" (c_quote str);
5649             pr "      if (strcmp (r[%d], expected) != 0) {\n" i;
5650             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
5651             pr "        return -1;\n";
5652             pr "      }\n";
5653             pr "    }\n"
5654         ) expected;
5655         pr "    if (r[%d] != NULL) {\n" (List.length expected);
5656         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
5657           test_name;
5658         pr "      print_strings (r);\n";
5659         pr "      return -1;\n";
5660         pr "    }\n"
5661       in
5662       List.iter (generate_test_command_call test_name) seq;
5663       generate_test_command_call ~test test_name last
5664   | TestOutputListOfDevices (seq, expected) ->
5665       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
5666       let seq, last = get_seq_last seq in
5667       let test () =
5668         iteri (
5669           fun i str ->
5670             pr "    if (!r[%d]) {\n" i;
5671             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
5672             pr "      print_strings (r);\n";
5673             pr "      return -1;\n";
5674             pr "    }\n";
5675             pr "    {\n";
5676             pr "      const char *expected = \"%s\";\n" (c_quote str);
5677             pr "      r[%d][5] = 's';\n" i;
5678             pr "      if (strcmp (r[%d], expected) != 0) {\n" i;
5679             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
5680             pr "        return -1;\n";
5681             pr "      }\n";
5682             pr "    }\n"
5683         ) expected;
5684         pr "    if (r[%d] != NULL) {\n" (List.length expected);
5685         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
5686           test_name;
5687         pr "      print_strings (r);\n";
5688         pr "      return -1;\n";
5689         pr "    }\n"
5690       in
5691       List.iter (generate_test_command_call test_name) seq;
5692       generate_test_command_call ~test test_name last
5693   | TestOutputInt (seq, expected) ->
5694       pr "  /* TestOutputInt for %s (%d) */\n" name i;
5695       let seq, last = get_seq_last seq in
5696       let test () =
5697         pr "    if (r != %d) {\n" expected;
5698         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
5699           test_name expected;
5700         pr "               (int) r);\n";
5701         pr "      return -1;\n";
5702         pr "    }\n"
5703       in
5704       List.iter (generate_test_command_call test_name) seq;
5705       generate_test_command_call ~test test_name last
5706   | TestOutputIntOp (seq, op, expected) ->
5707       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
5708       let seq, last = get_seq_last seq in
5709       let test () =
5710         pr "    if (! (r %s %d)) {\n" op expected;
5711         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
5712           test_name op expected;
5713         pr "               (int) r);\n";
5714         pr "      return -1;\n";
5715         pr "    }\n"
5716       in
5717       List.iter (generate_test_command_call test_name) seq;
5718       generate_test_command_call ~test test_name last
5719   | TestOutputTrue seq ->
5720       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
5721       let seq, last = get_seq_last seq in
5722       let test () =
5723         pr "    if (!r) {\n";
5724         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
5725           test_name;
5726         pr "      return -1;\n";
5727         pr "    }\n"
5728       in
5729       List.iter (generate_test_command_call test_name) seq;
5730       generate_test_command_call ~test test_name last
5731   | TestOutputFalse seq ->
5732       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
5733       let seq, last = get_seq_last seq in
5734       let test () =
5735         pr "    if (r) {\n";
5736         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
5737           test_name;
5738         pr "      return -1;\n";
5739         pr "    }\n"
5740       in
5741       List.iter (generate_test_command_call test_name) seq;
5742       generate_test_command_call ~test test_name last
5743   | TestOutputLength (seq, expected) ->
5744       pr "  /* TestOutputLength for %s (%d) */\n" name i;
5745       let seq, last = get_seq_last seq in
5746       let test () =
5747         pr "    int j;\n";
5748         pr "    for (j = 0; j < %d; ++j)\n" expected;
5749         pr "      if (r[j] == NULL) {\n";
5750         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
5751           test_name;
5752         pr "        print_strings (r);\n";
5753         pr "        return -1;\n";
5754         pr "      }\n";
5755         pr "    if (r[j] != NULL) {\n";
5756         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
5757           test_name;
5758         pr "      print_strings (r);\n";
5759         pr "      return -1;\n";
5760         pr "    }\n"
5761       in
5762       List.iter (generate_test_command_call test_name) seq;
5763       generate_test_command_call ~test test_name last
5764   | TestOutputBuffer (seq, expected) ->
5765       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
5766       pr "  const char *expected = \"%s\";\n" (c_quote expected);
5767       let seq, last = get_seq_last seq in
5768       let len = String.length expected in
5769       let test () =
5770         pr "    if (size != %d) {\n" len;
5771         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
5772         pr "      return -1;\n";
5773         pr "    }\n";
5774         pr "    if (strncmp (r, expected, size) != 0) {\n";
5775         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
5776         pr "      return -1;\n";
5777         pr "    }\n"
5778       in
5779       List.iter (generate_test_command_call test_name) seq;
5780       generate_test_command_call ~test test_name last
5781   | TestOutputStruct (seq, checks) ->
5782       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
5783       let seq, last = get_seq_last seq in
5784       let test () =
5785         List.iter (
5786           function
5787           | CompareWithInt (field, expected) ->
5788               pr "    if (r->%s != %d) {\n" field expected;
5789               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
5790                 test_name field expected;
5791               pr "               (int) r->%s);\n" field;
5792               pr "      return -1;\n";
5793               pr "    }\n"
5794           | CompareWithIntOp (field, op, expected) ->
5795               pr "    if (!(r->%s %s %d)) {\n" field op expected;
5796               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
5797                 test_name field op expected;
5798               pr "               (int) r->%s);\n" field;
5799               pr "      return -1;\n";
5800               pr "    }\n"
5801           | CompareWithString (field, expected) ->
5802               pr "    if (strcmp (r->%s, \"%s\") != 0) {\n" field expected;
5803               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
5804                 test_name field expected;
5805               pr "               r->%s);\n" field;
5806               pr "      return -1;\n";
5807               pr "    }\n"
5808           | CompareFieldsIntEq (field1, field2) ->
5809               pr "    if (r->%s != r->%s) {\n" field1 field2;
5810               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
5811                 test_name field1 field2;
5812               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
5813               pr "      return -1;\n";
5814               pr "    }\n"
5815           | CompareFieldsStrEq (field1, field2) ->
5816               pr "    if (strcmp (r->%s, r->%s) != 0) {\n" field1 field2;
5817               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
5818                 test_name field1 field2;
5819               pr "               r->%s, r->%s);\n" field1 field2;
5820               pr "      return -1;\n";
5821               pr "    }\n"
5822         ) checks
5823       in
5824       List.iter (generate_test_command_call test_name) seq;
5825       generate_test_command_call ~test test_name last
5826   | TestLastFail seq ->
5827       pr "  /* TestLastFail for %s (%d) */\n" name i;
5828       let seq, last = get_seq_last seq in
5829       List.iter (generate_test_command_call test_name) seq;
5830       generate_test_command_call test_name ~expect_error:true last
5831
5832 (* Generate the code to run a command, leaving the result in 'r'.
5833  * If you expect to get an error then you should set expect_error:true.
5834  *)
5835 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
5836   match cmd with
5837   | [] -> assert false
5838   | name :: args ->
5839       (* Look up the command to find out what args/ret it has. *)
5840       let style =
5841         try
5842           let _, style, _, _, _, _, _ =
5843             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
5844           style
5845         with Not_found ->
5846           failwithf "%s: in test, command %s was not found" test_name name in
5847
5848       if List.length (snd style) <> List.length args then
5849         failwithf "%s: in test, wrong number of args given to %s"
5850           test_name name;
5851
5852       pr "  {\n";
5853
5854       List.iter (
5855         function
5856         | OptString n, "NULL" -> ()
5857         | Pathname n, arg
5858         | Device n, arg
5859         | Dev_or_Path n, arg
5860         | String n, arg
5861         | OptString n, arg ->
5862             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
5863         | Int _, _
5864         | Bool _, _
5865         | FileIn _, _ | FileOut _, _ -> ()
5866         | StringList n, arg | DeviceList n, arg ->
5867             let strs = string_split " " arg in
5868             iteri (
5869               fun i str ->
5870                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
5871             ) strs;
5872             pr "    const char *%s[] = {\n" n;
5873             iteri (
5874               fun i _ -> pr "      %s_%d,\n" n i
5875             ) strs;
5876             pr "      NULL\n";
5877             pr "    };\n";
5878       ) (List.combine (snd style) args);
5879
5880       let error_code =
5881         match fst style with
5882         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
5883         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
5884         | RConstString _ | RConstOptString _ ->
5885             pr "    const char *r;\n"; "NULL"
5886         | RString _ -> pr "    char *r;\n"; "NULL"
5887         | RStringList _ | RHashtable _ ->
5888             pr "    char **r;\n";
5889             pr "    int i;\n";
5890             "NULL"
5891         | RStruct (_, typ) ->
5892             pr "    struct guestfs_%s *r;\n" typ; "NULL"
5893         | RStructList (_, typ) ->
5894             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
5895         | RBufferOut _ ->
5896             pr "    char *r;\n";
5897             pr "    size_t size;\n";
5898             "NULL" in
5899
5900       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
5901       pr "    r = guestfs_%s (g" name;
5902
5903       (* Generate the parameters. *)
5904       List.iter (
5905         function
5906         | OptString _, "NULL" -> pr ", NULL"
5907         | Pathname n, _
5908         | Device n, _ | Dev_or_Path n, _
5909         | String n, _
5910         | OptString n, _ ->
5911             pr ", %s" n
5912         | FileIn _, arg | FileOut _, arg ->
5913             pr ", \"%s\"" (c_quote arg)
5914         | StringList n, _ | DeviceList n, _ ->
5915             pr ", %s" n
5916         | Int _, arg ->
5917             let i =
5918               try int_of_string arg
5919               with Failure "int_of_string" ->
5920                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
5921             pr ", %d" i
5922         | Bool _, arg ->
5923             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
5924       ) (List.combine (snd style) args);
5925
5926       (match fst style with
5927        | RBufferOut _ -> pr ", &size"
5928        | _ -> ()
5929       );
5930
5931       pr ");\n";
5932
5933       if not expect_error then
5934         pr "    if (r == %s)\n" error_code
5935       else
5936         pr "    if (r != %s)\n" error_code;
5937       pr "      return -1;\n";
5938
5939       (* Insert the test code. *)
5940       (match test with
5941        | None -> ()
5942        | Some f -> f ()
5943       );
5944
5945       (match fst style with
5946        | RErr | RInt _ | RInt64 _ | RBool _
5947        | RConstString _ | RConstOptString _ -> ()
5948        | RString _ | RBufferOut _ -> pr "    free (r);\n"
5949        | RStringList _ | RHashtable _ ->
5950            pr "    for (i = 0; r[i] != NULL; ++i)\n";
5951            pr "      free (r[i]);\n";
5952            pr "    free (r);\n"
5953        | RStruct (_, typ) ->
5954            pr "    guestfs_free_%s (r);\n" typ
5955        | RStructList (_, typ) ->
5956            pr "    guestfs_free_%s_list (r);\n" typ
5957       );
5958
5959       pr "  }\n"
5960
5961 and c_quote str =
5962   let str = replace_str str "\r" "\\r" in
5963   let str = replace_str str "\n" "\\n" in
5964   let str = replace_str str "\t" "\\t" in
5965   let str = replace_str str "\000" "\\0" in
5966   str
5967
5968 (* Generate a lot of different functions for guestfish. *)
5969 and generate_fish_cmds () =
5970   generate_header CStyle GPLv2;
5971
5972   let all_functions =
5973     List.filter (
5974       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
5975     ) all_functions in
5976   let all_functions_sorted =
5977     List.filter (
5978       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
5979     ) all_functions_sorted in
5980
5981   pr "#include <stdio.h>\n";
5982   pr "#include <stdlib.h>\n";
5983   pr "#include <string.h>\n";
5984   pr "#include <inttypes.h>\n";
5985   pr "#include <ctype.h>\n";
5986   pr "\n";
5987   pr "#include <guestfs.h>\n";
5988   pr "#include \"fish.h\"\n";
5989   pr "\n";
5990
5991   (* list_commands function, which implements guestfish -h *)
5992   pr "void list_commands (void)\n";
5993   pr "{\n";
5994   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
5995   pr "  list_builtin_commands ();\n";
5996   List.iter (
5997     fun (name, _, _, flags, _, shortdesc, _) ->
5998       let name = replace_char name '_' '-' in
5999       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
6000         name shortdesc
6001   ) all_functions_sorted;
6002   pr "  printf (\"    %%s\\n\",";
6003   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
6004   pr "}\n";
6005   pr "\n";
6006
6007   (* display_command function, which implements guestfish -h cmd *)
6008   pr "void display_command (const char *cmd)\n";
6009   pr "{\n";
6010   List.iter (
6011     fun (name, style, _, flags, _, shortdesc, longdesc) ->
6012       let name2 = replace_char name '_' '-' in
6013       let alias =
6014         try find_map (function FishAlias n -> Some n | _ -> None) flags
6015         with Not_found -> name in
6016       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
6017       let synopsis =
6018         match snd style with
6019         | [] -> name2
6020         | args ->
6021             sprintf "%s <%s>"
6022               name2 (String.concat "> <" (List.map name_of_argt args)) in
6023
6024       let warnings =
6025         if List.mem ProtocolLimitWarning flags then
6026           ("\n\n" ^ protocol_limit_warning)
6027         else "" in
6028
6029       (* For DangerWillRobinson commands, we should probably have
6030        * guestfish prompt before allowing you to use them (especially
6031        * in interactive mode). XXX
6032        *)
6033       let warnings =
6034         warnings ^
6035           if List.mem DangerWillRobinson flags then
6036             ("\n\n" ^ danger_will_robinson)
6037           else "" in
6038
6039       let warnings =
6040         warnings ^
6041           match deprecation_notice flags with
6042           | None -> ""
6043           | Some txt -> "\n\n" ^ txt in
6044
6045       let describe_alias =
6046         if name <> alias then
6047           sprintf "\n\nYou can use '%s' as an alias for this command." alias
6048         else "" in
6049
6050       pr "  if (";
6051       pr "strcasecmp (cmd, \"%s\") == 0" name;
6052       if name <> name2 then
6053         pr " || strcasecmp (cmd, \"%s\") == 0" name2;
6054       if name <> alias then
6055         pr " || strcasecmp (cmd, \"%s\") == 0" alias;
6056       pr ")\n";
6057       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
6058         name2 shortdesc
6059         (" " ^ synopsis ^ "\n\n" ^ longdesc ^ warnings ^ describe_alias);
6060       pr "  else\n"
6061   ) all_functions;
6062   pr "    display_builtin_command (cmd);\n";
6063   pr "}\n";
6064   pr "\n";
6065
6066   (* print_* functions *)
6067   List.iter (
6068     fun (typ, cols) ->
6069       let needs_i =
6070         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
6071
6072       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
6073       pr "{\n";
6074       if needs_i then (
6075         pr "  int i;\n";
6076         pr "\n"
6077       );
6078       List.iter (
6079         function
6080         | name, FString ->
6081             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
6082         | name, FUUID ->
6083             pr "  printf (\"%s: \");\n" name;
6084             pr "  for (i = 0; i < 32; ++i)\n";
6085             pr "    printf (\"%%s%%c\", indent, %s->%s[i]);\n" typ name;
6086             pr "  printf (\"\\n\");\n"
6087         | name, FBuffer ->
6088             pr "  printf (\"%%s%s: \", indent);\n" name;
6089             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
6090             pr "    if (isprint (%s->%s[i]))\n" typ name;
6091             pr "      printf (\"%%s%%c\", indent, %s->%s[i]);\n" typ name;
6092             pr "    else\n";
6093             pr "      printf (\"%%s\\\\x%%02x\", indent, %s->%s[i]);\n" typ name;
6094             pr "  printf (\"\\n\");\n"
6095         | name, (FUInt64|FBytes) ->
6096             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
6097               name typ name
6098         | name, FInt64 ->
6099             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
6100               name typ name
6101         | name, FUInt32 ->
6102             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
6103               name typ name
6104         | name, FInt32 ->
6105             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
6106               name typ name
6107         | name, FChar ->
6108             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
6109               name typ name
6110         | name, FOptPercent ->
6111             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
6112               typ name name typ name;
6113             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
6114       ) cols;
6115       pr "}\n";
6116       pr "\n";
6117       pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
6118       pr "{\n";
6119       pr "  print_%s_indent (%s, \"\");\n" typ typ;
6120       pr "}\n";
6121       pr "\n";
6122       pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
6123         typ typ typ;
6124       pr "{\n";
6125       pr "  int i;\n";
6126       pr "\n";
6127       pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
6128       pr "    printf (\"[%%d] = {\\n\", i);\n";
6129       pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
6130       pr "    printf (\"}\\n\");\n";
6131       pr "  }\n";
6132       pr "}\n";
6133       pr "\n";
6134   ) structs;
6135
6136   (* run_<action> actions *)
6137   List.iter (
6138     fun (name, style, _, flags, _, _, _) ->
6139       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
6140       pr "{\n";
6141       (match fst style with
6142        | RErr
6143        | RInt _
6144        | RBool _ -> pr "  int r;\n"
6145        | RInt64 _ -> pr "  int64_t r;\n"
6146        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
6147        | RString _ -> pr "  char *r;\n"
6148        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
6149        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
6150        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
6151        | RBufferOut _ ->
6152            pr "  char *r;\n";
6153            pr "  size_t size;\n";
6154       );
6155       List.iter (
6156         function
6157         | Pathname n
6158         | Device n | Dev_or_Path n
6159         | String n
6160         | OptString n
6161         | FileIn n
6162         | FileOut n -> pr "  const char *%s;\n" n
6163         | StringList n | DeviceList n -> pr "  char *const *%s;\n" n
6164         | Bool n -> pr "  int %s;\n" n
6165         | Int n -> pr "  int %s;\n" n
6166       ) (snd style);
6167
6168       (* Check and convert parameters. *)
6169       let argc_expected = List.length (snd style) in
6170       pr "  if (argc != %d) {\n" argc_expected;
6171       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
6172         argc_expected;
6173       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
6174       pr "    return -1;\n";
6175       pr "  }\n";
6176       iteri (
6177         fun i ->
6178           function
6179           | Pathname name
6180           | Device name | Dev_or_Path name | String name -> pr "  %s = argv[%d];\n" name i
6181           | OptString name ->
6182               pr "  %s = strcmp (argv[%d], \"\") != 0 ? argv[%d] : NULL;\n"
6183                 name i i
6184           | FileIn name ->
6185               pr "  %s = strcmp (argv[%d], \"-\") != 0 ? argv[%d] : \"/dev/stdin\";\n"
6186                 name i i
6187           | FileOut name ->
6188               pr "  %s = strcmp (argv[%d], \"-\") != 0 ? argv[%d] : \"/dev/stdout\";\n"
6189                 name i i
6190           | StringList name | DeviceList name ->
6191               pr "  %s = parse_string_list (argv[%d]);\n" name i
6192           | Bool name ->
6193               pr "  %s = is_true (argv[%d]) ? 1 : 0;\n" name i
6194           | Int name ->
6195               pr "  %s = atoi (argv[%d]);\n" name i
6196       ) (snd style);
6197
6198       (* Call C API function. *)
6199       let fn =
6200         try find_map (function FishAction n -> Some n | _ -> None) flags
6201         with Not_found -> sprintf "guestfs_%s" name in
6202       pr "  r = %s " fn;
6203       generate_c_call_args ~handle:"g" style;
6204       pr ";\n";
6205
6206       (* Check return value for errors and display command results. *)
6207       (match fst style with
6208        | RErr -> pr "  return r;\n"
6209        | RInt _ ->
6210            pr "  if (r == -1) return -1;\n";
6211            pr "  printf (\"%%d\\n\", r);\n";
6212            pr "  return 0;\n"
6213        | RInt64 _ ->
6214            pr "  if (r == -1) return -1;\n";
6215            pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
6216            pr "  return 0;\n"
6217        | RBool _ ->
6218            pr "  if (r == -1) return -1;\n";
6219            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
6220            pr "  return 0;\n"
6221        | RConstString _ ->
6222            pr "  if (r == NULL) return -1;\n";
6223            pr "  printf (\"%%s\\n\", r);\n";
6224            pr "  return 0;\n"
6225        | RConstOptString _ ->
6226            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
6227            pr "  return 0;\n"
6228        | RString _ ->
6229            pr "  if (r == NULL) return -1;\n";
6230            pr "  printf (\"%%s\\n\", r);\n";
6231            pr "  free (r);\n";
6232            pr "  return 0;\n"
6233        | RStringList _ ->
6234            pr "  if (r == NULL) return -1;\n";
6235            pr "  print_strings (r);\n";
6236            pr "  free_strings (r);\n";
6237            pr "  return 0;\n"
6238        | RStruct (_, typ) ->
6239            pr "  if (r == NULL) return -1;\n";
6240            pr "  print_%s (r);\n" typ;
6241            pr "  guestfs_free_%s (r);\n" typ;
6242            pr "  return 0;\n"
6243        | RStructList (_, typ) ->
6244            pr "  if (r == NULL) return -1;\n";
6245            pr "  print_%s_list (r);\n" typ;
6246            pr "  guestfs_free_%s_list (r);\n" typ;
6247            pr "  return 0;\n"
6248        | RHashtable _ ->
6249            pr "  if (r == NULL) return -1;\n";
6250            pr "  print_table (r);\n";
6251            pr "  free_strings (r);\n";
6252            pr "  return 0;\n"
6253        | RBufferOut _ ->
6254            pr "  if (r == NULL) return -1;\n";
6255            pr "  fwrite (r, size, 1, stdout);\n";
6256            pr "  free (r);\n";
6257            pr "  return 0;\n"
6258       );
6259       pr "}\n";
6260       pr "\n"
6261   ) all_functions;
6262
6263   (* run_action function *)
6264   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
6265   pr "{\n";
6266   List.iter (
6267     fun (name, _, _, flags, _, _, _) ->
6268       let name2 = replace_char name '_' '-' in
6269       let alias =
6270         try find_map (function FishAlias n -> Some n | _ -> None) flags
6271         with Not_found -> name in
6272       pr "  if (";
6273       pr "strcasecmp (cmd, \"%s\") == 0" name;
6274       if name <> name2 then
6275         pr " || strcasecmp (cmd, \"%s\") == 0" name2;
6276       if name <> alias then
6277         pr " || strcasecmp (cmd, \"%s\") == 0" alias;
6278       pr ")\n";
6279       pr "    return run_%s (cmd, argc, argv);\n" name;
6280       pr "  else\n";
6281   ) all_functions;
6282   pr "    {\n";
6283   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
6284   pr "      return -1;\n";
6285   pr "    }\n";
6286   pr "  return 0;\n";
6287   pr "}\n";
6288   pr "\n"
6289
6290 (* Readline completion for guestfish. *)
6291 and generate_fish_completion () =
6292   generate_header CStyle GPLv2;
6293
6294   let all_functions =
6295     List.filter (
6296       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
6297     ) all_functions in
6298
6299   pr "\
6300 #include <config.h>
6301
6302 #include <stdio.h>
6303 #include <stdlib.h>
6304 #include <string.h>
6305
6306 #ifdef HAVE_LIBREADLINE
6307 #include <readline/readline.h>
6308 #endif
6309
6310 #include \"fish.h\"
6311
6312 #ifdef HAVE_LIBREADLINE
6313
6314 static const char *const commands[] = {
6315   BUILTIN_COMMANDS_FOR_COMPLETION,
6316 ";
6317
6318   (* Get the commands, including the aliases.  They don't need to be
6319    * sorted - the generator() function just does a dumb linear search.
6320    *)
6321   let commands =
6322     List.map (
6323       fun (name, _, _, flags, _, _, _) ->
6324         let name2 = replace_char name '_' '-' in
6325         let alias =
6326           try find_map (function FishAlias n -> Some n | _ -> None) flags
6327           with Not_found -> name in
6328
6329         if name <> alias then [name2; alias] else [name2]
6330     ) all_functions in
6331   let commands = List.flatten commands in
6332
6333   List.iter (pr "  \"%s\",\n") commands;
6334
6335   pr "  NULL
6336 };
6337
6338 static char *
6339 generator (const char *text, int state)
6340 {
6341   static int index, len;
6342   const char *name;
6343
6344   if (!state) {
6345     index = 0;
6346     len = strlen (text);
6347   }
6348
6349   rl_attempted_completion_over = 1;
6350
6351   while ((name = commands[index]) != NULL) {
6352     index++;
6353     if (strncasecmp (name, text, len) == 0)
6354       return strdup (name);
6355   }
6356
6357   return NULL;
6358 }
6359
6360 #endif /* HAVE_LIBREADLINE */
6361
6362 char **do_completion (const char *text, int start, int end)
6363 {
6364   char **matches = NULL;
6365
6366 #ifdef HAVE_LIBREADLINE
6367   rl_completion_append_character = ' ';
6368
6369   if (start == 0)
6370     matches = rl_completion_matches (text, generator);
6371   else if (complete_dest_paths)
6372     matches = rl_completion_matches (text, complete_dest_paths_generator);
6373 #endif
6374
6375   return matches;
6376 }
6377 ";
6378
6379 (* Generate the POD documentation for guestfish. *)
6380 and generate_fish_actions_pod () =
6381   let all_functions_sorted =
6382     List.filter (
6383       fun (_, _, _, flags, _, _, _) ->
6384         not (List.mem NotInFish flags || List.mem NotInDocs flags)
6385     ) all_functions_sorted in
6386
6387   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
6388
6389   List.iter (
6390     fun (name, style, _, flags, _, _, longdesc) ->
6391       let longdesc =
6392         Str.global_substitute rex (
6393           fun s ->
6394             let sub =
6395               try Str.matched_group 1 s
6396               with Not_found ->
6397                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
6398             "C<" ^ replace_char sub '_' '-' ^ ">"
6399         ) longdesc in
6400       let name = replace_char name '_' '-' in
6401       let alias =
6402         try find_map (function FishAlias n -> Some n | _ -> None) flags
6403         with Not_found -> name in
6404
6405       pr "=head2 %s" name;
6406       if name <> alias then
6407         pr " | %s" alias;
6408       pr "\n";
6409       pr "\n";
6410       pr " %s" name;
6411       List.iter (
6412         function
6413         | Pathname n | Device n | Dev_or_Path n | String n -> pr " %s" n
6414         | OptString n -> pr " %s" n
6415         | StringList n | DeviceList n -> pr " '%s ...'" n
6416         | Bool _ -> pr " true|false"
6417         | Int n -> pr " %s" n
6418         | FileIn n | FileOut n -> pr " (%s|-)" n
6419       ) (snd style);
6420       pr "\n";
6421       pr "\n";
6422       pr "%s\n\n" longdesc;
6423
6424       if List.exists (function FileIn _ | FileOut _ -> true
6425                       | _ -> false) (snd style) then
6426         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
6427
6428       if List.mem ProtocolLimitWarning flags then
6429         pr "%s\n\n" protocol_limit_warning;
6430
6431       if List.mem DangerWillRobinson flags then
6432         pr "%s\n\n" danger_will_robinson;
6433
6434       match deprecation_notice flags with
6435       | None -> ()
6436       | Some txt -> pr "%s\n\n" txt
6437   ) all_functions_sorted
6438
6439 (* Generate a C function prototype. *)
6440 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
6441     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
6442     ?(prefix = "")
6443     ?handle name style =
6444   if extern then pr "extern ";
6445   if static then pr "static ";
6446   (match fst style with
6447    | RErr -> pr "int "
6448    | RInt _ -> pr "int "
6449    | RInt64 _ -> pr "int64_t "
6450    | RBool _ -> pr "int "
6451    | RConstString _ | RConstOptString _ -> pr "const char *"
6452    | RString _ | RBufferOut _ -> pr "char *"
6453    | RStringList _ | RHashtable _ -> pr "char **"
6454    | RStruct (_, typ) ->
6455        if not in_daemon then pr "struct guestfs_%s *" typ
6456        else pr "guestfs_int_%s *" typ
6457    | RStructList (_, typ) ->
6458        if not in_daemon then pr "struct guestfs_%s_list *" typ
6459        else pr "guestfs_int_%s_list *" typ
6460   );
6461   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
6462   pr "%s%s (" prefix name;
6463   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
6464     pr "void"
6465   else (
6466     let comma = ref false in
6467     (match handle with
6468      | None -> ()
6469      | Some handle -> pr "guestfs_h *%s" handle; comma := true
6470     );
6471     let next () =
6472       if !comma then (
6473         if single_line then pr ", " else pr ",\n\t\t"
6474       );
6475       comma := true
6476     in
6477     List.iter (
6478       function
6479       | Pathname n
6480       | Device n | Dev_or_Path n
6481       | String n
6482       | OptString n ->
6483           next ();
6484           pr "const char *%s" n
6485       | StringList n | DeviceList n ->
6486           next ();
6487           pr "char *const *%s" n
6488       | Bool n -> next (); pr "int %s" n
6489       | Int n -> next (); pr "int %s" n
6490       | FileIn n
6491       | FileOut n ->
6492           if not in_daemon then (next (); pr "const char *%s" n)
6493     ) (snd style);
6494     if is_RBufferOut then (next (); pr "size_t *size_r");
6495   );
6496   pr ")";
6497   if semicolon then pr ";";
6498   if newline then pr "\n"
6499
6500 (* Generate C call arguments, eg "(handle, foo, bar)" *)
6501 and generate_c_call_args ?handle ?(decl = false) style =
6502   pr "(";
6503   let comma = ref false in
6504   let next () =
6505     if !comma then pr ", ";
6506     comma := true
6507   in
6508   (match handle with
6509    | None -> ()
6510    | Some handle -> pr "%s" handle; comma := true
6511   );
6512   List.iter (
6513     fun arg ->
6514       next ();
6515       pr "%s" (name_of_argt arg)
6516   ) (snd style);
6517   (* For RBufferOut calls, add implicit &size parameter. *)
6518   if not decl then (
6519     match fst style with
6520     | RBufferOut _ ->
6521         next ();
6522         pr "&size"
6523     | _ -> ()
6524   );
6525   pr ")"
6526
6527 (* Generate the OCaml bindings interface. *)
6528 and generate_ocaml_mli () =
6529   generate_header OCamlStyle LGPLv2;
6530
6531   pr "\
6532 (** For API documentation you should refer to the C API
6533     in the guestfs(3) manual page.  The OCaml API uses almost
6534     exactly the same calls. *)
6535
6536 type t
6537 (** A [guestfs_h] handle. *)
6538
6539 exception Error of string
6540 (** This exception is raised when there is an error. *)
6541
6542 val create : unit -> t
6543
6544 val close : t -> unit
6545 (** Handles are closed by the garbage collector when they become
6546     unreferenced, but callers can also call this in order to
6547     provide predictable cleanup. *)
6548
6549 ";
6550   generate_ocaml_structure_decls ();
6551
6552   (* The actions. *)
6553   List.iter (
6554     fun (name, style, _, _, _, shortdesc, _) ->
6555       generate_ocaml_prototype name style;
6556       pr "(** %s *)\n" shortdesc;
6557       pr "\n"
6558   ) all_functions
6559
6560 (* Generate the OCaml bindings implementation. *)
6561 and generate_ocaml_ml () =
6562   generate_header OCamlStyle LGPLv2;
6563
6564   pr "\
6565 type t
6566 exception Error of string
6567 external create : unit -> t = \"ocaml_guestfs_create\"
6568 external close : t -> unit = \"ocaml_guestfs_close\"
6569
6570 let () =
6571   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\")
6572
6573 ";
6574
6575   generate_ocaml_structure_decls ();
6576
6577   (* The actions. *)
6578   List.iter (
6579     fun (name, style, _, _, _, shortdesc, _) ->
6580       generate_ocaml_prototype ~is_external:true name style;
6581   ) all_functions
6582
6583 (* Generate the OCaml bindings C implementation. *)
6584 and generate_ocaml_c () =
6585   generate_header CStyle LGPLv2;
6586
6587   pr "\
6588 #include <stdio.h>
6589 #include <stdlib.h>
6590 #include <string.h>
6591
6592 #include <caml/config.h>
6593 #include <caml/alloc.h>
6594 #include <caml/callback.h>
6595 #include <caml/fail.h>
6596 #include <caml/memory.h>
6597 #include <caml/mlvalues.h>
6598 #include <caml/signals.h>
6599
6600 #include <guestfs.h>
6601
6602 #include \"guestfs_c.h\"
6603
6604 /* Copy a hashtable of string pairs into an assoc-list.  We return
6605  * the list in reverse order, but hashtables aren't supposed to be
6606  * ordered anyway.
6607  */
6608 static CAMLprim value
6609 copy_table (char * const * argv)
6610 {
6611   CAMLparam0 ();
6612   CAMLlocal5 (rv, pairv, kv, vv, cons);
6613   int i;
6614
6615   rv = Val_int (0);
6616   for (i = 0; argv[i] != NULL; i += 2) {
6617     kv = caml_copy_string (argv[i]);
6618     vv = caml_copy_string (argv[i+1]);
6619     pairv = caml_alloc (2, 0);
6620     Store_field (pairv, 0, kv);
6621     Store_field (pairv, 1, vv);
6622     cons = caml_alloc (2, 0);
6623     Store_field (cons, 1, rv);
6624     rv = cons;
6625     Store_field (cons, 0, pairv);
6626   }
6627
6628   CAMLreturn (rv);
6629 }
6630
6631 ";
6632
6633   (* Struct copy functions. *)
6634   List.iter (
6635     fun (typ, cols) ->
6636       let has_optpercent_col =
6637         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
6638
6639       pr "static CAMLprim value\n";
6640       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
6641       pr "{\n";
6642       pr "  CAMLparam0 ();\n";
6643       if has_optpercent_col then
6644         pr "  CAMLlocal3 (rv, v, v2);\n"
6645       else
6646         pr "  CAMLlocal2 (rv, v);\n";
6647       pr "\n";
6648       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
6649       iteri (
6650         fun i col ->
6651           (match col with
6652            | name, FString ->
6653                pr "  v = caml_copy_string (%s->%s);\n" typ name
6654            | name, FBuffer ->
6655                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
6656                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
6657                  typ name typ name
6658            | name, FUUID ->
6659                pr "  v = caml_alloc_string (32);\n";
6660                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
6661            | name, (FBytes|FInt64|FUInt64) ->
6662                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
6663            | name, (FInt32|FUInt32) ->
6664                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
6665            | name, FOptPercent ->
6666                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
6667                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
6668                pr "    v = caml_alloc (1, 0);\n";
6669                pr "    Store_field (v, 0, v2);\n";
6670                pr "  } else /* None */\n";
6671                pr "    v = Val_int (0);\n";
6672            | name, FChar ->
6673                pr "  v = Val_int (%s->%s);\n" typ name
6674           );
6675           pr "  Store_field (rv, %d, v);\n" i
6676       ) cols;
6677       pr "  CAMLreturn (rv);\n";
6678       pr "}\n";
6679       pr "\n";
6680
6681       pr "static CAMLprim value\n";
6682       pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n"
6683         typ typ typ;
6684       pr "{\n";
6685       pr "  CAMLparam0 ();\n";
6686       pr "  CAMLlocal2 (rv, v);\n";
6687       pr "  int i;\n";
6688       pr "\n";
6689       pr "  if (%ss->len == 0)\n" typ;
6690       pr "    CAMLreturn (Atom (0));\n";
6691       pr "  else {\n";
6692       pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
6693       pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
6694       pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
6695       pr "      caml_modify (&Field (rv, i), v);\n";
6696       pr "    }\n";
6697       pr "    CAMLreturn (rv);\n";
6698       pr "  }\n";
6699       pr "}\n";
6700       pr "\n";
6701   ) structs;
6702
6703   (* The wrappers. *)
6704   List.iter (
6705     fun (name, style, _, _, _, _, _) ->
6706       let params =
6707         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
6708
6709       let needs_extra_vs =
6710         match fst style with RConstOptString _ -> true | _ -> false in
6711
6712       pr "CAMLprim value\n";
6713       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
6714       List.iter (pr ", value %s") (List.tl params);
6715       pr ")\n";
6716       pr "{\n";
6717
6718       (match params with
6719        | [p1; p2; p3; p4; p5] ->
6720            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
6721        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
6722            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
6723            pr "  CAMLxparam%d (%s);\n"
6724              (List.length rest) (String.concat ", " rest)
6725        | ps ->
6726            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
6727       );
6728       if not needs_extra_vs then
6729         pr "  CAMLlocal1 (rv);\n"
6730       else
6731         pr "  CAMLlocal3 (rv, v, v2);\n";
6732       pr "\n";
6733
6734       pr "  guestfs_h *g = Guestfs_val (gv);\n";
6735       pr "  if (g == NULL)\n";
6736       pr "    caml_failwith (\"%s: used handle after closing it\");\n" name;
6737       pr "\n";
6738
6739       List.iter (
6740         function
6741         | Pathname n
6742         | Device n | Dev_or_Path n
6743         | String n
6744         | FileIn n
6745         | FileOut n ->
6746             pr "  const char *%s = String_val (%sv);\n" n n
6747         | OptString n ->
6748             pr "  const char *%s =\n" n;
6749             pr "    %sv != Val_int (0) ? String_val (Field (%sv, 0)) : NULL;\n"
6750               n n
6751         | StringList n | DeviceList n ->
6752             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
6753         | Bool n ->
6754             pr "  int %s = Bool_val (%sv);\n" n n
6755         | Int n ->
6756             pr "  int %s = Int_val (%sv);\n" n n
6757       ) (snd style);
6758       let error_code =
6759         match fst style with
6760         | RErr -> pr "  int r;\n"; "-1"
6761         | RInt _ -> pr "  int r;\n"; "-1"
6762         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6763         | RBool _ -> pr "  int r;\n"; "-1"
6764         | RConstString _ | RConstOptString _ ->
6765             pr "  const char *r;\n"; "NULL"
6766         | RString _ -> pr "  char *r;\n"; "NULL"
6767         | RStringList _ ->
6768             pr "  int i;\n";
6769             pr "  char **r;\n";
6770             "NULL"
6771         | RStruct (_, typ) ->
6772             pr "  struct guestfs_%s *r;\n" typ; "NULL"
6773         | RStructList (_, typ) ->
6774             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
6775         | RHashtable _ ->
6776             pr "  int i;\n";
6777             pr "  char **r;\n";
6778             "NULL"
6779         | RBufferOut _ ->
6780             pr "  char *r;\n";
6781             pr "  size_t size;\n";
6782             "NULL" in
6783       pr "\n";
6784
6785       pr "  caml_enter_blocking_section ();\n";
6786       pr "  r = guestfs_%s " name;
6787       generate_c_call_args ~handle:"g" style;
6788       pr ";\n";
6789       pr "  caml_leave_blocking_section ();\n";
6790
6791       List.iter (
6792         function
6793         | StringList n | DeviceList n ->
6794             pr "  ocaml_guestfs_free_strings (%s);\n" n;
6795         | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _ | Bool _ | Int _
6796         | FileIn _ | FileOut _ -> ()
6797       ) (snd style);
6798
6799       pr "  if (r == %s)\n" error_code;
6800       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
6801       pr "\n";
6802
6803       (match fst style with
6804        | RErr -> pr "  rv = Val_unit;\n"
6805        | RInt _ -> pr "  rv = Val_int (r);\n"
6806        | RInt64 _ ->
6807            pr "  rv = caml_copy_int64 (r);\n"
6808        | RBool _ -> pr "  rv = Val_bool (r);\n"
6809        | RConstString _ ->
6810            pr "  rv = caml_copy_string (r);\n"
6811        | RConstOptString _ ->
6812            pr "  if (r) { /* Some string */\n";
6813            pr "    v = caml_alloc (1, 0);\n";
6814            pr "    v2 = caml_copy_string (r);\n";
6815            pr "    Store_field (v, 0, v2);\n";
6816            pr "  } else /* None */\n";
6817            pr "    v = Val_int (0);\n";
6818        | RString _ ->
6819            pr "  rv = caml_copy_string (r);\n";
6820            pr "  free (r);\n"
6821        | RStringList _ ->
6822            pr "  rv = caml_copy_string_array ((const char **) r);\n";
6823            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
6824            pr "  free (r);\n"
6825        | RStruct (_, typ) ->
6826            pr "  rv = copy_%s (r);\n" typ;
6827            pr "  guestfs_free_%s (r);\n" typ;
6828        | RStructList (_, typ) ->
6829            pr "  rv = copy_%s_list (r);\n" typ;
6830            pr "  guestfs_free_%s_list (r);\n" typ;
6831        | RHashtable _ ->
6832            pr "  rv = copy_table (r);\n";
6833            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
6834            pr "  free (r);\n";
6835        | RBufferOut _ ->
6836            pr "  rv = caml_alloc_string (size);\n";
6837            pr "  memcpy (String_val (rv), r, size);\n";
6838       );
6839
6840       pr "  CAMLreturn (rv);\n";
6841       pr "}\n";
6842       pr "\n";
6843
6844       if List.length params > 5 then (
6845         pr "CAMLprim value\n";
6846         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
6847         pr "{\n";
6848         pr "  return ocaml_guestfs_%s (argv[0]" name;
6849         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
6850         pr ");\n";
6851         pr "}\n";
6852         pr "\n"
6853       )
6854   ) all_functions
6855
6856 and generate_ocaml_structure_decls () =
6857   List.iter (
6858     fun (typ, cols) ->
6859       pr "type %s = {\n" typ;
6860       List.iter (
6861         function
6862         | name, FString -> pr "  %s : string;\n" name
6863         | name, FBuffer -> pr "  %s : string;\n" name
6864         | name, FUUID -> pr "  %s : string;\n" name
6865         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
6866         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
6867         | name, FChar -> pr "  %s : char;\n" name
6868         | name, FOptPercent -> pr "  %s : float option;\n" name
6869       ) cols;
6870       pr "}\n";
6871       pr "\n"
6872   ) structs
6873
6874 and generate_ocaml_prototype ?(is_external = false) name style =
6875   if is_external then pr "external " else pr "val ";
6876   pr "%s : t -> " name;
6877   List.iter (
6878     function
6879     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "string -> "
6880     | OptString _ -> pr "string option -> "
6881     | StringList _ | DeviceList _ -> pr "string array -> "
6882     | Bool _ -> pr "bool -> "
6883     | Int _ -> pr "int -> "
6884   ) (snd style);
6885   (match fst style with
6886    | RErr -> pr "unit" (* all errors are turned into exceptions *)
6887    | RInt _ -> pr "int"
6888    | RInt64 _ -> pr "int64"
6889    | RBool _ -> pr "bool"
6890    | RConstString _ -> pr "string"
6891    | RConstOptString _ -> pr "string option"
6892    | RString _ | RBufferOut _ -> pr "string"
6893    | RStringList _ -> pr "string array"
6894    | RStruct (_, typ) -> pr "%s" typ
6895    | RStructList (_, typ) -> pr "%s array" typ
6896    | RHashtable _ -> pr "(string * string) list"
6897   );
6898   if is_external then (
6899     pr " = ";
6900     if List.length (snd style) + 1 > 5 then
6901       pr "\"ocaml_guestfs_%s_byte\" " name;
6902     pr "\"ocaml_guestfs_%s\"" name
6903   );
6904   pr "\n"
6905
6906 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
6907 and generate_perl_xs () =
6908   generate_header CStyle LGPLv2;
6909
6910   pr "\
6911 #include \"EXTERN.h\"
6912 #include \"perl.h\"
6913 #include \"XSUB.h\"
6914
6915 #include <guestfs.h>
6916
6917 #ifndef PRId64
6918 #define PRId64 \"lld\"
6919 #endif
6920
6921 static SV *
6922 my_newSVll(long long val) {
6923 #ifdef USE_64_BIT_ALL
6924   return newSViv(val);
6925 #else
6926   char buf[100];
6927   int len;
6928   len = snprintf(buf, 100, \"%%\" PRId64, val);
6929   return newSVpv(buf, len);
6930 #endif
6931 }
6932
6933 #ifndef PRIu64
6934 #define PRIu64 \"llu\"
6935 #endif
6936
6937 static SV *
6938 my_newSVull(unsigned long long val) {
6939 #ifdef USE_64_BIT_ALL
6940   return newSVuv(val);
6941 #else
6942   char buf[100];
6943   int len;
6944   len = snprintf(buf, 100, \"%%\" PRIu64, val);
6945   return newSVpv(buf, len);
6946 #endif
6947 }
6948
6949 /* http://www.perlmonks.org/?node_id=680842 */
6950 static char **
6951 XS_unpack_charPtrPtr (SV *arg) {
6952   char **ret;
6953   AV *av;
6954   I32 i;
6955
6956   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
6957     croak (\"array reference expected\");
6958
6959   av = (AV *)SvRV (arg);
6960   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
6961   if (!ret)
6962     croak (\"malloc failed\");
6963
6964   for (i = 0; i <= av_len (av); i++) {
6965     SV **elem = av_fetch (av, i, 0);
6966
6967     if (!elem || !*elem)
6968       croak (\"missing element in list\");
6969
6970     ret[i] = SvPV_nolen (*elem);
6971   }
6972
6973   ret[i] = NULL;
6974
6975   return ret;
6976 }
6977
6978 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
6979
6980 PROTOTYPES: ENABLE
6981
6982 guestfs_h *
6983 _create ()
6984    CODE:
6985       RETVAL = guestfs_create ();
6986       if (!RETVAL)
6987         croak (\"could not create guestfs handle\");
6988       guestfs_set_error_handler (RETVAL, NULL, NULL);
6989  OUTPUT:
6990       RETVAL
6991
6992 void
6993 DESTROY (g)
6994       guestfs_h *g;
6995  PPCODE:
6996       guestfs_close (g);
6997
6998 ";
6999
7000   List.iter (
7001     fun (name, style, _, _, _, _, _) ->
7002       (match fst style with
7003        | RErr -> pr "void\n"
7004        | RInt _ -> pr "SV *\n"
7005        | RInt64 _ -> pr "SV *\n"
7006        | RBool _ -> pr "SV *\n"
7007        | RConstString _ -> pr "SV *\n"
7008        | RConstOptString _ -> pr "SV *\n"
7009        | RString _ -> pr "SV *\n"
7010        | RBufferOut _ -> pr "SV *\n"
7011        | RStringList _
7012        | RStruct _ | RStructList _
7013        | RHashtable _ ->
7014            pr "void\n" (* all lists returned implictly on the stack *)
7015       );
7016       (* Call and arguments. *)
7017       pr "%s " name;
7018       generate_c_call_args ~handle:"g" ~decl:true style;
7019       pr "\n";
7020       pr "      guestfs_h *g;\n";
7021       iteri (
7022         fun i ->
7023           function
7024           | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7025               pr "      char *%s;\n" n
7026           | OptString n ->
7027               (* http://www.perlmonks.org/?node_id=554277
7028                * Note that the implicit handle argument means we have
7029                * to add 1 to the ST(x) operator.
7030                *)
7031               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
7032           | StringList n | DeviceList n -> pr "      char **%s;\n" n
7033           | Bool n -> pr "      int %s;\n" n
7034           | Int n -> pr "      int %s;\n" n
7035       ) (snd style);
7036
7037       let do_cleanups () =
7038         List.iter (
7039           function
7040           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _ | Bool _ | Int _
7041           | FileIn _ | FileOut _ -> ()
7042           | StringList n | DeviceList n -> pr "      free (%s);\n" n
7043         ) (snd style)
7044       in
7045
7046       (* Code. *)
7047       (match fst style with
7048        | RErr ->
7049            pr "PREINIT:\n";
7050            pr "      int r;\n";
7051            pr " PPCODE:\n";
7052            pr "      r = guestfs_%s " name;
7053            generate_c_call_args ~handle:"g" style;
7054            pr ";\n";
7055            do_cleanups ();
7056            pr "      if (r == -1)\n";
7057            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7058        | RInt n
7059        | RBool n ->
7060            pr "PREINIT:\n";
7061            pr "      int %s;\n" n;
7062            pr "   CODE:\n";
7063            pr "      %s = guestfs_%s " n name;
7064            generate_c_call_args ~handle:"g" style;
7065            pr ";\n";
7066            do_cleanups ();
7067            pr "      if (%s == -1)\n" n;
7068            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7069            pr "      RETVAL = newSViv (%s);\n" n;
7070            pr " OUTPUT:\n";
7071            pr "      RETVAL\n"
7072        | RInt64 n ->
7073            pr "PREINIT:\n";
7074            pr "      int64_t %s;\n" n;
7075            pr "   CODE:\n";
7076            pr "      %s = guestfs_%s " n name;
7077            generate_c_call_args ~handle:"g" style;
7078            pr ";\n";
7079            do_cleanups ();
7080            pr "      if (%s == -1)\n" n;
7081            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7082            pr "      RETVAL = my_newSVll (%s);\n" n;
7083            pr " OUTPUT:\n";
7084            pr "      RETVAL\n"
7085        | RConstString n ->
7086            pr "PREINIT:\n";
7087            pr "      const char *%s;\n" n;
7088            pr "   CODE:\n";
7089            pr "      %s = guestfs_%s " n name;
7090            generate_c_call_args ~handle:"g" style;
7091            pr ";\n";
7092            do_cleanups ();
7093            pr "      if (%s == NULL)\n" n;
7094            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7095            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7096            pr " OUTPUT:\n";
7097            pr "      RETVAL\n"
7098        | RConstOptString n ->
7099            pr "PREINIT:\n";
7100            pr "      const char *%s;\n" n;
7101            pr "   CODE:\n";
7102            pr "      %s = guestfs_%s " n name;
7103            generate_c_call_args ~handle:"g" style;
7104            pr ";\n";
7105            do_cleanups ();
7106            pr "      if (%s == NULL)\n" n;
7107            pr "        RETVAL = &PL_sv_undef;\n";
7108            pr "      else\n";
7109            pr "        RETVAL = newSVpv (%s, 0);\n" n;
7110            pr " OUTPUT:\n";
7111            pr "      RETVAL\n"
7112        | RString n ->
7113            pr "PREINIT:\n";
7114            pr "      char *%s;\n" n;
7115            pr "   CODE:\n";
7116            pr "      %s = guestfs_%s " n name;
7117            generate_c_call_args ~handle:"g" style;
7118            pr ";\n";
7119            do_cleanups ();
7120            pr "      if (%s == NULL)\n" n;
7121            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7122            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7123            pr "      free (%s);\n" n;
7124            pr " OUTPUT:\n";
7125            pr "      RETVAL\n"
7126        | RStringList n | RHashtable n ->
7127            pr "PREINIT:\n";
7128            pr "      char **%s;\n" n;
7129            pr "      int i, n;\n";
7130            pr " PPCODE:\n";
7131            pr "      %s = guestfs_%s " n name;
7132            generate_c_call_args ~handle:"g" style;
7133            pr ";\n";
7134            do_cleanups ();
7135            pr "      if (%s == NULL)\n" n;
7136            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7137            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
7138            pr "      EXTEND (SP, n);\n";
7139            pr "      for (i = 0; i < n; ++i) {\n";
7140            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
7141            pr "        free (%s[i]);\n" n;
7142            pr "      }\n";
7143            pr "      free (%s);\n" n;
7144        | RStruct (n, typ) ->
7145            let cols = cols_of_struct typ in
7146            generate_perl_struct_code typ cols name style n do_cleanups
7147        | RStructList (n, typ) ->
7148            let cols = cols_of_struct typ in
7149            generate_perl_struct_list_code typ cols name style n do_cleanups
7150        | RBufferOut n ->
7151            pr "PREINIT:\n";
7152            pr "      char *%s;\n" n;
7153            pr "      size_t size;\n";
7154            pr "   CODE:\n";
7155            pr "      %s = guestfs_%s " n name;
7156            generate_c_call_args ~handle:"g" style;
7157            pr ";\n";
7158            do_cleanups ();
7159            pr "      if (%s == NULL)\n" n;
7160            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7161            pr "      RETVAL = newSVpv (%s, size);\n" n;
7162            pr "      free (%s);\n" n;
7163            pr " OUTPUT:\n";
7164            pr "      RETVAL\n"
7165       );
7166
7167       pr "\n"
7168   ) all_functions
7169
7170 and generate_perl_struct_list_code typ cols name style n do_cleanups =
7171   pr "PREINIT:\n";
7172   pr "      struct guestfs_%s_list *%s;\n" typ n;
7173   pr "      int i;\n";
7174   pr "      HV *hv;\n";
7175   pr " PPCODE:\n";
7176   pr "      %s = guestfs_%s " n name;
7177   generate_c_call_args ~handle:"g" style;
7178   pr ";\n";
7179   do_cleanups ();
7180   pr "      if (%s == NULL)\n" n;
7181   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7182   pr "      EXTEND (SP, %s->len);\n" n;
7183   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
7184   pr "        hv = newHV ();\n";
7185   List.iter (
7186     function
7187     | name, FString ->
7188         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
7189           name (String.length name) n name
7190     | name, FUUID ->
7191         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
7192           name (String.length name) n name
7193     | name, FBuffer ->
7194         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
7195           name (String.length name) n name n name
7196     | name, (FBytes|FUInt64) ->
7197         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
7198           name (String.length name) n name
7199     | name, FInt64 ->
7200         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
7201           name (String.length name) n name
7202     | name, (FInt32|FUInt32) ->
7203         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
7204           name (String.length name) n name
7205     | name, FChar ->
7206         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
7207           name (String.length name) n name
7208     | name, FOptPercent ->
7209         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
7210           name (String.length name) n name
7211   ) cols;
7212   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
7213   pr "      }\n";
7214   pr "      guestfs_free_%s_list (%s);\n" typ n
7215
7216 and generate_perl_struct_code typ cols name style n do_cleanups =
7217   pr "PREINIT:\n";
7218   pr "      struct guestfs_%s *%s;\n" typ n;
7219   pr " PPCODE:\n";
7220   pr "      %s = guestfs_%s " n name;
7221   generate_c_call_args ~handle:"g" style;
7222   pr ";\n";
7223   do_cleanups ();
7224   pr "      if (%s == NULL)\n" n;
7225   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7226   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
7227   List.iter (
7228     fun ((name, _) as col) ->
7229       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
7230
7231       match col with
7232       | name, FString ->
7233           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
7234             n name
7235       | name, FBuffer ->
7236           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, %s->%s_len)));\n"
7237             n name n name
7238       | name, FUUID ->
7239           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
7240             n name
7241       | name, (FBytes|FUInt64) ->
7242           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
7243             n name
7244       | name, FInt64 ->
7245           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
7246             n name
7247       | name, (FInt32|FUInt32) ->
7248           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
7249             n name
7250       | name, FChar ->
7251           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
7252             n name
7253       | name, FOptPercent ->
7254           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
7255             n name
7256   ) cols;
7257   pr "      free (%s);\n" n
7258
7259 (* Generate Sys/Guestfs.pm. *)
7260 and generate_perl_pm () =
7261   generate_header HashStyle LGPLv2;
7262
7263   pr "\
7264 =pod
7265
7266 =head1 NAME
7267
7268 Sys::Guestfs - Perl bindings for libguestfs
7269
7270 =head1 SYNOPSIS
7271
7272  use Sys::Guestfs;
7273
7274  my $h = Sys::Guestfs->new ();
7275  $h->add_drive ('guest.img');
7276  $h->launch ();
7277  $h->wait_ready ();
7278  $h->mount ('/dev/sda1', '/');
7279  $h->touch ('/hello');
7280  $h->sync ();
7281
7282 =head1 DESCRIPTION
7283
7284 The C<Sys::Guestfs> module provides a Perl XS binding to the
7285 libguestfs API for examining and modifying virtual machine
7286 disk images.
7287
7288 Amongst the things this is good for: making batch configuration
7289 changes to guests, getting disk used/free statistics (see also:
7290 virt-df), migrating between virtualization systems (see also:
7291 virt-p2v), performing partial backups, performing partial guest
7292 clones, cloning guests and changing registry/UUID/hostname info, and
7293 much else besides.
7294
7295 Libguestfs uses Linux kernel and qemu code, and can access any type of
7296 guest filesystem that Linux and qemu can, including but not limited
7297 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
7298 schemes, qcow, qcow2, vmdk.
7299
7300 Libguestfs provides ways to enumerate guest storage (eg. partitions,
7301 LVs, what filesystem is in each LV, etc.).  It can also run commands
7302 in the context of the guest.  Also you can access filesystems over FTP.
7303
7304 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
7305 functions for using libguestfs from Perl, including integration
7306 with libvirt.
7307
7308 =head1 ERRORS
7309
7310 All errors turn into calls to C<croak> (see L<Carp(3)>).
7311
7312 =head1 METHODS
7313
7314 =over 4
7315
7316 =cut
7317
7318 package Sys::Guestfs;
7319
7320 use strict;
7321 use warnings;
7322
7323 require XSLoader;
7324 XSLoader::load ('Sys::Guestfs');
7325
7326 =item $h = Sys::Guestfs->new ();
7327
7328 Create a new guestfs handle.
7329
7330 =cut
7331
7332 sub new {
7333   my $proto = shift;
7334   my $class = ref ($proto) || $proto;
7335
7336   my $self = Sys::Guestfs::_create ();
7337   bless $self, $class;
7338   return $self;
7339 }
7340
7341 ";
7342
7343   (* Actions.  We only need to print documentation for these as
7344    * they are pulled in from the XS code automatically.
7345    *)
7346   List.iter (
7347     fun (name, style, _, flags, _, _, longdesc) ->
7348       if not (List.mem NotInDocs flags) then (
7349         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
7350         pr "=item ";
7351         generate_perl_prototype name style;
7352         pr "\n\n";
7353         pr "%s\n\n" longdesc;
7354         if List.mem ProtocolLimitWarning flags then
7355           pr "%s\n\n" protocol_limit_warning;
7356         if List.mem DangerWillRobinson flags then
7357           pr "%s\n\n" danger_will_robinson;
7358         match deprecation_notice flags with
7359         | None -> ()
7360         | Some txt -> pr "%s\n\n" txt
7361       )
7362   ) all_functions_sorted;
7363
7364   (* End of file. *)
7365   pr "\
7366 =cut
7367
7368 1;
7369
7370 =back
7371
7372 =head1 COPYRIGHT
7373
7374 Copyright (C) 2009 Red Hat Inc.
7375
7376 =head1 LICENSE
7377
7378 Please see the file COPYING.LIB for the full license.
7379
7380 =head1 SEE ALSO
7381
7382 L<guestfs(3)>,
7383 L<guestfish(1)>,
7384 L<http://libguestfs.org>,
7385 L<Sys::Guestfs::Lib(3)>.
7386
7387 =cut
7388 "
7389
7390 and generate_perl_prototype name style =
7391   (match fst style with
7392    | RErr -> ()
7393    | RBool n
7394    | RInt n
7395    | RInt64 n
7396    | RConstString n
7397    | RConstOptString n
7398    | RString n
7399    | RBufferOut n -> pr "$%s = " n
7400    | RStruct (n,_)
7401    | RHashtable n -> pr "%%%s = " n
7402    | RStringList n
7403    | RStructList (n,_) -> pr "@%s = " n
7404   );
7405   pr "$h->%s (" name;
7406   let comma = ref false in
7407   List.iter (
7408     fun arg ->
7409       if !comma then pr ", ";
7410       comma := true;
7411       match arg with
7412       | Pathname n | Device n | Dev_or_Path n | String n
7413       | OptString n | Bool n | Int n | FileIn n | FileOut n ->
7414           pr "$%s" n
7415       | StringList n | DeviceList n ->
7416           pr "\\@%s" n
7417   ) (snd style);
7418   pr ");"
7419
7420 (* Generate Python C module. *)
7421 and generate_python_c () =
7422   generate_header CStyle LGPLv2;
7423
7424   pr "\
7425 #include <Python.h>
7426
7427 #include <stdio.h>
7428 #include <stdlib.h>
7429 #include <assert.h>
7430
7431 #include \"guestfs.h\"
7432
7433 typedef struct {
7434   PyObject_HEAD
7435   guestfs_h *g;
7436 } Pyguestfs_Object;
7437
7438 static guestfs_h *
7439 get_handle (PyObject *obj)
7440 {
7441   assert (obj);
7442   assert (obj != Py_None);
7443   return ((Pyguestfs_Object *) obj)->g;
7444 }
7445
7446 static PyObject *
7447 put_handle (guestfs_h *g)
7448 {
7449   assert (g);
7450   return
7451     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
7452 }
7453
7454 /* This list should be freed (but not the strings) after use. */
7455 static char **
7456 get_string_list (PyObject *obj)
7457 {
7458   int i, len;
7459   char **r;
7460
7461   assert (obj);
7462
7463   if (!PyList_Check (obj)) {
7464     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
7465     return NULL;
7466   }
7467
7468   len = PyList_Size (obj);
7469   r = malloc (sizeof (char *) * (len+1));
7470   if (r == NULL) {
7471     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
7472     return NULL;
7473   }
7474
7475   for (i = 0; i < len; ++i)
7476     r[i] = PyString_AsString (PyList_GetItem (obj, i));
7477   r[len] = NULL;
7478
7479   return r;
7480 }
7481
7482 static PyObject *
7483 put_string_list (char * const * const argv)
7484 {
7485   PyObject *list;
7486   int argc, i;
7487
7488   for (argc = 0; argv[argc] != NULL; ++argc)
7489     ;
7490
7491   list = PyList_New (argc);
7492   for (i = 0; i < argc; ++i)
7493     PyList_SetItem (list, i, PyString_FromString (argv[i]));
7494
7495   return list;
7496 }
7497
7498 static PyObject *
7499 put_table (char * const * const argv)
7500 {
7501   PyObject *list, *item;
7502   int argc, i;
7503
7504   for (argc = 0; argv[argc] != NULL; ++argc)
7505     ;
7506
7507   list = PyList_New (argc >> 1);
7508   for (i = 0; i < argc; i += 2) {
7509     item = PyTuple_New (2);
7510     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
7511     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
7512     PyList_SetItem (list, i >> 1, item);
7513   }
7514
7515   return list;
7516 }
7517
7518 static void
7519 free_strings (char **argv)
7520 {
7521   int argc;
7522
7523   for (argc = 0; argv[argc] != NULL; ++argc)
7524     free (argv[argc]);
7525   free (argv);
7526 }
7527
7528 static PyObject *
7529 py_guestfs_create (PyObject *self, PyObject *args)
7530 {
7531   guestfs_h *g;
7532
7533   g = guestfs_create ();
7534   if (g == NULL) {
7535     PyErr_SetString (PyExc_RuntimeError,
7536                      \"guestfs.create: failed to allocate handle\");
7537     return NULL;
7538   }
7539   guestfs_set_error_handler (g, NULL, NULL);
7540   return put_handle (g);
7541 }
7542
7543 static PyObject *
7544 py_guestfs_close (PyObject *self, PyObject *args)
7545 {
7546   PyObject *py_g;
7547   guestfs_h *g;
7548
7549   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
7550     return NULL;
7551   g = get_handle (py_g);
7552
7553   guestfs_close (g);
7554
7555   Py_INCREF (Py_None);
7556   return Py_None;
7557 }
7558
7559 ";
7560
7561   let emit_put_list_function typ =
7562     pr "static PyObject *\n";
7563     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
7564     pr "{\n";
7565     pr "  PyObject *list;\n";
7566     pr "  int i;\n";
7567     pr "\n";
7568     pr "  list = PyList_New (%ss->len);\n" typ;
7569     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
7570     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
7571     pr "  return list;\n";
7572     pr "};\n";
7573     pr "\n"
7574   in
7575
7576   (* Structures, turned into Python dictionaries. *)
7577   List.iter (
7578     fun (typ, cols) ->
7579       pr "static PyObject *\n";
7580       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
7581       pr "{\n";
7582       pr "  PyObject *dict;\n";
7583       pr "\n";
7584       pr "  dict = PyDict_New ();\n";
7585       List.iter (
7586         function
7587         | name, FString ->
7588             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7589             pr "                        PyString_FromString (%s->%s));\n"
7590               typ name
7591         | name, FBuffer ->
7592             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7593             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
7594               typ name typ name
7595         | name, FUUID ->
7596             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7597             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
7598               typ name
7599         | name, (FBytes|FUInt64) ->
7600             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7601             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
7602               typ name
7603         | name, FInt64 ->
7604             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7605             pr "                        PyLong_FromLongLong (%s->%s));\n"
7606               typ name
7607         | name, FUInt32 ->
7608             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7609             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
7610               typ name
7611         | name, FInt32 ->
7612             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7613             pr "                        PyLong_FromLong (%s->%s));\n"
7614               typ name
7615         | name, FOptPercent ->
7616             pr "  if (%s->%s >= 0)\n" typ name;
7617             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
7618             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
7619               typ name;
7620             pr "  else {\n";
7621             pr "    Py_INCREF (Py_None);\n";
7622             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
7623             pr "  }\n"
7624         | name, FChar ->
7625             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7626             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
7627       ) cols;
7628       pr "  return dict;\n";
7629       pr "};\n";
7630       pr "\n";
7631
7632   ) structs;
7633
7634   (* Emit a put_TYPE_list function definition only if that function is used. *)
7635   List.iter (
7636     function
7637     | typ, (RStructListOnly | RStructAndList) ->
7638         (* generate the function for typ *)
7639         emit_put_list_function typ
7640     | typ, _ -> () (* empty *)
7641   ) rstructs_used;
7642
7643   (* Python wrapper functions. *)
7644   List.iter (
7645     fun (name, style, _, _, _, _, _) ->
7646       pr "static PyObject *\n";
7647       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
7648       pr "{\n";
7649
7650       pr "  PyObject *py_g;\n";
7651       pr "  guestfs_h *g;\n";
7652       pr "  PyObject *py_r;\n";
7653
7654       let error_code =
7655         match fst style with
7656         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
7657         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
7658         | RConstString _ | RConstOptString _ ->
7659             pr "  const char *r;\n"; "NULL"
7660         | RString _ -> pr "  char *r;\n"; "NULL"
7661         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
7662         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
7663         | RStructList (_, typ) ->
7664             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
7665         | RBufferOut _ ->
7666             pr "  char *r;\n";
7667             pr "  size_t size;\n";
7668             "NULL" in
7669
7670       List.iter (
7671         function
7672         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7673             pr "  const char *%s;\n" n
7674         | OptString n -> pr "  const char *%s;\n" n
7675         | StringList n | DeviceList n ->
7676             pr "  PyObject *py_%s;\n" n;
7677             pr "  char **%s;\n" n
7678         | Bool n -> pr "  int %s;\n" n
7679         | Int n -> pr "  int %s;\n" n
7680       ) (snd style);
7681
7682       pr "\n";
7683
7684       (* Convert the parameters. *)
7685       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
7686       List.iter (
7687         function
7688         | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "s"
7689         | OptString _ -> pr "z"
7690         | StringList _ | DeviceList _ -> pr "O"
7691         | Bool _ -> pr "i" (* XXX Python has booleans? *)
7692         | Int _ -> pr "i"
7693       ) (snd style);
7694       pr ":guestfs_%s\",\n" name;
7695       pr "                         &py_g";
7696       List.iter (
7697         function
7698         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n -> pr ", &%s" n
7699         | OptString n -> pr ", &%s" n
7700         | StringList n | DeviceList n -> pr ", &py_%s" n
7701         | Bool n -> pr ", &%s" n
7702         | Int n -> pr ", &%s" n
7703       ) (snd style);
7704
7705       pr "))\n";
7706       pr "    return NULL;\n";
7707
7708       pr "  g = get_handle (py_g);\n";
7709       List.iter (
7710         function
7711         | Pathname _ | Device _ | Dev_or_Path _ | String _
7712         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
7713         | StringList n | DeviceList n ->
7714             pr "  %s = get_string_list (py_%s);\n" n n;
7715             pr "  if (!%s) return NULL;\n" n
7716       ) (snd style);
7717
7718       pr "\n";
7719
7720       pr "  r = guestfs_%s " name;
7721       generate_c_call_args ~handle:"g" style;
7722       pr ";\n";
7723
7724       List.iter (
7725         function
7726         | Pathname _ | Device _ | Dev_or_Path _ | String _
7727         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
7728         | StringList n | DeviceList n ->
7729             pr "  free (%s);\n" n
7730       ) (snd style);
7731
7732       pr "  if (r == %s) {\n" error_code;
7733       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
7734       pr "    return NULL;\n";
7735       pr "  }\n";
7736       pr "\n";
7737
7738       (match fst style with
7739        | RErr ->
7740            pr "  Py_INCREF (Py_None);\n";
7741            pr "  py_r = Py_None;\n"
7742        | RInt _
7743        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
7744        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
7745        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
7746        | RConstOptString _ ->
7747            pr "  if (r)\n";
7748            pr "    py_r = PyString_FromString (r);\n";
7749            pr "  else {\n";
7750            pr "    Py_INCREF (Py_None);\n";
7751            pr "    py_r = Py_None;\n";
7752            pr "  }\n"
7753        | RString _ ->
7754            pr "  py_r = PyString_FromString (r);\n";
7755            pr "  free (r);\n"
7756        | RStringList _ ->
7757            pr "  py_r = put_string_list (r);\n";
7758            pr "  free_strings (r);\n"
7759        | RStruct (_, typ) ->
7760            pr "  py_r = put_%s (r);\n" typ;
7761            pr "  guestfs_free_%s (r);\n" typ
7762        | RStructList (_, typ) ->
7763            pr "  py_r = put_%s_list (r);\n" typ;
7764            pr "  guestfs_free_%s_list (r);\n" typ
7765        | RHashtable n ->
7766            pr "  py_r = put_table (r);\n";
7767            pr "  free_strings (r);\n"
7768        | RBufferOut _ ->
7769            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
7770            pr "  free (r);\n"
7771       );
7772
7773       pr "  return py_r;\n";
7774       pr "}\n";
7775       pr "\n"
7776   ) all_functions;
7777
7778   (* Table of functions. *)
7779   pr "static PyMethodDef methods[] = {\n";
7780   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
7781   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
7782   List.iter (
7783     fun (name, _, _, _, _, _, _) ->
7784       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
7785         name name
7786   ) all_functions;
7787   pr "  { NULL, NULL, 0, NULL }\n";
7788   pr "};\n";
7789   pr "\n";
7790
7791   (* Init function. *)
7792   pr "\
7793 void
7794 initlibguestfsmod (void)
7795 {
7796   static int initialized = 0;
7797
7798   if (initialized) return;
7799   Py_InitModule ((char *) \"libguestfsmod\", methods);
7800   initialized = 1;
7801 }
7802 "
7803
7804 (* Generate Python module. *)
7805 and generate_python_py () =
7806   generate_header HashStyle LGPLv2;
7807
7808   pr "\
7809 u\"\"\"Python bindings for libguestfs
7810
7811 import guestfs
7812 g = guestfs.GuestFS ()
7813 g.add_drive (\"guest.img\")
7814 g.launch ()
7815 g.wait_ready ()
7816 parts = g.list_partitions ()
7817
7818 The guestfs module provides a Python binding to the libguestfs API
7819 for examining and modifying virtual machine disk images.
7820
7821 Amongst the things this is good for: making batch configuration
7822 changes to guests, getting disk used/free statistics (see also:
7823 virt-df), migrating between virtualization systems (see also:
7824 virt-p2v), performing partial backups, performing partial guest
7825 clones, cloning guests and changing registry/UUID/hostname info, and
7826 much else besides.
7827
7828 Libguestfs uses Linux kernel and qemu code, and can access any type of
7829 guest filesystem that Linux and qemu can, including but not limited
7830 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
7831 schemes, qcow, qcow2, vmdk.
7832
7833 Libguestfs provides ways to enumerate guest storage (eg. partitions,
7834 LVs, what filesystem is in each LV, etc.).  It can also run commands
7835 in the context of the guest.  Also you can access filesystems over FTP.
7836
7837 Errors which happen while using the API are turned into Python
7838 RuntimeError exceptions.
7839
7840 To create a guestfs handle you usually have to perform the following
7841 sequence of calls:
7842
7843 # Create the handle, call add_drive at least once, and possibly
7844 # several times if the guest has multiple block devices:
7845 g = guestfs.GuestFS ()
7846 g.add_drive (\"guest.img\")
7847
7848 # Launch the qemu subprocess and wait for it to become ready:
7849 g.launch ()
7850 g.wait_ready ()
7851
7852 # Now you can issue commands, for example:
7853 logvols = g.lvs ()
7854
7855 \"\"\"
7856
7857 import libguestfsmod
7858
7859 class GuestFS:
7860     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
7861
7862     def __init__ (self):
7863         \"\"\"Create a new libguestfs handle.\"\"\"
7864         self._o = libguestfsmod.create ()
7865
7866     def __del__ (self):
7867         libguestfsmod.close (self._o)
7868
7869 ";
7870
7871   List.iter (
7872     fun (name, style, _, flags, _, _, longdesc) ->
7873       pr "    def %s " name;
7874       generate_py_call_args ~handle:"self" (snd style);
7875       pr ":\n";
7876
7877       if not (List.mem NotInDocs flags) then (
7878         let doc = replace_str longdesc "C<guestfs_" "C<g." in
7879         let doc =
7880           match fst style with
7881           | RErr | RInt _ | RInt64 _ | RBool _
7882           | RConstOptString _ | RConstString _
7883           | RString _ | RBufferOut _ -> doc
7884           | RStringList _ ->
7885               doc ^ "\n\nThis function returns a list of strings."
7886           | RStruct (_, typ) ->
7887               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
7888           | RStructList (_, typ) ->
7889               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
7890           | RHashtable _ ->
7891               doc ^ "\n\nThis function returns a dictionary." in
7892         let doc =
7893           if List.mem ProtocolLimitWarning flags then
7894             doc ^ "\n\n" ^ protocol_limit_warning
7895           else doc in
7896         let doc =
7897           if List.mem DangerWillRobinson flags then
7898             doc ^ "\n\n" ^ danger_will_robinson
7899           else doc in
7900         let doc =
7901           match deprecation_notice flags with
7902           | None -> doc
7903           | Some txt -> doc ^ "\n\n" ^ txt in
7904         let doc = pod2text ~width:60 name doc in
7905         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
7906         let doc = String.concat "\n        " doc in
7907         pr "        u\"\"\"%s\"\"\"\n" doc;
7908       );
7909       pr "        return libguestfsmod.%s " name;
7910       generate_py_call_args ~handle:"self._o" (snd style);
7911       pr "\n";
7912       pr "\n";
7913   ) all_functions
7914
7915 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
7916 and generate_py_call_args ~handle args =
7917   pr "(%s" handle;
7918   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
7919   pr ")"
7920
7921 (* Useful if you need the longdesc POD text as plain text.  Returns a
7922  * list of lines.
7923  *
7924  * Because this is very slow (the slowest part of autogeneration),
7925  * we memoize the results.
7926  *)
7927 and pod2text ~width name longdesc =
7928   let key = width, name, longdesc in
7929   try Hashtbl.find pod2text_memo key
7930   with Not_found ->
7931     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
7932     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
7933     close_out chan;
7934     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
7935     let chan = Unix.open_process_in cmd in
7936     let lines = ref [] in
7937     let rec loop i =
7938       let line = input_line chan in
7939       if i = 1 then             (* discard the first line of output *)
7940         loop (i+1)
7941       else (
7942         let line = triml line in
7943         lines := line :: !lines;
7944         loop (i+1)
7945       ) in
7946     let lines = try loop 1 with End_of_file -> List.rev !lines in
7947     Unix.unlink filename;
7948     (match Unix.close_process_in chan with
7949      | Unix.WEXITED 0 -> ()
7950      | Unix.WEXITED i ->
7951          failwithf "pod2text: process exited with non-zero status (%d)" i
7952      | Unix.WSIGNALED i | Unix.WSTOPPED i ->
7953          failwithf "pod2text: process signalled or stopped by signal %d" i
7954     );
7955     Hashtbl.add pod2text_memo key lines;
7956     let chan = open_out pod2text_memo_filename in
7957     output_value chan pod2text_memo;
7958     close_out chan;
7959     lines
7960
7961 (* Generate ruby bindings. *)
7962 and generate_ruby_c () =
7963   generate_header CStyle LGPLv2;
7964
7965   pr "\
7966 #include <stdio.h>
7967 #include <stdlib.h>
7968
7969 #include <ruby.h>
7970
7971 #include \"guestfs.h\"
7972
7973 #include \"extconf.h\"
7974
7975 /* For Ruby < 1.9 */
7976 #ifndef RARRAY_LEN
7977 #define RARRAY_LEN(r) (RARRAY((r))->len)
7978 #endif
7979
7980 static VALUE m_guestfs;                 /* guestfs module */
7981 static VALUE c_guestfs;                 /* guestfs_h handle */
7982 static VALUE e_Error;                   /* used for all errors */
7983
7984 static void ruby_guestfs_free (void *p)
7985 {
7986   if (!p) return;
7987   guestfs_close ((guestfs_h *) p);
7988 }
7989
7990 static VALUE ruby_guestfs_create (VALUE m)
7991 {
7992   guestfs_h *g;
7993
7994   g = guestfs_create ();
7995   if (!g)
7996     rb_raise (e_Error, \"failed to create guestfs handle\");
7997
7998   /* Don't print error messages to stderr by default. */
7999   guestfs_set_error_handler (g, NULL, NULL);
8000
8001   /* Wrap it, and make sure the close function is called when the
8002    * handle goes away.
8003    */
8004   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
8005 }
8006
8007 static VALUE ruby_guestfs_close (VALUE gv)
8008 {
8009   guestfs_h *g;
8010   Data_Get_Struct (gv, guestfs_h, g);
8011
8012   ruby_guestfs_free (g);
8013   DATA_PTR (gv) = NULL;
8014
8015   return Qnil;
8016 }
8017
8018 ";
8019
8020   List.iter (
8021     fun (name, style, _, _, _, _, _) ->
8022       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
8023       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
8024       pr ")\n";
8025       pr "{\n";
8026       pr "  guestfs_h *g;\n";
8027       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
8028       pr "  if (!g)\n";
8029       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
8030         name;
8031       pr "\n";
8032
8033       List.iter (
8034         function
8035         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
8036             pr "  Check_Type (%sv, T_STRING);\n" n;
8037             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
8038             pr "  if (!%s)\n" n;
8039             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
8040             pr "              \"%s\", \"%s\");\n" n name
8041         | OptString n ->
8042             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
8043         | StringList n | DeviceList n ->
8044             pr "  char **%s;\n" n;
8045             pr "  Check_Type (%sv, T_ARRAY);\n" n;
8046             pr "  {\n";
8047             pr "    int i, len;\n";
8048             pr "    len = RARRAY_LEN (%sv);\n" n;
8049             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
8050               n;
8051             pr "    for (i = 0; i < len; ++i) {\n";
8052             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
8053             pr "      %s[i] = StringValueCStr (v);\n" n;
8054             pr "    }\n";
8055             pr "    %s[len] = NULL;\n" n;
8056             pr "  }\n";
8057         | Bool n ->
8058             pr "  int %s = RTEST (%sv);\n" n n
8059         | Int n ->
8060             pr "  int %s = NUM2INT (%sv);\n" n n
8061       ) (snd style);
8062       pr "\n";
8063
8064       let error_code =
8065         match fst style with
8066         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
8067         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8068         | RConstString _ | RConstOptString _ ->
8069             pr "  const char *r;\n"; "NULL"
8070         | RString _ -> pr "  char *r;\n"; "NULL"
8071         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
8072         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
8073         | RStructList (_, typ) ->
8074             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8075         | RBufferOut _ ->
8076             pr "  char *r;\n";
8077             pr "  size_t size;\n";
8078             "NULL" in
8079       pr "\n";
8080
8081       pr "  r = guestfs_%s " name;
8082       generate_c_call_args ~handle:"g" style;
8083       pr ";\n";
8084
8085       List.iter (
8086         function
8087         | Pathname _ | Device _ | Dev_or_Path _ | String _
8088         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
8089         | StringList n | DeviceList n ->
8090             pr "  free (%s);\n" n
8091       ) (snd style);
8092
8093       pr "  if (r == %s)\n" error_code;
8094       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
8095       pr "\n";
8096
8097       (match fst style with
8098        | RErr ->
8099            pr "  return Qnil;\n"
8100        | RInt _ | RBool _ ->
8101            pr "  return INT2NUM (r);\n"
8102        | RInt64 _ ->
8103            pr "  return ULL2NUM (r);\n"
8104        | RConstString _ ->
8105            pr "  return rb_str_new2 (r);\n";
8106        | RConstOptString _ ->
8107            pr "  if (r)\n";
8108            pr "    return rb_str_new2 (r);\n";
8109            pr "  else\n";
8110            pr "    return Qnil;\n";
8111        | RString _ ->
8112            pr "  VALUE rv = rb_str_new2 (r);\n";
8113            pr "  free (r);\n";
8114            pr "  return rv;\n";
8115        | RStringList _ ->
8116            pr "  int i, len = 0;\n";
8117            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
8118            pr "  VALUE rv = rb_ary_new2 (len);\n";
8119            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
8120            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
8121            pr "    free (r[i]);\n";
8122            pr "  }\n";
8123            pr "  free (r);\n";
8124            pr "  return rv;\n"
8125        | RStruct (_, typ) ->
8126            let cols = cols_of_struct typ in
8127            generate_ruby_struct_code typ cols
8128        | RStructList (_, typ) ->
8129            let cols = cols_of_struct typ in
8130            generate_ruby_struct_list_code typ cols
8131        | RHashtable _ ->
8132            pr "  VALUE rv = rb_hash_new ();\n";
8133            pr "  int i;\n";
8134            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
8135            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
8136            pr "    free (r[i]);\n";
8137            pr "    free (r[i+1]);\n";
8138            pr "  }\n";
8139            pr "  free (r);\n";
8140            pr "  return rv;\n"
8141        | RBufferOut _ ->
8142            pr "  VALUE rv = rb_str_new (r, size);\n";
8143            pr "  free (r);\n";
8144            pr "  return rv;\n";
8145       );
8146
8147       pr "}\n";
8148       pr "\n"
8149   ) all_functions;
8150
8151   pr "\
8152 /* Initialize the module. */
8153 void Init__guestfs ()
8154 {
8155   m_guestfs = rb_define_module (\"Guestfs\");
8156   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
8157   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
8158
8159   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
8160   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
8161
8162 ";
8163   (* Define the rest of the methods. *)
8164   List.iter (
8165     fun (name, style, _, _, _, _, _) ->
8166       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
8167       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
8168   ) all_functions;
8169
8170   pr "}\n"
8171
8172 (* Ruby code to return a struct. *)
8173 and generate_ruby_struct_code typ cols =
8174   pr "  VALUE rv = rb_hash_new ();\n";
8175   List.iter (
8176     function
8177     | name, FString ->
8178         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
8179     | name, FBuffer ->
8180         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
8181     | name, FUUID ->
8182         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
8183     | name, (FBytes|FUInt64) ->
8184         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
8185     | name, FInt64 ->
8186         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
8187     | name, FUInt32 ->
8188         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
8189     | name, FInt32 ->
8190         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
8191     | name, FOptPercent ->
8192         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
8193     | name, FChar -> (* XXX wrong? *)
8194         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
8195   ) cols;
8196   pr "  guestfs_free_%s (r);\n" typ;
8197   pr "  return rv;\n"
8198
8199 (* Ruby code to return a struct list. *)
8200 and generate_ruby_struct_list_code typ cols =
8201   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
8202   pr "  int i;\n";
8203   pr "  for (i = 0; i < r->len; ++i) {\n";
8204   pr "    VALUE hv = rb_hash_new ();\n";
8205   List.iter (
8206     function
8207     | name, FString ->
8208         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
8209     | name, FBuffer ->
8210         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
8211     | name, FUUID ->
8212         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
8213     | name, (FBytes|FUInt64) ->
8214         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
8215     | name, FInt64 ->
8216         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
8217     | name, FUInt32 ->
8218         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
8219     | name, FInt32 ->
8220         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
8221     | name, FOptPercent ->
8222         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
8223     | name, FChar -> (* XXX wrong? *)
8224         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
8225   ) cols;
8226   pr "    rb_ary_push (rv, hv);\n";
8227   pr "  }\n";
8228   pr "  guestfs_free_%s_list (r);\n" typ;
8229   pr "  return rv;\n"
8230
8231 (* Generate Java bindings GuestFS.java file. *)
8232 and generate_java_java () =
8233   generate_header CStyle LGPLv2;
8234
8235   pr "\
8236 package com.redhat.et.libguestfs;
8237
8238 import java.util.HashMap;
8239 import com.redhat.et.libguestfs.LibGuestFSException;
8240 import com.redhat.et.libguestfs.PV;
8241 import com.redhat.et.libguestfs.VG;
8242 import com.redhat.et.libguestfs.LV;
8243 import com.redhat.et.libguestfs.Stat;
8244 import com.redhat.et.libguestfs.StatVFS;
8245 import com.redhat.et.libguestfs.IntBool;
8246 import com.redhat.et.libguestfs.Dirent;
8247
8248 /**
8249  * The GuestFS object is a libguestfs handle.
8250  *
8251  * @author rjones
8252  */
8253 public class GuestFS {
8254   // Load the native code.
8255   static {
8256     System.loadLibrary (\"guestfs_jni\");
8257   }
8258
8259   /**
8260    * The native guestfs_h pointer.
8261    */
8262   long g;
8263
8264   /**
8265    * Create a libguestfs handle.
8266    *
8267    * @throws LibGuestFSException
8268    */
8269   public GuestFS () throws LibGuestFSException
8270   {
8271     g = _create ();
8272   }
8273   private native long _create () throws LibGuestFSException;
8274
8275   /**
8276    * Close a libguestfs handle.
8277    *
8278    * You can also leave handles to be collected by the garbage
8279    * collector, but this method ensures that the resources used
8280    * by the handle are freed up immediately.  If you call any
8281    * other methods after closing the handle, you will get an
8282    * exception.
8283    *
8284    * @throws LibGuestFSException
8285    */
8286   public void close () throws LibGuestFSException
8287   {
8288     if (g != 0)
8289       _close (g);
8290     g = 0;
8291   }
8292   private native void _close (long g) throws LibGuestFSException;
8293
8294   public void finalize () throws LibGuestFSException
8295   {
8296     close ();
8297   }
8298
8299 ";
8300
8301   List.iter (
8302     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8303       if not (List.mem NotInDocs flags); then (
8304         let doc = replace_str longdesc "C<guestfs_" "C<g." in
8305         let doc =
8306           if List.mem ProtocolLimitWarning flags then
8307             doc ^ "\n\n" ^ protocol_limit_warning
8308           else doc in
8309         let doc =
8310           if List.mem DangerWillRobinson flags then
8311             doc ^ "\n\n" ^ danger_will_robinson
8312           else doc in
8313         let doc =
8314           match deprecation_notice flags with
8315           | None -> doc
8316           | Some txt -> doc ^ "\n\n" ^ txt in
8317         let doc = pod2text ~width:60 name doc in
8318         let doc = List.map (            (* RHBZ#501883 *)
8319           function
8320           | "" -> "<p>"
8321           | nonempty -> nonempty
8322         ) doc in
8323         let doc = String.concat "\n   * " doc in
8324
8325         pr "  /**\n";
8326         pr "   * %s\n" shortdesc;
8327         pr "   * <p>\n";
8328         pr "   * %s\n" doc;
8329         pr "   * @throws LibGuestFSException\n";
8330         pr "   */\n";
8331         pr "  ";
8332       );
8333       generate_java_prototype ~public:true ~semicolon:false name style;
8334       pr "\n";
8335       pr "  {\n";
8336       pr "    if (g == 0)\n";
8337       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
8338         name;
8339       pr "    ";
8340       if fst style <> RErr then pr "return ";
8341       pr "_%s " name;
8342       generate_java_call_args ~handle:"g" (snd style);
8343       pr ";\n";
8344       pr "  }\n";
8345       pr "  ";
8346       generate_java_prototype ~privat:true ~native:true name style;
8347       pr "\n";
8348       pr "\n";
8349   ) all_functions;
8350
8351   pr "}\n"
8352
8353 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
8354 and generate_java_call_args ~handle args =
8355   pr "(%s" handle;
8356   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
8357   pr ")"
8358
8359 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
8360     ?(semicolon=true) name style =
8361   if privat then pr "private ";
8362   if public then pr "public ";
8363   if native then pr "native ";
8364
8365   (* return type *)
8366   (match fst style with
8367    | RErr -> pr "void ";
8368    | RInt _ -> pr "int ";
8369    | RInt64 _ -> pr "long ";
8370    | RBool _ -> pr "boolean ";
8371    | RConstString _ | RConstOptString _ | RString _
8372    | RBufferOut _ -> pr "String ";
8373    | RStringList _ -> pr "String[] ";
8374    | RStruct (_, typ) ->
8375        let name = java_name_of_struct typ in
8376        pr "%s " name;
8377    | RStructList (_, typ) ->
8378        let name = java_name_of_struct typ in
8379        pr "%s[] " name;
8380    | RHashtable _ -> pr "HashMap<String,String> ";
8381   );
8382
8383   if native then pr "_%s " name else pr "%s " name;
8384   pr "(";
8385   let needs_comma = ref false in
8386   if native then (
8387     pr "long g";
8388     needs_comma := true
8389   );
8390
8391   (* args *)
8392   List.iter (
8393     fun arg ->
8394       if !needs_comma then pr ", ";
8395       needs_comma := true;
8396
8397       match arg with
8398       | Pathname n
8399       | Device n | Dev_or_Path n
8400       | String n
8401       | OptString n
8402       | FileIn n
8403       | FileOut n ->
8404           pr "String %s" n
8405       | StringList n | DeviceList n ->
8406           pr "String[] %s" n
8407       | Bool n ->
8408           pr "boolean %s" n
8409       | Int n ->
8410           pr "int %s" n
8411   ) (snd style);
8412
8413   pr ")\n";
8414   pr "    throws LibGuestFSException";
8415   if semicolon then pr ";"
8416
8417 and generate_java_struct jtyp cols =
8418   generate_header CStyle LGPLv2;
8419
8420   pr "\
8421 package com.redhat.et.libguestfs;
8422
8423 /**
8424  * Libguestfs %s structure.
8425  *
8426  * @author rjones
8427  * @see GuestFS
8428  */
8429 public class %s {
8430 " jtyp jtyp;
8431
8432   List.iter (
8433     function
8434     | name, FString
8435     | name, FUUID
8436     | name, FBuffer -> pr "  public String %s;\n" name
8437     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
8438     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
8439     | name, FChar -> pr "  public char %s;\n" name
8440     | name, FOptPercent ->
8441         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
8442         pr "  public float %s;\n" name
8443   ) cols;
8444
8445   pr "}\n"
8446
8447 and generate_java_c () =
8448   generate_header CStyle LGPLv2;
8449
8450   pr "\
8451 #include <stdio.h>
8452 #include <stdlib.h>
8453 #include <string.h>
8454
8455 #include \"com_redhat_et_libguestfs_GuestFS.h\"
8456 #include \"guestfs.h\"
8457
8458 /* Note that this function returns.  The exception is not thrown
8459  * until after the wrapper function returns.
8460  */
8461 static void
8462 throw_exception (JNIEnv *env, const char *msg)
8463 {
8464   jclass cl;
8465   cl = (*env)->FindClass (env,
8466                           \"com/redhat/et/libguestfs/LibGuestFSException\");
8467   (*env)->ThrowNew (env, cl, msg);
8468 }
8469
8470 JNIEXPORT jlong JNICALL
8471 Java_com_redhat_et_libguestfs_GuestFS__1create
8472   (JNIEnv *env, jobject obj)
8473 {
8474   guestfs_h *g;
8475
8476   g = guestfs_create ();
8477   if (g == NULL) {
8478     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
8479     return 0;
8480   }
8481   guestfs_set_error_handler (g, NULL, NULL);
8482   return (jlong) (long) g;
8483 }
8484
8485 JNIEXPORT void JNICALL
8486 Java_com_redhat_et_libguestfs_GuestFS__1close
8487   (JNIEnv *env, jobject obj, jlong jg)
8488 {
8489   guestfs_h *g = (guestfs_h *) (long) jg;
8490   guestfs_close (g);
8491 }
8492
8493 ";
8494
8495   List.iter (
8496     fun (name, style, _, _, _, _, _) ->
8497       pr "JNIEXPORT ";
8498       (match fst style with
8499        | RErr -> pr "void ";
8500        | RInt _ -> pr "jint ";
8501        | RInt64 _ -> pr "jlong ";
8502        | RBool _ -> pr "jboolean ";
8503        | RConstString _ | RConstOptString _ | RString _
8504        | RBufferOut _ -> pr "jstring ";
8505        | RStruct _ | RHashtable _ ->
8506            pr "jobject ";
8507        | RStringList _ | RStructList _ ->
8508            pr "jobjectArray ";
8509       );
8510       pr "JNICALL\n";
8511       pr "Java_com_redhat_et_libguestfs_GuestFS_";
8512       pr "%s" (replace_str ("_" ^ name) "_" "_1");
8513       pr "\n";
8514       pr "  (JNIEnv *env, jobject obj, jlong jg";
8515       List.iter (
8516         function
8517         | Pathname n
8518         | Device n | Dev_or_Path n
8519         | String n
8520         | OptString n
8521         | FileIn n
8522         | FileOut n ->
8523             pr ", jstring j%s" n
8524         | StringList n | DeviceList n ->
8525             pr ", jobjectArray j%s" n
8526         | Bool n ->
8527             pr ", jboolean j%s" n
8528         | Int n ->
8529             pr ", jint j%s" n
8530       ) (snd style);
8531       pr ")\n";
8532       pr "{\n";
8533       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
8534       let error_code, no_ret =
8535         match fst style with
8536         | RErr -> pr "  int r;\n"; "-1", ""
8537         | RBool _
8538         | RInt _ -> pr "  int r;\n"; "-1", "0"
8539         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
8540         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
8541         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
8542         | RString _ ->
8543             pr "  jstring jr;\n";
8544             pr "  char *r;\n"; "NULL", "NULL"
8545         | RStringList _ ->
8546             pr "  jobjectArray jr;\n";
8547             pr "  int r_len;\n";
8548             pr "  jclass cl;\n";
8549             pr "  jstring jstr;\n";
8550             pr "  char **r;\n"; "NULL", "NULL"
8551         | RStruct (_, typ) ->
8552             pr "  jobject jr;\n";
8553             pr "  jclass cl;\n";
8554             pr "  jfieldID fl;\n";
8555             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
8556         | RStructList (_, typ) ->
8557             pr "  jobjectArray jr;\n";
8558             pr "  jclass cl;\n";
8559             pr "  jfieldID fl;\n";
8560             pr "  jobject jfl;\n";
8561             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
8562         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
8563         | RBufferOut _ ->
8564             pr "  jstring jr;\n";
8565             pr "  char *r;\n";
8566             pr "  size_t size;\n";
8567             "NULL", "NULL" in
8568       List.iter (
8569         function
8570         | Pathname n
8571         | Device n | Dev_or_Path n
8572         | String n
8573         | OptString n
8574         | FileIn n
8575         | FileOut n ->
8576             pr "  const char *%s;\n" n
8577         | StringList n | DeviceList n ->
8578             pr "  int %s_len;\n" n;
8579             pr "  const char **%s;\n" n
8580         | Bool n
8581         | Int n ->
8582             pr "  int %s;\n" n
8583       ) (snd style);
8584
8585       let needs_i =
8586         (match fst style with
8587          | RStringList _ | RStructList _ -> true
8588          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
8589          | RConstOptString _
8590          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
8591           List.exists (function
8592                        | StringList _ -> true
8593                        | DeviceList _ -> true
8594                        | _ -> false) (snd style) in
8595       if needs_i then
8596         pr "  int i;\n";
8597
8598       pr "\n";
8599
8600       (* Get the parameters. *)
8601       List.iter (
8602         function
8603         | Pathname n
8604         | Device n | Dev_or_Path n
8605         | String n
8606         | FileIn n
8607         | FileOut n ->
8608             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
8609         | OptString n ->
8610             (* This is completely undocumented, but Java null becomes
8611              * a NULL parameter.
8612              *)
8613             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
8614         | StringList n | DeviceList n ->
8615             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
8616             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
8617             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
8618             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
8619               n;
8620             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
8621             pr "  }\n";
8622             pr "  %s[%s_len] = NULL;\n" n n;
8623         | Bool n
8624         | Int n ->
8625             pr "  %s = j%s;\n" n n
8626       ) (snd style);
8627
8628       (* Make the call. *)
8629       pr "  r = guestfs_%s " name;
8630       generate_c_call_args ~handle:"g" style;
8631       pr ";\n";
8632
8633       (* Release the parameters. *)
8634       List.iter (
8635         function
8636         | Pathname n
8637         | Device n | Dev_or_Path n
8638         | String n
8639         | FileIn n
8640         | FileOut n ->
8641             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
8642         | OptString n ->
8643             pr "  if (j%s)\n" n;
8644             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
8645         | StringList n | DeviceList n ->
8646             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
8647             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
8648               n;
8649             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
8650             pr "  }\n";
8651             pr "  free (%s);\n" n
8652         | Bool n
8653         | Int n -> ()
8654       ) (snd style);
8655
8656       (* Check for errors. *)
8657       pr "  if (r == %s) {\n" error_code;
8658       pr "    throw_exception (env, guestfs_last_error (g));\n";
8659       pr "    return %s;\n" no_ret;
8660       pr "  }\n";
8661
8662       (* Return value. *)
8663       (match fst style with
8664        | RErr -> ()
8665        | RInt _ -> pr "  return (jint) r;\n"
8666        | RBool _ -> pr "  return (jboolean) r;\n"
8667        | RInt64 _ -> pr "  return (jlong) r;\n"
8668        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
8669        | RConstOptString _ ->
8670            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
8671        | RString _ ->
8672            pr "  jr = (*env)->NewStringUTF (env, r);\n";
8673            pr "  free (r);\n";
8674            pr "  return jr;\n"
8675        | RStringList _ ->
8676            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
8677            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
8678            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
8679            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
8680            pr "  for (i = 0; i < r_len; ++i) {\n";
8681            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
8682            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
8683            pr "    free (r[i]);\n";
8684            pr "  }\n";
8685            pr "  free (r);\n";
8686            pr "  return jr;\n"
8687        | RStruct (_, typ) ->
8688            let jtyp = java_name_of_struct typ in
8689            let cols = cols_of_struct typ in
8690            generate_java_struct_return typ jtyp cols
8691        | RStructList (_, typ) ->
8692            let jtyp = java_name_of_struct typ in
8693            let cols = cols_of_struct typ in
8694            generate_java_struct_list_return typ jtyp cols
8695        | RHashtable _ ->
8696            (* XXX *)
8697            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
8698            pr "  return NULL;\n"
8699        | RBufferOut _ ->
8700            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
8701            pr "  free (r);\n";
8702            pr "  return jr;\n"
8703       );
8704
8705       pr "}\n";
8706       pr "\n"
8707   ) all_functions
8708
8709 and generate_java_struct_return typ jtyp cols =
8710   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
8711   pr "  jr = (*env)->AllocObject (env, cl);\n";
8712   List.iter (
8713     function
8714     | name, FString ->
8715         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8716         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
8717     | name, FUUID ->
8718         pr "  {\n";
8719         pr "    char s[33];\n";
8720         pr "    memcpy (s, r->%s, 32);\n" name;
8721         pr "    s[32] = 0;\n";
8722         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8723         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
8724         pr "  }\n";
8725     | name, FBuffer ->
8726         pr "  {\n";
8727         pr "    int len = r->%s_len;\n" name;
8728         pr "    char s[len+1];\n";
8729         pr "    memcpy (s, r->%s, len);\n" name;
8730         pr "    s[len] = 0;\n";
8731         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8732         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
8733         pr "  }\n";
8734     | name, (FBytes|FUInt64|FInt64) ->
8735         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
8736         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8737     | name, (FUInt32|FInt32) ->
8738         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
8739         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8740     | name, FOptPercent ->
8741         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
8742         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
8743     | name, FChar ->
8744         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
8745         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8746   ) cols;
8747   pr "  free (r);\n";
8748   pr "  return jr;\n"
8749
8750 and generate_java_struct_list_return typ jtyp cols =
8751   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
8752   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
8753   pr "  for (i = 0; i < r->len; ++i) {\n";
8754   pr "    jfl = (*env)->AllocObject (env, cl);\n";
8755   List.iter (
8756     function
8757     | name, FString ->
8758         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8759         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
8760     | name, FUUID ->
8761         pr "    {\n";
8762         pr "      char s[33];\n";
8763         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
8764         pr "      s[32] = 0;\n";
8765         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8766         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
8767         pr "    }\n";
8768     | name, FBuffer ->
8769         pr "    {\n";
8770         pr "      int len = r->val[i].%s_len;\n" name;
8771         pr "      char s[len+1];\n";
8772         pr "      memcpy (s, r->val[i].%s, len);\n" name;
8773         pr "      s[len] = 0;\n";
8774         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8775         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
8776         pr "    }\n";
8777     | name, (FBytes|FUInt64|FInt64) ->
8778         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
8779         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8780     | name, (FUInt32|FInt32) ->
8781         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
8782         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8783     | name, FOptPercent ->
8784         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
8785         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
8786     | name, FChar ->
8787         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
8788         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8789   ) cols;
8790   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
8791   pr "  }\n";
8792   pr "  guestfs_free_%s_list (r);\n" typ;
8793   pr "  return jr;\n"
8794
8795 and generate_java_makefile_inc () =
8796   generate_header HashStyle GPLv2;
8797
8798   pr "java_built_sources = \\\n";
8799   List.iter (
8800     fun (typ, jtyp) ->
8801         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
8802   ) java_structs;
8803   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
8804
8805 and generate_haskell_hs () =
8806   generate_header HaskellStyle LGPLv2;
8807
8808   (* XXX We only know how to generate partial FFI for Haskell
8809    * at the moment.  Please help out!
8810    *)
8811   let can_generate style =
8812     match style with
8813     | RErr, _
8814     | RInt _, _
8815     | RInt64 _, _ -> true
8816     | RBool _, _
8817     | RConstString _, _
8818     | RConstOptString _, _
8819     | RString _, _
8820     | RStringList _, _
8821     | RStruct _, _
8822     | RStructList _, _
8823     | RHashtable _, _
8824     | RBufferOut _, _ -> false in
8825
8826   pr "\
8827 {-# INCLUDE <guestfs.h> #-}
8828 {-# LANGUAGE ForeignFunctionInterface #-}
8829
8830 module Guestfs (
8831   create";
8832
8833   (* List out the names of the actions we want to export. *)
8834   List.iter (
8835     fun (name, style, _, _, _, _, _) ->
8836       if can_generate style then pr ",\n  %s" name
8837   ) all_functions;
8838
8839   pr "
8840   ) where
8841 import Foreign
8842 import Foreign.C
8843 import Foreign.C.Types
8844 import IO
8845 import Control.Exception
8846 import Data.Typeable
8847
8848 data GuestfsS = GuestfsS            -- represents the opaque C struct
8849 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
8850 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
8851
8852 -- XXX define properly later XXX
8853 data PV = PV
8854 data VG = VG
8855 data LV = LV
8856 data IntBool = IntBool
8857 data Stat = Stat
8858 data StatVFS = StatVFS
8859 data Hashtable = Hashtable
8860
8861 foreign import ccall unsafe \"guestfs_create\" c_create
8862   :: IO GuestfsP
8863 foreign import ccall unsafe \"&guestfs_close\" c_close
8864   :: FunPtr (GuestfsP -> IO ())
8865 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
8866   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
8867
8868 create :: IO GuestfsH
8869 create = do
8870   p <- c_create
8871   c_set_error_handler p nullPtr nullPtr
8872   h <- newForeignPtr c_close p
8873   return h
8874
8875 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
8876   :: GuestfsP -> IO CString
8877
8878 -- last_error :: GuestfsH -> IO (Maybe String)
8879 -- last_error h = do
8880 --   str <- withForeignPtr h (\\p -> c_last_error p)
8881 --   maybePeek peekCString str
8882
8883 last_error :: GuestfsH -> IO (String)
8884 last_error h = do
8885   str <- withForeignPtr h (\\p -> c_last_error p)
8886   if (str == nullPtr)
8887     then return \"no error\"
8888     else peekCString str
8889
8890 ";
8891
8892   (* Generate wrappers for each foreign function. *)
8893   List.iter (
8894     fun (name, style, _, _, _, _, _) ->
8895       if can_generate style then (
8896         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
8897         pr "  :: ";
8898         generate_haskell_prototype ~handle:"GuestfsP" style;
8899         pr "\n";
8900         pr "\n";
8901         pr "%s :: " name;
8902         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
8903         pr "\n";
8904         pr "%s %s = do\n" name
8905           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
8906         pr "  r <- ";
8907         (* Convert pointer arguments using with* functions. *)
8908         List.iter (
8909           function
8910           | FileIn n
8911           | FileOut n
8912           | Pathname n | Device n | Dev_or_Path n | String n -> pr "withCString %s $ \\%s -> " n n
8913           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
8914           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
8915           | Bool _ | Int _ -> ()
8916         ) (snd style);
8917         (* Convert integer arguments. *)
8918         let args =
8919           List.map (
8920             function
8921             | Bool n -> sprintf "(fromBool %s)" n
8922             | Int n -> sprintf "(fromIntegral %s)" n
8923             | FileIn n | FileOut n
8924             | Pathname n | Device n | Dev_or_Path n | String n | OptString n | StringList n | DeviceList n -> n
8925           ) (snd style) in
8926         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
8927           (String.concat " " ("p" :: args));
8928         (match fst style with
8929          | RErr | RInt _ | RInt64 _ | RBool _ ->
8930              pr "  if (r == -1)\n";
8931              pr "    then do\n";
8932              pr "      err <- last_error h\n";
8933              pr "      fail err\n";
8934          | RConstString _ | RConstOptString _ | RString _
8935          | RStringList _ | RStruct _
8936          | RStructList _ | RHashtable _ | RBufferOut _ ->
8937              pr "  if (r == nullPtr)\n";
8938              pr "    then do\n";
8939              pr "      err <- last_error h\n";
8940              pr "      fail err\n";
8941         );
8942         (match fst style with
8943          | RErr ->
8944              pr "    else return ()\n"
8945          | RInt _ ->
8946              pr "    else return (fromIntegral r)\n"
8947          | RInt64 _ ->
8948              pr "    else return (fromIntegral r)\n"
8949          | RBool _ ->
8950              pr "    else return (toBool r)\n"
8951          | RConstString _
8952          | RConstOptString _
8953          | RString _
8954          | RStringList _
8955          | RStruct _
8956          | RStructList _
8957          | RHashtable _
8958          | RBufferOut _ ->
8959              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
8960         );
8961         pr "\n";
8962       )
8963   ) all_functions
8964
8965 and generate_haskell_prototype ~handle ?(hs = false) style =
8966   pr "%s -> " handle;
8967   let string = if hs then "String" else "CString" in
8968   let int = if hs then "Int" else "CInt" in
8969   let bool = if hs then "Bool" else "CInt" in
8970   let int64 = if hs then "Integer" else "Int64" in
8971   List.iter (
8972     fun arg ->
8973       (match arg with
8974        | Pathname _ | Device _ | Dev_or_Path _ | String _ -> pr "%s" string
8975        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
8976        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
8977        | Bool _ -> pr "%s" bool
8978        | Int _ -> pr "%s" int
8979        | FileIn _ -> pr "%s" string
8980        | FileOut _ -> pr "%s" string
8981       );
8982       pr " -> ";
8983   ) (snd style);
8984   pr "IO (";
8985   (match fst style with
8986    | RErr -> if not hs then pr "CInt"
8987    | RInt _ -> pr "%s" int
8988    | RInt64 _ -> pr "%s" int64
8989    | RBool _ -> pr "%s" bool
8990    | RConstString _ -> pr "%s" string
8991    | RConstOptString _ -> pr "Maybe %s" string
8992    | RString _ -> pr "%s" string
8993    | RStringList _ -> pr "[%s]" string
8994    | RStruct (_, typ) ->
8995        let name = java_name_of_struct typ in
8996        pr "%s" name
8997    | RStructList (_, typ) ->
8998        let name = java_name_of_struct typ in
8999        pr "[%s]" name
9000    | RHashtable _ -> pr "Hashtable"
9001    | RBufferOut _ -> pr "%s" string
9002   );
9003   pr ")"
9004
9005 and generate_bindtests () =
9006   generate_header CStyle LGPLv2;
9007
9008   pr "\
9009 #include <stdio.h>
9010 #include <stdlib.h>
9011 #include <inttypes.h>
9012 #include <string.h>
9013
9014 #include \"guestfs.h\"
9015 #include \"guestfs_protocol.h\"
9016
9017 #define error guestfs_error
9018 #define safe_calloc guestfs_safe_calloc
9019 #define safe_malloc guestfs_safe_malloc
9020
9021 static void
9022 print_strings (char * const* const argv)
9023 {
9024   int argc;
9025
9026   printf (\"[\");
9027   for (argc = 0; argv[argc] != NULL; ++argc) {
9028     if (argc > 0) printf (\", \");
9029     printf (\"\\\"%%s\\\"\", argv[argc]);
9030   }
9031   printf (\"]\\n\");
9032 }
9033
9034 /* The test0 function prints its parameters to stdout. */
9035 ";
9036
9037   let test0, tests =
9038     match test_functions with
9039     | [] -> assert false
9040     | test0 :: tests -> test0, tests in
9041
9042   let () =
9043     let (name, style, _, _, _, _, _) = test0 in
9044     generate_prototype ~extern:false ~semicolon:false ~newline:true
9045       ~handle:"g" ~prefix:"guestfs_" name style;
9046     pr "{\n";
9047     List.iter (
9048       function
9049       | Pathname n
9050       | Device n | Dev_or_Path n
9051       | String n
9052       | FileIn n
9053       | FileOut n -> pr "  printf (\"%%s\\n\", %s);\n" n
9054       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
9055       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
9056       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
9057       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
9058     ) (snd style);
9059     pr "  /* Java changes stdout line buffering so we need this: */\n";
9060     pr "  fflush (stdout);\n";
9061     pr "  return 0;\n";
9062     pr "}\n";
9063     pr "\n" in
9064
9065   List.iter (
9066     fun (name, style, _, _, _, _, _) ->
9067       if String.sub name (String.length name - 3) 3 <> "err" then (
9068         pr "/* Test normal return. */\n";
9069         generate_prototype ~extern:false ~semicolon:false ~newline:true
9070           ~handle:"g" ~prefix:"guestfs_" name style;
9071         pr "{\n";
9072         (match fst style with
9073          | RErr ->
9074              pr "  return 0;\n"
9075          | RInt _ ->
9076              pr "  int r;\n";
9077              pr "  sscanf (val, \"%%d\", &r);\n";
9078              pr "  return r;\n"
9079          | RInt64 _ ->
9080              pr "  int64_t r;\n";
9081              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
9082              pr "  return r;\n"
9083          | RBool _ ->
9084              pr "  return strcmp (val, \"true\") == 0;\n"
9085          | RConstString _
9086          | RConstOptString _ ->
9087              (* Can't return the input string here.  Return a static
9088               * string so we ensure we get a segfault if the caller
9089               * tries to free it.
9090               *)
9091              pr "  return \"static string\";\n"
9092          | RString _ ->
9093              pr "  return strdup (val);\n"
9094          | RStringList _ ->
9095              pr "  char **strs;\n";
9096              pr "  int n, i;\n";
9097              pr "  sscanf (val, \"%%d\", &n);\n";
9098              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
9099              pr "  for (i = 0; i < n; ++i) {\n";
9100              pr "    strs[i] = safe_malloc (g, 16);\n";
9101              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
9102              pr "  }\n";
9103              pr "  strs[n] = NULL;\n";
9104              pr "  return strs;\n"
9105          | RStruct (_, typ) ->
9106              pr "  struct guestfs_%s *r;\n" typ;
9107              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
9108              pr "  return r;\n"
9109          | RStructList (_, typ) ->
9110              pr "  struct guestfs_%s_list *r;\n" typ;
9111              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
9112              pr "  sscanf (val, \"%%d\", &r->len);\n";
9113              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
9114              pr "  return r;\n"
9115          | RHashtable _ ->
9116              pr "  char **strs;\n";
9117              pr "  int n, i;\n";
9118              pr "  sscanf (val, \"%%d\", &n);\n";
9119              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
9120              pr "  for (i = 0; i < n; ++i) {\n";
9121              pr "    strs[i*2] = safe_malloc (g, 16);\n";
9122              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
9123              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
9124              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
9125              pr "  }\n";
9126              pr "  strs[n*2] = NULL;\n";
9127              pr "  return strs;\n"
9128          | RBufferOut _ ->
9129              pr "  return strdup (val);\n"
9130         );
9131         pr "}\n";
9132         pr "\n"
9133       ) else (
9134         pr "/* Test error return. */\n";
9135         generate_prototype ~extern:false ~semicolon:false ~newline:true
9136           ~handle:"g" ~prefix:"guestfs_" name style;
9137         pr "{\n";
9138         pr "  error (g, \"error\");\n";
9139         (match fst style with
9140          | RErr | RInt _ | RInt64 _ | RBool _ ->
9141              pr "  return -1;\n"
9142          | RConstString _ | RConstOptString _
9143          | RString _ | RStringList _ | RStruct _
9144          | RStructList _
9145          | RHashtable _
9146          | RBufferOut _ ->
9147              pr "  return NULL;\n"
9148         );
9149         pr "}\n";
9150         pr "\n"
9151       )
9152   ) tests
9153
9154 and generate_ocaml_bindtests () =
9155   generate_header OCamlStyle GPLv2;
9156
9157   pr "\
9158 let () =
9159   let g = Guestfs.create () in
9160 ";
9161
9162   let mkargs args =
9163     String.concat " " (
9164       List.map (
9165         function
9166         | CallString s -> "\"" ^ s ^ "\""
9167         | CallOptString None -> "None"
9168         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
9169         | CallStringList xs ->
9170             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
9171         | CallInt i when i >= 0 -> string_of_int i
9172         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
9173         | CallBool b -> string_of_bool b
9174       ) args
9175     )
9176   in
9177
9178   generate_lang_bindtests (
9179     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
9180   );
9181
9182   pr "print_endline \"EOF\"\n"
9183
9184 and generate_perl_bindtests () =
9185   pr "#!/usr/bin/perl -w\n";
9186   generate_header HashStyle GPLv2;
9187
9188   pr "\
9189 use strict;
9190
9191 use Sys::Guestfs;
9192
9193 my $g = Sys::Guestfs->new ();
9194 ";
9195
9196   let mkargs args =
9197     String.concat ", " (
9198       List.map (
9199         function
9200         | CallString s -> "\"" ^ s ^ "\""
9201         | CallOptString None -> "undef"
9202         | CallOptString (Some s) -> sprintf "\"%s\"" s
9203         | CallStringList xs ->
9204             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9205         | CallInt i -> string_of_int i
9206         | CallBool b -> if b then "1" else "0"
9207       ) args
9208     )
9209   in
9210
9211   generate_lang_bindtests (
9212     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
9213   );
9214
9215   pr "print \"EOF\\n\"\n"
9216
9217 and generate_python_bindtests () =
9218   generate_header HashStyle GPLv2;
9219
9220   pr "\
9221 import guestfs
9222
9223 g = guestfs.GuestFS ()
9224 ";
9225
9226   let mkargs args =
9227     String.concat ", " (
9228       List.map (
9229         function
9230         | CallString s -> "\"" ^ s ^ "\""
9231         | CallOptString None -> "None"
9232         | CallOptString (Some s) -> sprintf "\"%s\"" s
9233         | CallStringList xs ->
9234             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9235         | CallInt i -> string_of_int i
9236         | CallBool b -> if b then "1" else "0"
9237       ) args
9238     )
9239   in
9240
9241   generate_lang_bindtests (
9242     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
9243   );
9244
9245   pr "print \"EOF\"\n"
9246
9247 and generate_ruby_bindtests () =
9248   generate_header HashStyle GPLv2;
9249
9250   pr "\
9251 require 'guestfs'
9252
9253 g = Guestfs::create()
9254 ";
9255
9256   let mkargs args =
9257     String.concat ", " (
9258       List.map (
9259         function
9260         | CallString s -> "\"" ^ s ^ "\""
9261         | CallOptString None -> "nil"
9262         | CallOptString (Some s) -> sprintf "\"%s\"" s
9263         | CallStringList xs ->
9264             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9265         | CallInt i -> string_of_int i
9266         | CallBool b -> string_of_bool b
9267       ) args
9268     )
9269   in
9270
9271   generate_lang_bindtests (
9272     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
9273   );
9274
9275   pr "print \"EOF\\n\"\n"
9276
9277 and generate_java_bindtests () =
9278   generate_header CStyle GPLv2;
9279
9280   pr "\
9281 import com.redhat.et.libguestfs.*;
9282
9283 public class Bindtests {
9284     public static void main (String[] argv)
9285     {
9286         try {
9287             GuestFS g = new GuestFS ();
9288 ";
9289
9290   let mkargs args =
9291     String.concat ", " (
9292       List.map (
9293         function
9294         | CallString s -> "\"" ^ s ^ "\""
9295         | CallOptString None -> "null"
9296         | CallOptString (Some s) -> sprintf "\"%s\"" s
9297         | CallStringList xs ->
9298             "new String[]{" ^
9299               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
9300         | CallInt i -> string_of_int i
9301         | CallBool b -> string_of_bool b
9302       ) args
9303     )
9304   in
9305
9306   generate_lang_bindtests (
9307     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
9308   );
9309
9310   pr "
9311             System.out.println (\"EOF\");
9312         }
9313         catch (Exception exn) {
9314             System.err.println (exn);
9315             System.exit (1);
9316         }
9317     }
9318 }
9319 "
9320
9321 and generate_haskell_bindtests () =
9322   generate_header HaskellStyle GPLv2;
9323
9324   pr "\
9325 module Bindtests where
9326 import qualified Guestfs
9327
9328 main = do
9329   g <- Guestfs.create
9330 ";
9331
9332   let mkargs args =
9333     String.concat " " (
9334       List.map (
9335         function
9336         | CallString s -> "\"" ^ s ^ "\""
9337         | CallOptString None -> "Nothing"
9338         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
9339         | CallStringList xs ->
9340             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9341         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
9342         | CallInt i -> string_of_int i
9343         | CallBool true -> "True"
9344         | CallBool false -> "False"
9345       ) args
9346     )
9347   in
9348
9349   generate_lang_bindtests (
9350     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
9351   );
9352
9353   pr "  putStrLn \"EOF\"\n"
9354
9355 (* Language-independent bindings tests - we do it this way to
9356  * ensure there is parity in testing bindings across all languages.
9357  *)
9358 and generate_lang_bindtests call =
9359   call "test0" [CallString "abc"; CallOptString (Some "def");
9360                 CallStringList []; CallBool false;
9361                 CallInt 0; CallString "123"; CallString "456"];
9362   call "test0" [CallString "abc"; CallOptString None;
9363                 CallStringList []; CallBool false;
9364                 CallInt 0; CallString "123"; CallString "456"];
9365   call "test0" [CallString ""; CallOptString (Some "def");
9366                 CallStringList []; CallBool false;
9367                 CallInt 0; CallString "123"; CallString "456"];
9368   call "test0" [CallString ""; CallOptString (Some "");
9369                 CallStringList []; CallBool false;
9370                 CallInt 0; CallString "123"; CallString "456"];
9371   call "test0" [CallString "abc"; CallOptString (Some "def");
9372                 CallStringList ["1"]; CallBool false;
9373                 CallInt 0; CallString "123"; CallString "456"];
9374   call "test0" [CallString "abc"; CallOptString (Some "def");
9375                 CallStringList ["1"; "2"]; CallBool false;
9376                 CallInt 0; CallString "123"; CallString "456"];
9377   call "test0" [CallString "abc"; CallOptString (Some "def");
9378                 CallStringList ["1"]; CallBool true;
9379                 CallInt 0; CallString "123"; CallString "456"];
9380   call "test0" [CallString "abc"; CallOptString (Some "def");
9381                 CallStringList ["1"]; CallBool false;
9382                 CallInt (-1); CallString "123"; CallString "456"];
9383   call "test0" [CallString "abc"; CallOptString (Some "def");
9384                 CallStringList ["1"]; CallBool false;
9385                 CallInt (-2); CallString "123"; CallString "456"];
9386   call "test0" [CallString "abc"; CallOptString (Some "def");
9387                 CallStringList ["1"]; CallBool false;
9388                 CallInt 1; CallString "123"; CallString "456"];
9389   call "test0" [CallString "abc"; CallOptString (Some "def");
9390                 CallStringList ["1"]; CallBool false;
9391                 CallInt 2; CallString "123"; CallString "456"];
9392   call "test0" [CallString "abc"; CallOptString (Some "def");
9393                 CallStringList ["1"]; CallBool false;
9394                 CallInt 4095; CallString "123"; CallString "456"];
9395   call "test0" [CallString "abc"; CallOptString (Some "def");
9396                 CallStringList ["1"]; CallBool false;
9397                 CallInt 0; CallString ""; CallString ""]
9398
9399 (* XXX Add here tests of the return and error functions. *)
9400
9401 (* This is used to generate the src/MAX_PROC_NR file which
9402  * contains the maximum procedure number, a surrogate for the
9403  * ABI version number.  See src/Makefile.am for the details.
9404  *)
9405 and generate_max_proc_nr () =
9406   let proc_nrs = List.map (
9407     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
9408   ) daemon_functions in
9409
9410   let max_proc_nr = List.fold_left max 0 proc_nrs in
9411
9412   pr "%d\n" max_proc_nr
9413
9414 let output_to filename =
9415   let filename_new = filename ^ ".new" in
9416   chan := open_out filename_new;
9417   let close () =
9418     close_out !chan;
9419     chan := stdout;
9420
9421     (* Is the new file different from the current file? *)
9422     if Sys.file_exists filename && files_equal filename filename_new then
9423       Unix.unlink filename_new          (* same, so skip it *)
9424     else (
9425       (* different, overwrite old one *)
9426       (try Unix.chmod filename 0o644 with Unix.Unix_error _ -> ());
9427       Unix.rename filename_new filename;
9428       Unix.chmod filename 0o444;
9429       printf "written %s\n%!" filename;
9430     )
9431   in
9432   close
9433
9434 (* Main program. *)
9435 let () =
9436   check_functions ();
9437
9438   if not (Sys.file_exists "HACKING") then (
9439     eprintf "\
9440 You are probably running this from the wrong directory.
9441 Run it from the top source directory using the command
9442   src/generator.ml
9443 ";
9444     exit 1
9445   );
9446
9447   let close = output_to "src/guestfs_protocol.x" in
9448   generate_xdr ();
9449   close ();
9450
9451   let close = output_to "src/guestfs-structs.h" in
9452   generate_structs_h ();
9453   close ();
9454
9455   let close = output_to "src/guestfs-actions.h" in
9456   generate_actions_h ();
9457   close ();
9458
9459   let close = output_to "src/guestfs-actions.c" in
9460   generate_client_actions ();
9461   close ();
9462
9463   let close = output_to "daemon/actions.h" in
9464   generate_daemon_actions_h ();
9465   close ();
9466
9467   let close = output_to "daemon/stubs.c" in
9468   generate_daemon_actions ();
9469   close ();
9470
9471   let close = output_to "daemon/names.c" in
9472   generate_daemon_names ();
9473   close ();
9474
9475   let close = output_to "capitests/tests.c" in
9476   generate_tests ();
9477   close ();
9478
9479   let close = output_to "src/guestfs-bindtests.c" in
9480   generate_bindtests ();
9481   close ();
9482
9483   let close = output_to "fish/cmds.c" in
9484   generate_fish_cmds ();
9485   close ();
9486
9487   let close = output_to "fish/completion.c" in
9488   generate_fish_completion ();
9489   close ();
9490
9491   let close = output_to "guestfs-structs.pod" in
9492   generate_structs_pod ();
9493   close ();
9494
9495   let close = output_to "guestfs-actions.pod" in
9496   generate_actions_pod ();
9497   close ();
9498
9499   let close = output_to "guestfish-actions.pod" in
9500   generate_fish_actions_pod ();
9501   close ();
9502
9503   let close = output_to "ocaml/guestfs.mli" in
9504   generate_ocaml_mli ();
9505   close ();
9506
9507   let close = output_to "ocaml/guestfs.ml" in
9508   generate_ocaml_ml ();
9509   close ();
9510
9511   let close = output_to "ocaml/guestfs_c_actions.c" in
9512   generate_ocaml_c ();
9513   close ();
9514
9515   let close = output_to "ocaml/bindtests.ml" in
9516   generate_ocaml_bindtests ();
9517   close ();
9518
9519   let close = output_to "perl/Guestfs.xs" in
9520   generate_perl_xs ();
9521   close ();
9522
9523   let close = output_to "perl/lib/Sys/Guestfs.pm" in
9524   generate_perl_pm ();
9525   close ();
9526
9527   let close = output_to "perl/bindtests.pl" in
9528   generate_perl_bindtests ();
9529   close ();
9530
9531   let close = output_to "python/guestfs-py.c" in
9532   generate_python_c ();
9533   close ();
9534
9535   let close = output_to "python/guestfs.py" in
9536   generate_python_py ();
9537   close ();
9538
9539   let close = output_to "python/bindtests.py" in
9540   generate_python_bindtests ();
9541   close ();
9542
9543   let close = output_to "ruby/ext/guestfs/_guestfs.c" in
9544   generate_ruby_c ();
9545   close ();
9546
9547   let close = output_to "ruby/bindtests.rb" in
9548   generate_ruby_bindtests ();
9549   close ();
9550
9551   let close = output_to "java/com/redhat/et/libguestfs/GuestFS.java" in
9552   generate_java_java ();
9553   close ();
9554
9555   List.iter (
9556     fun (typ, jtyp) ->
9557       let cols = cols_of_struct typ in
9558       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
9559       let close = output_to filename in
9560       generate_java_struct jtyp cols;
9561       close ();
9562   ) java_structs;
9563
9564   let close = output_to "java/Makefile.inc" in
9565   generate_java_makefile_inc ();
9566   close ();
9567
9568   let close = output_to "java/com_redhat_et_libguestfs_GuestFS.c" in
9569   generate_java_c ();
9570   close ();
9571
9572   let close = output_to "java/Bindtests.java" in
9573   generate_java_bindtests ();
9574   close ();
9575
9576   let close = output_to "haskell/Guestfs.hs" in
9577   generate_haskell_hs ();
9578   close ();
9579
9580   let close = output_to "haskell/Bindtests.hs" in
9581   generate_haskell_bindtests ();
9582   close ();
9583
9584   let close = output_to "src/MAX_PROC_NR" in
9585   generate_max_proc_nr ();
9586   close ();
9587
9588   (* Always generate this file last, and unconditionally.  It's used
9589    * by the Makefile to know when we must re-run the generator.
9590    *)
9591   let chan = open_out "src/stamp-generator" in
9592   fprintf chan "1\n";
9593   close_out chan