generator.ml: do not emit unused print_* functions
[libguestfs.git] / src / generator.ml
1 #!/usr/bin/env ocaml
2 (* libguestfs
3  * Copyright (C) 2009 Red Hat Inc.
4  *
5  * This program is free software; you can redistribute it and/or modify
6  * it under the terms of the GNU General Public License as published by
7  * the Free Software Foundation; either version 2 of the License, or
8  * (at your option) any later version.
9  *
10  * This program is distributed in the hope that it will be useful,
11  * but WITHOUT ANY WARRANTY; without even the implied warranty of
12  * MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the
13  * GNU General Public License for more details.
14  *
15  * You should have received a copy of the GNU General Public License
16  * along with this program; if not, write to the Free Software
17  * Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA
18  *)
19
20 (* This script generates a large amount of code and documentation for
21  * all the daemon actions.
22  *
23  * To add a new action there are only two files you need to change,
24  * this one to describe the interface (see the big table below), and
25  * daemon/<somefile>.c to write the implementation.
26  *
27  * After editing this file, run it (./src/generator.ml) to regenerate all the
28  * output files.  Note that if you are using a separate build directory you
29  * must run generator.ml from the _source_ directory.
30  *
31  * IMPORTANT: This script should NOT print any warnings.  If it prints
32  * warnings, you should treat them as errors.
33  *)
34
35 #load "unix.cma";;
36 #load "str.cma";;
37
38 open Printf
39
40 type style = ret * args
41 and ret =
42     (* "RErr" as a return value means an int used as a simple error
43      * indication, ie. 0 or -1.
44      *)
45   | RErr
46
47     (* "RInt" as a return value means an int which is -1 for error
48      * or any value >= 0 on success.  Only use this for smallish
49      * positive ints (0 <= i < 2^30).
50      *)
51   | RInt of string
52
53     (* "RInt64" is the same as RInt, but is guaranteed to be able
54      * to return a full 64 bit value, _except_ that -1 means error
55      * (so -1 cannot be a valid, non-error return value).
56      *)
57   | RInt64 of string
58
59     (* "RBool" is a bool return value which can be true/false or
60      * -1 for error.
61      *)
62   | RBool of string
63
64     (* "RConstString" is a string that refers to a constant value.
65      * The return value must NOT be NULL (since NULL indicates
66      * an error).
67      *
68      * Try to avoid using this.  In particular you cannot use this
69      * for values returned from the daemon, because there is no
70      * thread-safe way to return them in the C API.
71      *)
72   | RConstString of string
73
74     (* "RConstOptString" is an even more broken version of
75      * "RConstString".  The returned string may be NULL and there
76      * is no way to return an error indication.  Avoid using this!
77      *)
78   | RConstOptString of string
79
80     (* "RString" is a returned string.  It must NOT be NULL, since
81      * a NULL return indicates an error.  The caller frees this.
82      *)
83   | RString of string
84
85     (* "RStringList" is a list of strings.  No string in the list
86      * can be NULL.  The caller frees the strings and the array.
87      *)
88   | RStringList of string
89
90     (* "RStruct" is a function which returns a single named structure
91      * or an error indication (in C, a struct, and in other languages
92      * with varying representations, but usually very efficient).  See
93      * after the function list below for the structures.
94      *)
95   | RStruct of string * string          (* name of retval, name of struct *)
96
97     (* "RStructList" is a function which returns either a list/array
98      * of structures (could be zero-length), or an error indication.
99      *)
100   | RStructList of string * string      (* name of retval, name of struct *)
101
102     (* Key-value pairs of untyped strings.  Turns into a hashtable or
103      * dictionary in languages which support it.  DON'T use this as a
104      * general "bucket" for results.  Prefer a stronger typed return
105      * value if one is available, or write a custom struct.  Don't use
106      * this if the list could potentially be very long, since it is
107      * inefficient.  Keys should be unique.  NULLs are not permitted.
108      *)
109   | RHashtable of string
110
111     (* "RBufferOut" is handled almost exactly like RString, but
112      * it allows the string to contain arbitrary 8 bit data including
113      * ASCII NUL.  In the C API this causes an implicit extra parameter
114      * to be added of type <size_t *size_r>.  The extra parameter
115      * returns the actual size of the return buffer in bytes.
116      *
117      * Other programming languages support strings with arbitrary 8 bit
118      * data.
119      *
120      * At the RPC layer we have to use the opaque<> type instead of
121      * string<>.  Returned data is still limited to the max message
122      * size (ie. ~ 2 MB).
123      *)
124   | RBufferOut of string
125
126 and args = argt list    (* Function parameters, guestfs handle is implicit. *)
127
128     (* Note in future we should allow a "variable args" parameter as
129      * the final parameter, to allow commands like
130      *   chmod mode file [file(s)...]
131      * This is not implemented yet, but many commands (such as chmod)
132      * are currently defined with the argument order keeping this future
133      * possibility in mind.
134      *)
135 and argt =
136   | String of string    (* const char *name, cannot be NULL *)
137   | Device of string    (* /dev device name, cannot be NULL *)
138   | Pathname of string  (* file name, cannot be NULL *)
139   | Dev_or_Path of string (* /dev device name or Pathname, cannot be NULL *)
140   | OptString of string (* const char *name, may be NULL *)
141   | StringList of string(* list of strings (each string cannot be NULL) *)
142   | DeviceList of string(* list of Device names (each cannot be NULL) *)
143   | Bool of string      (* boolean *)
144   | Int of string       (* int (smallish ints, signed, <= 31 bits) *)
145     (* These are treated as filenames (simple string parameters) in
146      * the C API and bindings.  But in the RPC protocol, we transfer
147      * the actual file content up to or down from the daemon.
148      * FileIn: local machine -> daemon (in request)
149      * FileOut: daemon -> local machine (in reply)
150      * In guestfish (only), the special name "-" means read from
151      * stdin or write to stdout.
152      *)
153   | FileIn of string
154   | FileOut of string
155 (* Not implemented:
156     (* Opaque buffer which can contain arbitrary 8 bit data.
157      * In the C API, this is expressed as <char *, int> pair.
158      * Most other languages have a string type which can contain
159      * ASCII NUL.  We use whatever type is appropriate for each
160      * language.
161      * Buffers are limited by the total message size.  To transfer
162      * large blocks of data, use FileIn/FileOut parameters instead.
163      * To return an arbitrary buffer, use RBufferOut.
164      *)
165   | BufferIn of string
166 *)
167
168 type flags =
169   | ProtocolLimitWarning  (* display warning about protocol size limits *)
170   | DangerWillRobinson    (* flags particularly dangerous commands *)
171   | FishAlias of string   (* provide an alias for this cmd in guestfish *)
172   | FishAction of string  (* call this function in guestfish *)
173   | NotInFish             (* do not export via guestfish *)
174   | NotInDocs             (* do not add this function to documentation *)
175   | DeprecatedBy of string (* function is deprecated, use .. instead *)
176
177 (* You can supply zero or as many tests as you want per API call.
178  *
179  * Note that the test environment has 3 block devices, of size 500MB,
180  * 50MB and 10MB (respectively /dev/sda, /dev/sdb, /dev/sdc), and
181  * a fourth squashfs block device with some known files on it (/dev/sdd).
182  *
183  * Note for partitioning purposes, the 500MB device has 1015 cylinders.
184  * Number of cylinders was 63 for IDE emulated disks with precisely
185  * the same size.  How exactly this is calculated is a mystery.
186  *
187  * The squashfs block device (/dev/sdd) comes from images/test.sqsh.
188  *
189  * To be able to run the tests in a reasonable amount of time,
190  * the virtual machine and block devices are reused between tests.
191  * So don't try testing kill_subprocess :-x
192  *
193  * Between each test we blockdev-setrw, umount-all, lvm-remove-all.
194  *
195  * Don't assume anything about the previous contents of the block
196  * devices.  Use 'Init*' to create some initial scenarios.
197  *
198  * You can add a prerequisite clause to any individual test.  This
199  * is a run-time check, which, if it fails, causes the test to be
200  * skipped.  Useful if testing a command which might not work on
201  * all variations of libguestfs builds.  A test that has prerequisite
202  * of 'Always' is run unconditionally.
203  *
204  * In addition, packagers can skip individual tests by setting the
205  * environment variables:     eg:
206  *   SKIP_TEST_<CMD>_<NUM>=1  SKIP_TEST_COMMAND_3=1  (skips test #3 of command)
207  *   SKIP_TEST_<CMD>=1        SKIP_TEST_ZEROFREE=1   (skips all zerofree tests)
208  *)
209 type tests = (test_init * test_prereq * test) list
210 and test =
211     (* Run the command sequence and just expect nothing to fail. *)
212   | TestRun of seq
213
214     (* Run the command sequence and expect the output of the final
215      * command to be the string.
216      *)
217   | TestOutput of seq * string
218
219     (* Run the command sequence and expect the output of the final
220      * command to be the list of strings.
221      *)
222   | TestOutputList of seq * string list
223
224     (* Run the command sequence and expect the output of the final
225      * command to be the list of block devices (could be either
226      * "/dev/sd.." or "/dev/hd.." form - we don't check the 5th
227      * character of each string).
228      *)
229   | TestOutputListOfDevices of seq * string list
230
231     (* Run the command sequence and expect the output of the final
232      * command to be the integer.
233      *)
234   | TestOutputInt of seq * int
235
236     (* Run the command sequence and expect the output of the final
237      * command to be <op> <int>, eg. ">=", "1".
238      *)
239   | TestOutputIntOp of seq * string * int
240
241     (* Run the command sequence and expect the output of the final
242      * command to be a true value (!= 0 or != NULL).
243      *)
244   | TestOutputTrue of seq
245
246     (* Run the command sequence and expect the output of the final
247      * command to be a false value (== 0 or == NULL, but not an error).
248      *)
249   | TestOutputFalse of seq
250
251     (* Run the command sequence and expect the output of the final
252      * command to be a list of the given length (but don't care about
253      * content).
254      *)
255   | TestOutputLength of seq * int
256
257     (* Run the command sequence and expect the output of the final
258      * command to be a buffer (RBufferOut), ie. string + size.
259      *)
260   | TestOutputBuffer of seq * string
261
262     (* Run the command sequence and expect the output of the final
263      * command to be a structure.
264      *)
265   | TestOutputStruct of seq * test_field_compare list
266
267     (* Run the command sequence and expect the final command (only)
268      * to fail.
269      *)
270   | TestLastFail of seq
271
272 and test_field_compare =
273   | CompareWithInt of string * int
274   | CompareWithIntOp of string * string * int
275   | CompareWithString of string * string
276   | CompareFieldsIntEq of string * string
277   | CompareFieldsStrEq of string * string
278
279 (* Test prerequisites. *)
280 and test_prereq =
281     (* Test always runs. *)
282   | Always
283
284     (* Test is currently disabled - eg. it fails, or it tests some
285      * unimplemented feature.
286      *)
287   | Disabled
288
289     (* 'string' is some C code (a function body) that should return
290      * true or false.  The test will run if the code returns true.
291      *)
292   | If of string
293
294     (* As for 'If' but the test runs _unless_ the code returns true. *)
295   | Unless of string
296
297 (* Some initial scenarios for testing. *)
298 and test_init =
299     (* Do nothing, block devices could contain random stuff including
300      * LVM PVs, and some filesystems might be mounted.  This is usually
301      * a bad idea.
302      *)
303   | InitNone
304
305     (* Block devices are empty and no filesystems are mounted. *)
306   | InitEmpty
307
308     (* /dev/sda contains a single partition /dev/sda1, with random
309      * content.  /dev/sdb and /dev/sdc may have random content.
310      * No LVM.
311      *)
312   | InitPartition
313
314     (* /dev/sda contains a single partition /dev/sda1, which is formatted
315      * as ext2, empty [except for lost+found] and mounted on /.
316      * /dev/sdb and /dev/sdc may have random content.
317      * No LVM.
318      *)
319   | InitBasicFS
320
321     (* /dev/sda:
322      *   /dev/sda1 (is a PV):
323      *     /dev/VG/LV (size 8MB):
324      *       formatted as ext2, empty [except for lost+found], mounted on /
325      * /dev/sdb and /dev/sdc may have random content.
326      *)
327   | InitBasicFSonLVM
328
329     (* /dev/sdd (the squashfs, see images/ directory in source)
330      * is mounted on /
331      *)
332   | InitSquashFS
333
334 (* Sequence of commands for testing. *)
335 and seq = cmd list
336 and cmd = string list
337
338 (* Note about long descriptions: When referring to another
339  * action, use the format C<guestfs_other> (ie. the full name of
340  * the C function).  This will be replaced as appropriate in other
341  * language bindings.
342  *
343  * Apart from that, long descriptions are just perldoc paragraphs.
344  *)
345
346 (* Generate a random UUID (used in tests). *)
347 let uuidgen () =
348   let chan = Unix.open_process_in "uuidgen" in
349   let uuid = input_line chan in
350   (match Unix.close_process_in chan with
351    | Unix.WEXITED 0 -> ()
352    | Unix.WEXITED _ ->
353        failwith "uuidgen: process exited with non-zero status"
354    | Unix.WSIGNALED _ | Unix.WSTOPPED _ ->
355        failwith "uuidgen: process signalled or stopped by signal"
356   );
357   uuid
358
359 (* These test functions are used in the language binding tests. *)
360
361 let test_all_args = [
362   String "str";
363   OptString "optstr";
364   StringList "strlist";
365   Bool "b";
366   Int "integer";
367   FileIn "filein";
368   FileOut "fileout";
369 ]
370
371 let test_all_rets = [
372   (* except for RErr, which is tested thoroughly elsewhere *)
373   "test0rint",         RInt "valout";
374   "test0rint64",       RInt64 "valout";
375   "test0rbool",        RBool "valout";
376   "test0rconststring", RConstString "valout";
377   "test0rconstoptstring", RConstOptString "valout";
378   "test0rstring",      RString "valout";
379   "test0rstringlist",  RStringList "valout";
380   "test0rstruct",      RStruct ("valout", "lvm_pv");
381   "test0rstructlist",  RStructList ("valout", "lvm_pv");
382   "test0rhashtable",   RHashtable "valout";
383 ]
384
385 let test_functions = [
386   ("test0", (RErr, test_all_args), -1, [NotInFish; NotInDocs],
387    [],
388    "internal test function - do not use",
389    "\
390 This is an internal test function which is used to test whether
391 the automatically generated bindings can handle every possible
392 parameter type correctly.
393
394 It echos the contents of each parameter to stdout.
395
396 You probably don't want to call this function.");
397 ] @ List.flatten (
398   List.map (
399     fun (name, ret) ->
400       [(name, (ret, [String "val"]), -1, [NotInFish; NotInDocs],
401         [],
402         "internal test function - do not use",
403         "\
404 This is an internal test function which is used to test whether
405 the automatically generated bindings can handle every possible
406 return type correctly.
407
408 It converts string C<val> to the return type.
409
410 You probably don't want to call this function.");
411        (name ^ "err", (ret, []), -1, [NotInFish; NotInDocs],
412         [],
413         "internal test function - do not use",
414         "\
415 This is an internal test function which is used to test whether
416 the automatically generated bindings can handle every possible
417 return type correctly.
418
419 This function always returns an error.
420
421 You probably don't want to call this function.")]
422   ) test_all_rets
423 )
424
425 (* non_daemon_functions are any functions which don't get processed
426  * in the daemon, eg. functions for setting and getting local
427  * configuration values.
428  *)
429
430 let non_daemon_functions = test_functions @ [
431   ("launch", (RErr, []), -1, [FishAlias "run"; FishAction "launch"],
432    [],
433    "launch the qemu subprocess",
434    "\
435 Internally libguestfs is implemented by running a virtual machine
436 using L<qemu(1)>.
437
438 You should call this after configuring the handle
439 (eg. adding drives) but before performing any actions.");
440
441   ("wait_ready", (RErr, []), -1, [NotInFish],
442    [],
443    "wait until the qemu subprocess launches",
444    "\
445 Internally libguestfs is implemented by running a virtual machine
446 using L<qemu(1)>.
447
448 You should call this after C<guestfs_launch> to wait for the launch
449 to complete.");
450
451   ("kill_subprocess", (RErr, []), -1, [],
452    [],
453    "kill the qemu subprocess",
454    "\
455 This kills the qemu subprocess.  You should never need to call this.");
456
457   ("add_drive", (RErr, [String "filename"]), -1, [FishAlias "add"],
458    [],
459    "add an image to examine or modify",
460    "\
461 This function adds a virtual machine disk image C<filename> to the
462 guest.  The first time you call this function, the disk appears as IDE
463 disk 0 (C</dev/sda>) in the guest, the second time as C</dev/sdb>, and
464 so on.
465
466 You don't necessarily need to be root when using libguestfs.  However
467 you obviously do need sufficient permissions to access the filename
468 for whatever operations you want to perform (ie. read access if you
469 just want to read the image or write access if you want to modify the
470 image).
471
472 This is equivalent to the qemu parameter
473 C<-drive file=filename,cache=off,if=...>.
474 C<cache=off> is omitted in cases where it is not supported by
475 the underlying filesystem.
476
477 Note that this call checks for the existence of C<filename>.  This
478 stops you from specifying other types of drive which are supported
479 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
480 the general C<guestfs_config> call instead.");
481
482   ("add_cdrom", (RErr, [String "filename"]), -1, [FishAlias "cdrom"],
483    [],
484    "add a CD-ROM disk image to examine",
485    "\
486 This function adds a virtual CD-ROM disk image to the guest.
487
488 This is equivalent to the qemu parameter C<-cdrom filename>.
489
490 Note that this call checks for the existence of C<filename>.  This
491 stops you from specifying other types of drive which are supported
492 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
493 the general C<guestfs_config> call instead.");
494
495   ("add_drive_ro", (RErr, [String "filename"]), -1, [FishAlias "add-ro"],
496    [],
497    "add a drive in snapshot mode (read-only)",
498    "\
499 This adds a drive in snapshot mode, making it effectively
500 read-only.
501
502 Note that writes to the device are allowed, and will be seen for
503 the duration of the guestfs handle, but they are written
504 to a temporary file which is discarded as soon as the guestfs
505 handle is closed.  We don't currently have any method to enable
506 changes to be committed, although qemu can support this.
507
508 This is equivalent to the qemu parameter
509 C<-drive file=filename,snapshot=on,if=...>.
510
511 Note that this call checks for the existence of C<filename>.  This
512 stops you from specifying other types of drive which are supported
513 by qemu such as C<nbd:> and C<http:> URLs.  To specify those, use
514 the general C<guestfs_config> call instead.");
515
516   ("config", (RErr, [String "qemuparam"; OptString "qemuvalue"]), -1, [],
517    [],
518    "add qemu parameters",
519    "\
520 This can be used to add arbitrary qemu command line parameters
521 of the form C<-param value>.  Actually it's not quite arbitrary - we
522 prevent you from setting some parameters which would interfere with
523 parameters that we use.
524
525 The first character of C<param> string must be a C<-> (dash).
526
527 C<value> can be NULL.");
528
529   ("set_qemu", (RErr, [String "qemu"]), -1, [FishAlias "qemu"],
530    [],
531    "set the qemu binary",
532    "\
533 Set the qemu binary that we will use.
534
535 The default is chosen when the library was compiled by the
536 configure script.
537
538 You can also override this by setting the C<LIBGUESTFS_QEMU>
539 environment variable.
540
541 Setting C<qemu> to C<NULL> restores the default qemu binary.");
542
543   ("get_qemu", (RConstString "qemu", []), -1, [],
544    [InitNone, Always, TestRun (
545       [["get_qemu"]])],
546    "get the qemu binary",
547    "\
548 Return the current qemu binary.
549
550 This is always non-NULL.  If it wasn't set already, then this will
551 return the default qemu binary name.");
552
553   ("set_path", (RErr, [String "searchpath"]), -1, [FishAlias "path"],
554    [],
555    "set the search path",
556    "\
557 Set the path that libguestfs searches for kernel and initrd.img.
558
559 The default is C<$libdir/guestfs> unless overridden by setting
560 C<LIBGUESTFS_PATH> environment variable.
561
562 Setting C<path> to C<NULL> restores the default path.");
563
564   ("get_path", (RConstString "path", []), -1, [],
565    [InitNone, Always, TestRun (
566       [["get_path"]])],
567    "get the search path",
568    "\
569 Return the current search path.
570
571 This is always non-NULL.  If it wasn't set already, then this will
572 return the default path.");
573
574   ("set_append", (RErr, [OptString "append"]), -1, [FishAlias "append"],
575    [],
576    "add options to kernel command line",
577    "\
578 This function is used to add additional options to the
579 guest kernel command line.
580
581 The default is C<NULL> unless overridden by setting
582 C<LIBGUESTFS_APPEND> environment variable.
583
584 Setting C<append> to C<NULL> means I<no> additional options
585 are passed (libguestfs always adds a few of its own).");
586
587   ("get_append", (RConstOptString "append", []), -1, [],
588    (* This cannot be tested with the current framework.  The
589     * function can return NULL in normal operations, which the
590     * test framework interprets as an error.
591     *)
592    [],
593    "get the additional kernel options",
594    "\
595 Return the additional kernel options which are added to the
596 guest kernel command line.
597
598 If C<NULL> then no options are added.");
599
600   ("set_autosync", (RErr, [Bool "autosync"]), -1, [FishAlias "autosync"],
601    [],
602    "set autosync mode",
603    "\
604 If C<autosync> is true, this enables autosync.  Libguestfs will make a
605 best effort attempt to run C<guestfs_umount_all> followed by
606 C<guestfs_sync> when the handle is closed
607 (also if the program exits without closing handles).
608
609 This is disabled by default (except in guestfish where it is
610 enabled by default).");
611
612   ("get_autosync", (RBool "autosync", []), -1, [],
613    [InitNone, Always, TestRun (
614       [["get_autosync"]])],
615    "get autosync mode",
616    "\
617 Get the autosync flag.");
618
619   ("set_verbose", (RErr, [Bool "verbose"]), -1, [FishAlias "verbose"],
620    [],
621    "set verbose mode",
622    "\
623 If C<verbose> is true, this turns on verbose messages (to C<stderr>).
624
625 Verbose messages are disabled unless the environment variable
626 C<LIBGUESTFS_DEBUG> is defined and set to C<1>.");
627
628   ("get_verbose", (RBool "verbose", []), -1, [],
629    [],
630    "get verbose mode",
631    "\
632 This returns the verbose messages flag.");
633
634   ("is_ready", (RBool "ready", []), -1, [],
635    [InitNone, Always, TestOutputTrue (
636       [["is_ready"]])],
637    "is ready to accept commands",
638    "\
639 This returns true iff this handle is ready to accept commands
640 (in the C<READY> state).
641
642 For more information on states, see L<guestfs(3)>.");
643
644   ("is_config", (RBool "config", []), -1, [],
645    [InitNone, Always, TestOutputFalse (
646       [["is_config"]])],
647    "is in configuration state",
648    "\
649 This returns true iff this handle is being configured
650 (in the C<CONFIG> state).
651
652 For more information on states, see L<guestfs(3)>.");
653
654   ("is_launching", (RBool "launching", []), -1, [],
655    [InitNone, Always, TestOutputFalse (
656       [["is_launching"]])],
657    "is launching subprocess",
658    "\
659 This returns true iff this handle is launching the subprocess
660 (in the C<LAUNCHING> state).
661
662 For more information on states, see L<guestfs(3)>.");
663
664   ("is_busy", (RBool "busy", []), -1, [],
665    [InitNone, Always, TestOutputFalse (
666       [["is_busy"]])],
667    "is busy processing a command",
668    "\
669 This returns true iff this handle is busy processing a command
670 (in the C<BUSY> state).
671
672 For more information on states, see L<guestfs(3)>.");
673
674   ("get_state", (RInt "state", []), -1, [],
675    [],
676    "get the current state",
677    "\
678 This returns the current state as an opaque integer.  This is
679 only useful for printing debug and internal error messages.
680
681 For more information on states, see L<guestfs(3)>.");
682
683   ("set_busy", (RErr, []), -1, [NotInFish],
684    [],
685    "set state to busy",
686    "\
687 This sets the state to C<BUSY>.  This is only used when implementing
688 actions using the low-level API.
689
690 For more information on states, see L<guestfs(3)>.");
691
692   ("set_ready", (RErr, []), -1, [NotInFish],
693    [],
694    "set state to ready",
695    "\
696 This sets the state to C<READY>.  This is only used when implementing
697 actions using the low-level API.
698
699 For more information on states, see L<guestfs(3)>.");
700
701   ("end_busy", (RErr, []), -1, [NotInFish],
702    [],
703    "leave the busy state",
704    "\
705 This sets the state to C<READY>, or if in C<CONFIG> then it leaves the
706 state as is.  This is only used when implementing
707 actions using the low-level API.
708
709 For more information on states, see L<guestfs(3)>.");
710
711   ("set_memsize", (RErr, [Int "memsize"]), -1, [FishAlias "memsize"],
712    [InitNone, Always, TestOutputInt (
713       [["set_memsize"; "500"];
714        ["get_memsize"]], 500)],
715    "set memory allocated to the qemu subprocess",
716    "\
717 This sets the memory size in megabytes allocated to the
718 qemu subprocess.  This only has any effect if called before
719 C<guestfs_launch>.
720
721 You can also change this by setting the environment
722 variable C<LIBGUESTFS_MEMSIZE> before the handle is
723 created.
724
725 For more information on the architecture of libguestfs,
726 see L<guestfs(3)>.");
727
728   ("get_memsize", (RInt "memsize", []), -1, [],
729    [InitNone, Always, TestOutputIntOp (
730       [["get_memsize"]], ">=", 256)],
731    "get memory allocated to the qemu subprocess",
732    "\
733 This gets the memory size in megabytes allocated to the
734 qemu subprocess.
735
736 If C<guestfs_set_memsize> was not called
737 on this handle, and if C<LIBGUESTFS_MEMSIZE> was not set,
738 then this returns the compiled-in default value for memsize.
739
740 For more information on the architecture of libguestfs,
741 see L<guestfs(3)>.");
742
743   ("get_pid", (RInt "pid", []), -1, [FishAlias "pid"],
744    [InitNone, Always, TestOutputIntOp (
745       [["get_pid"]], ">=", 1)],
746    "get PID of qemu subprocess",
747    "\
748 Return the process ID of the qemu subprocess.  If there is no
749 qemu subprocess, then this will return an error.
750
751 This is an internal call used for debugging and testing.");
752
753   ("version", (RStruct ("version", "version"), []), -1, [],
754    [InitNone, Always, TestOutputStruct (
755       [["version"]], [CompareWithInt ("major", 1)])],
756    "get the library version number",
757    "\
758 Return the libguestfs version number that the program is linked
759 against.
760
761 Note that because of dynamic linking this is not necessarily
762 the version of libguestfs that you compiled against.  You can
763 compile the program, and then at runtime dynamically link
764 against a completely different C<libguestfs.so> library.
765
766 This call was added in version C<1.0.58>.  In previous
767 versions of libguestfs there was no way to get the version
768 number.  From C code you can use ELF weak linking tricks to find out if
769 this symbol exists (if it doesn't, then it's an earlier version).
770
771 The call returns a structure with four elements.  The first
772 three (C<major>, C<minor> and C<release>) are numbers and
773 correspond to the usual version triplet.  The fourth element
774 (C<extra>) is a string and is normally empty, but may be
775 used for distro-specific information.
776
777 To construct the original version string:
778 C<$major.$minor.$release$extra>
779
780 I<Note:> Don't use this call to test for availability
781 of features.  Distro backports makes this unreliable.");
782
783   ("set_selinux", (RErr, [Bool "selinux"]), -1, [FishAlias "selinux"],
784    [InitNone, Always, TestOutputTrue (
785       [["set_selinux"; "true"];
786        ["get_selinux"]])],
787    "set SELinux enabled or disabled at appliance boot",
788    "\
789 This sets the selinux flag that is passed to the appliance
790 at boot time.  The default is C<selinux=0> (disabled).
791
792 Note that if SELinux is enabled, it is always in
793 Permissive mode (C<enforcing=0>).
794
795 For more information on the architecture of libguestfs,
796 see L<guestfs(3)>.");
797
798   ("get_selinux", (RBool "selinux", []), -1, [],
799    [],
800    "get SELinux enabled flag",
801    "\
802 This returns the current setting of the selinux flag which
803 is passed to the appliance at boot time.  See C<guestfs_set_selinux>.
804
805 For more information on the architecture of libguestfs,
806 see L<guestfs(3)>.");
807
808 ]
809
810 (* daemon_functions are any functions which cause some action
811  * to take place in the daemon.
812  *)
813
814 let daemon_functions = [
815   ("mount", (RErr, [Device "device"; String "mountpoint"]), 1, [],
816    [InitEmpty, Always, TestOutput (
817       [["sfdiskM"; "/dev/sda"; ","];
818        ["mkfs"; "ext2"; "/dev/sda1"];
819        ["mount"; "/dev/sda1"; "/"];
820        ["write_file"; "/new"; "new file contents"; "0"];
821        ["cat"; "/new"]], "new file contents")],
822    "mount a guest disk at a position in the filesystem",
823    "\
824 Mount a guest disk at a position in the filesystem.  Block devices
825 are named C</dev/sda>, C</dev/sdb> and so on, as they were added to
826 the guest.  If those block devices contain partitions, they will have
827 the usual names (eg. C</dev/sda1>).  Also LVM C</dev/VG/LV>-style
828 names can be used.
829
830 The rules are the same as for L<mount(2)>:  A filesystem must
831 first be mounted on C</> before others can be mounted.  Other
832 filesystems can only be mounted on directories which already
833 exist.
834
835 The mounted filesystem is writable, if we have sufficient permissions
836 on the underlying device.
837
838 The filesystem options C<sync> and C<noatime> are set with this
839 call, in order to improve reliability.");
840
841   ("sync", (RErr, []), 2, [],
842    [ InitEmpty, Always, TestRun [["sync"]]],
843    "sync disks, writes are flushed through to the disk image",
844    "\
845 This syncs the disk, so that any writes are flushed through to the
846 underlying disk image.
847
848 You should always call this if you have modified a disk image, before
849 closing the handle.");
850
851   ("touch", (RErr, [Pathname "path"]), 3, [],
852    [InitBasicFS, Always, TestOutputTrue (
853       [["touch"; "/new"];
854        ["exists"; "/new"]])],
855    "update file timestamps or create a new file",
856    "\
857 Touch acts like the L<touch(1)> command.  It can be used to
858 update the timestamps on a file, or, if the file does not exist,
859 to create a new zero-length file.");
860
861   ("cat", (RString "content", [Pathname "path"]), 4, [ProtocolLimitWarning],
862    [InitSquashFS, Always, TestOutput (
863       [["cat"; "/known-2"]], "abcdef\n")],
864    "list the contents of a file",
865    "\
866 Return the contents of the file named C<path>.
867
868 Note that this function cannot correctly handle binary files
869 (specifically, files containing C<\\0> character which is treated
870 as end of string).  For those you need to use the C<guestfs_read_file>
871 or C<guestfs_download> functions which have a more complex interface.");
872
873   ("ll", (RString "listing", [Pathname "directory"]), 5, [],
874    [], (* XXX Tricky to test because it depends on the exact format
875         * of the 'ls -l' command, which changes between F10 and F11.
876         *)
877    "list the files in a directory (long format)",
878    "\
879 List the files in C<directory> (relative to the root directory,
880 there is no cwd) in the format of 'ls -la'.
881
882 This command is mostly useful for interactive sessions.  It
883 is I<not> intended that you try to parse the output string.");
884
885   ("ls", (RStringList "listing", [Pathname "directory"]), 6, [],
886    [InitBasicFS, Always, TestOutputList (
887       [["touch"; "/new"];
888        ["touch"; "/newer"];
889        ["touch"; "/newest"];
890        ["ls"; "/"]], ["lost+found"; "new"; "newer"; "newest"])],
891    "list the files in a directory",
892    "\
893 List the files in C<directory> (relative to the root directory,
894 there is no cwd).  The '.' and '..' entries are not returned, but
895 hidden files are shown.
896
897 This command is mostly useful for interactive sessions.  Programs
898 should probably use C<guestfs_readdir> instead.");
899
900   ("list_devices", (RStringList "devices", []), 7, [],
901    [InitEmpty, Always, TestOutputListOfDevices (
902       [["list_devices"]], ["/dev/sda"; "/dev/sdb"; "/dev/sdc"; "/dev/sdd"])],
903    "list the block devices",
904    "\
905 List all the block devices.
906
907 The full block device names are returned, eg. C</dev/sda>");
908
909   ("list_partitions", (RStringList "partitions", []), 8, [],
910    [InitBasicFS, Always, TestOutputListOfDevices (
911       [["list_partitions"]], ["/dev/sda1"]);
912     InitEmpty, Always, TestOutputListOfDevices (
913       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
914        ["list_partitions"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
915    "list the partitions",
916    "\
917 List all the partitions detected on all block devices.
918
919 The full partition device names are returned, eg. C</dev/sda1>
920
921 This does not return logical volumes.  For that you will need to
922 call C<guestfs_lvs>.");
923
924   ("pvs", (RStringList "physvols", []), 9, [],
925    [InitBasicFSonLVM, Always, TestOutputListOfDevices (
926       [["pvs"]], ["/dev/sda1"]);
927     InitEmpty, Always, TestOutputListOfDevices (
928       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
929        ["pvcreate"; "/dev/sda1"];
930        ["pvcreate"; "/dev/sda2"];
931        ["pvcreate"; "/dev/sda3"];
932        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
933    "list the LVM physical volumes (PVs)",
934    "\
935 List all the physical volumes detected.  This is the equivalent
936 of the L<pvs(8)> command.
937
938 This returns a list of just the device names that contain
939 PVs (eg. C</dev/sda2>).
940
941 See also C<guestfs_pvs_full>.");
942
943   ("vgs", (RStringList "volgroups", []), 10, [],
944    [InitBasicFSonLVM, Always, TestOutputList (
945       [["vgs"]], ["VG"]);
946     InitEmpty, Always, TestOutputList (
947       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
948        ["pvcreate"; "/dev/sda1"];
949        ["pvcreate"; "/dev/sda2"];
950        ["pvcreate"; "/dev/sda3"];
951        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
952        ["vgcreate"; "VG2"; "/dev/sda3"];
953        ["vgs"]], ["VG1"; "VG2"])],
954    "list the LVM volume groups (VGs)",
955    "\
956 List all the volumes groups detected.  This is the equivalent
957 of the L<vgs(8)> command.
958
959 This returns a list of just the volume group names that were
960 detected (eg. C<VolGroup00>).
961
962 See also C<guestfs_vgs_full>.");
963
964   ("lvs", (RStringList "logvols", []), 11, [],
965    [InitBasicFSonLVM, Always, TestOutputList (
966       [["lvs"]], ["/dev/VG/LV"]);
967     InitEmpty, Always, TestOutputList (
968       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
969        ["pvcreate"; "/dev/sda1"];
970        ["pvcreate"; "/dev/sda2"];
971        ["pvcreate"; "/dev/sda3"];
972        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
973        ["vgcreate"; "VG2"; "/dev/sda3"];
974        ["lvcreate"; "LV1"; "VG1"; "50"];
975        ["lvcreate"; "LV2"; "VG1"; "50"];
976        ["lvcreate"; "LV3"; "VG2"; "50"];
977        ["lvs"]], ["/dev/VG1/LV1"; "/dev/VG1/LV2"; "/dev/VG2/LV3"])],
978    "list the LVM logical volumes (LVs)",
979    "\
980 List all the logical volumes detected.  This is the equivalent
981 of the L<lvs(8)> command.
982
983 This returns a list of the logical volume device names
984 (eg. C</dev/VolGroup00/LogVol00>).
985
986 See also C<guestfs_lvs_full>.");
987
988   ("pvs_full", (RStructList ("physvols", "lvm_pv"), []), 12, [],
989    [], (* XXX how to test? *)
990    "list the LVM physical volumes (PVs)",
991    "\
992 List all the physical volumes detected.  This is the equivalent
993 of the L<pvs(8)> command.  The \"full\" version includes all fields.");
994
995   ("vgs_full", (RStructList ("volgroups", "lvm_vg"), []), 13, [],
996    [], (* XXX how to test? *)
997    "list the LVM volume groups (VGs)",
998    "\
999 List all the volumes groups detected.  This is the equivalent
1000 of the L<vgs(8)> command.  The \"full\" version includes all fields.");
1001
1002   ("lvs_full", (RStructList ("logvols", "lvm_lv"), []), 14, [],
1003    [], (* XXX how to test? *)
1004    "list the LVM logical volumes (LVs)",
1005    "\
1006 List all the logical volumes detected.  This is the equivalent
1007 of the L<lvs(8)> command.  The \"full\" version includes all fields.");
1008
1009   ("read_lines", (RStringList "lines", [Pathname "path"]), 15, [],
1010    [InitSquashFS, Always, TestOutputList (
1011       [["read_lines"; "/known-4"]], ["abc"; "def"; "ghi"]);
1012     InitSquashFS, Always, TestOutputList (
1013       [["read_lines"; "/empty"]], [])],
1014    "read file as lines",
1015    "\
1016 Return the contents of the file named C<path>.
1017
1018 The file contents are returned as a list of lines.  Trailing
1019 C<LF> and C<CRLF> character sequences are I<not> returned.
1020
1021 Note that this function cannot correctly handle binary files
1022 (specifically, files containing C<\\0> character which is treated
1023 as end of line).  For those you need to use the C<guestfs_read_file>
1024 function which has a more complex interface.");
1025
1026   ("aug_init", (RErr, [Pathname "root"; Int "flags"]), 16, [],
1027    [], (* XXX Augeas code needs tests. *)
1028    "create a new Augeas handle",
1029    "\
1030 Create a new Augeas handle for editing configuration files.
1031 If there was any previous Augeas handle associated with this
1032 guestfs session, then it is closed.
1033
1034 You must call this before using any other C<guestfs_aug_*>
1035 commands.
1036
1037 C<root> is the filesystem root.  C<root> must not be NULL,
1038 use C</> instead.
1039
1040 The flags are the same as the flags defined in
1041 E<lt>augeas.hE<gt>, the logical I<or> of the following
1042 integers:
1043
1044 =over 4
1045
1046 =item C<AUG_SAVE_BACKUP> = 1
1047
1048 Keep the original file with a C<.augsave> extension.
1049
1050 =item C<AUG_SAVE_NEWFILE> = 2
1051
1052 Save changes into a file with extension C<.augnew>, and
1053 do not overwrite original.  Overrides C<AUG_SAVE_BACKUP>.
1054
1055 =item C<AUG_TYPE_CHECK> = 4
1056
1057 Typecheck lenses (can be expensive).
1058
1059 =item C<AUG_NO_STDINC> = 8
1060
1061 Do not use standard load path for modules.
1062
1063 =item C<AUG_SAVE_NOOP> = 16
1064
1065 Make save a no-op, just record what would have been changed.
1066
1067 =item C<AUG_NO_LOAD> = 32
1068
1069 Do not load the tree in C<guestfs_aug_init>.
1070
1071 =back
1072
1073 To close the handle, you can call C<guestfs_aug_close>.
1074
1075 To find out more about Augeas, see L<http://augeas.net/>.");
1076
1077   ("aug_close", (RErr, []), 26, [],
1078    [], (* XXX Augeas code needs tests. *)
1079    "close the current Augeas handle",
1080    "\
1081 Close the current Augeas handle and free up any resources
1082 used by it.  After calling this, you have to call
1083 C<guestfs_aug_init> again before you can use any other
1084 Augeas functions.");
1085
1086   ("aug_defvar", (RInt "nrnodes", [String "name"; OptString "expr"]), 17, [],
1087    [], (* XXX Augeas code needs tests. *)
1088    "define an Augeas variable",
1089    "\
1090 Defines an Augeas variable C<name> whose value is the result
1091 of evaluating C<expr>.  If C<expr> is NULL, then C<name> is
1092 undefined.
1093
1094 On success this returns the number of nodes in C<expr>, or
1095 C<0> if C<expr> evaluates to something which is not a nodeset.");
1096
1097   ("aug_defnode", (RStruct ("nrnodescreated", "int_bool"), [String "name"; String "expr"; String "val"]), 18, [],
1098    [], (* XXX Augeas code needs tests. *)
1099    "define an Augeas node",
1100    "\
1101 Defines a variable C<name> whose value is the result of
1102 evaluating C<expr>.
1103
1104 If C<expr> evaluates to an empty nodeset, a node is created,
1105 equivalent to calling C<guestfs_aug_set> C<expr>, C<value>.
1106 C<name> will be the nodeset containing that single node.
1107
1108 On success this returns a pair containing the
1109 number of nodes in the nodeset, and a boolean flag
1110 if a node was created.");
1111
1112   ("aug_get", (RString "val", [String "augpath"]), 19, [],
1113    [], (* XXX Augeas code needs tests. *)
1114    "look up the value of an Augeas path",
1115    "\
1116 Look up the value associated with C<path>.  If C<path>
1117 matches exactly one node, the C<value> is returned.");
1118
1119   ("aug_set", (RErr, [String "augpath"; String "val"]), 20, [],
1120    [], (* XXX Augeas code needs tests. *)
1121    "set Augeas path to value",
1122    "\
1123 Set the value associated with C<path> to C<value>.");
1124
1125   ("aug_insert", (RErr, [String "augpath"; String "label"; Bool "before"]), 21, [],
1126    [], (* XXX Augeas code needs tests. *)
1127    "insert a sibling Augeas node",
1128    "\
1129 Create a new sibling C<label> for C<path>, inserting it into
1130 the tree before or after C<path> (depending on the boolean
1131 flag C<before>).
1132
1133 C<path> must match exactly one existing node in the tree, and
1134 C<label> must be a label, ie. not contain C</>, C<*> or end
1135 with a bracketed index C<[N]>.");
1136
1137   ("aug_rm", (RInt "nrnodes", [String "augpath"]), 22, [],
1138    [], (* XXX Augeas code needs tests. *)
1139    "remove an Augeas path",
1140    "\
1141 Remove C<path> and all of its children.
1142
1143 On success this returns the number of entries which were removed.");
1144
1145   ("aug_mv", (RErr, [String "src"; String "dest"]), 23, [],
1146    [], (* XXX Augeas code needs tests. *)
1147    "move Augeas node",
1148    "\
1149 Move the node C<src> to C<dest>.  C<src> must match exactly
1150 one node.  C<dest> is overwritten if it exists.");
1151
1152   ("aug_match", (RStringList "matches", [String "augpath"]), 24, [],
1153    [], (* XXX Augeas code needs tests. *)
1154    "return Augeas nodes which match augpath",
1155    "\
1156 Returns a list of paths which match the path expression C<path>.
1157 The returned paths are sufficiently qualified so that they match
1158 exactly one node in the current tree.");
1159
1160   ("aug_save", (RErr, []), 25, [],
1161    [], (* XXX Augeas code needs tests. *)
1162    "write all pending Augeas changes to disk",
1163    "\
1164 This writes all pending changes to disk.
1165
1166 The flags which were passed to C<guestfs_aug_init> affect exactly
1167 how files are saved.");
1168
1169   ("aug_load", (RErr, []), 27, [],
1170    [], (* XXX Augeas code needs tests. *)
1171    "load files into the tree",
1172    "\
1173 Load files into the tree.
1174
1175 See C<aug_load> in the Augeas documentation for the full gory
1176 details.");
1177
1178   ("aug_ls", (RStringList "matches", [String "augpath"]), 28, [],
1179    [], (* XXX Augeas code needs tests. *)
1180    "list Augeas nodes under augpath",
1181    "\
1182 This is just a shortcut for listing C<guestfs_aug_match>
1183 C<path/*> and sorting the resulting nodes into alphabetical order.");
1184
1185   ("rm", (RErr, [Pathname "path"]), 29, [],
1186    [InitBasicFS, Always, TestRun
1187       [["touch"; "/new"];
1188        ["rm"; "/new"]];
1189     InitBasicFS, Always, TestLastFail
1190       [["rm"; "/new"]];
1191     InitBasicFS, Always, TestLastFail
1192       [["mkdir"; "/new"];
1193        ["rm"; "/new"]]],
1194    "remove a file",
1195    "\
1196 Remove the single file C<path>.");
1197
1198   ("rmdir", (RErr, [Pathname "path"]), 30, [],
1199    [InitBasicFS, Always, TestRun
1200       [["mkdir"; "/new"];
1201        ["rmdir"; "/new"]];
1202     InitBasicFS, Always, TestLastFail
1203       [["rmdir"; "/new"]];
1204     InitBasicFS, Always, TestLastFail
1205       [["touch"; "/new"];
1206        ["rmdir"; "/new"]]],
1207    "remove a directory",
1208    "\
1209 Remove the single directory C<path>.");
1210
1211   ("rm_rf", (RErr, [Pathname "path"]), 31, [],
1212    [InitBasicFS, Always, TestOutputFalse
1213       [["mkdir"; "/new"];
1214        ["mkdir"; "/new/foo"];
1215        ["touch"; "/new/foo/bar"];
1216        ["rm_rf"; "/new"];
1217        ["exists"; "/new"]]],
1218    "remove a file or directory recursively",
1219    "\
1220 Remove the file or directory C<path>, recursively removing the
1221 contents if its a directory.  This is like the C<rm -rf> shell
1222 command.");
1223
1224   ("mkdir", (RErr, [Pathname "path"]), 32, [],
1225    [InitBasicFS, Always, TestOutputTrue
1226       [["mkdir"; "/new"];
1227        ["is_dir"; "/new"]];
1228     InitBasicFS, Always, TestLastFail
1229       [["mkdir"; "/new/foo/bar"]]],
1230    "create a directory",
1231    "\
1232 Create a directory named C<path>.");
1233
1234   ("mkdir_p", (RErr, [Pathname "path"]), 33, [],
1235    [InitBasicFS, Always, TestOutputTrue
1236       [["mkdir_p"; "/new/foo/bar"];
1237        ["is_dir"; "/new/foo/bar"]];
1238     InitBasicFS, Always, TestOutputTrue
1239       [["mkdir_p"; "/new/foo/bar"];
1240        ["is_dir"; "/new/foo"]];
1241     InitBasicFS, Always, TestOutputTrue
1242       [["mkdir_p"; "/new/foo/bar"];
1243        ["is_dir"; "/new"]];
1244     (* Regression tests for RHBZ#503133: *)
1245     InitBasicFS, Always, TestRun
1246       [["mkdir"; "/new"];
1247        ["mkdir_p"; "/new"]];
1248     InitBasicFS, Always, TestLastFail
1249       [["touch"; "/new"];
1250        ["mkdir_p"; "/new"]]],
1251    "create a directory and parents",
1252    "\
1253 Create a directory named C<path>, creating any parent directories
1254 as necessary.  This is like the C<mkdir -p> shell command.");
1255
1256   ("chmod", (RErr, [Int "mode"; Pathname "path"]), 34, [],
1257    [], (* XXX Need stat command to test *)
1258    "change file mode",
1259    "\
1260 Change the mode (permissions) of C<path> to C<mode>.  Only
1261 numeric modes are supported.");
1262
1263   ("chown", (RErr, [Int "owner"; Int "group"; Pathname "path"]), 35, [],
1264    [], (* XXX Need stat command to test *)
1265    "change file owner and group",
1266    "\
1267 Change the file owner to C<owner> and group to C<group>.
1268
1269 Only numeric uid and gid are supported.  If you want to use
1270 names, you will need to locate and parse the password file
1271 yourself (Augeas support makes this relatively easy).");
1272
1273   ("exists", (RBool "existsflag", [Pathname "path"]), 36, [],
1274    [InitSquashFS, Always, TestOutputTrue (
1275       [["exists"; "/empty"]]);
1276     InitSquashFS, Always, TestOutputTrue (
1277       [["exists"; "/directory"]])],
1278    "test if file or directory exists",
1279    "\
1280 This returns C<true> if and only if there is a file, directory
1281 (or anything) with the given C<path> name.
1282
1283 See also C<guestfs_is_file>, C<guestfs_is_dir>, C<guestfs_stat>.");
1284
1285   ("is_file", (RBool "fileflag", [Pathname "path"]), 37, [],
1286    [InitSquashFS, Always, TestOutputTrue (
1287       [["is_file"; "/known-1"]]);
1288     InitSquashFS, Always, TestOutputFalse (
1289       [["is_file"; "/directory"]])],
1290    "test if file exists",
1291    "\
1292 This returns C<true> if and only if there is a file
1293 with the given C<path> name.  Note that it returns false for
1294 other objects like directories.
1295
1296 See also C<guestfs_stat>.");
1297
1298   ("is_dir", (RBool "dirflag", [Pathname "path"]), 38, [],
1299    [InitSquashFS, Always, TestOutputFalse (
1300       [["is_dir"; "/known-3"]]);
1301     InitSquashFS, Always, TestOutputTrue (
1302       [["is_dir"; "/directory"]])],
1303    "test if file exists",
1304    "\
1305 This returns C<true> if and only if there is a directory
1306 with the given C<path> name.  Note that it returns false for
1307 other objects like files.
1308
1309 See also C<guestfs_stat>.");
1310
1311   ("pvcreate", (RErr, [Device "device"]), 39, [],
1312    [InitEmpty, Always, TestOutputListOfDevices (
1313       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1314        ["pvcreate"; "/dev/sda1"];
1315        ["pvcreate"; "/dev/sda2"];
1316        ["pvcreate"; "/dev/sda3"];
1317        ["pvs"]], ["/dev/sda1"; "/dev/sda2"; "/dev/sda3"])],
1318    "create an LVM physical volume",
1319    "\
1320 This creates an LVM physical volume on the named C<device>,
1321 where C<device> should usually be a partition name such
1322 as C</dev/sda1>.");
1323
1324   ("vgcreate", (RErr, [String "volgroup"; DeviceList "physvols"]), 40, [],
1325    [InitEmpty, Always, TestOutputList (
1326       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1327        ["pvcreate"; "/dev/sda1"];
1328        ["pvcreate"; "/dev/sda2"];
1329        ["pvcreate"; "/dev/sda3"];
1330        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1331        ["vgcreate"; "VG2"; "/dev/sda3"];
1332        ["vgs"]], ["VG1"; "VG2"])],
1333    "create an LVM volume group",
1334    "\
1335 This creates an LVM volume group called C<volgroup>
1336 from the non-empty list of physical volumes C<physvols>.");
1337
1338   ("lvcreate", (RErr, [String "logvol"; String "volgroup"; Int "mbytes"]), 41, [],
1339    [InitEmpty, Always, TestOutputList (
1340       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1341        ["pvcreate"; "/dev/sda1"];
1342        ["pvcreate"; "/dev/sda2"];
1343        ["pvcreate"; "/dev/sda3"];
1344        ["vgcreate"; "VG1"; "/dev/sda1 /dev/sda2"];
1345        ["vgcreate"; "VG2"; "/dev/sda3"];
1346        ["lvcreate"; "LV1"; "VG1"; "50"];
1347        ["lvcreate"; "LV2"; "VG1"; "50"];
1348        ["lvcreate"; "LV3"; "VG2"; "50"];
1349        ["lvcreate"; "LV4"; "VG2"; "50"];
1350        ["lvcreate"; "LV5"; "VG2"; "50"];
1351        ["lvs"]],
1352       ["/dev/VG1/LV1"; "/dev/VG1/LV2";
1353        "/dev/VG2/LV3"; "/dev/VG2/LV4"; "/dev/VG2/LV5"])],
1354    "create an LVM volume group",
1355    "\
1356 This creates an LVM volume group called C<logvol>
1357 on the volume group C<volgroup>, with C<size> megabytes.");
1358
1359   ("mkfs", (RErr, [String "fstype"; Device "device"]), 42, [],
1360    [InitEmpty, Always, TestOutput (
1361       [["sfdiskM"; "/dev/sda"; ","];
1362        ["mkfs"; "ext2"; "/dev/sda1"];
1363        ["mount"; "/dev/sda1"; "/"];
1364        ["write_file"; "/new"; "new file contents"; "0"];
1365        ["cat"; "/new"]], "new file contents")],
1366    "make a filesystem",
1367    "\
1368 This creates a filesystem on C<device> (usually a partition
1369 or LVM logical volume).  The filesystem type is C<fstype>, for
1370 example C<ext3>.");
1371
1372   ("sfdisk", (RErr, [Device "device";
1373                      Int "cyls"; Int "heads"; Int "sectors";
1374                      StringList "lines"]), 43, [DangerWillRobinson],
1375    [],
1376    "create partitions on a block device",
1377    "\
1378 This is a direct interface to the L<sfdisk(8)> program for creating
1379 partitions on block devices.
1380
1381 C<device> should be a block device, for example C</dev/sda>.
1382
1383 C<cyls>, C<heads> and C<sectors> are the number of cylinders, heads
1384 and sectors on the device, which are passed directly to sfdisk as
1385 the I<-C>, I<-H> and I<-S> parameters.  If you pass C<0> for any
1386 of these, then the corresponding parameter is omitted.  Usually for
1387 'large' disks, you can just pass C<0> for these, but for small
1388 (floppy-sized) disks, sfdisk (or rather, the kernel) cannot work
1389 out the right geometry and you will need to tell it.
1390
1391 C<lines> is a list of lines that we feed to C<sfdisk>.  For more
1392 information refer to the L<sfdisk(8)> manpage.
1393
1394 To create a single partition occupying the whole disk, you would
1395 pass C<lines> as a single element list, when the single element being
1396 the string C<,> (comma).
1397
1398 See also: C<guestfs_sfdisk_l>, C<guestfs_sfdisk_N>");
1399
1400   ("write_file", (RErr, [Pathname "path"; String "content"; Int "size"]), 44, [ProtocolLimitWarning],
1401    [InitBasicFS, Always, TestOutput (
1402       [["write_file"; "/new"; "new file contents"; "0"];
1403        ["cat"; "/new"]], "new file contents");
1404     InitBasicFS, Always, TestOutput (
1405       [["write_file"; "/new"; "\nnew file contents\n"; "0"];
1406        ["cat"; "/new"]], "\nnew file contents\n");
1407     InitBasicFS, Always, TestOutput (
1408       [["write_file"; "/new"; "\n\n"; "0"];
1409        ["cat"; "/new"]], "\n\n");
1410     InitBasicFS, Always, TestOutput (
1411       [["write_file"; "/new"; ""; "0"];
1412        ["cat"; "/new"]], "");
1413     InitBasicFS, Always, TestOutput (
1414       [["write_file"; "/new"; "\n\n\n"; "0"];
1415        ["cat"; "/new"]], "\n\n\n");
1416     InitBasicFS, Always, TestOutput (
1417       [["write_file"; "/new"; "\n"; "0"];
1418        ["cat"; "/new"]], "\n")],
1419    "create a file",
1420    "\
1421 This call creates a file called C<path>.  The contents of the
1422 file is the string C<content> (which can contain any 8 bit data),
1423 with length C<size>.
1424
1425 As a special case, if C<size> is C<0>
1426 then the length is calculated using C<strlen> (so in this case
1427 the content cannot contain embedded ASCII NULs).
1428
1429 I<NB.> Owing to a bug, writing content containing ASCII NUL
1430 characters does I<not> work, even if the length is specified.
1431 We hope to resolve this bug in a future version.  In the meantime
1432 use C<guestfs_upload>.");
1433
1434   ("umount", (RErr, [String "pathordevice"]), 45, [FishAlias "unmount"],
1435    [InitEmpty, Always, TestOutputListOfDevices (
1436       [["sfdiskM"; "/dev/sda"; ","];
1437        ["mkfs"; "ext2"; "/dev/sda1"];
1438        ["mount"; "/dev/sda1"; "/"];
1439        ["mounts"]], ["/dev/sda1"]);
1440     InitEmpty, Always, TestOutputList (
1441       [["sfdiskM"; "/dev/sda"; ","];
1442        ["mkfs"; "ext2"; "/dev/sda1"];
1443        ["mount"; "/dev/sda1"; "/"];
1444        ["umount"; "/"];
1445        ["mounts"]], [])],
1446    "unmount a filesystem",
1447    "\
1448 This unmounts the given filesystem.  The filesystem may be
1449 specified either by its mountpoint (path) or the device which
1450 contains the filesystem.");
1451
1452   ("mounts", (RStringList "devices", []), 46, [],
1453    [InitBasicFS, Always, TestOutputListOfDevices (
1454       [["mounts"]], ["/dev/sda1"])],
1455    "show mounted filesystems",
1456    "\
1457 This returns the list of currently mounted filesystems.  It returns
1458 the list of devices (eg. C</dev/sda1>, C</dev/VG/LV>).
1459
1460 Some internal mounts are not shown.
1461
1462 See also: C<guestfs_mountpoints>");
1463
1464   ("umount_all", (RErr, []), 47, [FishAlias "unmount-all"],
1465    [InitBasicFS, Always, TestOutputList (
1466       [["umount_all"];
1467        ["mounts"]], []);
1468     (* check that umount_all can unmount nested mounts correctly: *)
1469     InitEmpty, Always, TestOutputList (
1470       [["sfdiskM"; "/dev/sda"; ",100 ,200 ,"];
1471        ["mkfs"; "ext2"; "/dev/sda1"];
1472        ["mkfs"; "ext2"; "/dev/sda2"];
1473        ["mkfs"; "ext2"; "/dev/sda3"];
1474        ["mount"; "/dev/sda1"; "/"];
1475        ["mkdir"; "/mp1"];
1476        ["mount"; "/dev/sda2"; "/mp1"];
1477        ["mkdir"; "/mp1/mp2"];
1478        ["mount"; "/dev/sda3"; "/mp1/mp2"];
1479        ["mkdir"; "/mp1/mp2/mp3"];
1480        ["umount_all"];
1481        ["mounts"]], [])],
1482    "unmount all filesystems",
1483    "\
1484 This unmounts all mounted filesystems.
1485
1486 Some internal mounts are not unmounted by this call.");
1487
1488   ("lvm_remove_all", (RErr, []), 48, [DangerWillRobinson],
1489    [],
1490    "remove all LVM LVs, VGs and PVs",
1491    "\
1492 This command removes all LVM logical volumes, volume groups
1493 and physical volumes.");
1494
1495   ("file", (RString "description", [Dev_or_Path "path"]), 49, [],
1496    [InitSquashFS, Always, TestOutput (
1497       [["file"; "/empty"]], "empty");
1498     InitSquashFS, Always, TestOutput (
1499       [["file"; "/known-1"]], "ASCII text");
1500     InitSquashFS, Always, TestLastFail (
1501       [["file"; "/notexists"]])],
1502    "determine file type",
1503    "\
1504 This call uses the standard L<file(1)> command to determine
1505 the type or contents of the file.  This also works on devices,
1506 for example to find out whether a partition contains a filesystem.
1507
1508 This call will also transparently look inside various types
1509 of compressed file.
1510
1511 The exact command which runs is C<file -zbsL path>.  Note in
1512 particular that the filename is not prepended to the output
1513 (the C<-b> option).");
1514
1515   ("command", (RString "output", [StringList "arguments"]), 50, [ProtocolLimitWarning],
1516    [InitBasicFS, Always, TestOutput (
1517       [["upload"; "test-command"; "/test-command"];
1518        ["chmod"; "0o755"; "/test-command"];
1519        ["command"; "/test-command 1"]], "Result1");
1520     InitBasicFS, Always, TestOutput (
1521       [["upload"; "test-command"; "/test-command"];
1522        ["chmod"; "0o755"; "/test-command"];
1523        ["command"; "/test-command 2"]], "Result2\n");
1524     InitBasicFS, Always, TestOutput (
1525       [["upload"; "test-command"; "/test-command"];
1526        ["chmod"; "0o755"; "/test-command"];
1527        ["command"; "/test-command 3"]], "\nResult3");
1528     InitBasicFS, Always, TestOutput (
1529       [["upload"; "test-command"; "/test-command"];
1530        ["chmod"; "0o755"; "/test-command"];
1531        ["command"; "/test-command 4"]], "\nResult4\n");
1532     InitBasicFS, Always, TestOutput (
1533       [["upload"; "test-command"; "/test-command"];
1534        ["chmod"; "0o755"; "/test-command"];
1535        ["command"; "/test-command 5"]], "\nResult5\n\n");
1536     InitBasicFS, Always, TestOutput (
1537       [["upload"; "test-command"; "/test-command"];
1538        ["chmod"; "0o755"; "/test-command"];
1539        ["command"; "/test-command 6"]], "\n\nResult6\n\n");
1540     InitBasicFS, Always, TestOutput (
1541       [["upload"; "test-command"; "/test-command"];
1542        ["chmod"; "0o755"; "/test-command"];
1543        ["command"; "/test-command 7"]], "");
1544     InitBasicFS, Always, TestOutput (
1545       [["upload"; "test-command"; "/test-command"];
1546        ["chmod"; "0o755"; "/test-command"];
1547        ["command"; "/test-command 8"]], "\n");
1548     InitBasicFS, Always, TestOutput (
1549       [["upload"; "test-command"; "/test-command"];
1550        ["chmod"; "0o755"; "/test-command"];
1551        ["command"; "/test-command 9"]], "\n\n");
1552     InitBasicFS, Always, TestOutput (
1553       [["upload"; "test-command"; "/test-command"];
1554        ["chmod"; "0o755"; "/test-command"];
1555        ["command"; "/test-command 10"]], "Result10-1\nResult10-2\n");
1556     InitBasicFS, Always, TestOutput (
1557       [["upload"; "test-command"; "/test-command"];
1558        ["chmod"; "0o755"; "/test-command"];
1559        ["command"; "/test-command 11"]], "Result11-1\nResult11-2");
1560     InitBasicFS, Always, TestLastFail (
1561       [["upload"; "test-command"; "/test-command"];
1562        ["chmod"; "0o755"; "/test-command"];
1563        ["command"; "/test-command"]])],
1564    "run a command from the guest filesystem",
1565    "\
1566 This call runs a command from the guest filesystem.  The
1567 filesystem must be mounted, and must contain a compatible
1568 operating system (ie. something Linux, with the same
1569 or compatible processor architecture).
1570
1571 The single parameter is an argv-style list of arguments.
1572 The first element is the name of the program to run.
1573 Subsequent elements are parameters.  The list must be
1574 non-empty (ie. must contain a program name).  Note that
1575 the command runs directly, and is I<not> invoked via
1576 the shell (see C<guestfs_sh>).
1577
1578 The return value is anything printed to I<stdout> by
1579 the command.
1580
1581 If the command returns a non-zero exit status, then
1582 this function returns an error message.  The error message
1583 string is the content of I<stderr> from the command.
1584
1585 The C<$PATH> environment variable will contain at least
1586 C</usr/bin> and C</bin>.  If you require a program from
1587 another location, you should provide the full path in the
1588 first parameter.
1589
1590 Shared libraries and data files required by the program
1591 must be available on filesystems which are mounted in the
1592 correct places.  It is the caller's responsibility to ensure
1593 all filesystems that are needed are mounted at the right
1594 locations.");
1595
1596   ("command_lines", (RStringList "lines", [StringList "arguments"]), 51, [ProtocolLimitWarning],
1597    [InitBasicFS, Always, TestOutputList (
1598       [["upload"; "test-command"; "/test-command"];
1599        ["chmod"; "0o755"; "/test-command"];
1600        ["command_lines"; "/test-command 1"]], ["Result1"]);
1601     InitBasicFS, Always, TestOutputList (
1602       [["upload"; "test-command"; "/test-command"];
1603        ["chmod"; "0o755"; "/test-command"];
1604        ["command_lines"; "/test-command 2"]], ["Result2"]);
1605     InitBasicFS, Always, TestOutputList (
1606       [["upload"; "test-command"; "/test-command"];
1607        ["chmod"; "0o755"; "/test-command"];
1608        ["command_lines"; "/test-command 3"]], ["";"Result3"]);
1609     InitBasicFS, Always, TestOutputList (
1610       [["upload"; "test-command"; "/test-command"];
1611        ["chmod"; "0o755"; "/test-command"];
1612        ["command_lines"; "/test-command 4"]], ["";"Result4"]);
1613     InitBasicFS, Always, TestOutputList (
1614       [["upload"; "test-command"; "/test-command"];
1615        ["chmod"; "0o755"; "/test-command"];
1616        ["command_lines"; "/test-command 5"]], ["";"Result5";""]);
1617     InitBasicFS, Always, TestOutputList (
1618       [["upload"; "test-command"; "/test-command"];
1619        ["chmod"; "0o755"; "/test-command"];
1620        ["command_lines"; "/test-command 6"]], ["";"";"Result6";""]);
1621     InitBasicFS, Always, TestOutputList (
1622       [["upload"; "test-command"; "/test-command"];
1623        ["chmod"; "0o755"; "/test-command"];
1624        ["command_lines"; "/test-command 7"]], []);
1625     InitBasicFS, Always, TestOutputList (
1626       [["upload"; "test-command"; "/test-command"];
1627        ["chmod"; "0o755"; "/test-command"];
1628        ["command_lines"; "/test-command 8"]], [""]);
1629     InitBasicFS, Always, TestOutputList (
1630       [["upload"; "test-command"; "/test-command"];
1631        ["chmod"; "0o755"; "/test-command"];
1632        ["command_lines"; "/test-command 9"]], ["";""]);
1633     InitBasicFS, Always, TestOutputList (
1634       [["upload"; "test-command"; "/test-command"];
1635        ["chmod"; "0o755"; "/test-command"];
1636        ["command_lines"; "/test-command 10"]], ["Result10-1";"Result10-2"]);
1637     InitBasicFS, Always, TestOutputList (
1638       [["upload"; "test-command"; "/test-command"];
1639        ["chmod"; "0o755"; "/test-command"];
1640        ["command_lines"; "/test-command 11"]], ["Result11-1";"Result11-2"])],
1641    "run a command, returning lines",
1642    "\
1643 This is the same as C<guestfs_command>, but splits the
1644 result into a list of lines.
1645
1646 See also: C<guestfs_sh_lines>");
1647
1648   ("stat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 52, [],
1649    [InitSquashFS, Always, TestOutputStruct (
1650       [["stat"; "/empty"]], [CompareWithInt ("size", 0)])],
1651    "get file information",
1652    "\
1653 Returns file information for the given C<path>.
1654
1655 This is the same as the C<stat(2)> system call.");
1656
1657   ("lstat", (RStruct ("statbuf", "stat"), [Pathname "path"]), 53, [],
1658    [InitSquashFS, Always, TestOutputStruct (
1659       [["lstat"; "/empty"]], [CompareWithInt ("size", 0)])],
1660    "get file information for a symbolic link",
1661    "\
1662 Returns file information for the given C<path>.
1663
1664 This is the same as C<guestfs_stat> except that if C<path>
1665 is a symbolic link, then the link is stat-ed, not the file it
1666 refers to.
1667
1668 This is the same as the C<lstat(2)> system call.");
1669
1670   ("statvfs", (RStruct ("statbuf", "statvfs"), [Pathname "path"]), 54, [],
1671    [InitSquashFS, Always, TestOutputStruct (
1672       [["statvfs"; "/"]], [CompareWithInt ("namemax", 256)])],
1673    "get file system statistics",
1674    "\
1675 Returns file system statistics for any mounted file system.
1676 C<path> should be a file or directory in the mounted file system
1677 (typically it is the mount point itself, but it doesn't need to be).
1678
1679 This is the same as the C<statvfs(2)> system call.");
1680
1681   ("tune2fs_l", (RHashtable "superblock", [Device "device"]), 55, [],
1682    [], (* XXX test *)
1683    "get ext2/ext3/ext4 superblock details",
1684    "\
1685 This returns the contents of the ext2, ext3 or ext4 filesystem
1686 superblock on C<device>.
1687
1688 It is the same as running C<tune2fs -l device>.  See L<tune2fs(8)>
1689 manpage for more details.  The list of fields returned isn't
1690 clearly defined, and depends on both the version of C<tune2fs>
1691 that libguestfs was built against, and the filesystem itself.");
1692
1693   ("blockdev_setro", (RErr, [Device "device"]), 56, [],
1694    [InitEmpty, Always, TestOutputTrue (
1695       [["blockdev_setro"; "/dev/sda"];
1696        ["blockdev_getro"; "/dev/sda"]])],
1697    "set block device to read-only",
1698    "\
1699 Sets the block device named C<device> to read-only.
1700
1701 This uses the L<blockdev(8)> command.");
1702
1703   ("blockdev_setrw", (RErr, [Device "device"]), 57, [],
1704    [InitEmpty, Always, TestOutputFalse (
1705       [["blockdev_setrw"; "/dev/sda"];
1706        ["blockdev_getro"; "/dev/sda"]])],
1707    "set block device to read-write",
1708    "\
1709 Sets the block device named C<device> to read-write.
1710
1711 This uses the L<blockdev(8)> command.");
1712
1713   ("blockdev_getro", (RBool "ro", [Device "device"]), 58, [],
1714    [InitEmpty, Always, TestOutputTrue (
1715       [["blockdev_setro"; "/dev/sda"];
1716        ["blockdev_getro"; "/dev/sda"]])],
1717    "is block device set to read-only",
1718    "\
1719 Returns a boolean indicating if the block device is read-only
1720 (true if read-only, false if not).
1721
1722 This uses the L<blockdev(8)> command.");
1723
1724   ("blockdev_getss", (RInt "sectorsize", [Device "device"]), 59, [],
1725    [InitEmpty, Always, TestOutputInt (
1726       [["blockdev_getss"; "/dev/sda"]], 512)],
1727    "get sectorsize of block device",
1728    "\
1729 This returns the size of sectors on a block device.
1730 Usually 512, but can be larger for modern devices.
1731
1732 (Note, this is not the size in sectors, use C<guestfs_blockdev_getsz>
1733 for that).
1734
1735 This uses the L<blockdev(8)> command.");
1736
1737   ("blockdev_getbsz", (RInt "blocksize", [Device "device"]), 60, [],
1738    [InitEmpty, Always, TestOutputInt (
1739       [["blockdev_getbsz"; "/dev/sda"]], 4096)],
1740    "get blocksize of block device",
1741    "\
1742 This returns the block size of a device.
1743
1744 (Note this is different from both I<size in blocks> and
1745 I<filesystem block size>).
1746
1747 This uses the L<blockdev(8)> command.");
1748
1749   ("blockdev_setbsz", (RErr, [Device "device"; Int "blocksize"]), 61, [],
1750    [], (* XXX test *)
1751    "set blocksize of block device",
1752    "\
1753 This sets the block size of a device.
1754
1755 (Note this is different from both I<size in blocks> and
1756 I<filesystem block size>).
1757
1758 This uses the L<blockdev(8)> command.");
1759
1760   ("blockdev_getsz", (RInt64 "sizeinsectors", [Device "device"]), 62, [],
1761    [InitEmpty, Always, TestOutputInt (
1762       [["blockdev_getsz"; "/dev/sda"]], 1024000)],
1763    "get total size of device in 512-byte sectors",
1764    "\
1765 This returns the size of the device in units of 512-byte sectors
1766 (even if the sectorsize isn't 512 bytes ... weird).
1767
1768 See also C<guestfs_blockdev_getss> for the real sector size of
1769 the device, and C<guestfs_blockdev_getsize64> for the more
1770 useful I<size in bytes>.
1771
1772 This uses the L<blockdev(8)> command.");
1773
1774   ("blockdev_getsize64", (RInt64 "sizeinbytes", [Device "device"]), 63, [],
1775    [InitEmpty, Always, TestOutputInt (
1776       [["blockdev_getsize64"; "/dev/sda"]], 524288000)],
1777    "get total size of device in bytes",
1778    "\
1779 This returns the size of the device in bytes.
1780
1781 See also C<guestfs_blockdev_getsz>.
1782
1783 This uses the L<blockdev(8)> command.");
1784
1785   ("blockdev_flushbufs", (RErr, [Device "device"]), 64, [],
1786    [InitEmpty, Always, TestRun
1787       [["blockdev_flushbufs"; "/dev/sda"]]],
1788    "flush device buffers",
1789    "\
1790 This tells the kernel to flush internal buffers associated
1791 with C<device>.
1792
1793 This uses the L<blockdev(8)> command.");
1794
1795   ("blockdev_rereadpt", (RErr, [Device "device"]), 65, [],
1796    [InitEmpty, Always, TestRun
1797       [["blockdev_rereadpt"; "/dev/sda"]]],
1798    "reread partition table",
1799    "\
1800 Reread the partition table on C<device>.
1801
1802 This uses the L<blockdev(8)> command.");
1803
1804   ("upload", (RErr, [FileIn "filename"; String "remotefilename"]), 66, [],
1805    [InitBasicFS, Always, TestOutput (
1806       (* Pick a file from cwd which isn't likely to change. *)
1807       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1808        ["checksum"; "md5"; "/COPYING.LIB"]],
1809         Digest.to_hex (Digest.file "COPYING.LIB"))],
1810    "upload a file from the local machine",
1811    "\
1812 Upload local file C<filename> to C<remotefilename> on the
1813 filesystem.
1814
1815 C<filename> can also be a named pipe.
1816
1817 See also C<guestfs_download>.");
1818
1819   ("download", (RErr, [Dev_or_Path "remotefilename"; FileOut "filename"]), 67, [],
1820    [InitBasicFS, Always, TestOutput (
1821       (* Pick a file from cwd which isn't likely to change. *)
1822       [["upload"; "../COPYING.LIB"; "/COPYING.LIB"];
1823        ["download"; "/COPYING.LIB"; "testdownload.tmp"];
1824        ["upload"; "testdownload.tmp"; "/upload"];
1825        ["checksum"; "md5"; "/upload"]],
1826         Digest.to_hex (Digest.file "COPYING.LIB"))],
1827    "download a file to the local machine",
1828    "\
1829 Download file C<remotefilename> and save it as C<filename>
1830 on the local machine.
1831
1832 C<filename> can also be a named pipe.
1833
1834 See also C<guestfs_upload>, C<guestfs_cat>.");
1835
1836   ("checksum", (RString "checksum", [String "csumtype"; Pathname "path"]), 68, [],
1837    [InitSquashFS, Always, TestOutput (
1838       [["checksum"; "crc"; "/known-3"]], "2891671662");
1839     InitSquashFS, Always, TestLastFail (
1840       [["checksum"; "crc"; "/notexists"]]);
1841     InitSquashFS, Always, TestOutput (
1842       [["checksum"; "md5"; "/known-3"]], "46d6ca27ee07cdc6fa99c2e138cc522c");
1843     InitSquashFS, Always, TestOutput (
1844       [["checksum"; "sha1"; "/known-3"]], "b7ebccc3ee418311091c3eda0a45b83c0a770f15");
1845     InitSquashFS, Always, TestOutput (
1846       [["checksum"; "sha224"; "/known-3"]], "d2cd1774b28f3659c14116be0a6dc2bb5c4b350ce9cd5defac707741");
1847     InitSquashFS, Always, TestOutput (
1848       [["checksum"; "sha256"; "/known-3"]], "75bb71b90cd20cb13f86d2bea8dad63ac7194e7517c3b52b8d06ff52d3487d30");
1849     InitSquashFS, Always, TestOutput (
1850       [["checksum"; "sha384"; "/known-3"]], "5fa7883430f357b5d7b7271d3a1d2872b51d73cba72731de6863d3dea55f30646af2799bef44d5ea776a5ec7941ac640");
1851     InitSquashFS, Always, TestOutput (
1852       [["checksum"; "sha512"; "/known-3"]], "2794062c328c6b216dca90443b7f7134c5f40e56bd0ed7853123275a09982a6f992e6ca682f9d2fba34a4c5e870d8fe077694ff831e3032a004ee077e00603f6")],
1853    "compute MD5, SHAx or CRC checksum of file",
1854    "\
1855 This call computes the MD5, SHAx or CRC checksum of the
1856 file named C<path>.
1857
1858 The type of checksum to compute is given by the C<csumtype>
1859 parameter which must have one of the following values:
1860
1861 =over 4
1862
1863 =item C<crc>
1864
1865 Compute the cyclic redundancy check (CRC) specified by POSIX
1866 for the C<cksum> command.
1867
1868 =item C<md5>
1869
1870 Compute the MD5 hash (using the C<md5sum> program).
1871
1872 =item C<sha1>
1873
1874 Compute the SHA1 hash (using the C<sha1sum> program).
1875
1876 =item C<sha224>
1877
1878 Compute the SHA224 hash (using the C<sha224sum> program).
1879
1880 =item C<sha256>
1881
1882 Compute the SHA256 hash (using the C<sha256sum> program).
1883
1884 =item C<sha384>
1885
1886 Compute the SHA384 hash (using the C<sha384sum> program).
1887
1888 =item C<sha512>
1889
1890 Compute the SHA512 hash (using the C<sha512sum> program).
1891
1892 =back
1893
1894 The checksum is returned as a printable string.");
1895
1896   ("tar_in", (RErr, [FileIn "tarfile"; String "directory"]), 69, [],
1897    [InitBasicFS, Always, TestOutput (
1898       [["tar_in"; "../images/helloworld.tar"; "/"];
1899        ["cat"; "/hello"]], "hello\n")],
1900    "unpack tarfile to directory",
1901    "\
1902 This command uploads and unpacks local file C<tarfile> (an
1903 I<uncompressed> tar file) into C<directory>.
1904
1905 To upload a compressed tarball, use C<guestfs_tgz_in>.");
1906
1907   ("tar_out", (RErr, [String "directory"; FileOut "tarfile"]), 70, [],
1908    [],
1909    "pack directory into tarfile",
1910    "\
1911 This command packs the contents of C<directory> and downloads
1912 it to local file C<tarfile>.
1913
1914 To download a compressed tarball, use C<guestfs_tgz_out>.");
1915
1916   ("tgz_in", (RErr, [FileIn "tarball"; String "directory"]), 71, [],
1917    [InitBasicFS, Always, TestOutput (
1918       [["tgz_in"; "../images/helloworld.tar.gz"; "/"];
1919        ["cat"; "/hello"]], "hello\n")],
1920    "unpack compressed tarball to directory",
1921    "\
1922 This command uploads and unpacks local file C<tarball> (a
1923 I<gzip compressed> tar file) into C<directory>.
1924
1925 To upload an uncompressed tarball, use C<guestfs_tar_in>.");
1926
1927   ("tgz_out", (RErr, [Pathname "directory"; FileOut "tarball"]), 72, [],
1928    [],
1929    "pack directory into compressed tarball",
1930    "\
1931 This command packs the contents of C<directory> and downloads
1932 it to local file C<tarball>.
1933
1934 To download an uncompressed tarball, use C<guestfs_tar_out>.");
1935
1936   ("mount_ro", (RErr, [Device "device"; String "mountpoint"]), 73, [],
1937    [InitBasicFS, Always, TestLastFail (
1938       [["umount"; "/"];
1939        ["mount_ro"; "/dev/sda1"; "/"];
1940        ["touch"; "/new"]]);
1941     InitBasicFS, Always, TestOutput (
1942       [["write_file"; "/new"; "data"; "0"];
1943        ["umount"; "/"];
1944        ["mount_ro"; "/dev/sda1"; "/"];
1945        ["cat"; "/new"]], "data")],
1946    "mount a guest disk, read-only",
1947    "\
1948 This is the same as the C<guestfs_mount> command, but it
1949 mounts the filesystem with the read-only (I<-o ro>) flag.");
1950
1951   ("mount_options", (RErr, [String "options"; Device "device"; String "mountpoint"]), 74, [],
1952    [],
1953    "mount a guest disk with mount options",
1954    "\
1955 This is the same as the C<guestfs_mount> command, but it
1956 allows you to set the mount options as for the
1957 L<mount(8)> I<-o> flag.");
1958
1959   ("mount_vfs", (RErr, [String "options"; String "vfstype"; Device "device"; String "mountpoint"]), 75, [],
1960    [],
1961    "mount a guest disk with mount options and vfstype",
1962    "\
1963 This is the same as the C<guestfs_mount> command, but it
1964 allows you to set both the mount options and the vfstype
1965 as for the L<mount(8)> I<-o> and I<-t> flags.");
1966
1967   ("debug", (RString "result", [String "subcmd"; StringList "extraargs"]), 76, [],
1968    [],
1969    "debugging and internals",
1970    "\
1971 The C<guestfs_debug> command exposes some internals of
1972 C<guestfsd> (the guestfs daemon) that runs inside the
1973 qemu subprocess.
1974
1975 There is no comprehensive help for this command.  You have
1976 to look at the file C<daemon/debug.c> in the libguestfs source
1977 to find out what you can do.");
1978
1979   ("lvremove", (RErr, [Device "device"]), 77, [],
1980    [InitEmpty, Always, TestOutputList (
1981       [["sfdiskM"; "/dev/sda"; ","];
1982        ["pvcreate"; "/dev/sda1"];
1983        ["vgcreate"; "VG"; "/dev/sda1"];
1984        ["lvcreate"; "LV1"; "VG"; "50"];
1985        ["lvcreate"; "LV2"; "VG"; "50"];
1986        ["lvremove"; "/dev/VG/LV1"];
1987        ["lvs"]], ["/dev/VG/LV2"]);
1988     InitEmpty, Always, TestOutputList (
1989       [["sfdiskM"; "/dev/sda"; ","];
1990        ["pvcreate"; "/dev/sda1"];
1991        ["vgcreate"; "VG"; "/dev/sda1"];
1992        ["lvcreate"; "LV1"; "VG"; "50"];
1993        ["lvcreate"; "LV2"; "VG"; "50"];
1994        ["lvremove"; "/dev/VG"];
1995        ["lvs"]], []);
1996     InitEmpty, Always, TestOutputList (
1997       [["sfdiskM"; "/dev/sda"; ","];
1998        ["pvcreate"; "/dev/sda1"];
1999        ["vgcreate"; "VG"; "/dev/sda1"];
2000        ["lvcreate"; "LV1"; "VG"; "50"];
2001        ["lvcreate"; "LV2"; "VG"; "50"];
2002        ["lvremove"; "/dev/VG"];
2003        ["vgs"]], ["VG"])],
2004    "remove an LVM logical volume",
2005    "\
2006 Remove an LVM logical volume C<device>, where C<device> is
2007 the path to the LV, such as C</dev/VG/LV>.
2008
2009 You can also remove all LVs in a volume group by specifying
2010 the VG name, C</dev/VG>.");
2011
2012   ("vgremove", (RErr, [String "vgname"]), 78, [],
2013    [InitEmpty, Always, TestOutputList (
2014       [["sfdiskM"; "/dev/sda"; ","];
2015        ["pvcreate"; "/dev/sda1"];
2016        ["vgcreate"; "VG"; "/dev/sda1"];
2017        ["lvcreate"; "LV1"; "VG"; "50"];
2018        ["lvcreate"; "LV2"; "VG"; "50"];
2019        ["vgremove"; "VG"];
2020        ["lvs"]], []);
2021     InitEmpty, Always, TestOutputList (
2022       [["sfdiskM"; "/dev/sda"; ","];
2023        ["pvcreate"; "/dev/sda1"];
2024        ["vgcreate"; "VG"; "/dev/sda1"];
2025        ["lvcreate"; "LV1"; "VG"; "50"];
2026        ["lvcreate"; "LV2"; "VG"; "50"];
2027        ["vgremove"; "VG"];
2028        ["vgs"]], [])],
2029    "remove an LVM volume group",
2030    "\
2031 Remove an LVM volume group C<vgname>, (for example C<VG>).
2032
2033 This also forcibly removes all logical volumes in the volume
2034 group (if any).");
2035
2036   ("pvremove", (RErr, [Device "device"]), 79, [],
2037    [InitEmpty, Always, TestOutputListOfDevices (
2038       [["sfdiskM"; "/dev/sda"; ","];
2039        ["pvcreate"; "/dev/sda1"];
2040        ["vgcreate"; "VG"; "/dev/sda1"];
2041        ["lvcreate"; "LV1"; "VG"; "50"];
2042        ["lvcreate"; "LV2"; "VG"; "50"];
2043        ["vgremove"; "VG"];
2044        ["pvremove"; "/dev/sda1"];
2045        ["lvs"]], []);
2046     InitEmpty, Always, TestOutputListOfDevices (
2047       [["sfdiskM"; "/dev/sda"; ","];
2048        ["pvcreate"; "/dev/sda1"];
2049        ["vgcreate"; "VG"; "/dev/sda1"];
2050        ["lvcreate"; "LV1"; "VG"; "50"];
2051        ["lvcreate"; "LV2"; "VG"; "50"];
2052        ["vgremove"; "VG"];
2053        ["pvremove"; "/dev/sda1"];
2054        ["vgs"]], []);
2055     InitEmpty, Always, TestOutputListOfDevices (
2056       [["sfdiskM"; "/dev/sda"; ","];
2057        ["pvcreate"; "/dev/sda1"];
2058        ["vgcreate"; "VG"; "/dev/sda1"];
2059        ["lvcreate"; "LV1"; "VG"; "50"];
2060        ["lvcreate"; "LV2"; "VG"; "50"];
2061        ["vgremove"; "VG"];
2062        ["pvremove"; "/dev/sda1"];
2063        ["pvs"]], [])],
2064    "remove an LVM physical volume",
2065    "\
2066 This wipes a physical volume C<device> so that LVM will no longer
2067 recognise it.
2068
2069 The implementation uses the C<pvremove> command which refuses to
2070 wipe physical volumes that contain any volume groups, so you have
2071 to remove those first.");
2072
2073   ("set_e2label", (RErr, [Device "device"; String "label"]), 80, [],
2074    [InitBasicFS, Always, TestOutput (
2075       [["set_e2label"; "/dev/sda1"; "testlabel"];
2076        ["get_e2label"; "/dev/sda1"]], "testlabel")],
2077    "set the ext2/3/4 filesystem label",
2078    "\
2079 This sets the ext2/3/4 filesystem label of the filesystem on
2080 C<device> to C<label>.  Filesystem labels are limited to
2081 16 characters.
2082
2083 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2label>
2084 to return the existing label on a filesystem.");
2085
2086   ("get_e2label", (RString "label", [Device "device"]), 81, [],
2087    [],
2088    "get the ext2/3/4 filesystem label",
2089    "\
2090 This returns the ext2/3/4 filesystem label of the filesystem on
2091 C<device>.");
2092
2093   ("set_e2uuid", (RErr, [Device "device"; String "uuid"]), 82, [],
2094    (let uuid = uuidgen () in
2095     [InitBasicFS, Always, TestOutput (
2096        [["set_e2uuid"; "/dev/sda1"; uuid];
2097         ["get_e2uuid"; "/dev/sda1"]], uuid);
2098      InitBasicFS, Always, TestOutput (
2099        [["set_e2uuid"; "/dev/sda1"; "clear"];
2100         ["get_e2uuid"; "/dev/sda1"]], "");
2101      (* We can't predict what UUIDs will be, so just check the commands run. *)
2102      InitBasicFS, Always, TestRun (
2103        [["set_e2uuid"; "/dev/sda1"; "random"]]);
2104      InitBasicFS, Always, TestRun (
2105        [["set_e2uuid"; "/dev/sda1"; "time"]])]),
2106    "set the ext2/3/4 filesystem UUID",
2107    "\
2108 This sets the ext2/3/4 filesystem UUID of the filesystem on
2109 C<device> to C<uuid>.  The format of the UUID and alternatives
2110 such as C<clear>, C<random> and C<time> are described in the
2111 L<tune2fs(8)> manpage.
2112
2113 You can use either C<guestfs_tune2fs_l> or C<guestfs_get_e2uuid>
2114 to return the existing UUID of a filesystem.");
2115
2116   ("get_e2uuid", (RString "uuid", [Device "device"]), 83, [],
2117    [],
2118    "get the ext2/3/4 filesystem UUID",
2119    "\
2120 This returns the ext2/3/4 filesystem UUID of the filesystem on
2121 C<device>.");
2122
2123   ("fsck", (RInt "status", [String "fstype"; Device "device"]), 84, [],
2124    [InitBasicFS, Always, TestOutputInt (
2125       [["umount"; "/dev/sda1"];
2126        ["fsck"; "ext2"; "/dev/sda1"]], 0);
2127     InitBasicFS, Always, TestOutputInt (
2128       [["umount"; "/dev/sda1"];
2129        ["zero"; "/dev/sda1"];
2130        ["fsck"; "ext2"; "/dev/sda1"]], 8)],
2131    "run the filesystem checker",
2132    "\
2133 This runs the filesystem checker (fsck) on C<device> which
2134 should have filesystem type C<fstype>.
2135
2136 The returned integer is the status.  See L<fsck(8)> for the
2137 list of status codes from C<fsck>.
2138
2139 Notes:
2140
2141 =over 4
2142
2143 =item *
2144
2145 Multiple status codes can be summed together.
2146
2147 =item *
2148
2149 A non-zero return code can mean \"success\", for example if
2150 errors have been corrected on the filesystem.
2151
2152 =item *
2153
2154 Checking or repairing NTFS volumes is not supported
2155 (by linux-ntfs).
2156
2157 =back
2158
2159 This command is entirely equivalent to running C<fsck -a -t fstype device>.");
2160
2161   ("zero", (RErr, [Device "device"]), 85, [],
2162    [InitBasicFS, Always, TestOutput (
2163       [["umount"; "/dev/sda1"];
2164        ["zero"; "/dev/sda1"];
2165        ["file"; "/dev/sda1"]], "data")],
2166    "write zeroes to the device",
2167    "\
2168 This command writes zeroes over the first few blocks of C<device>.
2169
2170 How many blocks are zeroed isn't specified (but it's I<not> enough
2171 to securely wipe the device).  It should be sufficient to remove
2172 any partition tables, filesystem superblocks and so on.
2173
2174 See also: C<guestfs_scrub_device>.");
2175
2176   ("grub_install", (RErr, [Pathname "root"; Device "device"]), 86, [],
2177    (* Test disabled because grub-install incompatible with virtio-blk driver.
2178     * See also: https://bugzilla.redhat.com/show_bug.cgi?id=479760
2179     *)
2180    [InitBasicFS, Disabled, TestOutputTrue (
2181       [["grub_install"; "/"; "/dev/sda1"];
2182        ["is_dir"; "/boot"]])],
2183    "install GRUB",
2184    "\
2185 This command installs GRUB (the Grand Unified Bootloader) on
2186 C<device>, with the root directory being C<root>.");
2187
2188   ("cp", (RErr, [Pathname "src"; Pathname "dest"]), 87, [],
2189    [InitBasicFS, Always, TestOutput (
2190       [["write_file"; "/old"; "file content"; "0"];
2191        ["cp"; "/old"; "/new"];
2192        ["cat"; "/new"]], "file content");
2193     InitBasicFS, Always, TestOutputTrue (
2194       [["write_file"; "/old"; "file content"; "0"];
2195        ["cp"; "/old"; "/new"];
2196        ["is_file"; "/old"]]);
2197     InitBasicFS, Always, TestOutput (
2198       [["write_file"; "/old"; "file content"; "0"];
2199        ["mkdir"; "/dir"];
2200        ["cp"; "/old"; "/dir/new"];
2201        ["cat"; "/dir/new"]], "file content")],
2202    "copy a file",
2203    "\
2204 This copies a file from C<src> to C<dest> where C<dest> is
2205 either a destination filename or destination directory.");
2206
2207   ("cp_a", (RErr, [Pathname "src"; Pathname "dest"]), 88, [],
2208    [InitBasicFS, Always, TestOutput (
2209       [["mkdir"; "/olddir"];
2210        ["mkdir"; "/newdir"];
2211        ["write_file"; "/olddir/file"; "file content"; "0"];
2212        ["cp_a"; "/olddir"; "/newdir"];
2213        ["cat"; "/newdir/olddir/file"]], "file content")],
2214    "copy a file or directory recursively",
2215    "\
2216 This copies a file or directory from C<src> to C<dest>
2217 recursively using the C<cp -a> command.");
2218
2219   ("mv", (RErr, [Pathname "src"; Pathname "dest"]), 89, [],
2220    [InitBasicFS, Always, TestOutput (
2221       [["write_file"; "/old"; "file content"; "0"];
2222        ["mv"; "/old"; "/new"];
2223        ["cat"; "/new"]], "file content");
2224     InitBasicFS, Always, TestOutputFalse (
2225       [["write_file"; "/old"; "file content"; "0"];
2226        ["mv"; "/old"; "/new"];
2227        ["is_file"; "/old"]])],
2228    "move a file",
2229    "\
2230 This moves a file from C<src> to C<dest> where C<dest> is
2231 either a destination filename or destination directory.");
2232
2233   ("drop_caches", (RErr, [Int "whattodrop"]), 90, [],
2234    [InitEmpty, Always, TestRun (
2235       [["drop_caches"; "3"]])],
2236    "drop kernel page cache, dentries and inodes",
2237    "\
2238 This instructs the guest kernel to drop its page cache,
2239 and/or dentries and inode caches.  The parameter C<whattodrop>
2240 tells the kernel what precisely to drop, see
2241 L<http://linux-mm.org/Drop_Caches>
2242
2243 Setting C<whattodrop> to 3 should drop everything.
2244
2245 This automatically calls L<sync(2)> before the operation,
2246 so that the maximum guest memory is freed.");
2247
2248   ("dmesg", (RString "kmsgs", []), 91, [],
2249    [InitEmpty, Always, TestRun (
2250       [["dmesg"]])],
2251    "return kernel messages",
2252    "\
2253 This returns the kernel messages (C<dmesg> output) from
2254 the guest kernel.  This is sometimes useful for extended
2255 debugging of problems.
2256
2257 Another way to get the same information is to enable
2258 verbose messages with C<guestfs_set_verbose> or by setting
2259 the environment variable C<LIBGUESTFS_DEBUG=1> before
2260 running the program.");
2261
2262   ("ping_daemon", (RErr, []), 92, [],
2263    [InitEmpty, Always, TestRun (
2264       [["ping_daemon"]])],
2265    "ping the guest daemon",
2266    "\
2267 This is a test probe into the guestfs daemon running inside
2268 the qemu subprocess.  Calling this function checks that the
2269 daemon responds to the ping message, without affecting the daemon
2270 or attached block device(s) in any other way.");
2271
2272   ("equal", (RBool "equality", [Pathname "file1"; Pathname "file2"]), 93, [],
2273    [InitBasicFS, Always, TestOutputTrue (
2274       [["write_file"; "/file1"; "contents of a file"; "0"];
2275        ["cp"; "/file1"; "/file2"];
2276        ["equal"; "/file1"; "/file2"]]);
2277     InitBasicFS, Always, TestOutputFalse (
2278       [["write_file"; "/file1"; "contents of a file"; "0"];
2279        ["write_file"; "/file2"; "contents of another file"; "0"];
2280        ["equal"; "/file1"; "/file2"]]);
2281     InitBasicFS, Always, TestLastFail (
2282       [["equal"; "/file1"; "/file2"]])],
2283    "test if two files have equal contents",
2284    "\
2285 This compares the two files C<file1> and C<file2> and returns
2286 true if their content is exactly equal, or false otherwise.
2287
2288 The external L<cmp(1)> program is used for the comparison.");
2289
2290   ("strings", (RStringList "stringsout", [Pathname "path"]), 94, [ProtocolLimitWarning],
2291    [InitSquashFS, Always, TestOutputList (
2292       [["strings"; "/known-5"]], ["abcdefghi"; "jklmnopqr"]);
2293     InitSquashFS, Always, TestOutputList (
2294       [["strings"; "/empty"]], [])],
2295    "print the printable strings in a file",
2296    "\
2297 This runs the L<strings(1)> command on a file and returns
2298 the list of printable strings found.");
2299
2300   ("strings_e", (RStringList "stringsout", [String "encoding"; Pathname "path"]), 95, [ProtocolLimitWarning],
2301    [InitSquashFS, Always, TestOutputList (
2302       [["strings_e"; "b"; "/known-5"]], []);
2303     InitBasicFS, Disabled, TestOutputList (
2304       [["write_file"; "/new"; "\000h\000e\000l\000l\000o\000\n\000w\000o\000r\000l\000d\000\n"; "24"];
2305        ["strings_e"; "b"; "/new"]], ["hello"; "world"])],
2306    "print the printable strings in a file",
2307    "\
2308 This is like the C<guestfs_strings> command, but allows you to
2309 specify the encoding.
2310
2311 See the L<strings(1)> manpage for the full list of encodings.
2312
2313 Commonly useful encodings are C<l> (lower case L) which will
2314 show strings inside Windows/x86 files.
2315
2316 The returned strings are transcoded to UTF-8.");
2317
2318   ("hexdump", (RString "dump", [Pathname "path"]), 96, [ProtocolLimitWarning],
2319    [InitSquashFS, Always, TestOutput (
2320       [["hexdump"; "/known-4"]], "00000000  61 62 63 0a 64 65 66 0a  67 68 69                 |abc.def.ghi|\n0000000b\n");
2321     (* Test for RHBZ#501888c2 regression which caused large hexdump
2322      * commands to segfault.
2323      *)
2324     InitSquashFS, Always, TestRun (
2325       [["hexdump"; "/100krandom"]])],
2326    "dump a file in hexadecimal",
2327    "\
2328 This runs C<hexdump -C> on the given C<path>.  The result is
2329 the human-readable, canonical hex dump of the file.");
2330
2331   ("zerofree", (RErr, [Device "device"]), 97, [],
2332    [InitNone, Always, TestOutput (
2333       [["sfdiskM"; "/dev/sda"; ","];
2334        ["mkfs"; "ext3"; "/dev/sda1"];
2335        ["mount"; "/dev/sda1"; "/"];
2336        ["write_file"; "/new"; "test file"; "0"];
2337        ["umount"; "/dev/sda1"];
2338        ["zerofree"; "/dev/sda1"];
2339        ["mount"; "/dev/sda1"; "/"];
2340        ["cat"; "/new"]], "test file")],
2341    "zero unused inodes and disk blocks on ext2/3 filesystem",
2342    "\
2343 This runs the I<zerofree> program on C<device>.  This program
2344 claims to zero unused inodes and disk blocks on an ext2/3
2345 filesystem, thus making it possible to compress the filesystem
2346 more effectively.
2347
2348 You should B<not> run this program if the filesystem is
2349 mounted.
2350
2351 It is possible that using this program can damage the filesystem
2352 or data on the filesystem.");
2353
2354   ("pvresize", (RErr, [Device "device"]), 98, [],
2355    [],
2356    "resize an LVM physical volume",
2357    "\
2358 This resizes (expands or shrinks) an existing LVM physical
2359 volume to match the new size of the underlying device.");
2360
2361   ("sfdisk_N", (RErr, [Device "device"; Int "partnum";
2362                        Int "cyls"; Int "heads"; Int "sectors";
2363                        String "line"]), 99, [DangerWillRobinson],
2364    [],
2365    "modify a single partition on a block device",
2366    "\
2367 This runs L<sfdisk(8)> option to modify just the single
2368 partition C<n> (note: C<n> counts from 1).
2369
2370 For other parameters, see C<guestfs_sfdisk>.  You should usually
2371 pass C<0> for the cyls/heads/sectors parameters.");
2372
2373   ("sfdisk_l", (RString "partitions", [Device "device"]), 100, [],
2374    [],
2375    "display the partition table",
2376    "\
2377 This displays the partition table on C<device>, in the
2378 human-readable output of the L<sfdisk(8)> command.  It is
2379 not intended to be parsed.");
2380
2381   ("sfdisk_kernel_geometry", (RString "partitions", [Device "device"]), 101, [],
2382    [],
2383    "display the kernel geometry",
2384    "\
2385 This displays the kernel's idea of the geometry of C<device>.
2386
2387 The result is in human-readable format, and not designed to
2388 be parsed.");
2389
2390   ("sfdisk_disk_geometry", (RString "partitions", [Device "device"]), 102, [],
2391    [],
2392    "display the disk geometry from the partition table",
2393    "\
2394 This displays the disk geometry of C<device> read from the
2395 partition table.  Especially in the case where the underlying
2396 block device has been resized, this can be different from the
2397 kernel's idea of the geometry (see C<guestfs_sfdisk_kernel_geometry>).
2398
2399 The result is in human-readable format, and not designed to
2400 be parsed.");
2401
2402   ("vg_activate_all", (RErr, [Bool "activate"]), 103, [],
2403    [],
2404    "activate or deactivate all volume groups",
2405    "\
2406 This command activates or (if C<activate> is false) deactivates
2407 all logical volumes in all volume groups.
2408 If activated, then they are made known to the
2409 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2410 then those devices disappear.
2411
2412 This command is the same as running C<vgchange -a y|n>");
2413
2414   ("vg_activate", (RErr, [Bool "activate"; StringList "volgroups"]), 104, [],
2415    [],
2416    "activate or deactivate some volume groups",
2417    "\
2418 This command activates or (if C<activate> is false) deactivates
2419 all logical volumes in the listed volume groups C<volgroups>.
2420 If activated, then they are made known to the
2421 kernel, ie. they appear as C</dev/mapper> devices.  If deactivated,
2422 then those devices disappear.
2423
2424 This command is the same as running C<vgchange -a y|n volgroups...>
2425
2426 Note that if C<volgroups> is an empty list then B<all> volume groups
2427 are activated or deactivated.");
2428
2429   ("lvresize", (RErr, [Device "device"; Int "mbytes"]), 105, [],
2430    [InitNone, Always, TestOutput (
2431       [["sfdiskM"; "/dev/sda"; ","];
2432        ["pvcreate"; "/dev/sda1"];
2433        ["vgcreate"; "VG"; "/dev/sda1"];
2434        ["lvcreate"; "LV"; "VG"; "10"];
2435        ["mkfs"; "ext2"; "/dev/VG/LV"];
2436        ["mount"; "/dev/VG/LV"; "/"];
2437        ["write_file"; "/new"; "test content"; "0"];
2438        ["umount"; "/"];
2439        ["lvresize"; "/dev/VG/LV"; "20"];
2440        ["e2fsck_f"; "/dev/VG/LV"];
2441        ["resize2fs"; "/dev/VG/LV"];
2442        ["mount"; "/dev/VG/LV"; "/"];
2443        ["cat"; "/new"]], "test content")],
2444    "resize an LVM logical volume",
2445    "\
2446 This resizes (expands or shrinks) an existing LVM logical
2447 volume to C<mbytes>.  When reducing, data in the reduced part
2448 is lost.");
2449
2450   ("resize2fs", (RErr, [Device "device"]), 106, [],
2451    [], (* lvresize tests this *)
2452    "resize an ext2/ext3 filesystem",
2453    "\
2454 This resizes an ext2 or ext3 filesystem to match the size of
2455 the underlying device.
2456
2457 I<Note:> It is sometimes required that you run C<guestfs_e2fsck_f>
2458 on the C<device> before calling this command.  For unknown reasons
2459 C<resize2fs> sometimes gives an error about this and sometimes not.
2460 In any case, it is always safe to call C<guestfs_e2fsck_f> before
2461 calling this function.");
2462
2463   ("find", (RStringList "names", [Pathname "directory"]), 107, [],
2464    [InitBasicFS, Always, TestOutputList (
2465       [["find"; "/"]], ["lost+found"]);
2466     InitBasicFS, Always, TestOutputList (
2467       [["touch"; "/a"];
2468        ["mkdir"; "/b"];
2469        ["touch"; "/b/c"];
2470        ["find"; "/"]], ["a"; "b"; "b/c"; "lost+found"]);
2471     InitBasicFS, Always, TestOutputList (
2472       [["mkdir_p"; "/a/b/c"];
2473        ["touch"; "/a/b/c/d"];
2474        ["find"; "/a/b/"]], ["c"; "c/d"])],
2475    "find all files and directories",
2476    "\
2477 This command lists out all files and directories, recursively,
2478 starting at C<directory>.  It is essentially equivalent to
2479 running the shell command C<find directory -print> but some
2480 post-processing happens on the output, described below.
2481
2482 This returns a list of strings I<without any prefix>.  Thus
2483 if the directory structure was:
2484
2485  /tmp/a
2486  /tmp/b
2487  /tmp/c/d
2488
2489 then the returned list from C<guestfs_find> C</tmp> would be
2490 4 elements:
2491
2492  a
2493  b
2494  c
2495  c/d
2496
2497 If C<directory> is not a directory, then this command returns
2498 an error.
2499
2500 The returned list is sorted.");
2501
2502   ("e2fsck_f", (RErr, [Device "device"]), 108, [],
2503    [], (* lvresize tests this *)
2504    "check an ext2/ext3 filesystem",
2505    "\
2506 This runs C<e2fsck -p -f device>, ie. runs the ext2/ext3
2507 filesystem checker on C<device>, noninteractively (C<-p>),
2508 even if the filesystem appears to be clean (C<-f>).
2509
2510 This command is only needed because of C<guestfs_resize2fs>
2511 (q.v.).  Normally you should use C<guestfs_fsck>.");
2512
2513   ("sleep", (RErr, [Int "secs"]), 109, [],
2514    [InitNone, Always, TestRun (
2515       [["sleep"; "1"]])],
2516    "sleep for some seconds",
2517    "\
2518 Sleep for C<secs> seconds.");
2519
2520   ("ntfs_3g_probe", (RInt "status", [Bool "rw"; Device "device"]), 110, [],
2521    [InitNone, Always, TestOutputInt (
2522       [["sfdiskM"; "/dev/sda"; ","];
2523        ["mkfs"; "ntfs"; "/dev/sda1"];
2524        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 0);
2525     InitNone, Always, TestOutputInt (
2526       [["sfdiskM"; "/dev/sda"; ","];
2527        ["mkfs"; "ext2"; "/dev/sda1"];
2528        ["ntfs_3g_probe"; "true"; "/dev/sda1"]], 12)],
2529    "probe NTFS volume",
2530    "\
2531 This command runs the L<ntfs-3g.probe(8)> command which probes
2532 an NTFS C<device> for mountability.  (Not all NTFS volumes can
2533 be mounted read-write, and some cannot be mounted at all).
2534
2535 C<rw> is a boolean flag.  Set it to true if you want to test
2536 if the volume can be mounted read-write.  Set it to false if
2537 you want to test if the volume can be mounted read-only.
2538
2539 The return value is an integer which C<0> if the operation
2540 would succeed, or some non-zero value documented in the
2541 L<ntfs-3g.probe(8)> manual page.");
2542
2543   ("sh", (RString "output", [String "command"]), 111, [],
2544    [], (* XXX needs tests *)
2545    "run a command via the shell",
2546    "\
2547 This call runs a command from the guest filesystem via the
2548 guest's C</bin/sh>.
2549
2550 This is like C<guestfs_command>, but passes the command to:
2551
2552  /bin/sh -c \"command\"
2553
2554 Depending on the guest's shell, this usually results in
2555 wildcards being expanded, shell expressions being interpolated
2556 and so on.
2557
2558 All the provisos about C<guestfs_command> apply to this call.");
2559
2560   ("sh_lines", (RStringList "lines", [String "command"]), 112, [],
2561    [], (* XXX needs tests *)
2562    "run a command via the shell returning lines",
2563    "\
2564 This is the same as C<guestfs_sh>, but splits the result
2565 into a list of lines.
2566
2567 See also: C<guestfs_command_lines>");
2568
2569   ("glob_expand", (RStringList "paths", [Pathname "pattern"]), 113, [],
2570    (* Use Pathname here, and hence ABS_PATH (pattern,... in generated
2571     * code in stubs.c, since all valid glob patterns must start with "/".
2572     * There is no concept of "cwd" in libguestfs, hence no "."-relative names.
2573     *)
2574    [InitBasicFS, Always, TestOutputList (
2575       [["mkdir_p"; "/a/b/c"];
2576        ["touch"; "/a/b/c/d"];
2577        ["touch"; "/a/b/c/e"];
2578        ["glob_expand"; "/a/b/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2579     InitBasicFS, Always, TestOutputList (
2580       [["mkdir_p"; "/a/b/c"];
2581        ["touch"; "/a/b/c/d"];
2582        ["touch"; "/a/b/c/e"];
2583        ["glob_expand"; "/a/*/c/*"]], ["/a/b/c/d"; "/a/b/c/e"]);
2584     InitBasicFS, Always, TestOutputList (
2585       [["mkdir_p"; "/a/b/c"];
2586        ["touch"; "/a/b/c/d"];
2587        ["touch"; "/a/b/c/e"];
2588        ["glob_expand"; "/a/*/x/*"]], [])],
2589    "expand a wildcard path",
2590    "\
2591 This command searches for all the pathnames matching
2592 C<pattern> according to the wildcard expansion rules
2593 used by the shell.
2594
2595 If no paths match, then this returns an empty list
2596 (note: not an error).
2597
2598 It is just a wrapper around the C L<glob(3)> function
2599 with flags C<GLOB_MARK|GLOB_BRACE>.
2600 See that manual page for more details.");
2601
2602   ("scrub_device", (RErr, [Device "device"]), 114, [DangerWillRobinson],
2603    [InitNone, Always, TestRun ( (* use /dev/sdc because it's smaller *)
2604       [["scrub_device"; "/dev/sdc"]])],
2605    "scrub (securely wipe) a device",
2606    "\
2607 This command writes patterns over C<device> to make data retrieval
2608 more difficult.
2609
2610 It is an interface to the L<scrub(1)> program.  See that
2611 manual page for more details.");
2612
2613   ("scrub_file", (RErr, [Pathname "file"]), 115, [],
2614    [InitBasicFS, Always, TestRun (
2615       [["write_file"; "/file"; "content"; "0"];
2616        ["scrub_file"; "/file"]])],
2617    "scrub (securely wipe) a file",
2618    "\
2619 This command writes patterns over a file to make data retrieval
2620 more difficult.
2621
2622 The file is I<removed> after scrubbing.
2623
2624 It is an interface to the L<scrub(1)> program.  See that
2625 manual page for more details.");
2626
2627   ("scrub_freespace", (RErr, [Pathname "dir"]), 116, [],
2628    [], (* XXX needs testing *)
2629    "scrub (securely wipe) free space",
2630    "\
2631 This command creates the directory C<dir> and then fills it
2632 with files until the filesystem is full, and scrubs the files
2633 as for C<guestfs_scrub_file>, and deletes them.
2634 The intention is to scrub any free space on the partition
2635 containing C<dir>.
2636
2637 It is an interface to the L<scrub(1)> program.  See that
2638 manual page for more details.");
2639
2640   ("mkdtemp", (RString "dir", [Pathname "template"]), 117, [],
2641    [InitBasicFS, Always, TestRun (
2642       [["mkdir"; "/tmp"];
2643        ["mkdtemp"; "/tmp/tmpXXXXXX"]])],
2644    "create a temporary directory",
2645    "\
2646 This command creates a temporary directory.  The
2647 C<template> parameter should be a full pathname for the
2648 temporary directory name with the final six characters being
2649 \"XXXXXX\".
2650
2651 For example: \"/tmp/myprogXXXXXX\" or \"/Temp/myprogXXXXXX\",
2652 the second one being suitable for Windows filesystems.
2653
2654 The name of the temporary directory that was created
2655 is returned.
2656
2657 The temporary directory is created with mode 0700
2658 and is owned by root.
2659
2660 The caller is responsible for deleting the temporary
2661 directory and its contents after use.
2662
2663 See also: L<mkdtemp(3)>");
2664
2665   ("wc_l", (RInt "lines", [Pathname "path"]), 118, [],
2666    [InitSquashFS, Always, TestOutputInt (
2667       [["wc_l"; "/10klines"]], 10000)],
2668    "count lines in a file",
2669    "\
2670 This command counts the lines in a file, using the
2671 C<wc -l> external command.");
2672
2673   ("wc_w", (RInt "words", [Pathname "path"]), 119, [],
2674    [InitSquashFS, Always, TestOutputInt (
2675       [["wc_w"; "/10klines"]], 10000)],
2676    "count words in a file",
2677    "\
2678 This command counts the words in a file, using the
2679 C<wc -w> external command.");
2680
2681   ("wc_c", (RInt "chars", [Pathname "path"]), 120, [],
2682    [InitSquashFS, Always, TestOutputInt (
2683       [["wc_c"; "/100kallspaces"]], 102400)],
2684    "count characters in a file",
2685    "\
2686 This command counts the characters in a file, using the
2687 C<wc -c> external command.");
2688
2689   ("head", (RStringList "lines", [Pathname "path"]), 121, [ProtocolLimitWarning],
2690    [InitSquashFS, Always, TestOutputList (
2691       [["head"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz";"3abcdefghijklmnopqrstuvwxyz";"4abcdefghijklmnopqrstuvwxyz";"5abcdefghijklmnopqrstuvwxyz";"6abcdefghijklmnopqrstuvwxyz";"7abcdefghijklmnopqrstuvwxyz";"8abcdefghijklmnopqrstuvwxyz";"9abcdefghijklmnopqrstuvwxyz"])],
2692    "return first 10 lines of a file",
2693    "\
2694 This command returns up to the first 10 lines of a file as
2695 a list of strings.");
2696
2697   ("head_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 122, [ProtocolLimitWarning],
2698    [InitSquashFS, Always, TestOutputList (
2699       [["head_n"; "3"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2700     InitSquashFS, Always, TestOutputList (
2701       [["head_n"; "-9997"; "/10klines"]], ["0abcdefghijklmnopqrstuvwxyz";"1abcdefghijklmnopqrstuvwxyz";"2abcdefghijklmnopqrstuvwxyz"]);
2702     InitSquashFS, Always, TestOutputList (
2703       [["head_n"; "0"; "/10klines"]], [])],
2704    "return first N lines of a file",
2705    "\
2706 If the parameter C<nrlines> is a positive number, this returns the first
2707 C<nrlines> lines of the file C<path>.
2708
2709 If the parameter C<nrlines> is a negative number, this returns lines
2710 from the file C<path>, excluding the last C<nrlines> lines.
2711
2712 If the parameter C<nrlines> is zero, this returns an empty list.");
2713
2714   ("tail", (RStringList "lines", [Pathname "path"]), 123, [ProtocolLimitWarning],
2715    [InitSquashFS, Always, TestOutputList (
2716       [["tail"; "/10klines"]], ["9990abcdefghijklmnopqrstuvwxyz";"9991abcdefghijklmnopqrstuvwxyz";"9992abcdefghijklmnopqrstuvwxyz";"9993abcdefghijklmnopqrstuvwxyz";"9994abcdefghijklmnopqrstuvwxyz";"9995abcdefghijklmnopqrstuvwxyz";"9996abcdefghijklmnopqrstuvwxyz";"9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"])],
2717    "return last 10 lines of a file",
2718    "\
2719 This command returns up to the last 10 lines of a file as
2720 a list of strings.");
2721
2722   ("tail_n", (RStringList "lines", [Int "nrlines"; Pathname "path"]), 124, [ProtocolLimitWarning],
2723    [InitSquashFS, Always, TestOutputList (
2724       [["tail_n"; "3"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2725     InitSquashFS, Always, TestOutputList (
2726       [["tail_n"; "-9998"; "/10klines"]], ["9997abcdefghijklmnopqrstuvwxyz";"9998abcdefghijklmnopqrstuvwxyz";"9999abcdefghijklmnopqrstuvwxyz"]);
2727     InitSquashFS, Always, TestOutputList (
2728       [["tail_n"; "0"; "/10klines"]], [])],
2729    "return last N lines of a file",
2730    "\
2731 If the parameter C<nrlines> is a positive number, this returns the last
2732 C<nrlines> lines of the file C<path>.
2733
2734 If the parameter C<nrlines> is a negative number, this returns lines
2735 from the file C<path>, starting with the C<-nrlines>th line.
2736
2737 If the parameter C<nrlines> is zero, this returns an empty list.");
2738
2739   ("df", (RString "output", []), 125, [],
2740    [], (* XXX Tricky to test because it depends on the exact format
2741         * of the 'df' command and other imponderables.
2742         *)
2743    "report file system disk space usage",
2744    "\
2745 This command runs the C<df> command to report disk space used.
2746
2747 This command is mostly useful for interactive sessions.  It
2748 is I<not> intended that you try to parse the output string.
2749 Use C<statvfs> from programs.");
2750
2751   ("df_h", (RString "output", []), 126, [],
2752    [], (* XXX Tricky to test because it depends on the exact format
2753         * of the 'df' command and other imponderables.
2754         *)
2755    "report file system disk space usage (human readable)",
2756    "\
2757 This command runs the C<df -h> command to report disk space used
2758 in human-readable format.
2759
2760 This command is mostly useful for interactive sessions.  It
2761 is I<not> intended that you try to parse the output string.
2762 Use C<statvfs> from programs.");
2763
2764   ("du", (RInt64 "sizekb", [Pathname "path"]), 127, [],
2765    [InitSquashFS, Always, TestOutputInt (
2766       [["du"; "/directory"]], 0 (* squashfs doesn't have blocks *))],
2767    "estimate file space usage",
2768    "\
2769 This command runs the C<du -s> command to estimate file space
2770 usage for C<path>.
2771
2772 C<path> can be a file or a directory.  If C<path> is a directory
2773 then the estimate includes the contents of the directory and all
2774 subdirectories (recursively).
2775
2776 The result is the estimated size in I<kilobytes>
2777 (ie. units of 1024 bytes).");
2778
2779   ("initrd_list", (RStringList "filenames", [Pathname "path"]), 128, [],
2780    [InitSquashFS, Always, TestOutputList (
2781       [["initrd_list"; "/initrd"]], ["empty";"known-1";"known-2";"known-3";"known-4"; "known-5"])],
2782    "list files in an initrd",
2783    "\
2784 This command lists out files contained in an initrd.
2785
2786 The files are listed without any initial C</> character.  The
2787 files are listed in the order they appear (not necessarily
2788 alphabetical).  Directory names are listed as separate items.
2789
2790 Old Linux kernels (2.4 and earlier) used a compressed ext2
2791 filesystem as initrd.  We I<only> support the newer initramfs
2792 format (compressed cpio files).");
2793
2794   ("mount_loop", (RErr, [Pathname "file"; Pathname "mountpoint"]), 129, [],
2795    [],
2796    "mount a file using the loop device",
2797    "\
2798 This command lets you mount C<file> (a filesystem image
2799 in a file) on a mount point.  It is entirely equivalent to
2800 the command C<mount -o loop file mountpoint>.");
2801
2802   ("mkswap", (RErr, [Device "device"]), 130, [],
2803    [InitEmpty, Always, TestRun (
2804       [["sfdiskM"; "/dev/sda"; ","];
2805        ["mkswap"; "/dev/sda1"]])],
2806    "create a swap partition",
2807    "\
2808 Create a swap partition on C<device>.");
2809
2810   ("mkswap_L", (RErr, [String "label"; Device "device"]), 131, [],
2811    [InitEmpty, Always, TestRun (
2812       [["sfdiskM"; "/dev/sda"; ","];
2813        ["mkswap_L"; "hello"; "/dev/sda1"]])],
2814    "create a swap partition with a label",
2815    "\
2816 Create a swap partition on C<device> with label C<label>.
2817
2818 Note that you cannot attach a swap label to a block device
2819 (eg. C</dev/sda>), just to a partition.  This appears to be
2820 a limitation of the kernel or swap tools.");
2821
2822   ("mkswap_U", (RErr, [String "uuid"; Device "device"]), 132, [],
2823    (let uuid = uuidgen () in
2824     [InitEmpty, Always, TestRun (
2825        [["sfdiskM"; "/dev/sda"; ","];
2826         ["mkswap_U"; uuid; "/dev/sda1"]])]),
2827    "create a swap partition with an explicit UUID",
2828    "\
2829 Create a swap partition on C<device> with UUID C<uuid>.");
2830
2831   ("mknod", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 133, [],
2832    [InitBasicFS, Always, TestOutputStruct (
2833       [["mknod"; "0o10777"; "0"; "0"; "/node"];
2834        (* NB: default umask 022 means 0777 -> 0755 in these tests *)
2835        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)]);
2836     InitBasicFS, Always, TestOutputStruct (
2837       [["mknod"; "0o60777"; "66"; "99"; "/node"];
2838        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2839    "make block, character or FIFO devices",
2840    "\
2841 This call creates block or character special devices, or
2842 named pipes (FIFOs).
2843
2844 The C<mode> parameter should be the mode, using the standard
2845 constants.  C<devmajor> and C<devminor> are the
2846 device major and minor numbers, only used when creating block
2847 and character special devices.");
2848
2849   ("mkfifo", (RErr, [Int "mode"; Pathname "path"]), 134, [],
2850    [InitBasicFS, Always, TestOutputStruct (
2851       [["mkfifo"; "0o777"; "/node"];
2852        ["stat"; "/node"]], [CompareWithInt ("mode", 0o10755)])],
2853    "make FIFO (named pipe)",
2854    "\
2855 This call creates a FIFO (named pipe) called C<path> with
2856 mode C<mode>.  It is just a convenient wrapper around
2857 C<guestfs_mknod>.");
2858
2859   ("mknod_b", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 135, [],
2860    [InitBasicFS, Always, TestOutputStruct (
2861       [["mknod_b"; "0o777"; "99"; "66"; "/node"];
2862        ["stat"; "/node"]], [CompareWithInt ("mode", 0o60755)])],
2863    "make block device node",
2864    "\
2865 This call creates a block device node called C<path> with
2866 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2867 It is just a convenient wrapper around C<guestfs_mknod>.");
2868
2869   ("mknod_c", (RErr, [Int "mode"; Int "devmajor"; Int "devminor"; Pathname "path"]), 136, [],
2870    [InitBasicFS, Always, TestOutputStruct (
2871       [["mknod_c"; "0o777"; "99"; "66"; "/node"];
2872        ["stat"; "/node"]], [CompareWithInt ("mode", 0o20755)])],
2873    "make char device node",
2874    "\
2875 This call creates a char device node called C<path> with
2876 mode C<mode> and device major/minor C<devmajor> and C<devminor>.
2877 It is just a convenient wrapper around C<guestfs_mknod>.");
2878
2879   ("umask", (RInt "oldmask", [Int "mask"]), 137, [],
2880    [], (* XXX umask is one of those stateful things that we should
2881         * reset between each test.
2882         *)
2883    "set file mode creation mask (umask)",
2884    "\
2885 This function sets the mask used for creating new files and
2886 device nodes to C<mask & 0777>.
2887
2888 Typical umask values would be C<022> which creates new files
2889 with permissions like \"-rw-r--r--\" or \"-rwxr-xr-x\", and
2890 C<002> which creates new files with permissions like
2891 \"-rw-rw-r--\" or \"-rwxrwxr-x\".
2892
2893 The default umask is C<022>.  This is important because it
2894 means that directories and device nodes will be created with
2895 C<0644> or C<0755> mode even if you specify C<0777>.
2896
2897 See also L<umask(2)>, C<guestfs_mknod>, C<guestfs_mkdir>.
2898
2899 This call returns the previous umask.");
2900
2901   ("readdir", (RStructList ("entries", "dirent"), [Pathname "dir"]), 138, [],
2902    [],
2903    "read directories entries",
2904    "\
2905 This returns the list of directory entries in directory C<dir>.
2906
2907 All entries in the directory are returned, including C<.> and
2908 C<..>.  The entries are I<not> sorted, but returned in the same
2909 order as the underlying filesystem.
2910
2911 Also this call returns basic file type information about each
2912 file.  The C<ftyp> field will contain one of the following characters:
2913
2914 =over 4
2915
2916 =item 'b'
2917
2918 Block special
2919
2920 =item 'c'
2921
2922 Char special
2923
2924 =item 'd'
2925
2926 Directory
2927
2928 =item 'f'
2929
2930 FIFO (named pipe)
2931
2932 =item 'l'
2933
2934 Symbolic link
2935
2936 =item 'r'
2937
2938 Regular file
2939
2940 =item 's'
2941
2942 Socket
2943
2944 =item 'u'
2945
2946 Unknown file type
2947
2948 =item '?'
2949
2950 The L<readdir(3)> returned a C<d_type> field with an
2951 unexpected value
2952
2953 =back
2954
2955 This function is primarily intended for use by programs.  To
2956 get a simple list of names, use C<guestfs_ls>.  To get a printable
2957 directory for human consumption, use C<guestfs_ll>.");
2958
2959   ("sfdiskM", (RErr, [Device "device"; StringList "lines"]), 139, [DangerWillRobinson],
2960    [],
2961    "create partitions on a block device",
2962    "\
2963 This is a simplified interface to the C<guestfs_sfdisk>
2964 command, where partition sizes are specified in megabytes
2965 only (rounded to the nearest cylinder) and you don't need
2966 to specify the cyls, heads and sectors parameters which
2967 were rarely if ever used anyway.
2968
2969 See also C<guestfs_sfdisk> and the L<sfdisk(8)> manpage.");
2970
2971   ("zfile", (RString "description", [String "method"; Pathname "path"]), 140, [DeprecatedBy "file"],
2972    [],
2973    "determine file type inside a compressed file",
2974    "\
2975 This command runs C<file> after first decompressing C<path>
2976 using C<method>.
2977
2978 C<method> must be one of C<gzip>, C<compress> or C<bzip2>.
2979
2980 Since 1.0.63, use C<guestfs_file> instead which can now
2981 process compressed files.");
2982
2983   ("getxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 141, [],
2984    [],
2985    "list extended attributes of a file or directory",
2986    "\
2987 This call lists the extended attributes of the file or directory
2988 C<path>.
2989
2990 At the system call level, this is a combination of the
2991 L<listxattr(2)> and L<getxattr(2)> calls.
2992
2993 See also: C<guestfs_lgetxattrs>, L<attr(5)>.");
2994
2995   ("lgetxattrs", (RStructList ("xattrs", "xattr"), [Pathname "path"]), 142, [],
2996    [],
2997    "list extended attributes of a file or directory",
2998    "\
2999 This is the same as C<guestfs_getxattrs>, but if C<path>
3000 is a symbolic link, then it returns the extended attributes
3001 of the link itself.");
3002
3003   ("setxattr", (RErr, [String "xattr";
3004                        String "val"; Int "vallen"; (* will be BufferIn *)
3005                        Pathname "path"]), 143, [],
3006    [],
3007    "set extended attribute of a file or directory",
3008    "\
3009 This call sets the extended attribute named C<xattr>
3010 of the file C<path> to the value C<val> (of length C<vallen>).
3011 The value is arbitrary 8 bit data.
3012
3013 See also: C<guestfs_lsetxattr>, L<attr(5)>.");
3014
3015   ("lsetxattr", (RErr, [String "xattr";
3016                         String "val"; Int "vallen"; (* will be BufferIn *)
3017                         Pathname "path"]), 144, [],
3018    [],
3019    "set extended attribute of a file or directory",
3020    "\
3021 This is the same as C<guestfs_setxattr>, but if C<path>
3022 is a symbolic link, then it sets an extended attribute
3023 of the link itself.");
3024
3025   ("removexattr", (RErr, [String "xattr"; Pathname "path"]), 145, [],
3026    [],
3027    "remove extended attribute of a file or directory",
3028    "\
3029 This call removes the extended attribute named C<xattr>
3030 of the file C<path>.
3031
3032 See also: C<guestfs_lremovexattr>, L<attr(5)>.");
3033
3034   ("lremovexattr", (RErr, [String "xattr"; Pathname "path"]), 146, [],
3035    [],
3036    "remove extended attribute of a file or directory",
3037    "\
3038 This is the same as C<guestfs_removexattr>, but if C<path>
3039 is a symbolic link, then it removes an extended attribute
3040 of the link itself.");
3041
3042   ("mountpoints", (RHashtable "mps", []), 147, [],
3043    [],
3044    "show mountpoints",
3045    "\
3046 This call is similar to C<guestfs_mounts>.  That call returns
3047 a list of devices.  This one returns a hash table (map) of
3048 device name to directory where the device is mounted.");
3049
3050   ("mkmountpoint", (RErr, [String "exemptpath"]), 148, [],
3051   (* This is a special case: while you would expect a parameter
3052    * of type "Pathname", that doesn't work, because it implies
3053    * NEED_ROOT in the generated calling code in stubs.c, and
3054    * this function cannot use NEED_ROOT.
3055    *)
3056    [],
3057    "create a mountpoint",
3058    "\
3059 C<guestfs_mkmountpoint> and C<guestfs_rmmountpoint> are
3060 specialized calls that can be used to create extra mountpoints
3061 before mounting the first filesystem.
3062
3063 These calls are I<only> necessary in some very limited circumstances,
3064 mainly the case where you want to mount a mix of unrelated and/or
3065 read-only filesystems together.
3066
3067 For example, live CDs often contain a \"Russian doll\" nest of
3068 filesystems, an ISO outer layer, with a squashfs image inside, with
3069 an ext2/3 image inside that.  You can unpack this as follows
3070 in guestfish:
3071
3072  add-ro Fedora-11-i686-Live.iso
3073  run
3074  mkmountpoint /cd
3075  mkmountpoint /squash
3076  mkmountpoint /ext3
3077  mount /dev/sda /cd
3078  mount-loop /cd/LiveOS/squashfs.img /squash
3079  mount-loop /squash/LiveOS/ext3fs.img /ext3
3080
3081 The inner filesystem is now unpacked under the /ext3 mountpoint.");
3082
3083   ("rmmountpoint", (RErr, [String "exemptpath"]), 149, [],
3084    [],
3085    "remove a mountpoint",
3086    "\
3087 This calls removes a mountpoint that was previously created
3088 with C<guestfs_mkmountpoint>.  See C<guestfs_mkmountpoint>
3089 for full details.");
3090
3091   ("read_file", (RBufferOut "content", [Pathname "path"]), 150, [ProtocolLimitWarning],
3092    [InitSquashFS, Always, TestOutputBuffer (
3093       [["read_file"; "/known-4"]], "abc\ndef\nghi")],
3094    "read a file",
3095    "\
3096 This calls returns the contents of the file C<path> as a
3097 buffer.
3098
3099 Unlike C<guestfs_cat>, this function can correctly
3100 handle files that contain embedded ASCII NUL characters.
3101 However unlike C<guestfs_download>, this function is limited
3102 in the total size of file that can be handled.");
3103
3104   ("grep", (RStringList "lines", [String "regex"; Pathname "path"]), 151, [ProtocolLimitWarning],
3105    [InitSquashFS, Always, TestOutputList (
3106       [["grep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"]);
3107     InitSquashFS, Always, TestOutputList (
3108       [["grep"; "nomatch"; "/test-grep.txt"]], [])],
3109    "return lines matching a pattern",
3110    "\
3111 This calls the external C<grep> program and returns the
3112 matching lines.");
3113
3114   ("egrep", (RStringList "lines", [String "regex"; Pathname "path"]), 152, [ProtocolLimitWarning],
3115    [InitSquashFS, Always, TestOutputList (
3116       [["egrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3117    "return lines matching a pattern",
3118    "\
3119 This calls the external C<egrep> program and returns the
3120 matching lines.");
3121
3122   ("fgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 153, [ProtocolLimitWarning],
3123    [InitSquashFS, Always, TestOutputList (
3124       [["fgrep"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"])],
3125    "return lines matching a pattern",
3126    "\
3127 This calls the external C<fgrep> program and returns the
3128 matching lines.");
3129
3130   ("grepi", (RStringList "lines", [String "regex"; Pathname "path"]), 154, [ProtocolLimitWarning],
3131    [InitSquashFS, Always, TestOutputList (
3132       [["grepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3133    "return lines matching a pattern",
3134    "\
3135 This calls the external C<grep -i> program and returns the
3136 matching lines.");
3137
3138   ("egrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 155, [ProtocolLimitWarning],
3139    [InitSquashFS, Always, TestOutputList (
3140       [["egrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3141    "return lines matching a pattern",
3142    "\
3143 This calls the external C<egrep -i> program and returns the
3144 matching lines.");
3145
3146   ("fgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 156, [ProtocolLimitWarning],
3147    [InitSquashFS, Always, TestOutputList (
3148       [["fgrepi"; "abc"; "/test-grep.txt"]], ["abc"; "abc123"; "ABC"])],
3149    "return lines matching a pattern",
3150    "\
3151 This calls the external C<fgrep -i> program and returns the
3152 matching lines.");
3153
3154   ("zgrep", (RStringList "lines", [String "regex"; Pathname "path"]), 157, [ProtocolLimitWarning],
3155    [InitSquashFS, Always, TestOutputList (
3156       [["zgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3157    "return lines matching a pattern",
3158    "\
3159 This calls the external C<zgrep> program and returns the
3160 matching lines.");
3161
3162   ("zegrep", (RStringList "lines", [String "regex"; Pathname "path"]), 158, [ProtocolLimitWarning],
3163    [InitSquashFS, Always, TestOutputList (
3164       [["zegrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3165    "return lines matching a pattern",
3166    "\
3167 This calls the external C<zegrep> program and returns the
3168 matching lines.");
3169
3170   ("zfgrep", (RStringList "lines", [String "pattern"; Pathname "path"]), 159, [ProtocolLimitWarning],
3171    [InitSquashFS, Always, TestOutputList (
3172       [["zfgrep"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"])],
3173    "return lines matching a pattern",
3174    "\
3175 This calls the external C<zfgrep> program and returns the
3176 matching lines.");
3177
3178   ("zgrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 160, [ProtocolLimitWarning],
3179    [InitSquashFS, Always, TestOutputList (
3180       [["zgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3181    "return lines matching a pattern",
3182    "\
3183 This calls the external C<zgrep -i> program and returns the
3184 matching lines.");
3185
3186   ("zegrepi", (RStringList "lines", [String "regex"; Pathname "path"]), 161, [ProtocolLimitWarning],
3187    [InitSquashFS, Always, TestOutputList (
3188       [["zegrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3189    "return lines matching a pattern",
3190    "\
3191 This calls the external C<zegrep -i> program and returns the
3192 matching lines.");
3193
3194   ("zfgrepi", (RStringList "lines", [String "pattern"; Pathname "path"]), 162, [ProtocolLimitWarning],
3195    [InitSquashFS, Always, TestOutputList (
3196       [["zfgrepi"; "abc"; "/test-grep.txt.gz"]], ["abc"; "abc123"; "ABC"])],
3197    "return lines matching a pattern",
3198    "\
3199 This calls the external C<zfgrep -i> program and returns the
3200 matching lines.");
3201
3202   ("realpath", (RString "rpath", [Pathname "path"]), 163, [],
3203    [InitSquashFS, Always, TestOutput (
3204       [["realpath"; "/../directory"]], "/directory")],
3205    "canonicalized absolute pathname",
3206    "\
3207 Return the canonicalized absolute pathname of C<path>.  The
3208 returned path has no C<.>, C<..> or symbolic link path elements.");
3209
3210   ("ln", (RErr, [String "target"; Pathname "linkname"]), 164, [],
3211    [InitBasicFS, Always, TestOutputStruct (
3212       [["touch"; "/a"];
3213        ["ln"; "/a"; "/b"];
3214        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3215    "create a hard link",
3216    "\
3217 This command creates a hard link using the C<ln> command.");
3218
3219   ("ln_f", (RErr, [String "target"; Pathname "linkname"]), 165, [],
3220    [InitBasicFS, Always, TestOutputStruct (
3221       [["touch"; "/a"];
3222        ["touch"; "/b"];
3223        ["ln_f"; "/a"; "/b"];
3224        ["stat"; "/b"]], [CompareWithInt ("nlink", 2)])],
3225    "create a hard link",
3226    "\
3227 This command creates a hard link using the C<ln -f> command.
3228 The C<-f> option removes the link (C<linkname>) if it exists already.");
3229
3230   ("ln_s", (RErr, [String "target"; Pathname "linkname"]), 166, [],
3231    [InitBasicFS, Always, TestOutputStruct (
3232       [["touch"; "/a"];
3233        ["ln_s"; "a"; "/b"];
3234        ["lstat"; "/b"]], [CompareWithInt ("mode", 0o120777)])],
3235    "create a symbolic link",
3236    "\
3237 This command creates a symbolic link using the C<ln -s> command.");
3238
3239   ("ln_sf", (RErr, [String "target"; Pathname "linkname"]), 167, [],
3240    [InitBasicFS, Always, TestOutput (
3241       [["mkdir_p"; "/a/b"];
3242        ["touch"; "/a/b/c"];
3243        ["ln_sf"; "../d"; "/a/b/c"];
3244        ["readlink"; "/a/b/c"]], "../d")],
3245    "create a symbolic link",
3246    "\
3247 This command creates a symbolic link using the C<ln -sf> command,
3248 The C<-f> option removes the link (C<linkname>) if it exists already.");
3249
3250   ("readlink", (RString "link", [Pathname "path"]), 168, [],
3251    [] (* XXX tested above *),
3252    "read the target of a symbolic link",
3253    "\
3254 This command reads the target of a symbolic link.");
3255
3256   ("fallocate", (RErr, [Pathname "path"; Int "len"]), 169, [],
3257    [InitBasicFS, Always, TestOutputStruct (
3258       [["fallocate"; "/a"; "1000000"];
3259        ["stat"; "/a"]], [CompareWithInt ("size", 1_000_000)])],
3260    "preallocate a file in the guest filesystem",
3261    "\
3262 This command preallocates a file (containing zero bytes) named
3263 C<path> of size C<len> bytes.  If the file exists already, it
3264 is overwritten.
3265
3266 Do not confuse this with the guestfish-specific
3267 C<alloc> command which allocates a file in the host and
3268 attaches it as a device.");
3269
3270   ("swapon_device", (RErr, [Device "device"]), 170, [],
3271    [InitPartition, Always, TestRun (
3272       [["mkswap"; "/dev/sda1"];
3273        ["swapon_device"; "/dev/sda1"];
3274        ["swapoff_device"; "/dev/sda1"]])],
3275    "enable swap on device",
3276    "\
3277 This command enables the libguestfs appliance to use the
3278 swap device or partition named C<device>.  The increased
3279 memory is made available for all commands, for example
3280 those run using C<guestfs_command> or C<guestfs_sh>.
3281
3282 Note that you should not swap to existing guest swap
3283 partitions unless you know what you are doing.  They may
3284 contain hibernation information, or other information that
3285 the guest doesn't want you to trash.  You also risk leaking
3286 information about the host to the guest this way.  Instead,
3287 attach a new host device to the guest and swap on that.");
3288
3289   ("swapoff_device", (RErr, [Device "device"]), 171, [],
3290    [], (* XXX tested by swapon_device *)
3291    "disable swap on device",
3292    "\
3293 This command disables the libguestfs appliance swap
3294 device or partition named C<device>.
3295 See C<guestfs_swapon_device>.");
3296
3297   ("swapon_file", (RErr, [Pathname "file"]), 172, [],
3298    [InitBasicFS, Always, TestRun (
3299       [["fallocate"; "/swap"; "8388608"];
3300        ["mkswap_file"; "/swap"];
3301        ["swapon_file"; "/swap"];
3302        ["swapoff_file"; "/swap"]])],
3303    "enable swap on file",
3304    "\
3305 This command enables swap to a file.
3306 See C<guestfs_swapon_device> for other notes.");
3307
3308   ("swapoff_file", (RErr, [Pathname "file"]), 173, [],
3309    [], (* XXX tested by swapon_file *)
3310    "disable swap on file",
3311    "\
3312 This command disables the libguestfs appliance swap on file.");
3313
3314   ("swapon_label", (RErr, [String "label"]), 174, [],
3315    [InitEmpty, Always, TestRun (
3316       [["sfdiskM"; "/dev/sdb"; ","];
3317        ["mkswap_L"; "swapit"; "/dev/sdb1"];
3318        ["swapon_label"; "swapit"];
3319        ["swapoff_label"; "swapit"];
3320        ["zero"; "/dev/sdb"];
3321        ["blockdev_rereadpt"; "/dev/sdb"]])],
3322    "enable swap on labeled swap partition",
3323    "\
3324 This command enables swap to a labeled swap partition.
3325 See C<guestfs_swapon_device> for other notes.");
3326
3327   ("swapoff_label", (RErr, [String "label"]), 175, [],
3328    [], (* XXX tested by swapon_label *)
3329    "disable swap on labeled swap partition",
3330    "\
3331 This command disables the libguestfs appliance swap on
3332 labeled swap partition.");
3333
3334   ("swapon_uuid", (RErr, [String "uuid"]), 176, [],
3335    (let uuid = uuidgen () in
3336     [InitEmpty, Always, TestRun (
3337        [["mkswap_U"; uuid; "/dev/sdb"];
3338         ["swapon_uuid"; uuid];
3339         ["swapoff_uuid"; uuid]])]),
3340    "enable swap on swap partition by UUID",
3341    "\
3342 This command enables swap to a swap partition with the given UUID.
3343 See C<guestfs_swapon_device> for other notes.");
3344
3345   ("swapoff_uuid", (RErr, [String "uuid"]), 177, [],
3346    [], (* XXX tested by swapon_uuid *)
3347    "disable swap on swap partition by UUID",
3348    "\
3349 This command disables the libguestfs appliance swap partition
3350 with the given UUID.");
3351
3352   ("mkswap_file", (RErr, [Pathname "path"]), 178, [],
3353    [InitBasicFS, Always, TestRun (
3354       [["fallocate"; "/swap"; "8388608"];
3355        ["mkswap_file"; "/swap"]])],
3356    "create a swap file",
3357    "\
3358 Create a swap file.
3359
3360 This command just writes a swap file signature to an existing
3361 file.  To create the file itself, use something like C<guestfs_fallocate>.");
3362
3363   ("inotify_init", (RErr, [Int "maxevents"]), 179, [],
3364    [InitSquashFS, Always, TestRun (
3365       [["inotify_init"; "0"]])],
3366    "create an inotify handle",
3367    "\
3368 This command creates a new inotify handle.
3369 The inotify subsystem can be used to notify events which happen to
3370 objects in the guest filesystem.
3371
3372 C<maxevents> is the maximum number of events which will be
3373 queued up between calls to C<guestfs_inotify_read> or
3374 C<guestfs_inotify_files>.
3375 If this is passed as C<0>, then the kernel (or previously set)
3376 default is used.  For Linux 2.6.29 the default was 16384 events.
3377 Beyond this limit, the kernel throws away events, but records
3378 the fact that it threw them away by setting a flag
3379 C<IN_Q_OVERFLOW> in the returned structure list (see
3380 C<guestfs_inotify_read>).
3381
3382 Before any events are generated, you have to add some
3383 watches to the internal watch list.  See:
3384 C<guestfs_inotify_add_watch>,
3385 C<guestfs_inotify_rm_watch> and
3386 C<guestfs_inotify_watch_all>.
3387
3388 Queued up events should be read periodically by calling
3389 C<guestfs_inotify_read>
3390 (or C<guestfs_inotify_files> which is just a helpful
3391 wrapper around C<guestfs_inotify_read>).  If you don't
3392 read the events out often enough then you risk the internal
3393 queue overflowing.
3394
3395 The handle should be closed after use by calling
3396 C<guestfs_inotify_close>.  This also removes any
3397 watches automatically.
3398
3399 See also L<inotify(7)> for an overview of the inotify interface
3400 as exposed by the Linux kernel, which is roughly what we expose
3401 via libguestfs.  Note that there is one global inotify handle
3402 per libguestfs instance.");
3403
3404   ("inotify_add_watch", (RInt64 "wd", [Pathname "path"; Int "mask"]), 180, [],
3405    [InitBasicFS, Always, TestOutputList (
3406       [["inotify_init"; "0"];
3407        ["inotify_add_watch"; "/"; "1073741823"];
3408        ["touch"; "/a"];
3409        ["touch"; "/b"];
3410        ["inotify_files"]], ["a"; "b"])],
3411    "add an inotify watch",
3412    "\
3413 Watch C<path> for the events listed in C<mask>.
3414
3415 Note that if C<path> is a directory then events within that
3416 directory are watched, but this does I<not> happen recursively
3417 (in subdirectories).
3418
3419 Note for non-C or non-Linux callers: the inotify events are
3420 defined by the Linux kernel ABI and are listed in
3421 C</usr/include/sys/inotify.h>.");
3422
3423   ("inotify_rm_watch", (RErr, [Int(*XXX64*) "wd"]), 181, [],
3424    [],
3425    "remove an inotify watch",
3426    "\
3427 Remove a previously defined inotify watch.
3428 See C<guestfs_inotify_add_watch>.");
3429
3430   ("inotify_read", (RStructList ("events", "inotify_event"), []), 182, [],
3431    [],
3432    "return list of inotify events",
3433    "\
3434 Return the complete queue of events that have happened
3435 since the previous read call.
3436
3437 If no events have happened, this returns an empty list.
3438
3439 I<Note>: In order to make sure that all events have been
3440 read, you must call this function repeatedly until it
3441 returns an empty list.  The reason is that the call will
3442 read events up to the maximum appliance-to-host message
3443 size and leave remaining events in the queue.");
3444
3445   ("inotify_files", (RStringList "paths", []), 183, [],
3446    [],
3447    "return list of watched files that had events",
3448    "\
3449 This function is a helpful wrapper around C<guestfs_inotify_read>
3450 which just returns a list of pathnames of objects that were
3451 touched.  The returned pathnames are sorted and deduplicated.");
3452
3453   ("inotify_close", (RErr, []), 184, [],
3454    [],
3455    "close the inotify handle",
3456    "\
3457 This closes the inotify handle which was previously
3458 opened by inotify_init.  It removes all watches, throws
3459 away any pending events, and deallocates all resources.");
3460
3461   ("setcon", (RErr, [String "context"]), 185, [],
3462    [],
3463    "set SELinux security context",
3464    "\
3465 This sets the SELinux security context of the daemon
3466 to the string C<context>.
3467
3468 See the documentation about SELINUX in L<guestfs(3)>.");
3469
3470   ("getcon", (RString "context", []), 186, [],
3471    [],
3472    "get SELinux security context",
3473    "\
3474 This gets the SELinux security context of the daemon.
3475
3476 See the documentation about SELINUX in L<guestfs(3)>,
3477 and C<guestfs_setcon>");
3478
3479   ("mkfs_b", (RErr, [String "fstype"; Int "blocksize"; Device "device"]), 187, [],
3480    [InitEmpty, Always, TestOutput (
3481       [["sfdiskM"; "/dev/sda"; ","];
3482        ["mkfs_b"; "ext2"; "4096"; "/dev/sda1"];
3483        ["mount"; "/dev/sda1"; "/"];
3484        ["write_file"; "/new"; "new file contents"; "0"];
3485        ["cat"; "/new"]], "new file contents")],
3486    "make a filesystem with block size",
3487    "\
3488 This call is similar to C<guestfs_mkfs>, but it allows you to
3489 control the block size of the resulting filesystem.  Supported
3490 block sizes depend on the filesystem type, but typically they
3491 are C<1024>, C<2048> or C<4096> only.");
3492
3493   ("mke2journal", (RErr, [Int "blocksize"; Device "device"]), 188, [],
3494    [InitEmpty, Always, TestOutput (
3495       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3496        ["mke2journal"; "4096"; "/dev/sda1"];
3497        ["mke2fs_J"; "ext2"; "4096"; "/dev/sda2"; "/dev/sda1"];
3498        ["mount"; "/dev/sda2"; "/"];
3499        ["write_file"; "/new"; "new file contents"; "0"];
3500        ["cat"; "/new"]], "new file contents")],
3501    "make ext2/3/4 external journal",
3502    "\
3503 This creates an ext2 external journal on C<device>.  It is equivalent
3504 to the command:
3505
3506  mke2fs -O journal_dev -b blocksize device");
3507
3508   ("mke2journal_L", (RErr, [Int "blocksize"; String "label"; Device "device"]), 189, [],
3509    [InitEmpty, Always, TestOutput (
3510       [["sfdiskM"; "/dev/sda"; ",100 ,"];
3511        ["mke2journal_L"; "4096"; "JOURNAL"; "/dev/sda1"];
3512        ["mke2fs_JL"; "ext2"; "4096"; "/dev/sda2"; "JOURNAL"];
3513        ["mount"; "/dev/sda2"; "/"];
3514        ["write_file"; "/new"; "new file contents"; "0"];
3515        ["cat"; "/new"]], "new file contents")],
3516    "make ext2/3/4 external journal with label",
3517    "\
3518 This creates an ext2 external journal on C<device> with label C<label>.");
3519
3520   ("mke2journal_U", (RErr, [Int "blocksize"; String "uuid"; Device "device"]), 190, [],
3521    (let uuid = uuidgen () in
3522     [InitEmpty, Always, TestOutput (
3523        [["sfdiskM"; "/dev/sda"; ",100 ,"];
3524         ["mke2journal_U"; "4096"; uuid; "/dev/sda1"];
3525         ["mke2fs_JU"; "ext2"; "4096"; "/dev/sda2"; uuid];
3526         ["mount"; "/dev/sda2"; "/"];
3527         ["write_file"; "/new"; "new file contents"; "0"];
3528         ["cat"; "/new"]], "new file contents")]),
3529    "make ext2/3/4 external journal with UUID",
3530    "\
3531 This creates an ext2 external journal on C<device> with UUID C<uuid>.");
3532
3533   ("mke2fs_J", (RErr, [String "fstype"; Int "blocksize"; Device "device"; Device "journal"]), 191, [],
3534    [],
3535    "make ext2/3/4 filesystem with external journal",
3536    "\
3537 This creates an ext2/3/4 filesystem on C<device> with
3538 an external journal on C<journal>.  It is equivalent
3539 to the command:
3540
3541  mke2fs -t fstype -b blocksize -J device=<journal> <device>
3542
3543 See also C<guestfs_mke2journal>.");
3544
3545   ("mke2fs_JL", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "label"]), 192, [],
3546    [],
3547    "make ext2/3/4 filesystem with external journal",
3548    "\
3549 This creates an ext2/3/4 filesystem on C<device> with
3550 an external journal on the journal labeled C<label>.
3551
3552 See also C<guestfs_mke2journal_L>.");
3553
3554   ("mke2fs_JU", (RErr, [String "fstype"; Int "blocksize"; Device "device"; String "uuid"]), 193, [],
3555    [],
3556    "make ext2/3/4 filesystem with external journal",
3557    "\
3558 This creates an ext2/3/4 filesystem on C<device> with
3559 an external journal on the journal with UUID C<uuid>.
3560
3561 See also C<guestfs_mke2journal_U>.");
3562
3563 ]
3564
3565 let all_functions = non_daemon_functions @ daemon_functions
3566
3567 (* In some places we want the functions to be displayed sorted
3568  * alphabetically, so this is useful:
3569  *)
3570 let all_functions_sorted =
3571   List.sort (fun (n1,_,_,_,_,_,_) (n2,_,_,_,_,_,_) ->
3572                compare n1 n2) all_functions
3573
3574 (* Field types for structures. *)
3575 type field =
3576   | FChar                       (* C 'char' (really, a 7 bit byte). *)
3577   | FString                     (* nul-terminated ASCII string, NOT NULL. *)
3578   | FBuffer                     (* opaque buffer of bytes, (char *, int) pair *)
3579   | FUInt32
3580   | FInt32
3581   | FUInt64
3582   | FInt64
3583   | FBytes                      (* Any int measure that counts bytes. *)
3584   | FUUID                       (* 32 bytes long, NOT nul-terminated. *)
3585   | FOptPercent                 (* [0..100], or -1 meaning "not present". *)
3586
3587 (* Because we generate extra parsing code for LVM command line tools,
3588  * we have to pull out the LVM columns separately here.
3589  *)
3590 let lvm_pv_cols = [
3591   "pv_name", FString;
3592   "pv_uuid", FUUID;
3593   "pv_fmt", FString;
3594   "pv_size", FBytes;
3595   "dev_size", FBytes;
3596   "pv_free", FBytes;
3597   "pv_used", FBytes;
3598   "pv_attr", FString (* XXX *);
3599   "pv_pe_count", FInt64;
3600   "pv_pe_alloc_count", FInt64;
3601   "pv_tags", FString;
3602   "pe_start", FBytes;
3603   "pv_mda_count", FInt64;
3604   "pv_mda_free", FBytes;
3605   (* Not in Fedora 10:
3606      "pv_mda_size", FBytes;
3607   *)
3608 ]
3609 let lvm_vg_cols = [
3610   "vg_name", FString;
3611   "vg_uuid", FUUID;
3612   "vg_fmt", FString;
3613   "vg_attr", FString (* XXX *);
3614   "vg_size", FBytes;
3615   "vg_free", FBytes;
3616   "vg_sysid", FString;
3617   "vg_extent_size", FBytes;
3618   "vg_extent_count", FInt64;
3619   "vg_free_count", FInt64;
3620   "max_lv", FInt64;
3621   "max_pv", FInt64;
3622   "pv_count", FInt64;
3623   "lv_count", FInt64;
3624   "snap_count", FInt64;
3625   "vg_seqno", FInt64;
3626   "vg_tags", FString;
3627   "vg_mda_count", FInt64;
3628   "vg_mda_free", FBytes;
3629   (* Not in Fedora 10:
3630      "vg_mda_size", FBytes;
3631   *)
3632 ]
3633 let lvm_lv_cols = [
3634   "lv_name", FString;
3635   "lv_uuid", FUUID;
3636   "lv_attr", FString (* XXX *);
3637   "lv_major", FInt64;
3638   "lv_minor", FInt64;
3639   "lv_kernel_major", FInt64;
3640   "lv_kernel_minor", FInt64;
3641   "lv_size", FBytes;
3642   "seg_count", FInt64;
3643   "origin", FString;
3644   "snap_percent", FOptPercent;
3645   "copy_percent", FOptPercent;
3646   "move_pv", FString;
3647   "lv_tags", FString;
3648   "mirror_log", FString;
3649   "modules", FString;
3650 ]
3651
3652 (* Names and fields in all structures (in RStruct and RStructList)
3653  * that we support.
3654  *)
3655 let structs = [
3656   (* The old RIntBool return type, only ever used for aug_defnode.  Do
3657    * not use this struct in any new code.
3658    *)
3659   "int_bool", [
3660     "i", FInt32;                (* for historical compatibility *)
3661     "b", FInt32;                (* for historical compatibility *)
3662   ];
3663
3664   (* LVM PVs, VGs, LVs. *)
3665   "lvm_pv", lvm_pv_cols;
3666   "lvm_vg", lvm_vg_cols;
3667   "lvm_lv", lvm_lv_cols;
3668
3669   (* Column names and types from stat structures.
3670    * NB. Can't use things like 'st_atime' because glibc header files
3671    * define some of these as macros.  Ugh.
3672    *)
3673   "stat", [
3674     "dev", FInt64;
3675     "ino", FInt64;
3676     "mode", FInt64;
3677     "nlink", FInt64;
3678     "uid", FInt64;
3679     "gid", FInt64;
3680     "rdev", FInt64;
3681     "size", FInt64;
3682     "blksize", FInt64;
3683     "blocks", FInt64;
3684     "atime", FInt64;
3685     "mtime", FInt64;
3686     "ctime", FInt64;
3687   ];
3688   "statvfs", [
3689     "bsize", FInt64;
3690     "frsize", FInt64;
3691     "blocks", FInt64;
3692     "bfree", FInt64;
3693     "bavail", FInt64;
3694     "files", FInt64;
3695     "ffree", FInt64;
3696     "favail", FInt64;
3697     "fsid", FInt64;
3698     "flag", FInt64;
3699     "namemax", FInt64;
3700   ];
3701
3702   (* Column names in dirent structure. *)
3703   "dirent", [
3704     "ino", FInt64;
3705     (* 'b' 'c' 'd' 'f' (FIFO) 'l' 'r' (regular file) 's' 'u' '?' *)
3706     "ftyp", FChar;
3707     "name", FString;
3708   ];
3709
3710   (* Version numbers. *)
3711   "version", [
3712     "major", FInt64;
3713     "minor", FInt64;
3714     "release", FInt64;
3715     "extra", FString;
3716   ];
3717
3718   (* Extended attribute. *)
3719   "xattr", [
3720     "attrname", FString;
3721     "attrval", FBuffer;
3722   ];
3723
3724   (* Inotify events. *)
3725   "inotify_event", [
3726     "in_wd", FInt64;
3727     "in_mask", FUInt32;
3728     "in_cookie", FUInt32;
3729     "in_name", FString;
3730   ];
3731 ] (* end of structs *)
3732
3733 (* Ugh, Java has to be different ..
3734  * These names are also used by the Haskell bindings.
3735  *)
3736 let java_structs = [
3737   "int_bool", "IntBool";
3738   "lvm_pv", "PV";
3739   "lvm_vg", "VG";
3740   "lvm_lv", "LV";
3741   "stat", "Stat";
3742   "statvfs", "StatVFS";
3743   "dirent", "Dirent";
3744   "version", "Version";
3745   "xattr", "XAttr";
3746   "inotify_event", "INotifyEvent";
3747 ]
3748
3749 (* What structs are actually returned. *)
3750 type rstructs_used_t = RStructOnly | RStructListOnly | RStructAndList
3751
3752 (* Returns a list of RStruct/RStructList structs that are returned
3753  * by any function.  Each element of returned list is a pair:
3754  *
3755  * (structname, RStructOnly)
3756  *    == there exists function which returns RStruct (_, structname)
3757  * (structname, RStructListOnly)
3758  *    == there exists function which returns RStructList (_, structname)
3759  * (structname, RStructAndList)
3760  *    == there are functions returning both RStruct (_, structname)
3761  *                                      and RStructList (_, structname)
3762  *)
3763 let rstructs_used =
3764   (* ||| is a "logical OR" for rstructs_used_t *)
3765   let (|||) a b =
3766     match a, b with
3767     | RStructAndList, _
3768     | _, RStructAndList -> RStructAndList
3769     | RStructOnly, RStructListOnly
3770     | RStructListOnly, RStructOnly -> RStructAndList
3771     | RStructOnly, RStructOnly -> RStructOnly
3772     | RStructListOnly, RStructListOnly -> RStructListOnly
3773   in
3774
3775   let h = Hashtbl.create 13 in
3776
3777   (* if elem->oldv exists, update entry using ||| operator,
3778    * else just add elem->newv to the hash
3779    *)
3780   let update elem newv =
3781     try  let oldv = Hashtbl.find h elem in
3782          Hashtbl.replace h elem (newv ||| oldv)
3783     with Not_found -> Hashtbl.add h elem newv
3784   in
3785
3786   List.iter (
3787     fun (_, style, _, _, _, _, _) ->
3788       match fst style with
3789       | RStruct (_, structname) -> update structname RStructOnly
3790       | RStructList (_, structname) -> update structname RStructListOnly
3791       | _ -> ()
3792   ) all_functions;
3793
3794   (* return key->values as a list of (key,value) *)
3795   Hashtbl.fold (fun key value xs -> (key, value) :: xs) h []
3796
3797 (* debug:
3798 let () =
3799   List.iter (
3800     function
3801     | sn, RStructOnly -> printf "%s RStructOnly\n" sn
3802     | sn, RStructListOnly -> printf "%s RStructListOnly\n" sn
3803     | sn, RStructAndList -> printf "%s RStructAndList\n" sn
3804   ) rstructs_used
3805 *)
3806
3807 (* Used for testing language bindings. *)
3808 type callt =
3809   | CallString of string
3810   | CallOptString of string option
3811   | CallStringList of string list
3812   | CallInt of int
3813   | CallBool of bool
3814
3815 (* Used to memoize the result of pod2text. *)
3816 let pod2text_memo_filename = "src/.pod2text.data"
3817 let pod2text_memo : ((int * string * string), string list) Hashtbl.t =
3818   try
3819     let chan = open_in pod2text_memo_filename in
3820     let v = input_value chan in
3821     close_in chan;
3822     v
3823   with
3824     _ -> Hashtbl.create 13
3825
3826 (* Useful functions.
3827  * Note we don't want to use any external OCaml libraries which
3828  * makes this a bit harder than it should be.
3829  *)
3830 let failwithf fs = ksprintf failwith fs
3831
3832 let replace_char s c1 c2 =
3833   let s2 = String.copy s in
3834   let r = ref false in
3835   for i = 0 to String.length s2 - 1 do
3836     if String.unsafe_get s2 i = c1 then (
3837       String.unsafe_set s2 i c2;
3838       r := true
3839     )
3840   done;
3841   if not !r then s else s2
3842
3843 let isspace c =
3844   c = ' '
3845   (* || c = '\f' *) || c = '\n' || c = '\r' || c = '\t' (* || c = '\v' *)
3846
3847 let triml ?(test = isspace) str =
3848   let i = ref 0 in
3849   let n = ref (String.length str) in
3850   while !n > 0 && test str.[!i]; do
3851     decr n;
3852     incr i
3853   done;
3854   if !i = 0 then str
3855   else String.sub str !i !n
3856
3857 let trimr ?(test = isspace) str =
3858   let n = ref (String.length str) in
3859   while !n > 0 && test str.[!n-1]; do
3860     decr n
3861   done;
3862   if !n = String.length str then str
3863   else String.sub str 0 !n
3864
3865 let trim ?(test = isspace) str =
3866   trimr ~test (triml ~test str)
3867
3868 let rec find s sub =
3869   let len = String.length s in
3870   let sublen = String.length sub in
3871   let rec loop i =
3872     if i <= len-sublen then (
3873       let rec loop2 j =
3874         if j < sublen then (
3875           if s.[i+j] = sub.[j] then loop2 (j+1)
3876           else -1
3877         ) else
3878           i (* found *)
3879       in
3880       let r = loop2 0 in
3881       if r = -1 then loop (i+1) else r
3882     ) else
3883       -1 (* not found *)
3884   in
3885   loop 0
3886
3887 let rec replace_str s s1 s2 =
3888   let len = String.length s in
3889   let sublen = String.length s1 in
3890   let i = find s s1 in
3891   if i = -1 then s
3892   else (
3893     let s' = String.sub s 0 i in
3894     let s'' = String.sub s (i+sublen) (len-i-sublen) in
3895     s' ^ s2 ^ replace_str s'' s1 s2
3896   )
3897
3898 let rec string_split sep str =
3899   let len = String.length str in
3900   let seplen = String.length sep in
3901   let i = find str sep in
3902   if i = -1 then [str]
3903   else (
3904     let s' = String.sub str 0 i in
3905     let s'' = String.sub str (i+seplen) (len-i-seplen) in
3906     s' :: string_split sep s''
3907   )
3908
3909 let files_equal n1 n2 =
3910   let cmd = sprintf "cmp -s %s %s" (Filename.quote n1) (Filename.quote n2) in
3911   match Sys.command cmd with
3912   | 0 -> true
3913   | 1 -> false
3914   | i -> failwithf "%s: failed with error code %d" cmd i
3915
3916 let rec filter_map f = function
3917   | [] -> []
3918   | x :: xs ->
3919       match f x with
3920       | Some y -> y :: filter_map f xs
3921       | None -> filter_map f xs
3922
3923 let rec find_map f = function
3924   | [] -> raise Not_found
3925   | x :: xs ->
3926       match f x with
3927       | Some y -> y
3928       | None -> find_map f xs
3929
3930 let iteri f xs =
3931   let rec loop i = function
3932     | [] -> ()
3933     | x :: xs -> f i x; loop (i+1) xs
3934   in
3935   loop 0 xs
3936
3937 let mapi f xs =
3938   let rec loop i = function
3939     | [] -> []
3940     | x :: xs -> let r = f i x in r :: loop (i+1) xs
3941   in
3942   loop 0 xs
3943
3944 let name_of_argt = function
3945   | Pathname n | Device n | Dev_or_Path n | String n | OptString n
3946   | StringList n | DeviceList n | Bool n | Int n
3947   | FileIn n | FileOut n -> n
3948
3949 let java_name_of_struct typ =
3950   try List.assoc typ java_structs
3951   with Not_found ->
3952     failwithf
3953       "java_name_of_struct: no java_structs entry corresponding to %s" typ
3954
3955 let cols_of_struct typ =
3956   try List.assoc typ structs
3957   with Not_found ->
3958     failwithf "cols_of_struct: unknown struct %s" typ
3959
3960 let seq_of_test = function
3961   | TestRun s | TestOutput (s, _) | TestOutputList (s, _)
3962   | TestOutputListOfDevices (s, _)
3963   | TestOutputInt (s, _) | TestOutputIntOp (s, _, _)
3964   | TestOutputTrue s | TestOutputFalse s
3965   | TestOutputLength (s, _) | TestOutputBuffer (s, _)
3966   | TestOutputStruct (s, _)
3967   | TestLastFail s -> s
3968
3969 (* Handling for function flags. *)
3970 let protocol_limit_warning =
3971   "Because of the message protocol, there is a transfer limit
3972 of somewhere between 2MB and 4MB.  To transfer large files you should use
3973 FTP."
3974
3975 let danger_will_robinson =
3976   "B<This command is dangerous.  Without careful use you
3977 can easily destroy all your data>."
3978
3979 let deprecation_notice flags =
3980   try
3981     let alt =
3982       find_map (function DeprecatedBy str -> Some str | _ -> None) flags in
3983     let txt =
3984       sprintf "This function is deprecated.
3985 In new code, use the C<%s> call instead.
3986
3987 Deprecated functions will not be removed from the API, but the
3988 fact that they are deprecated indicates that there are problems
3989 with correct use of these functions." alt in
3990     Some txt
3991   with
3992     Not_found -> None
3993
3994 (* Check function names etc. for consistency. *)
3995 let check_functions () =
3996   let contains_uppercase str =
3997     let len = String.length str in
3998     let rec loop i =
3999       if i >= len then false
4000       else (
4001         let c = str.[i] in
4002         if c >= 'A' && c <= 'Z' then true
4003         else loop (i+1)
4004       )
4005     in
4006     loop 0
4007   in
4008
4009   (* Check function names. *)
4010   List.iter (
4011     fun (name, _, _, _, _, _, _) ->
4012       if String.length name >= 7 && String.sub name 0 7 = "guestfs" then
4013         failwithf "function name %s does not need 'guestfs' prefix" name;
4014       if name = "" then
4015         failwithf "function name is empty";
4016       if name.[0] < 'a' || name.[0] > 'z' then
4017         failwithf "function name %s must start with lowercase a-z" name;
4018       if String.contains name '-' then
4019         failwithf "function name %s should not contain '-', use '_' instead."
4020           name
4021   ) all_functions;
4022
4023   (* Check function parameter/return names. *)
4024   List.iter (
4025     fun (name, style, _, _, _, _, _) ->
4026       let check_arg_ret_name n =
4027         if contains_uppercase n then
4028           failwithf "%s param/ret %s should not contain uppercase chars"
4029             name n;
4030         if String.contains n '-' || String.contains n '_' then
4031           failwithf "%s param/ret %s should not contain '-' or '_'"
4032             name n;
4033         if n = "value" then
4034           failwithf "%s has a param/ret called 'value', which causes conflicts in the OCaml bindings, use something like 'val' or a more descriptive name" name;
4035         if n = "int" || n = "char" || n = "short" || n = "long" then
4036           failwithf "%s has a param/ret which conflicts with a C type (eg. 'int', 'char' etc.)" name;
4037         if n = "i" || n = "n" then
4038           failwithf "%s has a param/ret called 'i' or 'n', which will cause some conflicts in the generated code" name;
4039         if n = "argv" || n = "args" then
4040           failwithf "%s has a param/ret called 'argv' or 'args', which will cause some conflicts in the generated code" name
4041       in
4042
4043       (match fst style with
4044        | RErr -> ()
4045        | RInt n | RInt64 n | RBool n
4046        | RConstString n | RConstOptString n | RString n
4047        | RStringList n | RStruct (n, _) | RStructList (n, _)
4048        | RHashtable n | RBufferOut n ->
4049            check_arg_ret_name n
4050       );
4051       List.iter (fun arg -> check_arg_ret_name (name_of_argt arg)) (snd style)
4052   ) all_functions;
4053
4054   (* Check short descriptions. *)
4055   List.iter (
4056     fun (name, _, _, _, _, shortdesc, _) ->
4057       if shortdesc.[0] <> Char.lowercase shortdesc.[0] then
4058         failwithf "short description of %s should begin with lowercase." name;
4059       let c = shortdesc.[String.length shortdesc-1] in
4060       if c = '\n' || c = '.' then
4061         failwithf "short description of %s should not end with . or \\n." name
4062   ) all_functions;
4063
4064   (* Check long dscriptions. *)
4065   List.iter (
4066     fun (name, _, _, _, _, _, longdesc) ->
4067       if longdesc.[String.length longdesc-1] = '\n' then
4068         failwithf "long description of %s should not end with \\n." name
4069   ) all_functions;
4070
4071   (* Check proc_nrs. *)
4072   List.iter (
4073     fun (name, _, proc_nr, _, _, _, _) ->
4074       if proc_nr <= 0 then
4075         failwithf "daemon function %s should have proc_nr > 0" name
4076   ) daemon_functions;
4077
4078   List.iter (
4079     fun (name, _, proc_nr, _, _, _, _) ->
4080       if proc_nr <> -1 then
4081         failwithf "non-daemon function %s should have proc_nr -1" name
4082   ) non_daemon_functions;
4083
4084   let proc_nrs =
4085     List.map (fun (name, _, proc_nr, _, _, _, _) -> name, proc_nr)
4086       daemon_functions in
4087   let proc_nrs =
4088     List.sort (fun (_,nr1) (_,nr2) -> compare nr1 nr2) proc_nrs in
4089   let rec loop = function
4090     | [] -> ()
4091     | [_] -> ()
4092     | (name1,nr1) :: ((name2,nr2) :: _ as rest) when nr1 < nr2 ->
4093         loop rest
4094     | (name1,nr1) :: (name2,nr2) :: _ ->
4095         failwithf "%s and %s have conflicting procedure numbers (%d, %d)"
4096           name1 name2 nr1 nr2
4097   in
4098   loop proc_nrs;
4099
4100   (* Check tests. *)
4101   List.iter (
4102     function
4103       (* Ignore functions that have no tests.  We generate a
4104        * warning when the user does 'make check' instead.
4105        *)
4106     | name, _, _, _, [], _, _ -> ()
4107     | name, _, _, _, tests, _, _ ->
4108         let funcs =
4109           List.map (
4110             fun (_, _, test) ->
4111               match seq_of_test test with
4112               | [] ->
4113                   failwithf "%s has a test containing an empty sequence" name
4114               | cmds -> List.map List.hd cmds
4115           ) tests in
4116         let funcs = List.flatten funcs in
4117
4118         let tested = List.mem name funcs in
4119
4120         if not tested then
4121           failwithf "function %s has tests but does not test itself" name
4122   ) all_functions
4123
4124 (* 'pr' prints to the current output file. *)
4125 let chan = ref stdout
4126 let pr fs = ksprintf (output_string !chan) fs
4127
4128 (* Generate a header block in a number of standard styles. *)
4129 type comment_style = CStyle | HashStyle | OCamlStyle | HaskellStyle
4130 type license = GPLv2 | LGPLv2
4131
4132 let generate_header comment license =
4133   let c = match comment with
4134     | CStyle ->     pr "/* "; " *"
4135     | HashStyle ->  pr "# ";  "#"
4136     | OCamlStyle -> pr "(* "; " *"
4137     | HaskellStyle -> pr "{- "; "  " in
4138   pr "libguestfs generated file\n";
4139   pr "%s WARNING: THIS FILE IS GENERATED BY 'src/generator.ml'.\n" c;
4140   pr "%s ANY CHANGES YOU MAKE TO THIS FILE WILL BE LOST.\n" c;
4141   pr "%s\n" c;
4142   pr "%s Copyright (C) 2009 Red Hat Inc.\n" c;
4143   pr "%s\n" c;
4144   (match license with
4145    | GPLv2 ->
4146        pr "%s This program is free software; you can redistribute it and/or modify\n" c;
4147        pr "%s it under the terms of the GNU General Public License as published by\n" c;
4148        pr "%s the Free Software Foundation; either version 2 of the License, or\n" c;
4149        pr "%s (at your option) any later version.\n" c;
4150        pr "%s\n" c;
4151        pr "%s This program is distributed in the hope that it will be useful,\n" c;
4152        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4153        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the\n" c;
4154        pr "%s GNU General Public License for more details.\n" c;
4155        pr "%s\n" c;
4156        pr "%s You should have received a copy of the GNU General Public License along\n" c;
4157        pr "%s with this program; if not, write to the Free Software Foundation, Inc.,\n" c;
4158        pr "%s 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA.\n" c;
4159
4160    | LGPLv2 ->
4161        pr "%s This library is free software; you can redistribute it and/or\n" c;
4162        pr "%s modify it under the terms of the GNU Lesser General Public\n" c;
4163        pr "%s License as published by the Free Software Foundation; either\n" c;
4164        pr "%s version 2 of the License, or (at your option) any later version.\n" c;
4165        pr "%s\n" c;
4166        pr "%s This library is distributed in the hope that it will be useful,\n" c;
4167        pr "%s but WITHOUT ANY WARRANTY; without even the implied warranty of\n" c;
4168        pr "%s MERCHANTABILITY or FITNESS FOR A PARTICULAR PURPOSE.  See the GNU\n" c;
4169        pr "%s Lesser General Public License for more details.\n" c;
4170        pr "%s\n" c;
4171        pr "%s You should have received a copy of the GNU Lesser General Public\n" c;
4172        pr "%s License along with this library; if not, write to the Free Software\n" c;
4173        pr "%s Foundation, Inc., 51 Franklin Street, Fifth Floor, Boston, MA 02110-1301 USA\n" c;
4174   );
4175   (match comment with
4176    | CStyle -> pr " */\n"
4177    | HashStyle -> ()
4178    | OCamlStyle -> pr " *)\n"
4179    | HaskellStyle -> pr "-}\n"
4180   );
4181   pr "\n"
4182
4183 (* Start of main code generation functions below this line. *)
4184
4185 (* Generate the pod documentation for the C API. *)
4186 let rec generate_actions_pod () =
4187   List.iter (
4188     fun (shortname, style, _, flags, _, _, longdesc) ->
4189       if not (List.mem NotInDocs flags) then (
4190         let name = "guestfs_" ^ shortname in
4191         pr "=head2 %s\n\n" name;
4192         pr " ";
4193         generate_prototype ~extern:false ~handle:"handle" name style;
4194         pr "\n\n";
4195         pr "%s\n\n" longdesc;
4196         (match fst style with
4197          | RErr ->
4198              pr "This function returns 0 on success or -1 on error.\n\n"
4199          | RInt _ ->
4200              pr "On error this function returns -1.\n\n"
4201          | RInt64 _ ->
4202              pr "On error this function returns -1.\n\n"
4203          | RBool _ ->
4204              pr "This function returns a C truth value on success or -1 on error.\n\n"
4205          | RConstString _ ->
4206              pr "This function returns a string, or NULL on error.
4207 The string is owned by the guest handle and must I<not> be freed.\n\n"
4208          | RConstOptString _ ->
4209              pr "This function returns a string which may be NULL.
4210 There is way to return an error from this function.
4211 The string is owned by the guest handle and must I<not> be freed.\n\n"
4212          | RString _ ->
4213              pr "This function returns a string, or NULL on error.
4214 I<The caller must free the returned string after use>.\n\n"
4215          | RStringList _ ->
4216              pr "This function returns a NULL-terminated array of strings
4217 (like L<environ(3)>), or NULL if there was an error.
4218 I<The caller must free the strings and the array after use>.\n\n"
4219          | RStruct (_, typ) ->
4220              pr "This function returns a C<struct guestfs_%s *>,
4221 or NULL if there was an error.
4222 I<The caller must call C<guestfs_free_%s> after use>.\n\n" typ typ
4223          | RStructList (_, typ) ->
4224              pr "This function returns a C<struct guestfs_%s_list *>
4225 (see E<lt>guestfs-structs.hE<gt>),
4226 or NULL if there was an error.
4227 I<The caller must call C<guestfs_free_%s_list> after use>.\n\n" typ typ
4228          | RHashtable _ ->
4229              pr "This function returns a NULL-terminated array of
4230 strings, or NULL if there was an error.
4231 The array of strings will always have length C<2n+1>, where
4232 C<n> keys and values alternate, followed by the trailing NULL entry.
4233 I<The caller must free the strings and the array after use>.\n\n"
4234          | RBufferOut _ ->
4235              pr "This function returns a buffer, or NULL on error.
4236 The size of the returned buffer is written to C<*size_r>.
4237 I<The caller must free the returned buffer after use>.\n\n"
4238         );
4239         if List.mem ProtocolLimitWarning flags then
4240           pr "%s\n\n" protocol_limit_warning;
4241         if List.mem DangerWillRobinson flags then
4242           pr "%s\n\n" danger_will_robinson;
4243         match deprecation_notice flags with
4244         | None -> ()
4245         | Some txt -> pr "%s\n\n" txt
4246       )
4247   ) all_functions_sorted
4248
4249 and generate_structs_pod () =
4250   (* Structs documentation. *)
4251   List.iter (
4252     fun (typ, cols) ->
4253       pr "=head2 guestfs_%s\n" typ;
4254       pr "\n";
4255       pr " struct guestfs_%s {\n" typ;
4256       List.iter (
4257         function
4258         | name, FChar -> pr "   char %s;\n" name
4259         | name, FUInt32 -> pr "   uint32_t %s;\n" name
4260         | name, FInt32 -> pr "   int32_t %s;\n" name
4261         | name, (FUInt64|FBytes) -> pr "   uint64_t %s;\n" name
4262         | name, FInt64 -> pr "   int64_t %s;\n" name
4263         | name, FString -> pr "   char *%s;\n" name
4264         | name, FBuffer ->
4265             pr "   /* The next two fields describe a byte array. */\n";
4266             pr "   uint32_t %s_len;\n" name;
4267             pr "   char *%s;\n" name
4268         | name, FUUID ->
4269             pr "   /* The next field is NOT nul-terminated, be careful when printing it: */\n";
4270             pr "   char %s[32];\n" name
4271         | name, FOptPercent ->
4272             pr "   /* The next field is [0..100] or -1 meaning 'not present': */\n";
4273             pr "   float %s;\n" name
4274       ) cols;
4275       pr " };\n";
4276       pr " \n";
4277       pr " struct guestfs_%s_list {\n" typ;
4278       pr "   uint32_t len; /* Number of elements in list. */\n";
4279       pr "   struct guestfs_%s *val; /* Elements. */\n" typ;
4280       pr " };\n";
4281       pr " \n";
4282       pr " void guestfs_free_%s (struct guestfs_free_%s *);\n" typ typ;
4283       pr " void guestfs_free_%s_list (struct guestfs_free_%s_list *);\n"
4284         typ typ;
4285       pr "\n"
4286   ) structs
4287
4288 (* Generate the protocol (XDR) file, 'guestfs_protocol.x' and
4289  * indirectly 'guestfs_protocol.h' and 'guestfs_protocol.c'.
4290  *
4291  * We have to use an underscore instead of a dash because otherwise
4292  * rpcgen generates incorrect code.
4293  *
4294  * This header is NOT exported to clients, but see also generate_structs_h.
4295  *)
4296 and generate_xdr () =
4297   generate_header CStyle LGPLv2;
4298
4299   (* This has to be defined to get around a limitation in Sun's rpcgen. *)
4300   pr "typedef string str<>;\n";
4301   pr "\n";
4302
4303   (* Internal structures. *)
4304   List.iter (
4305     function
4306     | typ, cols ->
4307         pr "struct guestfs_int_%s {\n" typ;
4308         List.iter (function
4309                    | name, FChar -> pr "  char %s;\n" name
4310                    | name, FString -> pr "  string %s<>;\n" name
4311                    | name, FBuffer -> pr "  opaque %s<>;\n" name
4312                    | name, FUUID -> pr "  opaque %s[32];\n" name
4313                    | name, (FInt32|FUInt32) -> pr "  int %s;\n" name
4314                    | name, (FInt64|FUInt64|FBytes) -> pr "  hyper %s;\n" name
4315                    | name, FOptPercent -> pr "  float %s;\n" name
4316                   ) cols;
4317         pr "};\n";
4318         pr "\n";
4319         pr "typedef struct guestfs_int_%s guestfs_int_%s_list<>;\n" typ typ;
4320         pr "\n";
4321   ) structs;
4322
4323   List.iter (
4324     fun (shortname, style, _, _, _, _, _) ->
4325       let name = "guestfs_" ^ shortname in
4326
4327       (match snd style with
4328        | [] -> ()
4329        | args ->
4330            pr "struct %s_args {\n" name;
4331            List.iter (
4332              function
4333              | Pathname n | Device n | Dev_or_Path n | String n -> pr "  string %s<>;\n" n
4334              | OptString n -> pr "  str *%s;\n" n
4335              | StringList n | DeviceList n -> pr "  str %s<>;\n" n
4336              | Bool n -> pr "  bool %s;\n" n
4337              | Int n -> pr "  int %s;\n" n
4338              | FileIn _ | FileOut _ -> ()
4339            ) args;
4340            pr "};\n\n"
4341       );
4342       (match fst style with
4343        | RErr -> ()
4344        | RInt n ->
4345            pr "struct %s_ret {\n" name;
4346            pr "  int %s;\n" n;
4347            pr "};\n\n"
4348        | RInt64 n ->
4349            pr "struct %s_ret {\n" name;
4350            pr "  hyper %s;\n" n;
4351            pr "};\n\n"
4352        | RBool n ->
4353            pr "struct %s_ret {\n" name;
4354            pr "  bool %s;\n" n;
4355            pr "};\n\n"
4356        | RConstString _ | RConstOptString _ ->
4357            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4358        | RString n ->
4359            pr "struct %s_ret {\n" name;
4360            pr "  string %s<>;\n" n;
4361            pr "};\n\n"
4362        | RStringList n ->
4363            pr "struct %s_ret {\n" name;
4364            pr "  str %s<>;\n" n;
4365            pr "};\n\n"
4366        | RStruct (n, typ) ->
4367            pr "struct %s_ret {\n" name;
4368            pr "  guestfs_int_%s %s;\n" typ n;
4369            pr "};\n\n"
4370        | RStructList (n, typ) ->
4371            pr "struct %s_ret {\n" name;
4372            pr "  guestfs_int_%s_list %s;\n" typ n;
4373            pr "};\n\n"
4374        | RHashtable n ->
4375            pr "struct %s_ret {\n" name;
4376            pr "  str %s<>;\n" n;
4377            pr "};\n\n"
4378        | RBufferOut n ->
4379            pr "struct %s_ret {\n" name;
4380            pr "  opaque %s<>;\n" n;
4381            pr "};\n\n"
4382       );
4383   ) daemon_functions;
4384
4385   (* Table of procedure numbers. *)
4386   pr "enum guestfs_procedure {\n";
4387   List.iter (
4388     fun (shortname, _, proc_nr, _, _, _, _) ->
4389       pr "  GUESTFS_PROC_%s = %d,\n" (String.uppercase shortname) proc_nr
4390   ) daemon_functions;
4391   pr "  GUESTFS_PROC_NR_PROCS\n";
4392   pr "};\n";
4393   pr "\n";
4394
4395   (* Having to choose a maximum message size is annoying for several
4396    * reasons (it limits what we can do in the API), but it (a) makes
4397    * the protocol a lot simpler, and (b) provides a bound on the size
4398    * of the daemon which operates in limited memory space.  For large
4399    * file transfers you should use FTP.
4400    *)
4401   pr "const GUESTFS_MESSAGE_MAX = %d;\n" (4 * 1024 * 1024);
4402   pr "\n";
4403
4404   (* Message header, etc. *)
4405   pr "\
4406 /* The communication protocol is now documented in the guestfs(3)
4407  * manpage.
4408  */
4409
4410 const GUESTFS_PROGRAM = 0x2000F5F5;
4411 const GUESTFS_PROTOCOL_VERSION = 1;
4412
4413 /* These constants must be larger than any possible message length. */
4414 const GUESTFS_LAUNCH_FLAG = 0xf5f55ff5;
4415 const GUESTFS_CANCEL_FLAG = 0xffffeeee;
4416
4417 enum guestfs_message_direction {
4418   GUESTFS_DIRECTION_CALL = 0,        /* client -> daemon */
4419   GUESTFS_DIRECTION_REPLY = 1        /* daemon -> client */
4420 };
4421
4422 enum guestfs_message_status {
4423   GUESTFS_STATUS_OK = 0,
4424   GUESTFS_STATUS_ERROR = 1
4425 };
4426
4427 const GUESTFS_ERROR_LEN = 256;
4428
4429 struct guestfs_message_error {
4430   string error_message<GUESTFS_ERROR_LEN>;
4431 };
4432
4433 struct guestfs_message_header {
4434   unsigned prog;                     /* GUESTFS_PROGRAM */
4435   unsigned vers;                     /* GUESTFS_PROTOCOL_VERSION */
4436   guestfs_procedure proc;            /* GUESTFS_PROC_x */
4437   guestfs_message_direction direction;
4438   unsigned serial;                   /* message serial number */
4439   guestfs_message_status status;
4440 };
4441
4442 const GUESTFS_MAX_CHUNK_SIZE = 8192;
4443
4444 struct guestfs_chunk {
4445   int cancel;                        /* if non-zero, transfer is cancelled */
4446   /* data size is 0 bytes if the transfer has finished successfully */
4447   opaque data<GUESTFS_MAX_CHUNK_SIZE>;
4448 };
4449 "
4450
4451 (* Generate the guestfs-structs.h file. *)
4452 and generate_structs_h () =
4453   generate_header CStyle LGPLv2;
4454
4455   (* This is a public exported header file containing various
4456    * structures.  The structures are carefully written to have
4457    * exactly the same in-memory format as the XDR structures that
4458    * we use on the wire to the daemon.  The reason for creating
4459    * copies of these structures here is just so we don't have to
4460    * export the whole of guestfs_protocol.h (which includes much
4461    * unrelated and XDR-dependent stuff that we don't want to be
4462    * public, or required by clients).
4463    *
4464    * To reiterate, we will pass these structures to and from the
4465    * client with a simple assignment or memcpy, so the format
4466    * must be identical to what rpcgen / the RFC defines.
4467    *)
4468
4469   (* Public structures. *)
4470   List.iter (
4471     fun (typ, cols) ->
4472       pr "struct guestfs_%s {\n" typ;
4473       List.iter (
4474         function
4475         | name, FChar -> pr "  char %s;\n" name
4476         | name, FString -> pr "  char *%s;\n" name
4477         | name, FBuffer ->
4478             pr "  uint32_t %s_len;\n" name;
4479             pr "  char *%s;\n" name
4480         | name, FUUID -> pr "  char %s[32]; /* this is NOT nul-terminated, be careful when printing */\n" name
4481         | name, FUInt32 -> pr "  uint32_t %s;\n" name
4482         | name, FInt32 -> pr "  int32_t %s;\n" name
4483         | name, (FUInt64|FBytes) -> pr "  uint64_t %s;\n" name
4484         | name, FInt64 -> pr "  int64_t %s;\n" name
4485         | name, FOptPercent -> pr "  float %s; /* [0..100] or -1 */\n" name
4486       ) cols;
4487       pr "};\n";
4488       pr "\n";
4489       pr "struct guestfs_%s_list {\n" typ;
4490       pr "  uint32_t len;\n";
4491       pr "  struct guestfs_%s *val;\n" typ;
4492       pr "};\n";
4493       pr "\n";
4494       pr "extern void guestfs_free_%s (struct guestfs_%s *);\n" typ typ;
4495       pr "extern void guestfs_free_%s_list (struct guestfs_%s_list *);\n" typ typ;
4496       pr "\n"
4497   ) structs
4498
4499 (* Generate the guestfs-actions.h file. *)
4500 and generate_actions_h () =
4501   generate_header CStyle LGPLv2;
4502   List.iter (
4503     fun (shortname, style, _, _, _, _, _) ->
4504       let name = "guestfs_" ^ shortname in
4505       generate_prototype ~single_line:true ~newline:true ~handle:"handle"
4506         name style
4507   ) all_functions
4508
4509 (* Generate the client-side dispatch stubs. *)
4510 and generate_client_actions () =
4511   generate_header CStyle LGPLv2;
4512
4513   pr "\
4514 #include <stdio.h>
4515 #include <stdlib.h>
4516
4517 #include \"guestfs.h\"
4518 #include \"guestfs_protocol.h\"
4519
4520 #define error guestfs_error
4521 #define perrorf guestfs_perrorf
4522 #define safe_malloc guestfs_safe_malloc
4523 #define safe_realloc guestfs_safe_realloc
4524 #define safe_strdup guestfs_safe_strdup
4525 #define safe_memdup guestfs_safe_memdup
4526
4527 /* Check the return message from a call for validity. */
4528 static int
4529 check_reply_header (guestfs_h *g,
4530                     const struct guestfs_message_header *hdr,
4531                     int proc_nr, int serial)
4532 {
4533   if (hdr->prog != GUESTFS_PROGRAM) {
4534     error (g, \"wrong program (%%d/%%d)\", hdr->prog, GUESTFS_PROGRAM);
4535     return -1;
4536   }
4537   if (hdr->vers != GUESTFS_PROTOCOL_VERSION) {
4538     error (g, \"wrong protocol version (%%d/%%d)\",
4539            hdr->vers, GUESTFS_PROTOCOL_VERSION);
4540     return -1;
4541   }
4542   if (hdr->direction != GUESTFS_DIRECTION_REPLY) {
4543     error (g, \"unexpected message direction (%%d/%%d)\",
4544            hdr->direction, GUESTFS_DIRECTION_REPLY);
4545     return -1;
4546   }
4547   if (hdr->proc != proc_nr) {
4548     error (g, \"unexpected procedure number (%%d/%%d)\", hdr->proc, proc_nr);
4549     return -1;
4550   }
4551   if (hdr->serial != serial) {
4552     error (g, \"unexpected serial (%%d/%%d)\", hdr->serial, serial);
4553     return -1;
4554   }
4555
4556   return 0;
4557 }
4558
4559 /* Check we are in the right state to run a high-level action. */
4560 static int
4561 check_state (guestfs_h *g, const char *caller)
4562 {
4563   if (!guestfs_is_ready (g)) {
4564     if (guestfs_is_config (g))
4565       error (g, \"%%s: call launch before using this function\\n(in guestfish, don't forget to use the 'run' command)\",
4566         caller);
4567     else if (guestfs_is_launching (g))
4568       error (g, \"%%s: call wait_ready() before using this function\",
4569         caller);
4570     else
4571       error (g, \"%%s called from the wrong state, %%d != READY\",
4572         caller, guestfs_get_state (g));
4573     return -1;
4574   }
4575   return 0;
4576 }
4577
4578 ";
4579
4580   (* Client-side stubs for each function. *)
4581   List.iter (
4582     fun (shortname, style, _, _, _, _, _) ->
4583       let name = "guestfs_" ^ shortname in
4584
4585       (* Generate the context struct which stores the high-level
4586        * state between callback functions.
4587        *)
4588       pr "struct %s_ctx {\n" shortname;
4589       pr "  /* This flag is set by the callbacks, so we know we've done\n";
4590       pr "   * the callbacks as expected, and in the right sequence.\n";
4591       pr "   * 0 = not called, 1 = reply_cb called.\n";
4592       pr "   */\n";
4593       pr "  int cb_sequence;\n";
4594       pr "  struct guestfs_message_header hdr;\n";
4595       pr "  struct guestfs_message_error err;\n";
4596       (match fst style with
4597        | RErr -> ()
4598        | RConstString _ | RConstOptString _ ->
4599            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4600        | RInt _ | RInt64 _
4601        | RBool _ | RString _ | RStringList _
4602        | RStruct _ | RStructList _
4603        | RHashtable _ | RBufferOut _ ->
4604            pr "  struct %s_ret ret;\n" name
4605       );
4606       pr "};\n";
4607       pr "\n";
4608
4609       (* Generate the reply callback function. *)
4610       pr "static void %s_reply_cb (guestfs_h *g, void *data, XDR *xdr)\n" shortname;
4611       pr "{\n";
4612       pr "  guestfs_main_loop *ml = guestfs_get_main_loop (g);\n";
4613       pr "  struct %s_ctx *ctx = (struct %s_ctx *) data;\n" shortname shortname;
4614       pr "\n";
4615       pr "  /* This should definitely not happen. */\n";
4616       pr "  if (ctx->cb_sequence != 0) {\n";
4617       pr "    ctx->cb_sequence = 9999;\n";
4618       pr "    error (g, \"%%s: internal error: reply callback called twice\", \"%s\");\n" name;
4619       pr "    return;\n";
4620       pr "  }\n";
4621       pr "\n";
4622       pr "  ml->main_loop_quit (ml, g);\n";
4623       pr "\n";
4624       pr "  if (!xdr_guestfs_message_header (xdr, &ctx->hdr)) {\n";
4625       pr "    error (g, \"%%s: failed to parse reply header\", \"%s\");\n" name;
4626       pr "    return;\n";
4627       pr "  }\n";
4628       pr "  if (ctx->hdr.status == GUESTFS_STATUS_ERROR) {\n";
4629       pr "    if (!xdr_guestfs_message_error (xdr, &ctx->err)) {\n";
4630       pr "      error (g, \"%%s: failed to parse reply error\", \"%s\");\n"
4631         name;
4632       pr "      return;\n";
4633       pr "    }\n";
4634       pr "    goto done;\n";
4635       pr "  }\n";
4636
4637       (match fst style with
4638        | RErr -> ()
4639        | RConstString _ | RConstOptString _ ->
4640            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4641        | RInt _ | RInt64 _
4642        | RBool _ | RString _ | RStringList _
4643        | RStruct _ | RStructList _
4644        | RHashtable _ | RBufferOut _ ->
4645            pr "  if (!xdr_%s_ret (xdr, &ctx->ret)) {\n" name;
4646            pr "    error (g, \"%%s: failed to parse reply\", \"%s\");\n" name;
4647            pr "    return;\n";
4648            pr "  }\n";
4649       );
4650
4651       pr " done:\n";
4652       pr "  ctx->cb_sequence = 1;\n";
4653       pr "}\n\n";
4654
4655       (* Generate the action stub. *)
4656       generate_prototype ~extern:false ~semicolon:false ~newline:true
4657         ~handle:"g" name style;
4658
4659       let error_code =
4660         match fst style with
4661         | RErr | RInt _ | RInt64 _ | RBool _ -> "-1"
4662         | RConstString _ | RConstOptString _ ->
4663             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4664         | RString _ | RStringList _
4665         | RStruct _ | RStructList _
4666         | RHashtable _ | RBufferOut _ ->
4667             "NULL" in
4668
4669       pr "{\n";
4670
4671       (match snd style with
4672        | [] -> ()
4673        | _ -> pr "  struct %s_args args;\n" name
4674       );
4675
4676       pr "  struct %s_ctx ctx;\n" shortname;
4677       pr "  guestfs_main_loop *ml = guestfs_get_main_loop (g);\n";
4678       pr "  int serial;\n";
4679       pr "\n";
4680       pr "  if (check_state (g, \"%s\") == -1) return %s;\n" name error_code;
4681       pr "  guestfs_set_busy (g);\n";
4682       pr "\n";
4683       pr "  memset (&ctx, 0, sizeof ctx);\n";
4684       pr "\n";
4685
4686       (* Send the main header and arguments. *)
4687       (match snd style with
4688        | [] ->
4689            pr "  serial = guestfs__send_sync (g, GUESTFS_PROC_%s, NULL, NULL);\n"
4690              (String.uppercase shortname)
4691        | args ->
4692            List.iter (
4693              function
4694              | Pathname n | Device n | Dev_or_Path n | String n ->
4695                  pr "  args.%s = (char *) %s;\n" n n
4696              | OptString n ->
4697                  pr "  args.%s = %s ? (char **) &%s : NULL;\n" n n n
4698              | StringList n | DeviceList n ->
4699                  pr "  args.%s.%s_val = (char **) %s;\n" n n n;
4700                  pr "  for (args.%s.%s_len = 0; %s[args.%s.%s_len]; args.%s.%s_len++) ;\n" n n n n n n n;
4701              | Bool n ->
4702                  pr "  args.%s = %s;\n" n n
4703              | Int n ->
4704                  pr "  args.%s = %s;\n" n n
4705              | FileIn _ | FileOut _ -> ()
4706            ) args;
4707            pr "  serial = guestfs__send_sync (g, GUESTFS_PROC_%s,\n"
4708              (String.uppercase shortname);
4709            pr "        (xdrproc_t) xdr_%s_args, (char *) &args);\n"
4710              name;
4711       );
4712       pr "  if (serial == -1) {\n";
4713       pr "    guestfs_end_busy (g);\n";
4714       pr "    return %s;\n" error_code;
4715       pr "  }\n";
4716       pr "\n";
4717
4718       (* Send any additional files (FileIn) requested. *)
4719       let need_read_reply_label = ref false in
4720       List.iter (
4721         function
4722         | FileIn n ->
4723             pr "  {\n";
4724             pr "    int r;\n";
4725             pr "\n";
4726             pr "    r = guestfs__send_file_sync (g, %s);\n" n;
4727             pr "    if (r == -1) {\n";
4728             pr "      guestfs_end_busy (g);\n";
4729             pr "      return %s;\n" error_code;
4730             pr "    }\n";
4731             pr "    if (r == -2) /* daemon cancelled */\n";
4732             pr "      goto read_reply;\n";
4733             need_read_reply_label := true;
4734             pr "  }\n";
4735             pr "\n";
4736         | _ -> ()
4737       ) (snd style);
4738
4739       (* Wait for the reply from the remote end. *)
4740       if !need_read_reply_label then pr " read_reply:\n";
4741       pr "  guestfs__switch_to_receiving (g);\n";
4742       pr "  ctx.cb_sequence = 0;\n";
4743       pr "  guestfs_set_reply_callback (g, %s_reply_cb, &ctx);\n" shortname;
4744       pr "  (void) ml->main_loop_run (ml, g);\n";
4745       pr "  guestfs_set_reply_callback (g, NULL, NULL);\n";
4746       pr "  if (ctx.cb_sequence != 1) {\n";
4747       pr "    error (g, \"%%s reply failed, see earlier error messages\", \"%s\");\n" name;
4748       pr "    guestfs_end_busy (g);\n";
4749       pr "    return %s;\n" error_code;
4750       pr "  }\n";
4751       pr "\n";
4752
4753       pr "  if (check_reply_header (g, &ctx.hdr, GUESTFS_PROC_%s, serial) == -1) {\n"
4754         (String.uppercase shortname);
4755       pr "    guestfs_end_busy (g);\n";
4756       pr "    return %s;\n" error_code;
4757       pr "  }\n";
4758       pr "\n";
4759
4760       pr "  if (ctx.hdr.status == GUESTFS_STATUS_ERROR) {\n";
4761       pr "    error (g, \"%%s\", ctx.err.error_message);\n";
4762       pr "    free (ctx.err.error_message);\n";
4763       pr "    guestfs_end_busy (g);\n";
4764       pr "    return %s;\n" error_code;
4765       pr "  }\n";
4766       pr "\n";
4767
4768       (* Expecting to receive further files (FileOut)? *)
4769       List.iter (
4770         function
4771         | FileOut n ->
4772             pr "  if (guestfs__receive_file_sync (g, %s) == -1) {\n" n;
4773             pr "    guestfs_end_busy (g);\n";
4774             pr "    return %s;\n" error_code;
4775             pr "  }\n";
4776             pr "\n";
4777         | _ -> ()
4778       ) (snd style);
4779
4780       pr "  guestfs_end_busy (g);\n";
4781
4782       (match fst style with
4783        | RErr -> pr "  return 0;\n"
4784        | RInt n | RInt64 n | RBool n ->
4785            pr "  return ctx.ret.%s;\n" n
4786        | RConstString _ | RConstOptString _ ->
4787            failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4788        | RString n ->
4789            pr "  return ctx.ret.%s; /* caller will free */\n" n
4790        | RStringList n | RHashtable n ->
4791            pr "  /* caller will free this, but we need to add a NULL entry */\n";
4792            pr "  ctx.ret.%s.%s_val =\n" n n;
4793            pr "    safe_realloc (g, ctx.ret.%s.%s_val,\n" n n;
4794            pr "                  sizeof (char *) * (ctx.ret.%s.%s_len + 1));\n"
4795              n n;
4796            pr "  ctx.ret.%s.%s_val[ctx.ret.%s.%s_len] = NULL;\n" n n n n;
4797            pr "  return ctx.ret.%s.%s_val;\n" n n
4798        | RStruct (n, _) ->
4799            pr "  /* caller will free this */\n";
4800            pr "  return safe_memdup (g, &ctx.ret.%s, sizeof (ctx.ret.%s));\n" n n
4801        | RStructList (n, _) ->
4802            pr "  /* caller will free this */\n";
4803            pr "  return safe_memdup (g, &ctx.ret.%s, sizeof (ctx.ret.%s));\n" n n
4804        | RBufferOut n ->
4805            pr "  *size_r = ctx.ret.%s.%s_len;\n" n n;
4806            pr "  return ctx.ret.%s.%s_val; /* caller will free */\n" n n
4807       );
4808
4809       pr "}\n\n"
4810   ) daemon_functions;
4811
4812   (* Functions to free structures. *)
4813   pr "/* Structure-freeing functions.  These rely on the fact that the\n";
4814   pr " * structure format is identical to the XDR format.  See note in\n";
4815   pr " * generator.ml.\n";
4816   pr " */\n";
4817   pr "\n";
4818
4819   List.iter (
4820     fun (typ, _) ->
4821       pr "void\n";
4822       pr "guestfs_free_%s (struct guestfs_%s *x)\n" typ typ;
4823       pr "{\n";
4824       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s, (char *) x);\n" typ;
4825       pr "  free (x);\n";
4826       pr "}\n";
4827       pr "\n";
4828
4829       pr "void\n";
4830       pr "guestfs_free_%s_list (struct guestfs_%s_list *x)\n" typ typ;
4831       pr "{\n";
4832       pr "  xdr_free ((xdrproc_t) xdr_guestfs_int_%s_list, (char *) x);\n" typ;
4833       pr "  free (x);\n";
4834       pr "}\n";
4835       pr "\n";
4836
4837   ) structs;
4838
4839 (* Generate daemon/actions.h. *)
4840 and generate_daemon_actions_h () =
4841   generate_header CStyle GPLv2;
4842
4843   pr "#include \"../src/guestfs_protocol.h\"\n";
4844   pr "\n";
4845
4846   List.iter (
4847     fun (name, style, _, _, _, _, _) ->
4848       generate_prototype
4849         ~single_line:true ~newline:true ~in_daemon:true ~prefix:"do_"
4850         name style;
4851   ) daemon_functions
4852
4853 (* Generate the server-side stubs. *)
4854 and generate_daemon_actions () =
4855   generate_header CStyle GPLv2;
4856
4857   pr "#include <config.h>\n";
4858   pr "\n";
4859   pr "#include <stdio.h>\n";
4860   pr "#include <stdlib.h>\n";
4861   pr "#include <string.h>\n";
4862   pr "#include <inttypes.h>\n";
4863   pr "#include <ctype.h>\n";
4864   pr "#include <rpc/types.h>\n";
4865   pr "#include <rpc/xdr.h>\n";
4866   pr "\n";
4867   pr "#include \"daemon.h\"\n";
4868   pr "#include \"../src/guestfs_protocol.h\"\n";
4869   pr "#include \"actions.h\"\n";
4870   pr "\n";
4871
4872   List.iter (
4873     fun (name, style, _, _, _, _, _) ->
4874       (* Generate server-side stubs. *)
4875       pr "static void %s_stub (XDR *xdr_in)\n" name;
4876       pr "{\n";
4877       let error_code =
4878         match fst style with
4879         | RErr | RInt _ -> pr "  int r;\n"; "-1"
4880         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
4881         | RBool _ -> pr "  int r;\n"; "-1"
4882         | RConstString _ | RConstOptString _ ->
4883             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
4884         | RString _ -> pr "  char *r;\n"; "NULL"
4885         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
4886         | RStruct (_, typ) -> pr "  guestfs_int_%s *r;\n" typ; "NULL"
4887         | RStructList (_, typ) -> pr "  guestfs_int_%s_list *r;\n" typ; "NULL"
4888         | RBufferOut _ ->
4889             pr "  size_t size;\n";
4890             pr "  char *r;\n";
4891             "NULL" in
4892
4893       (match snd style with
4894        | [] -> ()
4895        | args ->
4896            pr "  struct guestfs_%s_args args;\n" name;
4897            List.iter (
4898              function
4899              | Device n | Dev_or_Path n
4900              | Pathname n
4901              | String n -> ()
4902              | OptString n -> pr "  char *%s;\n" n
4903              | StringList n | DeviceList n -> pr "  char **%s;\n" n
4904              | Bool n -> pr "  int %s;\n" n
4905              | Int n -> pr "  int %s;\n" n
4906              | FileIn _ | FileOut _ -> ()
4907            ) args
4908       );
4909       pr "\n";
4910
4911       (match snd style with
4912        | [] -> ()
4913        | args ->
4914            pr "  memset (&args, 0, sizeof args);\n";
4915            pr "\n";
4916            pr "  if (!xdr_guestfs_%s_args (xdr_in, &args)) {\n" name;
4917            pr "    reply_with_error (\"%%s: daemon failed to decode procedure arguments\", \"%s\");\n" name;
4918            pr "    return;\n";
4919            pr "  }\n";
4920            let pr_args n =
4921              pr "  char *%s = args.%s;\n" n n
4922            in
4923            let pr_list_handling_code n =
4924              pr "  %s = realloc (args.%s.%s_val,\n" n n n;
4925              pr "                sizeof (char *) * (args.%s.%s_len+1));\n" n n;
4926              pr "  if (%s == NULL) {\n" n;
4927              pr "    reply_with_perror (\"realloc\");\n";
4928              pr "    goto done;\n";
4929              pr "  }\n";
4930              pr "  %s[args.%s.%s_len] = NULL;\n" n n n;
4931              pr "  args.%s.%s_val = %s;\n" n n n;
4932            in
4933            List.iter (
4934              function
4935              | Pathname n ->
4936                  pr_args n;
4937                  pr "  ABS_PATH (%s, goto done);\n" n;
4938              | Device n ->
4939                  pr_args n;
4940                  pr "  RESOLVE_DEVICE (%s, goto done);\n" n;
4941              | Dev_or_Path n ->
4942                  pr_args n;
4943                  pr "  REQUIRE_ROOT_OR_RESOLVE_DEVICE (%s, goto done);\n" n;
4944              | String n -> pr_args n
4945              | OptString n -> pr "  %s = args.%s ? *args.%s : NULL;\n" n n n
4946              | StringList n ->
4947                  pr_list_handling_code n;
4948              | DeviceList n ->
4949                  pr_list_handling_code n;
4950                  pr "  /* Ensure that each is a device,\n";
4951                  pr "   * and perform device name translation. */\n";
4952                  pr "  { int pvi; for (pvi = 0; physvols[pvi] != NULL; ++pvi)\n";
4953                  pr "    RESOLVE_DEVICE (physvols[pvi], goto done);\n";
4954                  pr "  }\n";
4955              | Bool n -> pr "  %s = args.%s;\n" n n
4956              | Int n -> pr "  %s = args.%s;\n" n n
4957              | FileIn _ | FileOut _ -> ()
4958            ) args;
4959            pr "\n"
4960       );
4961
4962
4963       (* this is used at least for do_equal *)
4964       if List.exists (function Pathname _ -> true | _ -> false) (snd style) then (
4965         (* Emit NEED_ROOT just once, even when there are two or
4966            more Pathname args *)
4967         pr "  NEED_ROOT (goto done);\n";
4968       );
4969
4970       (* Don't want to call the impl with any FileIn or FileOut
4971        * parameters, since these go "outside" the RPC protocol.
4972        *)
4973       let args' =
4974         List.filter (function FileIn _ | FileOut _ -> false | _ -> true)
4975           (snd style) in
4976       pr "  r = do_%s " name;
4977       generate_c_call_args (fst style, args');
4978       pr ";\n";
4979
4980       pr "  if (r == %s)\n" error_code;
4981       pr "    /* do_%s has already called reply_with_error */\n" name;
4982       pr "    goto done;\n";
4983       pr "\n";
4984
4985       (* If there are any FileOut parameters, then the impl must
4986        * send its own reply.
4987        *)
4988       let no_reply =
4989         List.exists (function FileOut _ -> true | _ -> false) (snd style) in
4990       if no_reply then
4991         pr "  /* do_%s has already sent a reply */\n" name
4992       else (
4993         match fst style with
4994         | RErr -> pr "  reply (NULL, NULL);\n"
4995         | RInt n | RInt64 n | RBool n ->
4996             pr "  struct guestfs_%s_ret ret;\n" name;
4997             pr "  ret.%s = r;\n" n;
4998             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
4999               name
5000         | RConstString _ | RConstOptString _ ->
5001             failwithf "RConstString|RConstOptString cannot be used by daemon functions"
5002         | RString n ->
5003             pr "  struct guestfs_%s_ret ret;\n" name;
5004             pr "  ret.%s = r;\n" n;
5005             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5006               name;
5007             pr "  free (r);\n"
5008         | RStringList n | RHashtable n ->
5009             pr "  struct guestfs_%s_ret ret;\n" name;
5010             pr "  ret.%s.%s_len = count_strings (r);\n" n n;
5011             pr "  ret.%s.%s_val = r;\n" n n;
5012             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5013               name;
5014             pr "  free_strings (r);\n"
5015         | RStruct (n, _) ->
5016             pr "  struct guestfs_%s_ret ret;\n" name;
5017             pr "  ret.%s = *r;\n" n;
5018             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5019               name;
5020             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5021               name
5022         | RStructList (n, _) ->
5023             pr "  struct guestfs_%s_ret ret;\n" name;
5024             pr "  ret.%s = *r;\n" n;
5025             pr "  reply ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5026               name;
5027             pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_ret, (char *) &ret);\n"
5028               name
5029         | RBufferOut n ->
5030             pr "  struct guestfs_%s_ret ret;\n" name;
5031             pr "  ret.%s.%s_val = r;\n" n n;
5032             pr "  ret.%s.%s_len = size;\n" n n;
5033             pr "  reply ((xdrproc_t) &xdr_guestfs_%s_ret, (char *) &ret);\n"
5034               name;
5035             pr "  free (r);\n"
5036       );
5037
5038       (* Free the args. *)
5039       (match snd style with
5040        | [] ->
5041            pr "done: ;\n";
5042        | _ ->
5043            pr "done:\n";
5044            pr "  xdr_free ((xdrproc_t) xdr_guestfs_%s_args, (char *) &args);\n"
5045              name
5046       );
5047
5048       pr "}\n\n";
5049   ) daemon_functions;
5050
5051   (* Dispatch function. *)
5052   pr "void dispatch_incoming_message (XDR *xdr_in)\n";
5053   pr "{\n";
5054   pr "  switch (proc_nr) {\n";
5055
5056   List.iter (
5057     fun (name, style, _, _, _, _, _) ->
5058       pr "    case GUESTFS_PROC_%s:\n" (String.uppercase name);
5059       pr "      %s_stub (xdr_in);\n" name;
5060       pr "      break;\n"
5061   ) daemon_functions;
5062
5063   pr "    default:\n";
5064   pr "      reply_with_error (\"dispatch_incoming_message: unknown procedure number %%d, set LIBGUESTFS_PATH to point to the matching libguestfs appliance directory\", proc_nr);\n";
5065   pr "  }\n";
5066   pr "}\n";
5067   pr "\n";
5068
5069   (* LVM columns and tokenization functions. *)
5070   (* XXX This generates crap code.  We should rethink how we
5071    * do this parsing.
5072    *)
5073   List.iter (
5074     function
5075     | typ, cols ->
5076         pr "static const char *lvm_%s_cols = \"%s\";\n"
5077           typ (String.concat "," (List.map fst cols));
5078         pr "\n";
5079
5080         pr "static int lvm_tokenize_%s (char *str, guestfs_int_lvm_%s *r)\n" typ typ;
5081         pr "{\n";
5082         pr "  char *tok, *p, *next;\n";
5083         pr "  int i, j;\n";
5084         pr "\n";
5085         (*
5086           pr "  fprintf (stderr, \"%%s: <<%%s>>\\n\", __func__, str);\n";
5087           pr "\n";
5088         *)
5089         pr "  if (!str) {\n";
5090         pr "    fprintf (stderr, \"%%s: failed: passed a NULL string\\n\", __func__);\n";
5091         pr "    return -1;\n";
5092         pr "  }\n";
5093         pr "  if (!*str || isspace (*str)) {\n";
5094         pr "    fprintf (stderr, \"%%s: failed: passed a empty string or one beginning with whitespace\\n\", __func__);\n";
5095         pr "    return -1;\n";
5096         pr "  }\n";
5097         pr "  tok = str;\n";
5098         List.iter (
5099           fun (name, coltype) ->
5100             pr "  if (!tok) {\n";
5101             pr "    fprintf (stderr, \"%%s: failed: string finished early, around token %%s\\n\", __func__, \"%s\");\n" name;
5102             pr "    return -1;\n";
5103             pr "  }\n";
5104             pr "  p = strchrnul (tok, ',');\n";
5105             pr "  if (*p) next = p+1; else next = NULL;\n";
5106             pr "  *p = '\\0';\n";
5107             (match coltype with
5108              | FString ->
5109                  pr "  r->%s = strdup (tok);\n" name;
5110                  pr "  if (r->%s == NULL) {\n" name;
5111                  pr "    perror (\"strdup\");\n";
5112                  pr "    return -1;\n";
5113                  pr "  }\n"
5114              | FUUID ->
5115                  pr "  for (i = j = 0; i < 32; ++j) {\n";
5116                  pr "    if (tok[j] == '\\0') {\n";
5117                  pr "      fprintf (stderr, \"%%s: failed to parse UUID from '%%s'\\n\", __func__, tok);\n";
5118                  pr "      return -1;\n";
5119                  pr "    } else if (tok[j] != '-')\n";
5120                  pr "      r->%s[i++] = tok[j];\n" name;
5121                  pr "  }\n";
5122              | FBytes ->
5123                  pr "  if (sscanf (tok, \"%%\"SCNu64, &r->%s) != 1) {\n" name;
5124                  pr "    fprintf (stderr, \"%%s: failed to parse size '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5125                  pr "    return -1;\n";
5126                  pr "  }\n";
5127              | FInt64 ->
5128                  pr "  if (sscanf (tok, \"%%\"SCNi64, &r->%s) != 1) {\n" name;
5129                  pr "    fprintf (stderr, \"%%s: failed to parse int '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5130                  pr "    return -1;\n";
5131                  pr "  }\n";
5132              | FOptPercent ->
5133                  pr "  if (tok[0] == '\\0')\n";
5134                  pr "    r->%s = -1;\n" name;
5135                  pr "  else if (sscanf (tok, \"%%f\", &r->%s) != 1) {\n" name;
5136                  pr "    fprintf (stderr, \"%%s: failed to parse float '%%s' from token %%s\\n\", __func__, tok, \"%s\");\n" name;
5137                  pr "    return -1;\n";
5138                  pr "  }\n";
5139              | FBuffer | FInt32 | FUInt32 | FUInt64 | FChar ->
5140                  assert false (* can never be an LVM column *)
5141             );
5142             pr "  tok = next;\n";
5143         ) cols;
5144
5145         pr "  if (tok != NULL) {\n";
5146         pr "    fprintf (stderr, \"%%s: failed: extra tokens at end of string\\n\", __func__);\n";
5147         pr "    return -1;\n";
5148         pr "  }\n";
5149         pr "  return 0;\n";
5150         pr "}\n";
5151         pr "\n";
5152
5153         pr "guestfs_int_lvm_%s_list *\n" typ;
5154         pr "parse_command_line_%ss (void)\n" typ;
5155         pr "{\n";
5156         pr "  char *out, *err;\n";
5157         pr "  char *p, *pend;\n";
5158         pr "  int r, i;\n";
5159         pr "  guestfs_int_lvm_%s_list *ret;\n" typ;
5160         pr "  void *newp;\n";
5161         pr "\n";
5162         pr "  ret = malloc (sizeof *ret);\n";
5163         pr "  if (!ret) {\n";
5164         pr "    reply_with_perror (\"malloc\");\n";
5165         pr "    return NULL;\n";
5166         pr "  }\n";
5167         pr "\n";
5168         pr "  ret->guestfs_int_lvm_%s_list_len = 0;\n" typ;
5169         pr "  ret->guestfs_int_lvm_%s_list_val = NULL;\n" typ;
5170         pr "\n";
5171         pr "  r = command (&out, &err,\n";
5172         pr "           \"/sbin/lvm\", \"%ss\",\n" typ;
5173         pr "           \"-o\", lvm_%s_cols, \"--unbuffered\", \"--noheadings\",\n" typ;
5174         pr "           \"--nosuffix\", \"--separator\", \",\", \"--units\", \"b\", NULL);\n";
5175         pr "  if (r == -1) {\n";
5176         pr "    reply_with_error (\"%%s\", err);\n";
5177         pr "    free (out);\n";
5178         pr "    free (err);\n";
5179         pr "    free (ret);\n";
5180         pr "    return NULL;\n";
5181         pr "  }\n";
5182         pr "\n";
5183         pr "  free (err);\n";
5184         pr "\n";
5185         pr "  /* Tokenize each line of the output. */\n";
5186         pr "  p = out;\n";
5187         pr "  i = 0;\n";
5188         pr "  while (p) {\n";
5189         pr "    pend = strchr (p, '\\n');       /* Get the next line of output. */\n";
5190         pr "    if (pend) {\n";
5191         pr "      *pend = '\\0';\n";
5192         pr "      pend++;\n";
5193         pr "    }\n";
5194         pr "\n";
5195         pr "    while (*p && isspace (*p))      /* Skip any leading whitespace. */\n";
5196         pr "      p++;\n";
5197         pr "\n";
5198         pr "    if (!*p) {                      /* Empty line?  Skip it. */\n";
5199         pr "      p = pend;\n";
5200         pr "      continue;\n";
5201         pr "    }\n";
5202         pr "\n";
5203         pr "    /* Allocate some space to store this next entry. */\n";
5204         pr "    newp = realloc (ret->guestfs_int_lvm_%s_list_val,\n" typ;
5205         pr "                sizeof (guestfs_int_lvm_%s) * (i+1));\n" typ;
5206         pr "    if (newp == NULL) {\n";
5207         pr "      reply_with_perror (\"realloc\");\n";
5208         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5209         pr "      free (ret);\n";
5210         pr "      free (out);\n";
5211         pr "      return NULL;\n";
5212         pr "    }\n";
5213         pr "    ret->guestfs_int_lvm_%s_list_val = newp;\n" typ;
5214         pr "\n";
5215         pr "    /* Tokenize the next entry. */\n";
5216         pr "    r = lvm_tokenize_%s (p, &ret->guestfs_int_lvm_%s_list_val[i]);\n" typ typ;
5217         pr "    if (r == -1) {\n";
5218         pr "      reply_with_error (\"failed to parse output of '%ss' command\");\n" typ;
5219         pr "      free (ret->guestfs_int_lvm_%s_list_val);\n" typ;
5220         pr "      free (ret);\n";
5221         pr "      free (out);\n";
5222         pr "      return NULL;\n";
5223         pr "    }\n";
5224         pr "\n";
5225         pr "    ++i;\n";
5226         pr "    p = pend;\n";
5227         pr "  }\n";
5228         pr "\n";
5229         pr "  ret->guestfs_int_lvm_%s_list_len = i;\n" typ;
5230         pr "\n";
5231         pr "  free (out);\n";
5232         pr "  return ret;\n";
5233         pr "}\n"
5234
5235   ) ["pv", lvm_pv_cols; "vg", lvm_vg_cols; "lv", lvm_lv_cols]
5236
5237 (* Generate a list of function names, for debugging in the daemon.. *)
5238 and generate_daemon_names () =
5239   generate_header CStyle GPLv2;
5240
5241   pr "#include <config.h>\n";
5242   pr "\n";
5243   pr "#include \"daemon.h\"\n";
5244   pr "\n";
5245
5246   pr "/* This array is indexed by proc_nr.  See guestfs_protocol.x. */\n";
5247   pr "const char *function_names[] = {\n";
5248   List.iter (
5249     fun (name, _, proc_nr, _, _, _, _) -> pr "  [%d] = \"%s\",\n" proc_nr name
5250   ) daemon_functions;
5251   pr "};\n";
5252
5253 (* Generate the tests. *)
5254 and generate_tests () =
5255   generate_header CStyle GPLv2;
5256
5257   pr "\
5258 #include <stdio.h>
5259 #include <stdlib.h>
5260 #include <string.h>
5261 #include <unistd.h>
5262 #include <sys/types.h>
5263 #include <fcntl.h>
5264
5265 #include \"guestfs.h\"
5266
5267 static guestfs_h *g;
5268 static int suppress_error = 0;
5269
5270 static void print_error (guestfs_h *g, void *data, const char *msg)
5271 {
5272   if (!suppress_error)
5273     fprintf (stderr, \"%%s\\n\", msg);
5274 }
5275
5276 /* FIXME: nearly identical code appears in fish.c */
5277 static void print_strings (char *const *argv)
5278 {
5279   int argc;
5280
5281   for (argc = 0; argv[argc] != NULL; ++argc)
5282     printf (\"\\t%%s\\n\", argv[argc]);
5283 }
5284
5285 /*
5286 static void print_table (char const *const *argv)
5287 {
5288   int i;
5289
5290   for (i = 0; argv[i] != NULL; i += 2)
5291     printf (\"%%s: %%s\\n\", argv[i], argv[i+1]);
5292 }
5293 */
5294
5295 ";
5296
5297   (* Generate a list of commands which are not tested anywhere. *)
5298   pr "static void no_test_warnings (void)\n";
5299   pr "{\n";
5300
5301   let hash : (string, bool) Hashtbl.t = Hashtbl.create 13 in
5302   List.iter (
5303     fun (_, _, _, _, tests, _, _) ->
5304       let tests = filter_map (
5305         function
5306         | (_, (Always|If _|Unless _), test) -> Some test
5307         | (_, Disabled, _) -> None
5308       ) tests in
5309       let seq = List.concat (List.map seq_of_test tests) in
5310       let cmds_tested = List.map List.hd seq in
5311       List.iter (fun cmd -> Hashtbl.replace hash cmd true) cmds_tested
5312   ) all_functions;
5313
5314   List.iter (
5315     fun (name, _, _, _, _, _, _) ->
5316       if not (Hashtbl.mem hash name) then
5317         pr "  fprintf (stderr, \"warning: \\\"guestfs_%s\\\" has no tests\\n\");\n" name
5318   ) all_functions;
5319
5320   pr "}\n";
5321   pr "\n";
5322
5323   (* Generate the actual tests.  Note that we generate the tests
5324    * in reverse order, deliberately, so that (in general) the
5325    * newest tests run first.  This makes it quicker and easier to
5326    * debug them.
5327    *)
5328   let test_names =
5329     List.map (
5330       fun (name, _, _, _, tests, _, _) ->
5331         mapi (generate_one_test name) tests
5332     ) (List.rev all_functions) in
5333   let test_names = List.concat test_names in
5334   let nr_tests = List.length test_names in
5335
5336   pr "\
5337 int main (int argc, char *argv[])
5338 {
5339   char c = 0;
5340   int failed = 0;
5341   const char *filename;
5342   int fd;
5343   int nr_tests, test_num = 0;
5344
5345   setbuf (stdout, NULL);
5346
5347   no_test_warnings ();
5348
5349   g = guestfs_create ();
5350   if (g == NULL) {
5351     printf (\"guestfs_create FAILED\\n\");
5352     exit (1);
5353   }
5354
5355   guestfs_set_error_handler (g, print_error, NULL);
5356
5357   guestfs_set_path (g, \"../appliance\");
5358
5359   filename = \"test1.img\";
5360   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5361   if (fd == -1) {
5362     perror (filename);
5363     exit (1);
5364   }
5365   if (lseek (fd, %d, SEEK_SET) == -1) {
5366     perror (\"lseek\");
5367     close (fd);
5368     unlink (filename);
5369     exit (1);
5370   }
5371   if (write (fd, &c, 1) == -1) {
5372     perror (\"write\");
5373     close (fd);
5374     unlink (filename);
5375     exit (1);
5376   }
5377   if (close (fd) == -1) {
5378     perror (filename);
5379     unlink (filename);
5380     exit (1);
5381   }
5382   if (guestfs_add_drive (g, filename) == -1) {
5383     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5384     exit (1);
5385   }
5386
5387   filename = \"test2.img\";
5388   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5389   if (fd == -1) {
5390     perror (filename);
5391     exit (1);
5392   }
5393   if (lseek (fd, %d, SEEK_SET) == -1) {
5394     perror (\"lseek\");
5395     close (fd);
5396     unlink (filename);
5397     exit (1);
5398   }
5399   if (write (fd, &c, 1) == -1) {
5400     perror (\"write\");
5401     close (fd);
5402     unlink (filename);
5403     exit (1);
5404   }
5405   if (close (fd) == -1) {
5406     perror (filename);
5407     unlink (filename);
5408     exit (1);
5409   }
5410   if (guestfs_add_drive (g, filename) == -1) {
5411     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5412     exit (1);
5413   }
5414
5415   filename = \"test3.img\";
5416   fd = open (filename, O_WRONLY|O_CREAT|O_NOCTTY|O_NONBLOCK|O_TRUNC, 0666);
5417   if (fd == -1) {
5418     perror (filename);
5419     exit (1);
5420   }
5421   if (lseek (fd, %d, SEEK_SET) == -1) {
5422     perror (\"lseek\");
5423     close (fd);
5424     unlink (filename);
5425     exit (1);
5426   }
5427   if (write (fd, &c, 1) == -1) {
5428     perror (\"write\");
5429     close (fd);
5430     unlink (filename);
5431     exit (1);
5432   }
5433   if (close (fd) == -1) {
5434     perror (filename);
5435     unlink (filename);
5436     exit (1);
5437   }
5438   if (guestfs_add_drive (g, filename) == -1) {
5439     printf (\"guestfs_add_drive %%s FAILED\\n\", filename);
5440     exit (1);
5441   }
5442
5443   if (guestfs_add_drive_ro (g, \"../images/test.sqsh\") == -1) {
5444     printf (\"guestfs_add_drive_ro ../images/test.sqsh FAILED\\n\");
5445     exit (1);
5446   }
5447
5448   if (guestfs_launch (g) == -1) {
5449     printf (\"guestfs_launch FAILED\\n\");
5450     exit (1);
5451   }
5452
5453   /* Set a timeout in case qemu hangs during launch (RHBZ#505329). */
5454   alarm (600);
5455
5456   if (guestfs_wait_ready (g) == -1) {
5457     printf (\"guestfs_wait_ready FAILED\\n\");
5458     exit (1);
5459   }
5460
5461   /* Cancel previous alarm. */
5462   alarm (0);
5463
5464   nr_tests = %d;
5465
5466 " (500 * 1024 * 1024) (50 * 1024 * 1024) (10 * 1024 * 1024) nr_tests;
5467
5468   iteri (
5469     fun i test_name ->
5470       pr "  test_num++;\n";
5471       pr "  printf (\"%%3d/%%3d %s\\n\", test_num, nr_tests);\n" test_name;
5472       pr "  if (%s () == -1) {\n" test_name;
5473       pr "    printf (\"%s FAILED\\n\");\n" test_name;
5474       pr "    failed++;\n";
5475       pr "  }\n";
5476   ) test_names;
5477   pr "\n";
5478
5479   pr "  guestfs_close (g);\n";
5480   pr "  unlink (\"test1.img\");\n";
5481   pr "  unlink (\"test2.img\");\n";
5482   pr "  unlink (\"test3.img\");\n";
5483   pr "\n";
5484
5485   pr "  if (failed > 0) {\n";
5486   pr "    printf (\"***** %%d / %%d tests FAILED *****\\n\", failed, nr_tests);\n";
5487   pr "    exit (1);\n";
5488   pr "  }\n";
5489   pr "\n";
5490
5491   pr "  exit (0);\n";
5492   pr "}\n"
5493
5494 and generate_one_test name i (init, prereq, test) =
5495   let test_name = sprintf "test_%s_%d" name i in
5496
5497   pr "\
5498 static int %s_skip (void)
5499 {
5500   const char *str;
5501
5502   str = getenv (\"TEST_ONLY\");
5503   if (str)
5504     return strstr (str, \"%s\") == NULL;
5505   str = getenv (\"SKIP_%s\");
5506   if (str && strcmp (str, \"1\") == 0) return 1;
5507   str = getenv (\"SKIP_TEST_%s\");
5508   if (str && strcmp (str, \"1\") == 0) return 1;
5509   return 0;
5510 }
5511
5512 " test_name name (String.uppercase test_name) (String.uppercase name);
5513
5514   (match prereq with
5515    | Disabled | Always -> ()
5516    | If code | Unless code ->
5517        pr "static int %s_prereq (void)\n" test_name;
5518        pr "{\n";
5519        pr "  %s\n" code;
5520        pr "}\n";
5521        pr "\n";
5522   );
5523
5524   pr "\
5525 static int %s (void)
5526 {
5527   if (%s_skip ()) {
5528     printf (\"        %%s skipped (reason: environment variable set)\\n\", \"%s\");
5529     return 0;
5530   }
5531
5532 " test_name test_name test_name;
5533
5534   (match prereq with
5535    | Disabled ->
5536        pr "  printf (\"        %%s skipped (reason: test disabled in generator)\\n\", \"%s\");\n" test_name
5537    | If _ ->
5538        pr "  if (! %s_prereq ()) {\n" test_name;
5539        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
5540        pr "    return 0;\n";
5541        pr "  }\n";
5542        pr "\n";
5543        generate_one_test_body name i test_name init test;
5544    | Unless _ ->
5545        pr "  if (%s_prereq ()) {\n" test_name;
5546        pr "    printf (\"        %%s skipped (reason: test prerequisite)\\n\", \"%s\");\n" test_name;
5547        pr "    return 0;\n";
5548        pr "  }\n";
5549        pr "\n";
5550        generate_one_test_body name i test_name init test;
5551    | Always ->
5552        generate_one_test_body name i test_name init test
5553   );
5554
5555   pr "  return 0;\n";
5556   pr "}\n";
5557   pr "\n";
5558   test_name
5559
5560 and generate_one_test_body name i test_name init test =
5561   (match init with
5562    | InitNone (* XXX at some point, InitNone and InitEmpty became
5563                * folded together as the same thing.  Really we should
5564                * make InitNone do nothing at all, but the tests may
5565                * need to be checked to make sure this is OK.
5566                *)
5567    | InitEmpty ->
5568        pr "  /* InitNone|InitEmpty for %s */\n" test_name;
5569        List.iter (generate_test_command_call test_name)
5570          [["blockdev_setrw"; "/dev/sda"];
5571           ["umount_all"];
5572           ["lvm_remove_all"]]
5573    | InitPartition ->
5574        pr "  /* InitPartition for %s: create /dev/sda1 */\n" test_name;
5575        List.iter (generate_test_command_call test_name)
5576          [["blockdev_setrw"; "/dev/sda"];
5577           ["umount_all"];
5578           ["lvm_remove_all"];
5579           ["sfdiskM"; "/dev/sda"; ","]]
5580    | InitBasicFS ->
5581        pr "  /* InitBasicFS for %s: create ext2 on /dev/sda1 */\n" test_name;
5582        List.iter (generate_test_command_call test_name)
5583          [["blockdev_setrw"; "/dev/sda"];
5584           ["umount_all"];
5585           ["lvm_remove_all"];
5586           ["sfdiskM"; "/dev/sda"; ","];
5587           ["mkfs"; "ext2"; "/dev/sda1"];
5588           ["mount"; "/dev/sda1"; "/"]]
5589    | InitBasicFSonLVM ->
5590        pr "  /* InitBasicFSonLVM for %s: create ext2 on /dev/VG/LV */\n"
5591          test_name;
5592        List.iter (generate_test_command_call test_name)
5593          [["blockdev_setrw"; "/dev/sda"];
5594           ["umount_all"];
5595           ["lvm_remove_all"];
5596           ["sfdiskM"; "/dev/sda"; ","];
5597           ["pvcreate"; "/dev/sda1"];
5598           ["vgcreate"; "VG"; "/dev/sda1"];
5599           ["lvcreate"; "LV"; "VG"; "8"];
5600           ["mkfs"; "ext2"; "/dev/VG/LV"];
5601           ["mount"; "/dev/VG/LV"; "/"]]
5602    | InitSquashFS ->
5603        pr "  /* InitSquashFS for %s */\n" test_name;
5604        List.iter (generate_test_command_call test_name)
5605          [["blockdev_setrw"; "/dev/sda"];
5606           ["umount_all"];
5607           ["lvm_remove_all"];
5608           ["mount_vfs"; "ro"; "squashfs"; "/dev/sdd"; "/"]]
5609   );
5610
5611   let get_seq_last = function
5612     | [] ->
5613         failwithf "%s: you cannot use [] (empty list) when expecting a command"
5614           test_name
5615     | seq ->
5616         let seq = List.rev seq in
5617         List.rev (List.tl seq), List.hd seq
5618   in
5619
5620   match test with
5621   | TestRun seq ->
5622       pr "  /* TestRun for %s (%d) */\n" name i;
5623       List.iter (generate_test_command_call test_name) seq
5624   | TestOutput (seq, expected) ->
5625       pr "  /* TestOutput for %s (%d) */\n" name i;
5626       pr "  const char *expected = \"%s\";\n" (c_quote expected);
5627       let seq, last = get_seq_last seq in
5628       let test () =
5629         pr "    if (strcmp (r, expected) != 0) {\n";
5630         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
5631         pr "      return -1;\n";
5632         pr "    }\n"
5633       in
5634       List.iter (generate_test_command_call test_name) seq;
5635       generate_test_command_call ~test test_name last
5636   | TestOutputList (seq, expected) ->
5637       pr "  /* TestOutputList for %s (%d) */\n" name i;
5638       let seq, last = get_seq_last seq in
5639       let test () =
5640         iteri (
5641           fun i str ->
5642             pr "    if (!r[%d]) {\n" i;
5643             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
5644             pr "      print_strings (r);\n";
5645             pr "      return -1;\n";
5646             pr "    }\n";
5647             pr "    {\n";
5648             pr "      const char *expected = \"%s\";\n" (c_quote str);
5649             pr "      if (strcmp (r[%d], expected) != 0) {\n" i;
5650             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
5651             pr "        return -1;\n";
5652             pr "      }\n";
5653             pr "    }\n"
5654         ) expected;
5655         pr "    if (r[%d] != NULL) {\n" (List.length expected);
5656         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
5657           test_name;
5658         pr "      print_strings (r);\n";
5659         pr "      return -1;\n";
5660         pr "    }\n"
5661       in
5662       List.iter (generate_test_command_call test_name) seq;
5663       generate_test_command_call ~test test_name last
5664   | TestOutputListOfDevices (seq, expected) ->
5665       pr "  /* TestOutputListOfDevices for %s (%d) */\n" name i;
5666       let seq, last = get_seq_last seq in
5667       let test () =
5668         iteri (
5669           fun i str ->
5670             pr "    if (!r[%d]) {\n" i;
5671             pr "      fprintf (stderr, \"%s: short list returned from command\\n\");\n" test_name;
5672             pr "      print_strings (r);\n";
5673             pr "      return -1;\n";
5674             pr "    }\n";
5675             pr "    {\n";
5676             pr "      const char *expected = \"%s\";\n" (c_quote str);
5677             pr "      r[%d][5] = 's';\n" i;
5678             pr "      if (strcmp (r[%d], expected) != 0) {\n" i;
5679             pr "        fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r[%d]);\n" test_name i;
5680             pr "        return -1;\n";
5681             pr "      }\n";
5682             pr "    }\n"
5683         ) expected;
5684         pr "    if (r[%d] != NULL) {\n" (List.length expected);
5685         pr "      fprintf (stderr, \"%s: extra elements returned from command\\n\");\n"
5686           test_name;
5687         pr "      print_strings (r);\n";
5688         pr "      return -1;\n";
5689         pr "    }\n"
5690       in
5691       List.iter (generate_test_command_call test_name) seq;
5692       generate_test_command_call ~test test_name last
5693   | TestOutputInt (seq, expected) ->
5694       pr "  /* TestOutputInt for %s (%d) */\n" name i;
5695       let seq, last = get_seq_last seq in
5696       let test () =
5697         pr "    if (r != %d) {\n" expected;
5698         pr "      fprintf (stderr, \"%s: expected %d but got %%d\\n\","
5699           test_name expected;
5700         pr "               (int) r);\n";
5701         pr "      return -1;\n";
5702         pr "    }\n"
5703       in
5704       List.iter (generate_test_command_call test_name) seq;
5705       generate_test_command_call ~test test_name last
5706   | TestOutputIntOp (seq, op, expected) ->
5707       pr "  /* TestOutputIntOp for %s (%d) */\n" name i;
5708       let seq, last = get_seq_last seq in
5709       let test () =
5710         pr "    if (! (r %s %d)) {\n" op expected;
5711         pr "      fprintf (stderr, \"%s: expected %s %d but got %%d\\n\","
5712           test_name op expected;
5713         pr "               (int) r);\n";
5714         pr "      return -1;\n";
5715         pr "    }\n"
5716       in
5717       List.iter (generate_test_command_call test_name) seq;
5718       generate_test_command_call ~test test_name last
5719   | TestOutputTrue seq ->
5720       pr "  /* TestOutputTrue for %s (%d) */\n" name i;
5721       let seq, last = get_seq_last seq in
5722       let test () =
5723         pr "    if (!r) {\n";
5724         pr "      fprintf (stderr, \"%s: expected true, got false\\n\");\n"
5725           test_name;
5726         pr "      return -1;\n";
5727         pr "    }\n"
5728       in
5729       List.iter (generate_test_command_call test_name) seq;
5730       generate_test_command_call ~test test_name last
5731   | TestOutputFalse seq ->
5732       pr "  /* TestOutputFalse for %s (%d) */\n" name i;
5733       let seq, last = get_seq_last seq in
5734       let test () =
5735         pr "    if (r) {\n";
5736         pr "      fprintf (stderr, \"%s: expected false, got true\\n\");\n"
5737           test_name;
5738         pr "      return -1;\n";
5739         pr "    }\n"
5740       in
5741       List.iter (generate_test_command_call test_name) seq;
5742       generate_test_command_call ~test test_name last
5743   | TestOutputLength (seq, expected) ->
5744       pr "  /* TestOutputLength for %s (%d) */\n" name i;
5745       let seq, last = get_seq_last seq in
5746       let test () =
5747         pr "    int j;\n";
5748         pr "    for (j = 0; j < %d; ++j)\n" expected;
5749         pr "      if (r[j] == NULL) {\n";
5750         pr "        fprintf (stderr, \"%s: short list returned\\n\");\n"
5751           test_name;
5752         pr "        print_strings (r);\n";
5753         pr "        return -1;\n";
5754         pr "      }\n";
5755         pr "    if (r[j] != NULL) {\n";
5756         pr "      fprintf (stderr, \"%s: long list returned\\n\");\n"
5757           test_name;
5758         pr "      print_strings (r);\n";
5759         pr "      return -1;\n";
5760         pr "    }\n"
5761       in
5762       List.iter (generate_test_command_call test_name) seq;
5763       generate_test_command_call ~test test_name last
5764   | TestOutputBuffer (seq, expected) ->
5765       pr "  /* TestOutputBuffer for %s (%d) */\n" name i;
5766       pr "  const char *expected = \"%s\";\n" (c_quote expected);
5767       let seq, last = get_seq_last seq in
5768       let len = String.length expected in
5769       let test () =
5770         pr "    if (size != %d) {\n" len;
5771         pr "      fprintf (stderr, \"%s: returned size of buffer wrong, expected %d but got %%zu\\n\", size);\n" test_name len;
5772         pr "      return -1;\n";
5773         pr "    }\n";
5774         pr "    if (strncmp (r, expected, size) != 0) {\n";
5775         pr "      fprintf (stderr, \"%s: expected \\\"%%s\\\" but got \\\"%%s\\\"\\n\", expected, r);\n" test_name;
5776         pr "      return -1;\n";
5777         pr "    }\n"
5778       in
5779       List.iter (generate_test_command_call test_name) seq;
5780       generate_test_command_call ~test test_name last
5781   | TestOutputStruct (seq, checks) ->
5782       pr "  /* TestOutputStruct for %s (%d) */\n" name i;
5783       let seq, last = get_seq_last seq in
5784       let test () =
5785         List.iter (
5786           function
5787           | CompareWithInt (field, expected) ->
5788               pr "    if (r->%s != %d) {\n" field expected;
5789               pr "      fprintf (stderr, \"%s: %s was %%d, expected %d\\n\",\n"
5790                 test_name field expected;
5791               pr "               (int) r->%s);\n" field;
5792               pr "      return -1;\n";
5793               pr "    }\n"
5794           | CompareWithIntOp (field, op, expected) ->
5795               pr "    if (!(r->%s %s %d)) {\n" field op expected;
5796               pr "      fprintf (stderr, \"%s: %s was %%d, expected %s %d\\n\",\n"
5797                 test_name field op expected;
5798               pr "               (int) r->%s);\n" field;
5799               pr "      return -1;\n";
5800               pr "    }\n"
5801           | CompareWithString (field, expected) ->
5802               pr "    if (strcmp (r->%s, \"%s\") != 0) {\n" field expected;
5803               pr "      fprintf (stderr, \"%s: %s was \"%%s\", expected \"%s\"\\n\",\n"
5804                 test_name field expected;
5805               pr "               r->%s);\n" field;
5806               pr "      return -1;\n";
5807               pr "    }\n"
5808           | CompareFieldsIntEq (field1, field2) ->
5809               pr "    if (r->%s != r->%s) {\n" field1 field2;
5810               pr "      fprintf (stderr, \"%s: %s (%%d) <> %s (%%d)\\n\",\n"
5811                 test_name field1 field2;
5812               pr "               (int) r->%s, (int) r->%s);\n" field1 field2;
5813               pr "      return -1;\n";
5814               pr "    }\n"
5815           | CompareFieldsStrEq (field1, field2) ->
5816               pr "    if (strcmp (r->%s, r->%s) != 0) {\n" field1 field2;
5817               pr "      fprintf (stderr, \"%s: %s (\"%%s\") <> %s (\"%%s\")\\n\",\n"
5818                 test_name field1 field2;
5819               pr "               r->%s, r->%s);\n" field1 field2;
5820               pr "      return -1;\n";
5821               pr "    }\n"
5822         ) checks
5823       in
5824       List.iter (generate_test_command_call test_name) seq;
5825       generate_test_command_call ~test test_name last
5826   | TestLastFail seq ->
5827       pr "  /* TestLastFail for %s (%d) */\n" name i;
5828       let seq, last = get_seq_last seq in
5829       List.iter (generate_test_command_call test_name) seq;
5830       generate_test_command_call test_name ~expect_error:true last
5831
5832 (* Generate the code to run a command, leaving the result in 'r'.
5833  * If you expect to get an error then you should set expect_error:true.
5834  *)
5835 and generate_test_command_call ?(expect_error = false) ?test test_name cmd =
5836   match cmd with
5837   | [] -> assert false
5838   | name :: args ->
5839       (* Look up the command to find out what args/ret it has. *)
5840       let style =
5841         try
5842           let _, style, _, _, _, _, _ =
5843             List.find (fun (n, _, _, _, _, _, _) -> n = name) all_functions in
5844           style
5845         with Not_found ->
5846           failwithf "%s: in test, command %s was not found" test_name name in
5847
5848       if List.length (snd style) <> List.length args then
5849         failwithf "%s: in test, wrong number of args given to %s"
5850           test_name name;
5851
5852       pr "  {\n";
5853
5854       List.iter (
5855         function
5856         | OptString n, "NULL" -> ()
5857         | Pathname n, arg
5858         | Device n, arg
5859         | Dev_or_Path n, arg
5860         | String n, arg
5861         | OptString n, arg ->
5862             pr "    const char *%s = \"%s\";\n" n (c_quote arg);
5863         | Int _, _
5864         | Bool _, _
5865         | FileIn _, _ | FileOut _, _ -> ()
5866         | StringList n, arg | DeviceList n, arg ->
5867             let strs = string_split " " arg in
5868             iteri (
5869               fun i str ->
5870                 pr "    const char *%s_%d = \"%s\";\n" n i (c_quote str);
5871             ) strs;
5872             pr "    const char *const %s[] = {\n" n;
5873             iteri (
5874               fun i _ -> pr "      %s_%d,\n" n i
5875             ) strs;
5876             pr "      NULL\n";
5877             pr "    };\n";
5878       ) (List.combine (snd style) args);
5879
5880       let error_code =
5881         match fst style with
5882         | RErr | RInt _ | RBool _ -> pr "    int r;\n"; "-1"
5883         | RInt64 _ -> pr "    int64_t r;\n"; "-1"
5884         | RConstString _ | RConstOptString _ ->
5885             pr "    const char *r;\n"; "NULL"
5886         | RString _ -> pr "    char *r;\n"; "NULL"
5887         | RStringList _ | RHashtable _ ->
5888             pr "    char **r;\n";
5889             pr "    int i;\n";
5890             "NULL"
5891         | RStruct (_, typ) ->
5892             pr "    struct guestfs_%s *r;\n" typ; "NULL"
5893         | RStructList (_, typ) ->
5894             pr "    struct guestfs_%s_list *r;\n" typ; "NULL"
5895         | RBufferOut _ ->
5896             pr "    char *r;\n";
5897             pr "    size_t size;\n";
5898             "NULL" in
5899
5900       pr "    suppress_error = %d;\n" (if expect_error then 1 else 0);
5901       pr "    r = guestfs_%s (g" name;
5902
5903       (* Generate the parameters. *)
5904       List.iter (
5905         function
5906         | OptString _, "NULL" -> pr ", NULL"
5907         | Pathname n, _
5908         | Device n, _ | Dev_or_Path n, _
5909         | String n, _
5910         | OptString n, _ ->
5911             pr ", %s" n
5912         | FileIn _, arg | FileOut _, arg ->
5913             pr ", \"%s\"" (c_quote arg)
5914         | StringList n, _ | DeviceList n, _ ->
5915             pr ", (char **) %s" n
5916         | Int _, arg ->
5917             let i =
5918               try int_of_string arg
5919               with Failure "int_of_string" ->
5920                 failwithf "%s: expecting an int, but got '%s'" test_name arg in
5921             pr ", %d" i
5922         | Bool _, arg ->
5923             let b = bool_of_string arg in pr ", %d" (if b then 1 else 0)
5924       ) (List.combine (snd style) args);
5925
5926       (match fst style with
5927        | RBufferOut _ -> pr ", &size"
5928        | _ -> ()
5929       );
5930
5931       pr ");\n";
5932
5933       if not expect_error then
5934         pr "    if (r == %s)\n" error_code
5935       else
5936         pr "    if (r != %s)\n" error_code;
5937       pr "      return -1;\n";
5938
5939       (* Insert the test code. *)
5940       (match test with
5941        | None -> ()
5942        | Some f -> f ()
5943       );
5944
5945       (match fst style with
5946        | RErr | RInt _ | RInt64 _ | RBool _
5947        | RConstString _ | RConstOptString _ -> ()
5948        | RString _ | RBufferOut _ -> pr "    free (r);\n"
5949        | RStringList _ | RHashtable _ ->
5950            pr "    for (i = 0; r[i] != NULL; ++i)\n";
5951            pr "      free (r[i]);\n";
5952            pr "    free (r);\n"
5953        | RStruct (_, typ) ->
5954            pr "    guestfs_free_%s (r);\n" typ
5955        | RStructList (_, typ) ->
5956            pr "    guestfs_free_%s_list (r);\n" typ
5957       );
5958
5959       pr "  }\n"
5960
5961 and c_quote str =
5962   let str = replace_str str "\r" "\\r" in
5963   let str = replace_str str "\n" "\\n" in
5964   let str = replace_str str "\t" "\\t" in
5965   let str = replace_str str "\000" "\\0" in
5966   str
5967
5968 (* Generate a lot of different functions for guestfish. *)
5969 and generate_fish_cmds () =
5970   generate_header CStyle GPLv2;
5971
5972   let all_functions =
5973     List.filter (
5974       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
5975     ) all_functions in
5976   let all_functions_sorted =
5977     List.filter (
5978       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
5979     ) all_functions_sorted in
5980
5981   pr "#include <stdio.h>\n";
5982   pr "#include <stdlib.h>\n";
5983   pr "#include <string.h>\n";
5984   pr "#include <inttypes.h>\n";
5985   pr "#include <ctype.h>\n";
5986   pr "\n";
5987   pr "#include <guestfs.h>\n";
5988   pr "#include \"fish.h\"\n";
5989   pr "\n";
5990
5991   (* list_commands function, which implements guestfish -h *)
5992   pr "void list_commands (void)\n";
5993   pr "{\n";
5994   pr "  printf (\"    %%-16s     %%s\\n\", _(\"Command\"), _(\"Description\"));\n";
5995   pr "  list_builtin_commands ();\n";
5996   List.iter (
5997     fun (name, _, _, flags, _, shortdesc, _) ->
5998       let name = replace_char name '_' '-' in
5999       pr "  printf (\"%%-20s %%s\\n\", \"%s\", _(\"%s\"));\n"
6000         name shortdesc
6001   ) all_functions_sorted;
6002   pr "  printf (\"    %%s\\n\",";
6003   pr "          _(\"Use -h <cmd> / help <cmd> to show detailed help for a command.\"));\n";
6004   pr "}\n";
6005   pr "\n";
6006
6007   (* display_command function, which implements guestfish -h cmd *)
6008   pr "void display_command (const char *cmd)\n";
6009   pr "{\n";
6010   List.iter (
6011     fun (name, style, _, flags, _, shortdesc, longdesc) ->
6012       let name2 = replace_char name '_' '-' in
6013       let alias =
6014         try find_map (function FishAlias n -> Some n | _ -> None) flags
6015         with Not_found -> name in
6016       let longdesc = replace_str longdesc "C<guestfs_" "C<" in
6017       let synopsis =
6018         match snd style with
6019         | [] -> name2
6020         | args ->
6021             sprintf "%s <%s>"
6022               name2 (String.concat "> <" (List.map name_of_argt args)) in
6023
6024       let warnings =
6025         if List.mem ProtocolLimitWarning flags then
6026           ("\n\n" ^ protocol_limit_warning)
6027         else "" in
6028
6029       (* For DangerWillRobinson commands, we should probably have
6030        * guestfish prompt before allowing you to use them (especially
6031        * in interactive mode). XXX
6032        *)
6033       let warnings =
6034         warnings ^
6035           if List.mem DangerWillRobinson flags then
6036             ("\n\n" ^ danger_will_robinson)
6037           else "" in
6038
6039       let warnings =
6040         warnings ^
6041           match deprecation_notice flags with
6042           | None -> ""
6043           | Some txt -> "\n\n" ^ txt in
6044
6045       let describe_alias =
6046         if name <> alias then
6047           sprintf "\n\nYou can use '%s' as an alias for this command." alias
6048         else "" in
6049
6050       pr "  if (";
6051       pr "strcasecmp (cmd, \"%s\") == 0" name;
6052       if name <> name2 then
6053         pr " || strcasecmp (cmd, \"%s\") == 0" name2;
6054       if name <> alias then
6055         pr " || strcasecmp (cmd, \"%s\") == 0" alias;
6056       pr ")\n";
6057       pr "    pod2text (\"%s\", _(\"%s\"), %S);\n"
6058         name2 shortdesc
6059         (" " ^ synopsis ^ "\n\n" ^ longdesc ^ warnings ^ describe_alias);
6060       pr "  else\n"
6061   ) all_functions;
6062   pr "    display_builtin_command (cmd);\n";
6063   pr "}\n";
6064   pr "\n";
6065
6066   let emit_print_list_function typ =
6067     pr "static void print_%s_list (struct guestfs_%s_list *%ss)\n"
6068       typ typ typ;
6069     pr "{\n";
6070     pr "  int i;\n";
6071     pr "\n";
6072     pr "  for (i = 0; i < %ss->len; ++i) {\n" typ;
6073     pr "    printf (\"[%%d] = {\\n\", i);\n";
6074     pr "    print_%s_indent (&%ss->val[i], \"  \");\n" typ typ;
6075     pr "    printf (\"}\\n\");\n";
6076     pr "  }\n";
6077     pr "}\n";
6078     pr "\n";
6079   in
6080
6081   (* print_* functions *)
6082   List.iter (
6083     fun (typ, cols) ->
6084       let needs_i =
6085         List.exists (function (_, (FUUID|FBuffer)) -> true | _ -> false) cols in
6086
6087       pr "static void print_%s_indent (struct guestfs_%s *%s, const char *indent)\n" typ typ typ;
6088       pr "{\n";
6089       if needs_i then (
6090         pr "  int i;\n";
6091         pr "\n"
6092       );
6093       List.iter (
6094         function
6095         | name, FString ->
6096             pr "  printf (\"%%s%s: %%s\\n\", indent, %s->%s);\n" name typ name
6097         | name, FUUID ->
6098             pr "  printf (\"%s: \");\n" name;
6099             pr "  for (i = 0; i < 32; ++i)\n";
6100             pr "    printf (\"%%s%%c\", indent, %s->%s[i]);\n" typ name;
6101             pr "  printf (\"\\n\");\n"
6102         | name, FBuffer ->
6103             pr "  printf (\"%%s%s: \", indent);\n" name;
6104             pr "  for (i = 0; i < %s->%s_len; ++i)\n" typ name;
6105             pr "    if (isprint (%s->%s[i]))\n" typ name;
6106             pr "      printf (\"%%s%%c\", indent, %s->%s[i]);\n" typ name;
6107             pr "    else\n";
6108             pr "      printf (\"%%s\\\\x%%02x\", indent, %s->%s[i]);\n" typ name;
6109             pr "  printf (\"\\n\");\n"
6110         | name, (FUInt64|FBytes) ->
6111             pr "  printf (\"%%s%s: %%\" PRIu64 \"\\n\", indent, %s->%s);\n"
6112               name typ name
6113         | name, FInt64 ->
6114             pr "  printf (\"%%s%s: %%\" PRIi64 \"\\n\", indent, %s->%s);\n"
6115               name typ name
6116         | name, FUInt32 ->
6117             pr "  printf (\"%%s%s: %%\" PRIu32 \"\\n\", indent, %s->%s);\n"
6118               name typ name
6119         | name, FInt32 ->
6120             pr "  printf (\"%%s%s: %%\" PRIi32 \"\\n\", indent, %s->%s);\n"
6121               name typ name
6122         | name, FChar ->
6123             pr "  printf (\"%%s%s: %%c\\n\", indent, %s->%s);\n"
6124               name typ name
6125         | name, FOptPercent ->
6126             pr "  if (%s->%s >= 0) printf (\"%%s%s: %%g %%%%\\n\", indent, %s->%s);\n"
6127               typ name name typ name;
6128             pr "  else printf (\"%%s%s: \\n\", indent);\n" name
6129       ) cols;
6130       pr "}\n";
6131       pr "\n";
6132   ) structs;
6133
6134   (* Emit a print_TYPE_list function definition only if that function is used. *)
6135   List.iter (
6136     function
6137     | typ, (RStructListOnly | RStructAndList) ->
6138         (* generate the function for typ *)
6139         emit_print_list_function typ
6140     | typ, _ -> () (* empty *)
6141   ) rstructs_used;
6142
6143   (* Emit a print_TYPE function definition only if that function is used. *)
6144   List.iter (
6145     function
6146     | typ, RStructOnly ->
6147         pr "static void print_%s (struct guestfs_%s *%s)\n" typ typ typ;
6148         pr "{\n";
6149         pr "  print_%s_indent (%s, \"\");\n" typ typ;
6150         pr "}\n";
6151         pr "\n";
6152     | typ, _ -> () (* empty *)
6153   ) rstructs_used;
6154
6155   (* run_<action> actions *)
6156   List.iter (
6157     fun (name, style, _, flags, _, _, _) ->
6158       pr "static int run_%s (const char *cmd, int argc, char *argv[])\n" name;
6159       pr "{\n";
6160       (match fst style with
6161        | RErr
6162        | RInt _
6163        | RBool _ -> pr "  int r;\n"
6164        | RInt64 _ -> pr "  int64_t r;\n"
6165        | RConstString _ | RConstOptString _ -> pr "  const char *r;\n"
6166        | RString _ -> pr "  char *r;\n"
6167        | RStringList _ | RHashtable _ -> pr "  char **r;\n"
6168        | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ
6169        | RStructList (_, typ) -> pr "  struct guestfs_%s_list *r;\n" typ
6170        | RBufferOut _ ->
6171            pr "  char *r;\n";
6172            pr "  size_t size;\n";
6173       );
6174       List.iter (
6175         function
6176         | Pathname n
6177         | Device n | Dev_or_Path n
6178         | String n
6179         | OptString n
6180         | FileIn n
6181         | FileOut n -> pr "  const char *%s;\n" n
6182         | StringList n | DeviceList n -> pr "  char *const *%s;\n" n
6183         | Bool n -> pr "  int %s;\n" n
6184         | Int n -> pr "  int %s;\n" n
6185       ) (snd style);
6186
6187       (* Check and convert parameters. *)
6188       let argc_expected = List.length (snd style) in
6189       pr "  if (argc != %d) {\n" argc_expected;
6190       pr "    fprintf (stderr, _(\"%%s should have %%d parameter(s)\\n\"), cmd, %d);\n"
6191         argc_expected;
6192       pr "    fprintf (stderr, _(\"type 'help %%s' for help on %%s\\n\"), cmd, cmd);\n";
6193       pr "    return -1;\n";
6194       pr "  }\n";
6195       iteri (
6196         fun i ->
6197           function
6198           | Pathname name
6199           | Device name | Dev_or_Path name | String name -> pr "  %s = argv[%d];\n" name i
6200           | OptString name ->
6201               pr "  %s = strcmp (argv[%d], \"\") != 0 ? argv[%d] : NULL;\n"
6202                 name i i
6203           | FileIn name ->
6204               pr "  %s = strcmp (argv[%d], \"-\") != 0 ? argv[%d] : \"/dev/stdin\";\n"
6205                 name i i
6206           | FileOut name ->
6207               pr "  %s = strcmp (argv[%d], \"-\") != 0 ? argv[%d] : \"/dev/stdout\";\n"
6208                 name i i
6209           | StringList name | DeviceList name ->
6210               pr "  %s = parse_string_list (argv[%d]);\n" name i
6211           | Bool name ->
6212               pr "  %s = is_true (argv[%d]) ? 1 : 0;\n" name i
6213           | Int name ->
6214               pr "  %s = atoi (argv[%d]);\n" name i
6215       ) (snd style);
6216
6217       (* Call C API function. *)
6218       let fn =
6219         try find_map (function FishAction n -> Some n | _ -> None) flags
6220         with Not_found -> sprintf "guestfs_%s" name in
6221       pr "  r = %s " fn;
6222       generate_c_call_args ~handle:"g" style;
6223       pr ";\n";
6224
6225       (* Check return value for errors and display command results. *)
6226       (match fst style with
6227        | RErr -> pr "  return r;\n"
6228        | RInt _ ->
6229            pr "  if (r == -1) return -1;\n";
6230            pr "  printf (\"%%d\\n\", r);\n";
6231            pr "  return 0;\n"
6232        | RInt64 _ ->
6233            pr "  if (r == -1) return -1;\n";
6234            pr "  printf (\"%%\" PRIi64 \"\\n\", r);\n";
6235            pr "  return 0;\n"
6236        | RBool _ ->
6237            pr "  if (r == -1) return -1;\n";
6238            pr "  if (r) printf (\"true\\n\"); else printf (\"false\\n\");\n";
6239            pr "  return 0;\n"
6240        | RConstString _ ->
6241            pr "  if (r == NULL) return -1;\n";
6242            pr "  printf (\"%%s\\n\", r);\n";
6243            pr "  return 0;\n"
6244        | RConstOptString _ ->
6245            pr "  printf (\"%%s\\n\", r ? : \"(null)\");\n";
6246            pr "  return 0;\n"
6247        | RString _ ->
6248            pr "  if (r == NULL) return -1;\n";
6249            pr "  printf (\"%%s\\n\", r);\n";
6250            pr "  free (r);\n";
6251            pr "  return 0;\n"
6252        | RStringList _ ->
6253            pr "  if (r == NULL) return -1;\n";
6254            pr "  print_strings (r);\n";
6255            pr "  free_strings (r);\n";
6256            pr "  return 0;\n"
6257        | RStruct (_, typ) ->
6258            pr "  if (r == NULL) return -1;\n";
6259            pr "  print_%s (r);\n" typ;
6260            pr "  guestfs_free_%s (r);\n" typ;
6261            pr "  return 0;\n"
6262        | RStructList (_, typ) ->
6263            pr "  if (r == NULL) return -1;\n";
6264            pr "  print_%s_list (r);\n" typ;
6265            pr "  guestfs_free_%s_list (r);\n" typ;
6266            pr "  return 0;\n"
6267        | RHashtable _ ->
6268            pr "  if (r == NULL) return -1;\n";
6269            pr "  print_table (r);\n";
6270            pr "  free_strings (r);\n";
6271            pr "  return 0;\n"
6272        | RBufferOut _ ->
6273            pr "  if (r == NULL) return -1;\n";
6274            pr "  fwrite (r, size, 1, stdout);\n";
6275            pr "  free (r);\n";
6276            pr "  return 0;\n"
6277       );
6278       pr "}\n";
6279       pr "\n"
6280   ) all_functions;
6281
6282   (* run_action function *)
6283   pr "int run_action (const char *cmd, int argc, char *argv[])\n";
6284   pr "{\n";
6285   List.iter (
6286     fun (name, _, _, flags, _, _, _) ->
6287       let name2 = replace_char name '_' '-' in
6288       let alias =
6289         try find_map (function FishAlias n -> Some n | _ -> None) flags
6290         with Not_found -> name in
6291       pr "  if (";
6292       pr "strcasecmp (cmd, \"%s\") == 0" name;
6293       if name <> name2 then
6294         pr " || strcasecmp (cmd, \"%s\") == 0" name2;
6295       if name <> alias then
6296         pr " || strcasecmp (cmd, \"%s\") == 0" alias;
6297       pr ")\n";
6298       pr "    return run_%s (cmd, argc, argv);\n" name;
6299       pr "  else\n";
6300   ) all_functions;
6301   pr "    {\n";
6302   pr "      fprintf (stderr, _(\"%%s: unknown command\\n\"), cmd);\n";
6303   pr "      return -1;\n";
6304   pr "    }\n";
6305   pr "  return 0;\n";
6306   pr "}\n";
6307   pr "\n"
6308
6309 (* Readline completion for guestfish. *)
6310 and generate_fish_completion () =
6311   generate_header CStyle GPLv2;
6312
6313   let all_functions =
6314     List.filter (
6315       fun (_, _, _, flags, _, _, _) -> not (List.mem NotInFish flags)
6316     ) all_functions in
6317
6318   pr "\
6319 #include <config.h>
6320
6321 #include <stdio.h>
6322 #include <stdlib.h>
6323 #include <string.h>
6324
6325 #ifdef HAVE_LIBREADLINE
6326 #include <readline/readline.h>
6327 #endif
6328
6329 #include \"fish.h\"
6330
6331 #ifdef HAVE_LIBREADLINE
6332
6333 static const char *const commands[] = {
6334   BUILTIN_COMMANDS_FOR_COMPLETION,
6335 ";
6336
6337   (* Get the commands, including the aliases.  They don't need to be
6338    * sorted - the generator() function just does a dumb linear search.
6339    *)
6340   let commands =
6341     List.map (
6342       fun (name, _, _, flags, _, _, _) ->
6343         let name2 = replace_char name '_' '-' in
6344         let alias =
6345           try find_map (function FishAlias n -> Some n | _ -> None) flags
6346           with Not_found -> name in
6347
6348         if name <> alias then [name2; alias] else [name2]
6349     ) all_functions in
6350   let commands = List.flatten commands in
6351
6352   List.iter (pr "  \"%s\",\n") commands;
6353
6354   pr "  NULL
6355 };
6356
6357 static char *
6358 generator (const char *text, int state)
6359 {
6360   static int index, len;
6361   const char *name;
6362
6363   if (!state) {
6364     index = 0;
6365     len = strlen (text);
6366   }
6367
6368   rl_attempted_completion_over = 1;
6369
6370   while ((name = commands[index]) != NULL) {
6371     index++;
6372     if (strncasecmp (name, text, len) == 0)
6373       return strdup (name);
6374   }
6375
6376   return NULL;
6377 }
6378
6379 #endif /* HAVE_LIBREADLINE */
6380
6381 char **do_completion (const char *text, int start, int end)
6382 {
6383   char **matches = NULL;
6384
6385 #ifdef HAVE_LIBREADLINE
6386   rl_completion_append_character = ' ';
6387
6388   if (start == 0)
6389     matches = rl_completion_matches (text, generator);
6390   else if (complete_dest_paths)
6391     matches = rl_completion_matches (text, complete_dest_paths_generator);
6392 #endif
6393
6394   return matches;
6395 }
6396 ";
6397
6398 (* Generate the POD documentation for guestfish. *)
6399 and generate_fish_actions_pod () =
6400   let all_functions_sorted =
6401     List.filter (
6402       fun (_, _, _, flags, _, _, _) ->
6403         not (List.mem NotInFish flags || List.mem NotInDocs flags)
6404     ) all_functions_sorted in
6405
6406   let rex = Str.regexp "C<guestfs_\\([^>]+\\)>" in
6407
6408   List.iter (
6409     fun (name, style, _, flags, _, _, longdesc) ->
6410       let longdesc =
6411         Str.global_substitute rex (
6412           fun s ->
6413             let sub =
6414               try Str.matched_group 1 s
6415               with Not_found ->
6416                 failwithf "error substituting C<guestfs_...> in longdesc of function %s" name in
6417             "C<" ^ replace_char sub '_' '-' ^ ">"
6418         ) longdesc in
6419       let name = replace_char name '_' '-' in
6420       let alias =
6421         try find_map (function FishAlias n -> Some n | _ -> None) flags
6422         with Not_found -> name in
6423
6424       pr "=head2 %s" name;
6425       if name <> alias then
6426         pr " | %s" alias;
6427       pr "\n";
6428       pr "\n";
6429       pr " %s" name;
6430       List.iter (
6431         function
6432         | Pathname n | Device n | Dev_or_Path n | String n -> pr " %s" n
6433         | OptString n -> pr " %s" n
6434         | StringList n | DeviceList n -> pr " '%s ...'" n
6435         | Bool _ -> pr " true|false"
6436         | Int n -> pr " %s" n
6437         | FileIn n | FileOut n -> pr " (%s|-)" n
6438       ) (snd style);
6439       pr "\n";
6440       pr "\n";
6441       pr "%s\n\n" longdesc;
6442
6443       if List.exists (function FileIn _ | FileOut _ -> true
6444                       | _ -> false) (snd style) then
6445         pr "Use C<-> instead of a filename to read/write from stdin/stdout.\n\n";
6446
6447       if List.mem ProtocolLimitWarning flags then
6448         pr "%s\n\n" protocol_limit_warning;
6449
6450       if List.mem DangerWillRobinson flags then
6451         pr "%s\n\n" danger_will_robinson;
6452
6453       match deprecation_notice flags with
6454       | None -> ()
6455       | Some txt -> pr "%s\n\n" txt
6456   ) all_functions_sorted
6457
6458 (* Generate a C function prototype. *)
6459 and generate_prototype ?(extern = true) ?(static = false) ?(semicolon = true)
6460     ?(single_line = false) ?(newline = false) ?(in_daemon = false)
6461     ?(prefix = "")
6462     ?handle name style =
6463   if extern then pr "extern ";
6464   if static then pr "static ";
6465   (match fst style with
6466    | RErr -> pr "int "
6467    | RInt _ -> pr "int "
6468    | RInt64 _ -> pr "int64_t "
6469    | RBool _ -> pr "int "
6470    | RConstString _ | RConstOptString _ -> pr "const char *"
6471    | RString _ | RBufferOut _ -> pr "char *"
6472    | RStringList _ | RHashtable _ -> pr "char **"
6473    | RStruct (_, typ) ->
6474        if not in_daemon then pr "struct guestfs_%s *" typ
6475        else pr "guestfs_int_%s *" typ
6476    | RStructList (_, typ) ->
6477        if not in_daemon then pr "struct guestfs_%s_list *" typ
6478        else pr "guestfs_int_%s_list *" typ
6479   );
6480   let is_RBufferOut = match fst style with RBufferOut _ -> true | _ -> false in
6481   pr "%s%s (" prefix name;
6482   if handle = None && List.length (snd style) = 0 && not is_RBufferOut then
6483     pr "void"
6484   else (
6485     let comma = ref false in
6486     (match handle with
6487      | None -> ()
6488      | Some handle -> pr "guestfs_h *%s" handle; comma := true
6489     );
6490     let next () =
6491       if !comma then (
6492         if single_line then pr ", " else pr ",\n\t\t"
6493       );
6494       comma := true
6495     in
6496     List.iter (
6497       function
6498       | Pathname n
6499       | Device n | Dev_or_Path n
6500       | String n
6501       | OptString n ->
6502           next ();
6503           pr "const char *%s" n
6504       | StringList n | DeviceList n ->
6505           next ();
6506           pr "char *const *%s" n
6507       | Bool n -> next (); pr "int %s" n
6508       | Int n -> next (); pr "int %s" n
6509       | FileIn n
6510       | FileOut n ->
6511           if not in_daemon then (next (); pr "const char *%s" n)
6512     ) (snd style);
6513     if is_RBufferOut then (next (); pr "size_t *size_r");
6514   );
6515   pr ")";
6516   if semicolon then pr ";";
6517   if newline then pr "\n"
6518
6519 (* Generate C call arguments, eg "(handle, foo, bar)" *)
6520 and generate_c_call_args ?handle ?(decl = false) style =
6521   pr "(";
6522   let comma = ref false in
6523   let next () =
6524     if !comma then pr ", ";
6525     comma := true
6526   in
6527   (match handle with
6528    | None -> ()
6529    | Some handle -> pr "%s" handle; comma := true
6530   );
6531   List.iter (
6532     fun arg ->
6533       next ();
6534       pr "%s" (name_of_argt arg)
6535   ) (snd style);
6536   (* For RBufferOut calls, add implicit &size parameter. *)
6537   if not decl then (
6538     match fst style with
6539     | RBufferOut _ ->
6540         next ();
6541         pr "&size"
6542     | _ -> ()
6543   );
6544   pr ")"
6545
6546 (* Generate the OCaml bindings interface. *)
6547 and generate_ocaml_mli () =
6548   generate_header OCamlStyle LGPLv2;
6549
6550   pr "\
6551 (** For API documentation you should refer to the C API
6552     in the guestfs(3) manual page.  The OCaml API uses almost
6553     exactly the same calls. *)
6554
6555 type t
6556 (** A [guestfs_h] handle. *)
6557
6558 exception Error of string
6559 (** This exception is raised when there is an error. *)
6560
6561 val create : unit -> t
6562
6563 val close : t -> unit
6564 (** Handles are closed by the garbage collector when they become
6565     unreferenced, but callers can also call this in order to
6566     provide predictable cleanup. *)
6567
6568 ";
6569   generate_ocaml_structure_decls ();
6570
6571   (* The actions. *)
6572   List.iter (
6573     fun (name, style, _, _, _, shortdesc, _) ->
6574       generate_ocaml_prototype name style;
6575       pr "(** %s *)\n" shortdesc;
6576       pr "\n"
6577   ) all_functions
6578
6579 (* Generate the OCaml bindings implementation. *)
6580 and generate_ocaml_ml () =
6581   generate_header OCamlStyle LGPLv2;
6582
6583   pr "\
6584 type t
6585 exception Error of string
6586 external create : unit -> t = \"ocaml_guestfs_create\"
6587 external close : t -> unit = \"ocaml_guestfs_close\"
6588
6589 let () =
6590   Callback.register_exception \"ocaml_guestfs_error\" (Error \"\")
6591
6592 ";
6593
6594   generate_ocaml_structure_decls ();
6595
6596   (* The actions. *)
6597   List.iter (
6598     fun (name, style, _, _, _, shortdesc, _) ->
6599       generate_ocaml_prototype ~is_external:true name style;
6600   ) all_functions
6601
6602 (* Generate the OCaml bindings C implementation. *)
6603 and generate_ocaml_c () =
6604   generate_header CStyle LGPLv2;
6605
6606   pr "\
6607 #include <stdio.h>
6608 #include <stdlib.h>
6609 #include <string.h>
6610
6611 #include <caml/config.h>
6612 #include <caml/alloc.h>
6613 #include <caml/callback.h>
6614 #include <caml/fail.h>
6615 #include <caml/memory.h>
6616 #include <caml/mlvalues.h>
6617 #include <caml/signals.h>
6618
6619 #include <guestfs.h>
6620
6621 #include \"guestfs_c.h\"
6622
6623 /* Copy a hashtable of string pairs into an assoc-list.  We return
6624  * the list in reverse order, but hashtables aren't supposed to be
6625  * ordered anyway.
6626  */
6627 static CAMLprim value
6628 copy_table (char * const * argv)
6629 {
6630   CAMLparam0 ();
6631   CAMLlocal5 (rv, pairv, kv, vv, cons);
6632   int i;
6633
6634   rv = Val_int (0);
6635   for (i = 0; argv[i] != NULL; i += 2) {
6636     kv = caml_copy_string (argv[i]);
6637     vv = caml_copy_string (argv[i+1]);
6638     pairv = caml_alloc (2, 0);
6639     Store_field (pairv, 0, kv);
6640     Store_field (pairv, 1, vv);
6641     cons = caml_alloc (2, 0);
6642     Store_field (cons, 1, rv);
6643     rv = cons;
6644     Store_field (cons, 0, pairv);
6645   }
6646
6647   CAMLreturn (rv);
6648 }
6649
6650 ";
6651
6652   (* Struct copy functions. *)
6653   List.iter (
6654     fun (typ, cols) ->
6655       let has_optpercent_col =
6656         List.exists (function (_, FOptPercent) -> true | _ -> false) cols in
6657
6658       pr "static CAMLprim value\n";
6659       pr "copy_%s (const struct guestfs_%s *%s)\n" typ typ typ;
6660       pr "{\n";
6661       pr "  CAMLparam0 ();\n";
6662       if has_optpercent_col then
6663         pr "  CAMLlocal3 (rv, v, v2);\n"
6664       else
6665         pr "  CAMLlocal2 (rv, v);\n";
6666       pr "\n";
6667       pr "  rv = caml_alloc (%d, 0);\n" (List.length cols);
6668       iteri (
6669         fun i col ->
6670           (match col with
6671            | name, FString ->
6672                pr "  v = caml_copy_string (%s->%s);\n" typ name
6673            | name, FBuffer ->
6674                pr "  v = caml_alloc_string (%s->%s_len);\n" typ name;
6675                pr "  memcpy (String_val (v), %s->%s, %s->%s_len);\n"
6676                  typ name typ name
6677            | name, FUUID ->
6678                pr "  v = caml_alloc_string (32);\n";
6679                pr "  memcpy (String_val (v), %s->%s, 32);\n" typ name
6680            | name, (FBytes|FInt64|FUInt64) ->
6681                pr "  v = caml_copy_int64 (%s->%s);\n" typ name
6682            | name, (FInt32|FUInt32) ->
6683                pr "  v = caml_copy_int32 (%s->%s);\n" typ name
6684            | name, FOptPercent ->
6685                pr "  if (%s->%s >= 0) { /* Some %s */\n" typ name name;
6686                pr "    v2 = caml_copy_double (%s->%s);\n" typ name;
6687                pr "    v = caml_alloc (1, 0);\n";
6688                pr "    Store_field (v, 0, v2);\n";
6689                pr "  } else /* None */\n";
6690                pr "    v = Val_int (0);\n";
6691            | name, FChar ->
6692                pr "  v = Val_int (%s->%s);\n" typ name
6693           );
6694           pr "  Store_field (rv, %d, v);\n" i
6695       ) cols;
6696       pr "  CAMLreturn (rv);\n";
6697       pr "}\n";
6698       pr "\n";
6699
6700       pr "static CAMLprim value\n";
6701       pr "copy_%s_list (const struct guestfs_%s_list *%ss)\n"
6702         typ typ typ;
6703       pr "{\n";
6704       pr "  CAMLparam0 ();\n";
6705       pr "  CAMLlocal2 (rv, v);\n";
6706       pr "  int i;\n";
6707       pr "\n";
6708       pr "  if (%ss->len == 0)\n" typ;
6709       pr "    CAMLreturn (Atom (0));\n";
6710       pr "  else {\n";
6711       pr "    rv = caml_alloc (%ss->len, 0);\n" typ;
6712       pr "    for (i = 0; i < %ss->len; ++i) {\n" typ;
6713       pr "      v = copy_%s (&%ss->val[i]);\n" typ typ;
6714       pr "      caml_modify (&Field (rv, i), v);\n";
6715       pr "    }\n";
6716       pr "    CAMLreturn (rv);\n";
6717       pr "  }\n";
6718       pr "}\n";
6719       pr "\n";
6720   ) structs;
6721
6722   (* The wrappers. *)
6723   List.iter (
6724     fun (name, style, _, _, _, _, _) ->
6725       let params =
6726         "gv" :: List.map (fun arg -> name_of_argt arg ^ "v") (snd style) in
6727
6728       let needs_extra_vs =
6729         match fst style with RConstOptString _ -> true | _ -> false in
6730
6731       pr "CAMLprim value\n";
6732       pr "ocaml_guestfs_%s (value %s" name (List.hd params);
6733       List.iter (pr ", value %s") (List.tl params);
6734       pr ")\n";
6735       pr "{\n";
6736
6737       (match params with
6738        | [p1; p2; p3; p4; p5] ->
6739            pr "  CAMLparam5 (%s);\n" (String.concat ", " params)
6740        | p1 :: p2 :: p3 :: p4 :: p5 :: rest ->
6741            pr "  CAMLparam5 (%s);\n" (String.concat ", " [p1; p2; p3; p4; p5]);
6742            pr "  CAMLxparam%d (%s);\n"
6743              (List.length rest) (String.concat ", " rest)
6744        | ps ->
6745            pr "  CAMLparam%d (%s);\n" (List.length ps) (String.concat ", " ps)
6746       );
6747       if not needs_extra_vs then
6748         pr "  CAMLlocal1 (rv);\n"
6749       else
6750         pr "  CAMLlocal3 (rv, v, v2);\n";
6751       pr "\n";
6752
6753       pr "  guestfs_h *g = Guestfs_val (gv);\n";
6754       pr "  if (g == NULL)\n";
6755       pr "    caml_failwith (\"%s: used handle after closing it\");\n" name;
6756       pr "\n";
6757
6758       List.iter (
6759         function
6760         | Pathname n
6761         | Device n | Dev_or_Path n
6762         | String n
6763         | FileIn n
6764         | FileOut n ->
6765             pr "  const char *%s = String_val (%sv);\n" n n
6766         | OptString n ->
6767             pr "  const char *%s =\n" n;
6768             pr "    %sv != Val_int (0) ? String_val (Field (%sv, 0)) : NULL;\n"
6769               n n
6770         | StringList n | DeviceList n ->
6771             pr "  char **%s = ocaml_guestfs_strings_val (g, %sv);\n" n n
6772         | Bool n ->
6773             pr "  int %s = Bool_val (%sv);\n" n n
6774         | Int n ->
6775             pr "  int %s = Int_val (%sv);\n" n n
6776       ) (snd style);
6777       let error_code =
6778         match fst style with
6779         | RErr -> pr "  int r;\n"; "-1"
6780         | RInt _ -> pr "  int r;\n"; "-1"
6781         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
6782         | RBool _ -> pr "  int r;\n"; "-1"
6783         | RConstString _ | RConstOptString _ ->
6784             pr "  const char *r;\n"; "NULL"
6785         | RString _ -> pr "  char *r;\n"; "NULL"
6786         | RStringList _ ->
6787             pr "  int i;\n";
6788             pr "  char **r;\n";
6789             "NULL"
6790         | RStruct (_, typ) ->
6791             pr "  struct guestfs_%s *r;\n" typ; "NULL"
6792         | RStructList (_, typ) ->
6793             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
6794         | RHashtable _ ->
6795             pr "  int i;\n";
6796             pr "  char **r;\n";
6797             "NULL"
6798         | RBufferOut _ ->
6799             pr "  char *r;\n";
6800             pr "  size_t size;\n";
6801             "NULL" in
6802       pr "\n";
6803
6804       pr "  caml_enter_blocking_section ();\n";
6805       pr "  r = guestfs_%s " name;
6806       generate_c_call_args ~handle:"g" style;
6807       pr ";\n";
6808       pr "  caml_leave_blocking_section ();\n";
6809
6810       List.iter (
6811         function
6812         | StringList n | DeviceList n ->
6813             pr "  ocaml_guestfs_free_strings (%s);\n" n;
6814         | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _ | Bool _ | Int _
6815         | FileIn _ | FileOut _ -> ()
6816       ) (snd style);
6817
6818       pr "  if (r == %s)\n" error_code;
6819       pr "    ocaml_guestfs_raise_error (g, \"%s\");\n" name;
6820       pr "\n";
6821
6822       (match fst style with
6823        | RErr -> pr "  rv = Val_unit;\n"
6824        | RInt _ -> pr "  rv = Val_int (r);\n"
6825        | RInt64 _ ->
6826            pr "  rv = caml_copy_int64 (r);\n"
6827        | RBool _ -> pr "  rv = Val_bool (r);\n"
6828        | RConstString _ ->
6829            pr "  rv = caml_copy_string (r);\n"
6830        | RConstOptString _ ->
6831            pr "  if (r) { /* Some string */\n";
6832            pr "    v = caml_alloc (1, 0);\n";
6833            pr "    v2 = caml_copy_string (r);\n";
6834            pr "    Store_field (v, 0, v2);\n";
6835            pr "  } else /* None */\n";
6836            pr "    v = Val_int (0);\n";
6837        | RString _ ->
6838            pr "  rv = caml_copy_string (r);\n";
6839            pr "  free (r);\n"
6840        | RStringList _ ->
6841            pr "  rv = caml_copy_string_array ((const char **) r);\n";
6842            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
6843            pr "  free (r);\n"
6844        | RStruct (_, typ) ->
6845            pr "  rv = copy_%s (r);\n" typ;
6846            pr "  guestfs_free_%s (r);\n" typ;
6847        | RStructList (_, typ) ->
6848            pr "  rv = copy_%s_list (r);\n" typ;
6849            pr "  guestfs_free_%s_list (r);\n" typ;
6850        | RHashtable _ ->
6851            pr "  rv = copy_table (r);\n";
6852            pr "  for (i = 0; r[i] != NULL; ++i) free (r[i]);\n";
6853            pr "  free (r);\n";
6854        | RBufferOut _ ->
6855            pr "  rv = caml_alloc_string (size);\n";
6856            pr "  memcpy (String_val (rv), r, size);\n";
6857       );
6858
6859       pr "  CAMLreturn (rv);\n";
6860       pr "}\n";
6861       pr "\n";
6862
6863       if List.length params > 5 then (
6864         pr "CAMLprim value\n";
6865         pr "ocaml_guestfs_%s_byte (value *argv, int argn)\n" name;
6866         pr "{\n";
6867         pr "  return ocaml_guestfs_%s (argv[0]" name;
6868         iteri (fun i _ -> pr ", argv[%d]" i) (List.tl params);
6869         pr ");\n";
6870         pr "}\n";
6871         pr "\n"
6872       )
6873   ) all_functions
6874
6875 and generate_ocaml_structure_decls () =
6876   List.iter (
6877     fun (typ, cols) ->
6878       pr "type %s = {\n" typ;
6879       List.iter (
6880         function
6881         | name, FString -> pr "  %s : string;\n" name
6882         | name, FBuffer -> pr "  %s : string;\n" name
6883         | name, FUUID -> pr "  %s : string;\n" name
6884         | name, (FBytes|FInt64|FUInt64) -> pr "  %s : int64;\n" name
6885         | name, (FInt32|FUInt32) -> pr "  %s : int32;\n" name
6886         | name, FChar -> pr "  %s : char;\n" name
6887         | name, FOptPercent -> pr "  %s : float option;\n" name
6888       ) cols;
6889       pr "}\n";
6890       pr "\n"
6891   ) structs
6892
6893 and generate_ocaml_prototype ?(is_external = false) name style =
6894   if is_external then pr "external " else pr "val ";
6895   pr "%s : t -> " name;
6896   List.iter (
6897     function
6898     | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "string -> "
6899     | OptString _ -> pr "string option -> "
6900     | StringList _ | DeviceList _ -> pr "string array -> "
6901     | Bool _ -> pr "bool -> "
6902     | Int _ -> pr "int -> "
6903   ) (snd style);
6904   (match fst style with
6905    | RErr -> pr "unit" (* all errors are turned into exceptions *)
6906    | RInt _ -> pr "int"
6907    | RInt64 _ -> pr "int64"
6908    | RBool _ -> pr "bool"
6909    | RConstString _ -> pr "string"
6910    | RConstOptString _ -> pr "string option"
6911    | RString _ | RBufferOut _ -> pr "string"
6912    | RStringList _ -> pr "string array"
6913    | RStruct (_, typ) -> pr "%s" typ
6914    | RStructList (_, typ) -> pr "%s array" typ
6915    | RHashtable _ -> pr "(string * string) list"
6916   );
6917   if is_external then (
6918     pr " = ";
6919     if List.length (snd style) + 1 > 5 then
6920       pr "\"ocaml_guestfs_%s_byte\" " name;
6921     pr "\"ocaml_guestfs_%s\"" name
6922   );
6923   pr "\n"
6924
6925 (* Generate Perl xs code, a sort of crazy variation of C with macros. *)
6926 and generate_perl_xs () =
6927   generate_header CStyle LGPLv2;
6928
6929   pr "\
6930 #include \"EXTERN.h\"
6931 #include \"perl.h\"
6932 #include \"XSUB.h\"
6933
6934 #include <guestfs.h>
6935
6936 #ifndef PRId64
6937 #define PRId64 \"lld\"
6938 #endif
6939
6940 static SV *
6941 my_newSVll(long long val) {
6942 #ifdef USE_64_BIT_ALL
6943   return newSViv(val);
6944 #else
6945   char buf[100];
6946   int len;
6947   len = snprintf(buf, 100, \"%%\" PRId64, val);
6948   return newSVpv(buf, len);
6949 #endif
6950 }
6951
6952 #ifndef PRIu64
6953 #define PRIu64 \"llu\"
6954 #endif
6955
6956 static SV *
6957 my_newSVull(unsigned long long val) {
6958 #ifdef USE_64_BIT_ALL
6959   return newSVuv(val);
6960 #else
6961   char buf[100];
6962   int len;
6963   len = snprintf(buf, 100, \"%%\" PRIu64, val);
6964   return newSVpv(buf, len);
6965 #endif
6966 }
6967
6968 /* http://www.perlmonks.org/?node_id=680842 */
6969 static char **
6970 XS_unpack_charPtrPtr (SV *arg) {
6971   char **ret;
6972   AV *av;
6973   I32 i;
6974
6975   if (!arg || !SvOK (arg) || !SvROK (arg) || SvTYPE (SvRV (arg)) != SVt_PVAV)
6976     croak (\"array reference expected\");
6977
6978   av = (AV *)SvRV (arg);
6979   ret = malloc ((av_len (av) + 1 + 1) * sizeof (char *));
6980   if (!ret)
6981     croak (\"malloc failed\");
6982
6983   for (i = 0; i <= av_len (av); i++) {
6984     SV **elem = av_fetch (av, i, 0);
6985
6986     if (!elem || !*elem)
6987       croak (\"missing element in list\");
6988
6989     ret[i] = SvPV_nolen (*elem);
6990   }
6991
6992   ret[i] = NULL;
6993
6994   return ret;
6995 }
6996
6997 MODULE = Sys::Guestfs  PACKAGE = Sys::Guestfs
6998
6999 PROTOTYPES: ENABLE
7000
7001 guestfs_h *
7002 _create ()
7003    CODE:
7004       RETVAL = guestfs_create ();
7005       if (!RETVAL)
7006         croak (\"could not create guestfs handle\");
7007       guestfs_set_error_handler (RETVAL, NULL, NULL);
7008  OUTPUT:
7009       RETVAL
7010
7011 void
7012 DESTROY (g)
7013       guestfs_h *g;
7014  PPCODE:
7015       guestfs_close (g);
7016
7017 ";
7018
7019   List.iter (
7020     fun (name, style, _, _, _, _, _) ->
7021       (match fst style with
7022        | RErr -> pr "void\n"
7023        | RInt _ -> pr "SV *\n"
7024        | RInt64 _ -> pr "SV *\n"
7025        | RBool _ -> pr "SV *\n"
7026        | RConstString _ -> pr "SV *\n"
7027        | RConstOptString _ -> pr "SV *\n"
7028        | RString _ -> pr "SV *\n"
7029        | RBufferOut _ -> pr "SV *\n"
7030        | RStringList _
7031        | RStruct _ | RStructList _
7032        | RHashtable _ ->
7033            pr "void\n" (* all lists returned implictly on the stack *)
7034       );
7035       (* Call and arguments. *)
7036       pr "%s " name;
7037       generate_c_call_args ~handle:"g" ~decl:true style;
7038       pr "\n";
7039       pr "      guestfs_h *g;\n";
7040       iteri (
7041         fun i ->
7042           function
7043           | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7044               pr "      char *%s;\n" n
7045           | OptString n ->
7046               (* http://www.perlmonks.org/?node_id=554277
7047                * Note that the implicit handle argument means we have
7048                * to add 1 to the ST(x) operator.
7049                *)
7050               pr "      char *%s = SvOK(ST(%d)) ? SvPV_nolen(ST(%d)) : NULL;\n" n (i+1) (i+1)
7051           | StringList n | DeviceList n -> pr "      char **%s;\n" n
7052           | Bool n -> pr "      int %s;\n" n
7053           | Int n -> pr "      int %s;\n" n
7054       ) (snd style);
7055
7056       let do_cleanups () =
7057         List.iter (
7058           function
7059           | Pathname _ | Device _ | Dev_or_Path _ | String _ | OptString _ | Bool _ | Int _
7060           | FileIn _ | FileOut _ -> ()
7061           | StringList n | DeviceList n -> pr "      free (%s);\n" n
7062         ) (snd style)
7063       in
7064
7065       (* Code. *)
7066       (match fst style with
7067        | RErr ->
7068            pr "PREINIT:\n";
7069            pr "      int r;\n";
7070            pr " PPCODE:\n";
7071            pr "      r = guestfs_%s " name;
7072            generate_c_call_args ~handle:"g" style;
7073            pr ";\n";
7074            do_cleanups ();
7075            pr "      if (r == -1)\n";
7076            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7077        | RInt n
7078        | RBool n ->
7079            pr "PREINIT:\n";
7080            pr "      int %s;\n" n;
7081            pr "   CODE:\n";
7082            pr "      %s = guestfs_%s " n name;
7083            generate_c_call_args ~handle:"g" style;
7084            pr ";\n";
7085            do_cleanups ();
7086            pr "      if (%s == -1)\n" n;
7087            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7088            pr "      RETVAL = newSViv (%s);\n" n;
7089            pr " OUTPUT:\n";
7090            pr "      RETVAL\n"
7091        | RInt64 n ->
7092            pr "PREINIT:\n";
7093            pr "      int64_t %s;\n" n;
7094            pr "   CODE:\n";
7095            pr "      %s = guestfs_%s " n name;
7096            generate_c_call_args ~handle:"g" style;
7097            pr ";\n";
7098            do_cleanups ();
7099            pr "      if (%s == -1)\n" n;
7100            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7101            pr "      RETVAL = my_newSVll (%s);\n" n;
7102            pr " OUTPUT:\n";
7103            pr "      RETVAL\n"
7104        | RConstString n ->
7105            pr "PREINIT:\n";
7106            pr "      const char *%s;\n" n;
7107            pr "   CODE:\n";
7108            pr "      %s = guestfs_%s " n name;
7109            generate_c_call_args ~handle:"g" style;
7110            pr ";\n";
7111            do_cleanups ();
7112            pr "      if (%s == NULL)\n" n;
7113            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7114            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7115            pr " OUTPUT:\n";
7116            pr "      RETVAL\n"
7117        | RConstOptString n ->
7118            pr "PREINIT:\n";
7119            pr "      const char *%s;\n" n;
7120            pr "   CODE:\n";
7121            pr "      %s = guestfs_%s " n name;
7122            generate_c_call_args ~handle:"g" style;
7123            pr ";\n";
7124            do_cleanups ();
7125            pr "      if (%s == NULL)\n" n;
7126            pr "        RETVAL = &PL_sv_undef;\n";
7127            pr "      else\n";
7128            pr "        RETVAL = newSVpv (%s, 0);\n" n;
7129            pr " OUTPUT:\n";
7130            pr "      RETVAL\n"
7131        | RString n ->
7132            pr "PREINIT:\n";
7133            pr "      char *%s;\n" n;
7134            pr "   CODE:\n";
7135            pr "      %s = guestfs_%s " n name;
7136            generate_c_call_args ~handle:"g" style;
7137            pr ";\n";
7138            do_cleanups ();
7139            pr "      if (%s == NULL)\n" n;
7140            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7141            pr "      RETVAL = newSVpv (%s, 0);\n" n;
7142            pr "      free (%s);\n" n;
7143            pr " OUTPUT:\n";
7144            pr "      RETVAL\n"
7145        | RStringList n | RHashtable n ->
7146            pr "PREINIT:\n";
7147            pr "      char **%s;\n" n;
7148            pr "      int i, n;\n";
7149            pr " PPCODE:\n";
7150            pr "      %s = guestfs_%s " n name;
7151            generate_c_call_args ~handle:"g" style;
7152            pr ";\n";
7153            do_cleanups ();
7154            pr "      if (%s == NULL)\n" n;
7155            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7156            pr "      for (n = 0; %s[n] != NULL; ++n) /**/;\n" n;
7157            pr "      EXTEND (SP, n);\n";
7158            pr "      for (i = 0; i < n; ++i) {\n";
7159            pr "        PUSHs (sv_2mortal (newSVpv (%s[i], 0)));\n" n;
7160            pr "        free (%s[i]);\n" n;
7161            pr "      }\n";
7162            pr "      free (%s);\n" n;
7163        | RStruct (n, typ) ->
7164            let cols = cols_of_struct typ in
7165            generate_perl_struct_code typ cols name style n do_cleanups
7166        | RStructList (n, typ) ->
7167            let cols = cols_of_struct typ in
7168            generate_perl_struct_list_code typ cols name style n do_cleanups
7169        | RBufferOut n ->
7170            pr "PREINIT:\n";
7171            pr "      char *%s;\n" n;
7172            pr "      size_t size;\n";
7173            pr "   CODE:\n";
7174            pr "      %s = guestfs_%s " n name;
7175            generate_c_call_args ~handle:"g" style;
7176            pr ";\n";
7177            do_cleanups ();
7178            pr "      if (%s == NULL)\n" n;
7179            pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7180            pr "      RETVAL = newSVpv (%s, size);\n" n;
7181            pr "      free (%s);\n" n;
7182            pr " OUTPUT:\n";
7183            pr "      RETVAL\n"
7184       );
7185
7186       pr "\n"
7187   ) all_functions
7188
7189 and generate_perl_struct_list_code typ cols name style n do_cleanups =
7190   pr "PREINIT:\n";
7191   pr "      struct guestfs_%s_list *%s;\n" typ n;
7192   pr "      int i;\n";
7193   pr "      HV *hv;\n";
7194   pr " PPCODE:\n";
7195   pr "      %s = guestfs_%s " n name;
7196   generate_c_call_args ~handle:"g" style;
7197   pr ";\n";
7198   do_cleanups ();
7199   pr "      if (%s == NULL)\n" n;
7200   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7201   pr "      EXTEND (SP, %s->len);\n" n;
7202   pr "      for (i = 0; i < %s->len; ++i) {\n" n;
7203   pr "        hv = newHV ();\n";
7204   List.iter (
7205     function
7206     | name, FString ->
7207         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 0), 0);\n"
7208           name (String.length name) n name
7209     | name, FUUID ->
7210         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, 32), 0);\n"
7211           name (String.length name) n name
7212     | name, FBuffer ->
7213         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (%s->val[i].%s, %s->val[i].%s_len), 0);\n"
7214           name (String.length name) n name n name
7215     | name, (FBytes|FUInt64) ->
7216         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVull (%s->val[i].%s), 0);\n"
7217           name (String.length name) n name
7218     | name, FInt64 ->
7219         pr "        (void) hv_store (hv, \"%s\", %d, my_newSVll (%s->val[i].%s), 0);\n"
7220           name (String.length name) n name
7221     | name, (FInt32|FUInt32) ->
7222         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
7223           name (String.length name) n name
7224     | name, FChar ->
7225         pr "        (void) hv_store (hv, \"%s\", %d, newSVpv (&%s->val[i].%s, 1), 0);\n"
7226           name (String.length name) n name
7227     | name, FOptPercent ->
7228         pr "        (void) hv_store (hv, \"%s\", %d, newSVnv (%s->val[i].%s), 0);\n"
7229           name (String.length name) n name
7230   ) cols;
7231   pr "        PUSHs (sv_2mortal (newRV ((SV *) hv)));\n";
7232   pr "      }\n";
7233   pr "      guestfs_free_%s_list (%s);\n" typ n
7234
7235 and generate_perl_struct_code typ cols name style n do_cleanups =
7236   pr "PREINIT:\n";
7237   pr "      struct guestfs_%s *%s;\n" typ n;
7238   pr " PPCODE:\n";
7239   pr "      %s = guestfs_%s " n name;
7240   generate_c_call_args ~handle:"g" style;
7241   pr ";\n";
7242   do_cleanups ();
7243   pr "      if (%s == NULL)\n" n;
7244   pr "        croak (\"%s: %%s\", guestfs_last_error (g));\n" name;
7245   pr "      EXTEND (SP, 2 * %d);\n" (List.length cols);
7246   List.iter (
7247     fun ((name, _) as col) ->
7248       pr "      PUSHs (sv_2mortal (newSVpv (\"%s\", 0)));\n" name;
7249
7250       match col with
7251       | name, FString ->
7252           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 0)));\n"
7253             n name
7254       | name, FBuffer ->
7255           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, %s->%s_len)));\n"
7256             n name n name
7257       | name, FUUID ->
7258           pr "      PUSHs (sv_2mortal (newSVpv (%s->%s, 32)));\n"
7259             n name
7260       | name, (FBytes|FUInt64) ->
7261           pr "      PUSHs (sv_2mortal (my_newSVull (%s->%s)));\n"
7262             n name
7263       | name, FInt64 ->
7264           pr "      PUSHs (sv_2mortal (my_newSVll (%s->%s)));\n"
7265             n name
7266       | name, (FInt32|FUInt32) ->
7267           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
7268             n name
7269       | name, FChar ->
7270           pr "      PUSHs (sv_2mortal (newSVpv (&%s->%s, 1)));\n"
7271             n name
7272       | name, FOptPercent ->
7273           pr "      PUSHs (sv_2mortal (newSVnv (%s->%s)));\n"
7274             n name
7275   ) cols;
7276   pr "      free (%s);\n" n
7277
7278 (* Generate Sys/Guestfs.pm. *)
7279 and generate_perl_pm () =
7280   generate_header HashStyle LGPLv2;
7281
7282   pr "\
7283 =pod
7284
7285 =head1 NAME
7286
7287 Sys::Guestfs - Perl bindings for libguestfs
7288
7289 =head1 SYNOPSIS
7290
7291  use Sys::Guestfs;
7292
7293  my $h = Sys::Guestfs->new ();
7294  $h->add_drive ('guest.img');
7295  $h->launch ();
7296  $h->wait_ready ();
7297  $h->mount ('/dev/sda1', '/');
7298  $h->touch ('/hello');
7299  $h->sync ();
7300
7301 =head1 DESCRIPTION
7302
7303 The C<Sys::Guestfs> module provides a Perl XS binding to the
7304 libguestfs API for examining and modifying virtual machine
7305 disk images.
7306
7307 Amongst the things this is good for: making batch configuration
7308 changes to guests, getting disk used/free statistics (see also:
7309 virt-df), migrating between virtualization systems (see also:
7310 virt-p2v), performing partial backups, performing partial guest
7311 clones, cloning guests and changing registry/UUID/hostname info, and
7312 much else besides.
7313
7314 Libguestfs uses Linux kernel and qemu code, and can access any type of
7315 guest filesystem that Linux and qemu can, including but not limited
7316 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
7317 schemes, qcow, qcow2, vmdk.
7318
7319 Libguestfs provides ways to enumerate guest storage (eg. partitions,
7320 LVs, what filesystem is in each LV, etc.).  It can also run commands
7321 in the context of the guest.  Also you can access filesystems over FTP.
7322
7323 See also L<Sys::Guestfs::Lib(3)> for a set of useful library
7324 functions for using libguestfs from Perl, including integration
7325 with libvirt.
7326
7327 =head1 ERRORS
7328
7329 All errors turn into calls to C<croak> (see L<Carp(3)>).
7330
7331 =head1 METHODS
7332
7333 =over 4
7334
7335 =cut
7336
7337 package Sys::Guestfs;
7338
7339 use strict;
7340 use warnings;
7341
7342 require XSLoader;
7343 XSLoader::load ('Sys::Guestfs');
7344
7345 =item $h = Sys::Guestfs->new ();
7346
7347 Create a new guestfs handle.
7348
7349 =cut
7350
7351 sub new {
7352   my $proto = shift;
7353   my $class = ref ($proto) || $proto;
7354
7355   my $self = Sys::Guestfs::_create ();
7356   bless $self, $class;
7357   return $self;
7358 }
7359
7360 ";
7361
7362   (* Actions.  We only need to print documentation for these as
7363    * they are pulled in from the XS code automatically.
7364    *)
7365   List.iter (
7366     fun (name, style, _, flags, _, _, longdesc) ->
7367       if not (List.mem NotInDocs flags) then (
7368         let longdesc = replace_str longdesc "C<guestfs_" "C<$h-E<gt>" in
7369         pr "=item ";
7370         generate_perl_prototype name style;
7371         pr "\n\n";
7372         pr "%s\n\n" longdesc;
7373         if List.mem ProtocolLimitWarning flags then
7374           pr "%s\n\n" protocol_limit_warning;
7375         if List.mem DangerWillRobinson flags then
7376           pr "%s\n\n" danger_will_robinson;
7377         match deprecation_notice flags with
7378         | None -> ()
7379         | Some txt -> pr "%s\n\n" txt
7380       )
7381   ) all_functions_sorted;
7382
7383   (* End of file. *)
7384   pr "\
7385 =cut
7386
7387 1;
7388
7389 =back
7390
7391 =head1 COPYRIGHT
7392
7393 Copyright (C) 2009 Red Hat Inc.
7394
7395 =head1 LICENSE
7396
7397 Please see the file COPYING.LIB for the full license.
7398
7399 =head1 SEE ALSO
7400
7401 L<guestfs(3)>,
7402 L<guestfish(1)>,
7403 L<http://libguestfs.org>,
7404 L<Sys::Guestfs::Lib(3)>.
7405
7406 =cut
7407 "
7408
7409 and generate_perl_prototype name style =
7410   (match fst style with
7411    | RErr -> ()
7412    | RBool n
7413    | RInt n
7414    | RInt64 n
7415    | RConstString n
7416    | RConstOptString n
7417    | RString n
7418    | RBufferOut n -> pr "$%s = " n
7419    | RStruct (n,_)
7420    | RHashtable n -> pr "%%%s = " n
7421    | RStringList n
7422    | RStructList (n,_) -> pr "@%s = " n
7423   );
7424   pr "$h->%s (" name;
7425   let comma = ref false in
7426   List.iter (
7427     fun arg ->
7428       if !comma then pr ", ";
7429       comma := true;
7430       match arg with
7431       | Pathname n | Device n | Dev_or_Path n | String n
7432       | OptString n | Bool n | Int n | FileIn n | FileOut n ->
7433           pr "$%s" n
7434       | StringList n | DeviceList n ->
7435           pr "\\@%s" n
7436   ) (snd style);
7437   pr ");"
7438
7439 (* Generate Python C module. *)
7440 and generate_python_c () =
7441   generate_header CStyle LGPLv2;
7442
7443   pr "\
7444 #include <Python.h>
7445
7446 #include <stdio.h>
7447 #include <stdlib.h>
7448 #include <assert.h>
7449
7450 #include \"guestfs.h\"
7451
7452 typedef struct {
7453   PyObject_HEAD
7454   guestfs_h *g;
7455 } Pyguestfs_Object;
7456
7457 static guestfs_h *
7458 get_handle (PyObject *obj)
7459 {
7460   assert (obj);
7461   assert (obj != Py_None);
7462   return ((Pyguestfs_Object *) obj)->g;
7463 }
7464
7465 static PyObject *
7466 put_handle (guestfs_h *g)
7467 {
7468   assert (g);
7469   return
7470     PyCObject_FromVoidPtrAndDesc ((void *) g, (char *) \"guestfs_h\", NULL);
7471 }
7472
7473 /* This list should be freed (but not the strings) after use. */
7474 static char **
7475 get_string_list (PyObject *obj)
7476 {
7477   int i, len;
7478   char **r;
7479
7480   assert (obj);
7481
7482   if (!PyList_Check (obj)) {
7483     PyErr_SetString (PyExc_RuntimeError, \"expecting a list parameter\");
7484     return NULL;
7485   }
7486
7487   len = PyList_Size (obj);
7488   r = malloc (sizeof (char *) * (len+1));
7489   if (r == NULL) {
7490     PyErr_SetString (PyExc_RuntimeError, \"get_string_list: out of memory\");
7491     return NULL;
7492   }
7493
7494   for (i = 0; i < len; ++i)
7495     r[i] = PyString_AsString (PyList_GetItem (obj, i));
7496   r[len] = NULL;
7497
7498   return r;
7499 }
7500
7501 static PyObject *
7502 put_string_list (char * const * const argv)
7503 {
7504   PyObject *list;
7505   int argc, i;
7506
7507   for (argc = 0; argv[argc] != NULL; ++argc)
7508     ;
7509
7510   list = PyList_New (argc);
7511   for (i = 0; i < argc; ++i)
7512     PyList_SetItem (list, i, PyString_FromString (argv[i]));
7513
7514   return list;
7515 }
7516
7517 static PyObject *
7518 put_table (char * const * const argv)
7519 {
7520   PyObject *list, *item;
7521   int argc, i;
7522
7523   for (argc = 0; argv[argc] != NULL; ++argc)
7524     ;
7525
7526   list = PyList_New (argc >> 1);
7527   for (i = 0; i < argc; i += 2) {
7528     item = PyTuple_New (2);
7529     PyTuple_SetItem (item, 0, PyString_FromString (argv[i]));
7530     PyTuple_SetItem (item, 1, PyString_FromString (argv[i+1]));
7531     PyList_SetItem (list, i >> 1, item);
7532   }
7533
7534   return list;
7535 }
7536
7537 static void
7538 free_strings (char **argv)
7539 {
7540   int argc;
7541
7542   for (argc = 0; argv[argc] != NULL; ++argc)
7543     free (argv[argc]);
7544   free (argv);
7545 }
7546
7547 static PyObject *
7548 py_guestfs_create (PyObject *self, PyObject *args)
7549 {
7550   guestfs_h *g;
7551
7552   g = guestfs_create ();
7553   if (g == NULL) {
7554     PyErr_SetString (PyExc_RuntimeError,
7555                      \"guestfs.create: failed to allocate handle\");
7556     return NULL;
7557   }
7558   guestfs_set_error_handler (g, NULL, NULL);
7559   return put_handle (g);
7560 }
7561
7562 static PyObject *
7563 py_guestfs_close (PyObject *self, PyObject *args)
7564 {
7565   PyObject *py_g;
7566   guestfs_h *g;
7567
7568   if (!PyArg_ParseTuple (args, (char *) \"O:guestfs_close\", &py_g))
7569     return NULL;
7570   g = get_handle (py_g);
7571
7572   guestfs_close (g);
7573
7574   Py_INCREF (Py_None);
7575   return Py_None;
7576 }
7577
7578 ";
7579
7580   let emit_put_list_function typ =
7581     pr "static PyObject *\n";
7582     pr "put_%s_list (struct guestfs_%s_list *%ss)\n" typ typ typ;
7583     pr "{\n";
7584     pr "  PyObject *list;\n";
7585     pr "  int i;\n";
7586     pr "\n";
7587     pr "  list = PyList_New (%ss->len);\n" typ;
7588     pr "  for (i = 0; i < %ss->len; ++i)\n" typ;
7589     pr "    PyList_SetItem (list, i, put_%s (&%ss->val[i]));\n" typ typ;
7590     pr "  return list;\n";
7591     pr "};\n";
7592     pr "\n"
7593   in
7594
7595   (* Structures, turned into Python dictionaries. *)
7596   List.iter (
7597     fun (typ, cols) ->
7598       pr "static PyObject *\n";
7599       pr "put_%s (struct guestfs_%s *%s)\n" typ typ typ;
7600       pr "{\n";
7601       pr "  PyObject *dict;\n";
7602       pr "\n";
7603       pr "  dict = PyDict_New ();\n";
7604       List.iter (
7605         function
7606         | name, FString ->
7607             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7608             pr "                        PyString_FromString (%s->%s));\n"
7609               typ name
7610         | name, FBuffer ->
7611             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7612             pr "                        PyString_FromStringAndSize (%s->%s, %s->%s_len));\n"
7613               typ name typ name
7614         | name, FUUID ->
7615             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7616             pr "                        PyString_FromStringAndSize (%s->%s, 32));\n"
7617               typ name
7618         | name, (FBytes|FUInt64) ->
7619             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7620             pr "                        PyLong_FromUnsignedLongLong (%s->%s));\n"
7621               typ name
7622         | name, FInt64 ->
7623             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7624             pr "                        PyLong_FromLongLong (%s->%s));\n"
7625               typ name
7626         | name, FUInt32 ->
7627             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7628             pr "                        PyLong_FromUnsignedLong (%s->%s));\n"
7629               typ name
7630         | name, FInt32 ->
7631             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7632             pr "                        PyLong_FromLong (%s->%s));\n"
7633               typ name
7634         | name, FOptPercent ->
7635             pr "  if (%s->%s >= 0)\n" typ name;
7636             pr "    PyDict_SetItemString (dict, \"%s\",\n" name;
7637             pr "                          PyFloat_FromDouble ((double) %s->%s));\n"
7638               typ name;
7639             pr "  else {\n";
7640             pr "    Py_INCREF (Py_None);\n";
7641             pr "    PyDict_SetItemString (dict, \"%s\", Py_None);\n" name;
7642             pr "  }\n"
7643         | name, FChar ->
7644             pr "  PyDict_SetItemString (dict, \"%s\",\n" name;
7645             pr "                        PyString_FromStringAndSize (&dirent->%s, 1));\n" name
7646       ) cols;
7647       pr "  return dict;\n";
7648       pr "};\n";
7649       pr "\n";
7650
7651   ) structs;
7652
7653   (* Emit a put_TYPE_list function definition only if that function is used. *)
7654   List.iter (
7655     function
7656     | typ, (RStructListOnly | RStructAndList) ->
7657         (* generate the function for typ *)
7658         emit_put_list_function typ
7659     | typ, _ -> () (* empty *)
7660   ) rstructs_used;
7661
7662   (* Python wrapper functions. *)
7663   List.iter (
7664     fun (name, style, _, _, _, _, _) ->
7665       pr "static PyObject *\n";
7666       pr "py_guestfs_%s (PyObject *self, PyObject *args)\n" name;
7667       pr "{\n";
7668
7669       pr "  PyObject *py_g;\n";
7670       pr "  guestfs_h *g;\n";
7671       pr "  PyObject *py_r;\n";
7672
7673       let error_code =
7674         match fst style with
7675         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
7676         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
7677         | RConstString _ | RConstOptString _ ->
7678             pr "  const char *r;\n"; "NULL"
7679         | RString _ -> pr "  char *r;\n"; "NULL"
7680         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
7681         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
7682         | RStructList (_, typ) ->
7683             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
7684         | RBufferOut _ ->
7685             pr "  char *r;\n";
7686             pr "  size_t size;\n";
7687             "NULL" in
7688
7689       List.iter (
7690         function
7691         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
7692             pr "  const char *%s;\n" n
7693         | OptString n -> pr "  const char *%s;\n" n
7694         | StringList n | DeviceList n ->
7695             pr "  PyObject *py_%s;\n" n;
7696             pr "  char **%s;\n" n
7697         | Bool n -> pr "  int %s;\n" n
7698         | Int n -> pr "  int %s;\n" n
7699       ) (snd style);
7700
7701       pr "\n";
7702
7703       (* Convert the parameters. *)
7704       pr "  if (!PyArg_ParseTuple (args, (char *) \"O";
7705       List.iter (
7706         function
7707         | Pathname _ | Device _ | Dev_or_Path _ | String _ | FileIn _ | FileOut _ -> pr "s"
7708         | OptString _ -> pr "z"
7709         | StringList _ | DeviceList _ -> pr "O"
7710         | Bool _ -> pr "i" (* XXX Python has booleans? *)
7711         | Int _ -> pr "i"
7712       ) (snd style);
7713       pr ":guestfs_%s\",\n" name;
7714       pr "                         &py_g";
7715       List.iter (
7716         function
7717         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n -> pr ", &%s" n
7718         | OptString n -> pr ", &%s" n
7719         | StringList n | DeviceList n -> pr ", &py_%s" n
7720         | Bool n -> pr ", &%s" n
7721         | Int n -> pr ", &%s" n
7722       ) (snd style);
7723
7724       pr "))\n";
7725       pr "    return NULL;\n";
7726
7727       pr "  g = get_handle (py_g);\n";
7728       List.iter (
7729         function
7730         | Pathname _ | Device _ | Dev_or_Path _ | String _
7731         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
7732         | StringList n | DeviceList n ->
7733             pr "  %s = get_string_list (py_%s);\n" n n;
7734             pr "  if (!%s) return NULL;\n" n
7735       ) (snd style);
7736
7737       pr "\n";
7738
7739       pr "  r = guestfs_%s " name;
7740       generate_c_call_args ~handle:"g" style;
7741       pr ";\n";
7742
7743       List.iter (
7744         function
7745         | Pathname _ | Device _ | Dev_or_Path _ | String _
7746         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
7747         | StringList n | DeviceList n ->
7748             pr "  free (%s);\n" n
7749       ) (snd style);
7750
7751       pr "  if (r == %s) {\n" error_code;
7752       pr "    PyErr_SetString (PyExc_RuntimeError, guestfs_last_error (g));\n";
7753       pr "    return NULL;\n";
7754       pr "  }\n";
7755       pr "\n";
7756
7757       (match fst style with
7758        | RErr ->
7759            pr "  Py_INCREF (Py_None);\n";
7760            pr "  py_r = Py_None;\n"
7761        | RInt _
7762        | RBool _ -> pr "  py_r = PyInt_FromLong ((long) r);\n"
7763        | RInt64 _ -> pr "  py_r = PyLong_FromLongLong (r);\n"
7764        | RConstString _ -> pr "  py_r = PyString_FromString (r);\n"
7765        | RConstOptString _ ->
7766            pr "  if (r)\n";
7767            pr "    py_r = PyString_FromString (r);\n";
7768            pr "  else {\n";
7769            pr "    Py_INCREF (Py_None);\n";
7770            pr "    py_r = Py_None;\n";
7771            pr "  }\n"
7772        | RString _ ->
7773            pr "  py_r = PyString_FromString (r);\n";
7774            pr "  free (r);\n"
7775        | RStringList _ ->
7776            pr "  py_r = put_string_list (r);\n";
7777            pr "  free_strings (r);\n"
7778        | RStruct (_, typ) ->
7779            pr "  py_r = put_%s (r);\n" typ;
7780            pr "  guestfs_free_%s (r);\n" typ
7781        | RStructList (_, typ) ->
7782            pr "  py_r = put_%s_list (r);\n" typ;
7783            pr "  guestfs_free_%s_list (r);\n" typ
7784        | RHashtable n ->
7785            pr "  py_r = put_table (r);\n";
7786            pr "  free_strings (r);\n"
7787        | RBufferOut _ ->
7788            pr "  py_r = PyString_FromStringAndSize (r, size);\n";
7789            pr "  free (r);\n"
7790       );
7791
7792       pr "  return py_r;\n";
7793       pr "}\n";
7794       pr "\n"
7795   ) all_functions;
7796
7797   (* Table of functions. *)
7798   pr "static PyMethodDef methods[] = {\n";
7799   pr "  { (char *) \"create\", py_guestfs_create, METH_VARARGS, NULL },\n";
7800   pr "  { (char *) \"close\", py_guestfs_close, METH_VARARGS, NULL },\n";
7801   List.iter (
7802     fun (name, _, _, _, _, _, _) ->
7803       pr "  { (char *) \"%s\", py_guestfs_%s, METH_VARARGS, NULL },\n"
7804         name name
7805   ) all_functions;
7806   pr "  { NULL, NULL, 0, NULL }\n";
7807   pr "};\n";
7808   pr "\n";
7809
7810   (* Init function. *)
7811   pr "\
7812 void
7813 initlibguestfsmod (void)
7814 {
7815   static int initialized = 0;
7816
7817   if (initialized) return;
7818   Py_InitModule ((char *) \"libguestfsmod\", methods);
7819   initialized = 1;
7820 }
7821 "
7822
7823 (* Generate Python module. *)
7824 and generate_python_py () =
7825   generate_header HashStyle LGPLv2;
7826
7827   pr "\
7828 u\"\"\"Python bindings for libguestfs
7829
7830 import guestfs
7831 g = guestfs.GuestFS ()
7832 g.add_drive (\"guest.img\")
7833 g.launch ()
7834 g.wait_ready ()
7835 parts = g.list_partitions ()
7836
7837 The guestfs module provides a Python binding to the libguestfs API
7838 for examining and modifying virtual machine disk images.
7839
7840 Amongst the things this is good for: making batch configuration
7841 changes to guests, getting disk used/free statistics (see also:
7842 virt-df), migrating between virtualization systems (see also:
7843 virt-p2v), performing partial backups, performing partial guest
7844 clones, cloning guests and changing registry/UUID/hostname info, and
7845 much else besides.
7846
7847 Libguestfs uses Linux kernel and qemu code, and can access any type of
7848 guest filesystem that Linux and qemu can, including but not limited
7849 to: ext2/3/4, btrfs, FAT and NTFS, LVM, many different disk partition
7850 schemes, qcow, qcow2, vmdk.
7851
7852 Libguestfs provides ways to enumerate guest storage (eg. partitions,
7853 LVs, what filesystem is in each LV, etc.).  It can also run commands
7854 in the context of the guest.  Also you can access filesystems over FTP.
7855
7856 Errors which happen while using the API are turned into Python
7857 RuntimeError exceptions.
7858
7859 To create a guestfs handle you usually have to perform the following
7860 sequence of calls:
7861
7862 # Create the handle, call add_drive at least once, and possibly
7863 # several times if the guest has multiple block devices:
7864 g = guestfs.GuestFS ()
7865 g.add_drive (\"guest.img\")
7866
7867 # Launch the qemu subprocess and wait for it to become ready:
7868 g.launch ()
7869 g.wait_ready ()
7870
7871 # Now you can issue commands, for example:
7872 logvols = g.lvs ()
7873
7874 \"\"\"
7875
7876 import libguestfsmod
7877
7878 class GuestFS:
7879     \"\"\"Instances of this class are libguestfs API handles.\"\"\"
7880
7881     def __init__ (self):
7882         \"\"\"Create a new libguestfs handle.\"\"\"
7883         self._o = libguestfsmod.create ()
7884
7885     def __del__ (self):
7886         libguestfsmod.close (self._o)
7887
7888 ";
7889
7890   List.iter (
7891     fun (name, style, _, flags, _, _, longdesc) ->
7892       pr "    def %s " name;
7893       generate_py_call_args ~handle:"self" (snd style);
7894       pr ":\n";
7895
7896       if not (List.mem NotInDocs flags) then (
7897         let doc = replace_str longdesc "C<guestfs_" "C<g." in
7898         let doc =
7899           match fst style with
7900           | RErr | RInt _ | RInt64 _ | RBool _
7901           | RConstOptString _ | RConstString _
7902           | RString _ | RBufferOut _ -> doc
7903           | RStringList _ ->
7904               doc ^ "\n\nThis function returns a list of strings."
7905           | RStruct (_, typ) ->
7906               doc ^ sprintf "\n\nThis function returns a dictionary, with keys matching the various fields in the guestfs_%s structure." typ
7907           | RStructList (_, typ) ->
7908               doc ^ sprintf "\n\nThis function returns a list of %ss.  Each %s is represented as a dictionary." typ typ
7909           | RHashtable _ ->
7910               doc ^ "\n\nThis function returns a dictionary." in
7911         let doc =
7912           if List.mem ProtocolLimitWarning flags then
7913             doc ^ "\n\n" ^ protocol_limit_warning
7914           else doc in
7915         let doc =
7916           if List.mem DangerWillRobinson flags then
7917             doc ^ "\n\n" ^ danger_will_robinson
7918           else doc in
7919         let doc =
7920           match deprecation_notice flags with
7921           | None -> doc
7922           | Some txt -> doc ^ "\n\n" ^ txt in
7923         let doc = pod2text ~width:60 name doc in
7924         let doc = List.map (fun line -> replace_str line "\\" "\\\\") doc in
7925         let doc = String.concat "\n        " doc in
7926         pr "        u\"\"\"%s\"\"\"\n" doc;
7927       );
7928       pr "        return libguestfsmod.%s " name;
7929       generate_py_call_args ~handle:"self._o" (snd style);
7930       pr "\n";
7931       pr "\n";
7932   ) all_functions
7933
7934 (* Generate Python call arguments, eg "(handle, foo, bar)" *)
7935 and generate_py_call_args ~handle args =
7936   pr "(%s" handle;
7937   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
7938   pr ")"
7939
7940 (* Useful if you need the longdesc POD text as plain text.  Returns a
7941  * list of lines.
7942  *
7943  * Because this is very slow (the slowest part of autogeneration),
7944  * we memoize the results.
7945  *)
7946 and pod2text ~width name longdesc =
7947   let key = width, name, longdesc in
7948   try Hashtbl.find pod2text_memo key
7949   with Not_found ->
7950     let filename, chan = Filename.open_temp_file "gen" ".tmp" in
7951     fprintf chan "=head1 %s\n\n%s\n" name longdesc;
7952     close_out chan;
7953     let cmd = sprintf "pod2text -w %d %s" width (Filename.quote filename) in
7954     let chan = Unix.open_process_in cmd in
7955     let lines = ref [] in
7956     let rec loop i =
7957       let line = input_line chan in
7958       if i = 1 then             (* discard the first line of output *)
7959         loop (i+1)
7960       else (
7961         let line = triml line in
7962         lines := line :: !lines;
7963         loop (i+1)
7964       ) in
7965     let lines = try loop 1 with End_of_file -> List.rev !lines in
7966     Unix.unlink filename;
7967     (match Unix.close_process_in chan with
7968      | Unix.WEXITED 0 -> ()
7969      | Unix.WEXITED i ->
7970          failwithf "pod2text: process exited with non-zero status (%d)" i
7971      | Unix.WSIGNALED i | Unix.WSTOPPED i ->
7972          failwithf "pod2text: process signalled or stopped by signal %d" i
7973     );
7974     Hashtbl.add pod2text_memo key lines;
7975     let chan = open_out pod2text_memo_filename in
7976     output_value chan pod2text_memo;
7977     close_out chan;
7978     lines
7979
7980 (* Generate ruby bindings. *)
7981 and generate_ruby_c () =
7982   generate_header CStyle LGPLv2;
7983
7984   pr "\
7985 #include <stdio.h>
7986 #include <stdlib.h>
7987
7988 #include <ruby.h>
7989
7990 #include \"guestfs.h\"
7991
7992 #include \"extconf.h\"
7993
7994 /* For Ruby < 1.9 */
7995 #ifndef RARRAY_LEN
7996 #define RARRAY_LEN(r) (RARRAY((r))->len)
7997 #endif
7998
7999 static VALUE m_guestfs;                 /* guestfs module */
8000 static VALUE c_guestfs;                 /* guestfs_h handle */
8001 static VALUE e_Error;                   /* used for all errors */
8002
8003 static void ruby_guestfs_free (void *p)
8004 {
8005   if (!p) return;
8006   guestfs_close ((guestfs_h *) p);
8007 }
8008
8009 static VALUE ruby_guestfs_create (VALUE m)
8010 {
8011   guestfs_h *g;
8012
8013   g = guestfs_create ();
8014   if (!g)
8015     rb_raise (e_Error, \"failed to create guestfs handle\");
8016
8017   /* Don't print error messages to stderr by default. */
8018   guestfs_set_error_handler (g, NULL, NULL);
8019
8020   /* Wrap it, and make sure the close function is called when the
8021    * handle goes away.
8022    */
8023   return Data_Wrap_Struct (c_guestfs, NULL, ruby_guestfs_free, g);
8024 }
8025
8026 static VALUE ruby_guestfs_close (VALUE gv)
8027 {
8028   guestfs_h *g;
8029   Data_Get_Struct (gv, guestfs_h, g);
8030
8031   ruby_guestfs_free (g);
8032   DATA_PTR (gv) = NULL;
8033
8034   return Qnil;
8035 }
8036
8037 ";
8038
8039   List.iter (
8040     fun (name, style, _, _, _, _, _) ->
8041       pr "static VALUE ruby_guestfs_%s (VALUE gv" name;
8042       List.iter (fun arg -> pr ", VALUE %sv" (name_of_argt arg)) (snd style);
8043       pr ")\n";
8044       pr "{\n";
8045       pr "  guestfs_h *g;\n";
8046       pr "  Data_Get_Struct (gv, guestfs_h, g);\n";
8047       pr "  if (!g)\n";
8048       pr "    rb_raise (rb_eArgError, \"%%s: used handle after closing it\", \"%s\");\n"
8049         name;
8050       pr "\n";
8051
8052       List.iter (
8053         function
8054         | Pathname n | Device n | Dev_or_Path n | String n | FileIn n | FileOut n ->
8055             pr "  Check_Type (%sv, T_STRING);\n" n;
8056             pr "  const char *%s = StringValueCStr (%sv);\n" n n;
8057             pr "  if (!%s)\n" n;
8058             pr "    rb_raise (rb_eTypeError, \"expected string for parameter %%s of %%s\",\n";
8059             pr "              \"%s\", \"%s\");\n" n name
8060         | OptString n ->
8061             pr "  const char *%s = !NIL_P (%sv) ? StringValueCStr (%sv) : NULL;\n" n n n
8062         | StringList n | DeviceList n ->
8063             pr "  char **%s;\n" n;
8064             pr "  Check_Type (%sv, T_ARRAY);\n" n;
8065             pr "  {\n";
8066             pr "    int i, len;\n";
8067             pr "    len = RARRAY_LEN (%sv);\n" n;
8068             pr "    %s = guestfs_safe_malloc (g, sizeof (char *) * (len+1));\n"
8069               n;
8070             pr "    for (i = 0; i < len; ++i) {\n";
8071             pr "      VALUE v = rb_ary_entry (%sv, i);\n" n;
8072             pr "      %s[i] = StringValueCStr (v);\n" n;
8073             pr "    }\n";
8074             pr "    %s[len] = NULL;\n" n;
8075             pr "  }\n";
8076         | Bool n ->
8077             pr "  int %s = RTEST (%sv);\n" n n
8078         | Int n ->
8079             pr "  int %s = NUM2INT (%sv);\n" n n
8080       ) (snd style);
8081       pr "\n";
8082
8083       let error_code =
8084         match fst style with
8085         | RErr | RInt _ | RBool _ -> pr "  int r;\n"; "-1"
8086         | RInt64 _ -> pr "  int64_t r;\n"; "-1"
8087         | RConstString _ | RConstOptString _ ->
8088             pr "  const char *r;\n"; "NULL"
8089         | RString _ -> pr "  char *r;\n"; "NULL"
8090         | RStringList _ | RHashtable _ -> pr "  char **r;\n"; "NULL"
8091         | RStruct (_, typ) -> pr "  struct guestfs_%s *r;\n" typ; "NULL"
8092         | RStructList (_, typ) ->
8093             pr "  struct guestfs_%s_list *r;\n" typ; "NULL"
8094         | RBufferOut _ ->
8095             pr "  char *r;\n";
8096             pr "  size_t size;\n";
8097             "NULL" in
8098       pr "\n";
8099
8100       pr "  r = guestfs_%s " name;
8101       generate_c_call_args ~handle:"g" style;
8102       pr ";\n";
8103
8104       List.iter (
8105         function
8106         | Pathname _ | Device _ | Dev_or_Path _ | String _
8107         | FileIn _ | FileOut _ | OptString _ | Bool _ | Int _ -> ()
8108         | StringList n | DeviceList n ->
8109             pr "  free (%s);\n" n
8110       ) (snd style);
8111
8112       pr "  if (r == %s)\n" error_code;
8113       pr "    rb_raise (e_Error, \"%%s\", guestfs_last_error (g));\n";
8114       pr "\n";
8115
8116       (match fst style with
8117        | RErr ->
8118            pr "  return Qnil;\n"
8119        | RInt _ | RBool _ ->
8120            pr "  return INT2NUM (r);\n"
8121        | RInt64 _ ->
8122            pr "  return ULL2NUM (r);\n"
8123        | RConstString _ ->
8124            pr "  return rb_str_new2 (r);\n";
8125        | RConstOptString _ ->
8126            pr "  if (r)\n";
8127            pr "    return rb_str_new2 (r);\n";
8128            pr "  else\n";
8129            pr "    return Qnil;\n";
8130        | RString _ ->
8131            pr "  VALUE rv = rb_str_new2 (r);\n";
8132            pr "  free (r);\n";
8133            pr "  return rv;\n";
8134        | RStringList _ ->
8135            pr "  int i, len = 0;\n";
8136            pr "  for (i = 0; r[i] != NULL; ++i) len++;\n";
8137            pr "  VALUE rv = rb_ary_new2 (len);\n";
8138            pr "  for (i = 0; r[i] != NULL; ++i) {\n";
8139            pr "    rb_ary_push (rv, rb_str_new2 (r[i]));\n";
8140            pr "    free (r[i]);\n";
8141            pr "  }\n";
8142            pr "  free (r);\n";
8143            pr "  return rv;\n"
8144        | RStruct (_, typ) ->
8145            let cols = cols_of_struct typ in
8146            generate_ruby_struct_code typ cols
8147        | RStructList (_, typ) ->
8148            let cols = cols_of_struct typ in
8149            generate_ruby_struct_list_code typ cols
8150        | RHashtable _ ->
8151            pr "  VALUE rv = rb_hash_new ();\n";
8152            pr "  int i;\n";
8153            pr "  for (i = 0; r[i] != NULL; i+=2) {\n";
8154            pr "    rb_hash_aset (rv, rb_str_new2 (r[i]), rb_str_new2 (r[i+1]));\n";
8155            pr "    free (r[i]);\n";
8156            pr "    free (r[i+1]);\n";
8157            pr "  }\n";
8158            pr "  free (r);\n";
8159            pr "  return rv;\n"
8160        | RBufferOut _ ->
8161            pr "  VALUE rv = rb_str_new (r, size);\n";
8162            pr "  free (r);\n";
8163            pr "  return rv;\n";
8164       );
8165
8166       pr "}\n";
8167       pr "\n"
8168   ) all_functions;
8169
8170   pr "\
8171 /* Initialize the module. */
8172 void Init__guestfs ()
8173 {
8174   m_guestfs = rb_define_module (\"Guestfs\");
8175   c_guestfs = rb_define_class_under (m_guestfs, \"Guestfs\", rb_cObject);
8176   e_Error = rb_define_class_under (m_guestfs, \"Error\", rb_eStandardError);
8177
8178   rb_define_module_function (m_guestfs, \"create\", ruby_guestfs_create, 0);
8179   rb_define_method (c_guestfs, \"close\", ruby_guestfs_close, 0);
8180
8181 ";
8182   (* Define the rest of the methods. *)
8183   List.iter (
8184     fun (name, style, _, _, _, _, _) ->
8185       pr "  rb_define_method (c_guestfs, \"%s\",\n" name;
8186       pr "        ruby_guestfs_%s, %d);\n" name (List.length (snd style))
8187   ) all_functions;
8188
8189   pr "}\n"
8190
8191 (* Ruby code to return a struct. *)
8192 and generate_ruby_struct_code typ cols =
8193   pr "  VALUE rv = rb_hash_new ();\n";
8194   List.iter (
8195     function
8196     | name, FString ->
8197         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new2 (r->%s));\n" name name
8198     | name, FBuffer ->
8199         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, r->%s_len));\n" name name name
8200     | name, FUUID ->
8201         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_str_new (r->%s, 32));\n" name name
8202     | name, (FBytes|FUInt64) ->
8203         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
8204     | name, FInt64 ->
8205         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), LL2NUM (r->%s));\n" name name
8206     | name, FUInt32 ->
8207         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), UINT2NUM (r->%s));\n" name name
8208     | name, FInt32 ->
8209         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), INT2NUM (r->%s));\n" name name
8210     | name, FOptPercent ->
8211         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), rb_dbl2big (r->%s));\n" name name
8212     | name, FChar -> (* XXX wrong? *)
8213         pr "  rb_hash_aset (rv, rb_str_new2 (\"%s\"), ULL2NUM (r->%s));\n" name name
8214   ) cols;
8215   pr "  guestfs_free_%s (r);\n" typ;
8216   pr "  return rv;\n"
8217
8218 (* Ruby code to return a struct list. *)
8219 and generate_ruby_struct_list_code typ cols =
8220   pr "  VALUE rv = rb_ary_new2 (r->len);\n";
8221   pr "  int i;\n";
8222   pr "  for (i = 0; i < r->len; ++i) {\n";
8223   pr "    VALUE hv = rb_hash_new ();\n";
8224   List.iter (
8225     function
8226     | name, FString ->
8227         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new2 (r->val[i].%s));\n" name name
8228     | name, FBuffer ->
8229         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, r->val[i].%s_len));\n" name name name
8230     | name, FUUID ->
8231         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_str_new (r->val[i].%s, 32));\n" name name
8232     | name, (FBytes|FUInt64) ->
8233         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
8234     | name, FInt64 ->
8235         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), LL2NUM (r->val[i].%s));\n" name name
8236     | name, FUInt32 ->
8237         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), UINT2NUM (r->val[i].%s));\n" name name
8238     | name, FInt32 ->
8239         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), INT2NUM (r->val[i].%s));\n" name name
8240     | name, FOptPercent ->
8241         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), rb_dbl2big (r->val[i].%s));\n" name name
8242     | name, FChar -> (* XXX wrong? *)
8243         pr "    rb_hash_aset (hv, rb_str_new2 (\"%s\"), ULL2NUM (r->val[i].%s));\n" name name
8244   ) cols;
8245   pr "    rb_ary_push (rv, hv);\n";
8246   pr "  }\n";
8247   pr "  guestfs_free_%s_list (r);\n" typ;
8248   pr "  return rv;\n"
8249
8250 (* Generate Java bindings GuestFS.java file. *)
8251 and generate_java_java () =
8252   generate_header CStyle LGPLv2;
8253
8254   pr "\
8255 package com.redhat.et.libguestfs;
8256
8257 import java.util.HashMap;
8258 import com.redhat.et.libguestfs.LibGuestFSException;
8259 import com.redhat.et.libguestfs.PV;
8260 import com.redhat.et.libguestfs.VG;
8261 import com.redhat.et.libguestfs.LV;
8262 import com.redhat.et.libguestfs.Stat;
8263 import com.redhat.et.libguestfs.StatVFS;
8264 import com.redhat.et.libguestfs.IntBool;
8265 import com.redhat.et.libguestfs.Dirent;
8266
8267 /**
8268  * The GuestFS object is a libguestfs handle.
8269  *
8270  * @author rjones
8271  */
8272 public class GuestFS {
8273   // Load the native code.
8274   static {
8275     System.loadLibrary (\"guestfs_jni\");
8276   }
8277
8278   /**
8279    * The native guestfs_h pointer.
8280    */
8281   long g;
8282
8283   /**
8284    * Create a libguestfs handle.
8285    *
8286    * @throws LibGuestFSException
8287    */
8288   public GuestFS () throws LibGuestFSException
8289   {
8290     g = _create ();
8291   }
8292   private native long _create () throws LibGuestFSException;
8293
8294   /**
8295    * Close a libguestfs handle.
8296    *
8297    * You can also leave handles to be collected by the garbage
8298    * collector, but this method ensures that the resources used
8299    * by the handle are freed up immediately.  If you call any
8300    * other methods after closing the handle, you will get an
8301    * exception.
8302    *
8303    * @throws LibGuestFSException
8304    */
8305   public void close () throws LibGuestFSException
8306   {
8307     if (g != 0)
8308       _close (g);
8309     g = 0;
8310   }
8311   private native void _close (long g) throws LibGuestFSException;
8312
8313   public void finalize () throws LibGuestFSException
8314   {
8315     close ();
8316   }
8317
8318 ";
8319
8320   List.iter (
8321     fun (name, style, _, flags, _, shortdesc, longdesc) ->
8322       if not (List.mem NotInDocs flags); then (
8323         let doc = replace_str longdesc "C<guestfs_" "C<g." in
8324         let doc =
8325           if List.mem ProtocolLimitWarning flags then
8326             doc ^ "\n\n" ^ protocol_limit_warning
8327           else doc in
8328         let doc =
8329           if List.mem DangerWillRobinson flags then
8330             doc ^ "\n\n" ^ danger_will_robinson
8331           else doc in
8332         let doc =
8333           match deprecation_notice flags with
8334           | None -> doc
8335           | Some txt -> doc ^ "\n\n" ^ txt in
8336         let doc = pod2text ~width:60 name doc in
8337         let doc = List.map (            (* RHBZ#501883 *)
8338           function
8339           | "" -> "<p>"
8340           | nonempty -> nonempty
8341         ) doc in
8342         let doc = String.concat "\n   * " doc in
8343
8344         pr "  /**\n";
8345         pr "   * %s\n" shortdesc;
8346         pr "   * <p>\n";
8347         pr "   * %s\n" doc;
8348         pr "   * @throws LibGuestFSException\n";
8349         pr "   */\n";
8350         pr "  ";
8351       );
8352       generate_java_prototype ~public:true ~semicolon:false name style;
8353       pr "\n";
8354       pr "  {\n";
8355       pr "    if (g == 0)\n";
8356       pr "      throw new LibGuestFSException (\"%s: handle is closed\");\n"
8357         name;
8358       pr "    ";
8359       if fst style <> RErr then pr "return ";
8360       pr "_%s " name;
8361       generate_java_call_args ~handle:"g" (snd style);
8362       pr ";\n";
8363       pr "  }\n";
8364       pr "  ";
8365       generate_java_prototype ~privat:true ~native:true name style;
8366       pr "\n";
8367       pr "\n";
8368   ) all_functions;
8369
8370   pr "}\n"
8371
8372 (* Generate Java call arguments, eg "(handle, foo, bar)" *)
8373 and generate_java_call_args ~handle args =
8374   pr "(%s" handle;
8375   List.iter (fun arg -> pr ", %s" (name_of_argt arg)) args;
8376   pr ")"
8377
8378 and generate_java_prototype ?(public=false) ?(privat=false) ?(native=false)
8379     ?(semicolon=true) name style =
8380   if privat then pr "private ";
8381   if public then pr "public ";
8382   if native then pr "native ";
8383
8384   (* return type *)
8385   (match fst style with
8386    | RErr -> pr "void ";
8387    | RInt _ -> pr "int ";
8388    | RInt64 _ -> pr "long ";
8389    | RBool _ -> pr "boolean ";
8390    | RConstString _ | RConstOptString _ | RString _
8391    | RBufferOut _ -> pr "String ";
8392    | RStringList _ -> pr "String[] ";
8393    | RStruct (_, typ) ->
8394        let name = java_name_of_struct typ in
8395        pr "%s " name;
8396    | RStructList (_, typ) ->
8397        let name = java_name_of_struct typ in
8398        pr "%s[] " name;
8399    | RHashtable _ -> pr "HashMap<String,String> ";
8400   );
8401
8402   if native then pr "_%s " name else pr "%s " name;
8403   pr "(";
8404   let needs_comma = ref false in
8405   if native then (
8406     pr "long g";
8407     needs_comma := true
8408   );
8409
8410   (* args *)
8411   List.iter (
8412     fun arg ->
8413       if !needs_comma then pr ", ";
8414       needs_comma := true;
8415
8416       match arg with
8417       | Pathname n
8418       | Device n | Dev_or_Path n
8419       | String n
8420       | OptString n
8421       | FileIn n
8422       | FileOut n ->
8423           pr "String %s" n
8424       | StringList n | DeviceList n ->
8425           pr "String[] %s" n
8426       | Bool n ->
8427           pr "boolean %s" n
8428       | Int n ->
8429           pr "int %s" n
8430   ) (snd style);
8431
8432   pr ")\n";
8433   pr "    throws LibGuestFSException";
8434   if semicolon then pr ";"
8435
8436 and generate_java_struct jtyp cols =
8437   generate_header CStyle LGPLv2;
8438
8439   pr "\
8440 package com.redhat.et.libguestfs;
8441
8442 /**
8443  * Libguestfs %s structure.
8444  *
8445  * @author rjones
8446  * @see GuestFS
8447  */
8448 public class %s {
8449 " jtyp jtyp;
8450
8451   List.iter (
8452     function
8453     | name, FString
8454     | name, FUUID
8455     | name, FBuffer -> pr "  public String %s;\n" name
8456     | name, (FBytes|FUInt64|FInt64) -> pr "  public long %s;\n" name
8457     | name, (FUInt32|FInt32) -> pr "  public int %s;\n" name
8458     | name, FChar -> pr "  public char %s;\n" name
8459     | name, FOptPercent ->
8460         pr "  /* The next field is [0..100] or -1 meaning 'not present': */\n";
8461         pr "  public float %s;\n" name
8462   ) cols;
8463
8464   pr "}\n"
8465
8466 and generate_java_c () =
8467   generate_header CStyle LGPLv2;
8468
8469   pr "\
8470 #include <stdio.h>
8471 #include <stdlib.h>
8472 #include <string.h>
8473
8474 #include \"com_redhat_et_libguestfs_GuestFS.h\"
8475 #include \"guestfs.h\"
8476
8477 /* Note that this function returns.  The exception is not thrown
8478  * until after the wrapper function returns.
8479  */
8480 static void
8481 throw_exception (JNIEnv *env, const char *msg)
8482 {
8483   jclass cl;
8484   cl = (*env)->FindClass (env,
8485                           \"com/redhat/et/libguestfs/LibGuestFSException\");
8486   (*env)->ThrowNew (env, cl, msg);
8487 }
8488
8489 JNIEXPORT jlong JNICALL
8490 Java_com_redhat_et_libguestfs_GuestFS__1create
8491   (JNIEnv *env, jobject obj)
8492 {
8493   guestfs_h *g;
8494
8495   g = guestfs_create ();
8496   if (g == NULL) {
8497     throw_exception (env, \"GuestFS.create: failed to allocate handle\");
8498     return 0;
8499   }
8500   guestfs_set_error_handler (g, NULL, NULL);
8501   return (jlong) (long) g;
8502 }
8503
8504 JNIEXPORT void JNICALL
8505 Java_com_redhat_et_libguestfs_GuestFS__1close
8506   (JNIEnv *env, jobject obj, jlong jg)
8507 {
8508   guestfs_h *g = (guestfs_h *) (long) jg;
8509   guestfs_close (g);
8510 }
8511
8512 ";
8513
8514   List.iter (
8515     fun (name, style, _, _, _, _, _) ->
8516       pr "JNIEXPORT ";
8517       (match fst style with
8518        | RErr -> pr "void ";
8519        | RInt _ -> pr "jint ";
8520        | RInt64 _ -> pr "jlong ";
8521        | RBool _ -> pr "jboolean ";
8522        | RConstString _ | RConstOptString _ | RString _
8523        | RBufferOut _ -> pr "jstring ";
8524        | RStruct _ | RHashtable _ ->
8525            pr "jobject ";
8526        | RStringList _ | RStructList _ ->
8527            pr "jobjectArray ";
8528       );
8529       pr "JNICALL\n";
8530       pr "Java_com_redhat_et_libguestfs_GuestFS_";
8531       pr "%s" (replace_str ("_" ^ name) "_" "_1");
8532       pr "\n";
8533       pr "  (JNIEnv *env, jobject obj, jlong jg";
8534       List.iter (
8535         function
8536         | Pathname n
8537         | Device n | Dev_or_Path n
8538         | String n
8539         | OptString n
8540         | FileIn n
8541         | FileOut n ->
8542             pr ", jstring j%s" n
8543         | StringList n | DeviceList n ->
8544             pr ", jobjectArray j%s" n
8545         | Bool n ->
8546             pr ", jboolean j%s" n
8547         | Int n ->
8548             pr ", jint j%s" n
8549       ) (snd style);
8550       pr ")\n";
8551       pr "{\n";
8552       pr "  guestfs_h *g = (guestfs_h *) (long) jg;\n";
8553       let error_code, no_ret =
8554         match fst style with
8555         | RErr -> pr "  int r;\n"; "-1", ""
8556         | RBool _
8557         | RInt _ -> pr "  int r;\n"; "-1", "0"
8558         | RInt64 _ -> pr "  int64_t r;\n"; "-1", "0"
8559         | RConstString _ -> pr "  const char *r;\n"; "NULL", "NULL"
8560         | RConstOptString _ -> pr "  const char *r;\n"; "NULL", "NULL"
8561         | RString _ ->
8562             pr "  jstring jr;\n";
8563             pr "  char *r;\n"; "NULL", "NULL"
8564         | RStringList _ ->
8565             pr "  jobjectArray jr;\n";
8566             pr "  int r_len;\n";
8567             pr "  jclass cl;\n";
8568             pr "  jstring jstr;\n";
8569             pr "  char **r;\n"; "NULL", "NULL"
8570         | RStruct (_, typ) ->
8571             pr "  jobject jr;\n";
8572             pr "  jclass cl;\n";
8573             pr "  jfieldID fl;\n";
8574             pr "  struct guestfs_%s *r;\n" typ; "NULL", "NULL"
8575         | RStructList (_, typ) ->
8576             pr "  jobjectArray jr;\n";
8577             pr "  jclass cl;\n";
8578             pr "  jfieldID fl;\n";
8579             pr "  jobject jfl;\n";
8580             pr "  struct guestfs_%s_list *r;\n" typ; "NULL", "NULL"
8581         | RHashtable _ -> pr "  char **r;\n"; "NULL", "NULL"
8582         | RBufferOut _ ->
8583             pr "  jstring jr;\n";
8584             pr "  char *r;\n";
8585             pr "  size_t size;\n";
8586             "NULL", "NULL" in
8587       List.iter (
8588         function
8589         | Pathname n
8590         | Device n | Dev_or_Path n
8591         | String n
8592         | OptString n
8593         | FileIn n
8594         | FileOut n ->
8595             pr "  const char *%s;\n" n
8596         | StringList n | DeviceList n ->
8597             pr "  int %s_len;\n" n;
8598             pr "  const char **%s;\n" n
8599         | Bool n
8600         | Int n ->
8601             pr "  int %s;\n" n
8602       ) (snd style);
8603
8604       let needs_i =
8605         (match fst style with
8606          | RStringList _ | RStructList _ -> true
8607          | RErr | RBool _ | RInt _ | RInt64 _ | RConstString _
8608          | RConstOptString _
8609          | RString _ | RBufferOut _ | RStruct _ | RHashtable _ -> false) ||
8610           List.exists (function
8611                        | StringList _ -> true
8612                        | DeviceList _ -> true
8613                        | _ -> false) (snd style) in
8614       if needs_i then
8615         pr "  int i;\n";
8616
8617       pr "\n";
8618
8619       (* Get the parameters. *)
8620       List.iter (
8621         function
8622         | Pathname n
8623         | Device n | Dev_or_Path n
8624         | String n
8625         | FileIn n
8626         | FileOut n ->
8627             pr "  %s = (*env)->GetStringUTFChars (env, j%s, NULL);\n" n n
8628         | OptString n ->
8629             (* This is completely undocumented, but Java null becomes
8630              * a NULL parameter.
8631              *)
8632             pr "  %s = j%s ? (*env)->GetStringUTFChars (env, j%s, NULL) : NULL;\n" n n n
8633         | StringList n | DeviceList n ->
8634             pr "  %s_len = (*env)->GetArrayLength (env, j%s);\n" n n;
8635             pr "  %s = guestfs_safe_malloc (g, sizeof (char *) * (%s_len+1));\n" n n;
8636             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
8637             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
8638               n;
8639             pr "    %s[i] = (*env)->GetStringUTFChars (env, o, NULL);\n" n;
8640             pr "  }\n";
8641             pr "  %s[%s_len] = NULL;\n" n n;
8642         | Bool n
8643         | Int n ->
8644             pr "  %s = j%s;\n" n n
8645       ) (snd style);
8646
8647       (* Make the call. *)
8648       pr "  r = guestfs_%s " name;
8649       generate_c_call_args ~handle:"g" style;
8650       pr ";\n";
8651
8652       (* Release the parameters. *)
8653       List.iter (
8654         function
8655         | Pathname n
8656         | Device n | Dev_or_Path n
8657         | String n
8658         | FileIn n
8659         | FileOut n ->
8660             pr "  (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
8661         | OptString n ->
8662             pr "  if (j%s)\n" n;
8663             pr "    (*env)->ReleaseStringUTFChars (env, j%s, %s);\n" n n
8664         | StringList n | DeviceList n ->
8665             pr "  for (i = 0; i < %s_len; ++i) {\n" n;
8666             pr "    jobject o = (*env)->GetObjectArrayElement (env, j%s, i);\n"
8667               n;
8668             pr "    (*env)->ReleaseStringUTFChars (env, o, %s[i]);\n" n;
8669             pr "  }\n";
8670             pr "  free (%s);\n" n
8671         | Bool n
8672         | Int n -> ()
8673       ) (snd style);
8674
8675       (* Check for errors. *)
8676       pr "  if (r == %s) {\n" error_code;
8677       pr "    throw_exception (env, guestfs_last_error (g));\n";
8678       pr "    return %s;\n" no_ret;
8679       pr "  }\n";
8680
8681       (* Return value. *)
8682       (match fst style with
8683        | RErr -> ()
8684        | RInt _ -> pr "  return (jint) r;\n"
8685        | RBool _ -> pr "  return (jboolean) r;\n"
8686        | RInt64 _ -> pr "  return (jlong) r;\n"
8687        | RConstString _ -> pr "  return (*env)->NewStringUTF (env, r);\n"
8688        | RConstOptString _ ->
8689            pr "  return (*env)->NewStringUTF (env, r); /* XXX r NULL? */\n"
8690        | RString _ ->
8691            pr "  jr = (*env)->NewStringUTF (env, r);\n";
8692            pr "  free (r);\n";
8693            pr "  return jr;\n"
8694        | RStringList _ ->
8695            pr "  for (r_len = 0; r[r_len] != NULL; ++r_len) ;\n";
8696            pr "  cl = (*env)->FindClass (env, \"java/lang/String\");\n";
8697            pr "  jstr = (*env)->NewStringUTF (env, \"\");\n";
8698            pr "  jr = (*env)->NewObjectArray (env, r_len, cl, jstr);\n";
8699            pr "  for (i = 0; i < r_len; ++i) {\n";
8700            pr "    jstr = (*env)->NewStringUTF (env, r[i]);\n";
8701            pr "    (*env)->SetObjectArrayElement (env, jr, i, jstr);\n";
8702            pr "    free (r[i]);\n";
8703            pr "  }\n";
8704            pr "  free (r);\n";
8705            pr "  return jr;\n"
8706        | RStruct (_, typ) ->
8707            let jtyp = java_name_of_struct typ in
8708            let cols = cols_of_struct typ in
8709            generate_java_struct_return typ jtyp cols
8710        | RStructList (_, typ) ->
8711            let jtyp = java_name_of_struct typ in
8712            let cols = cols_of_struct typ in
8713            generate_java_struct_list_return typ jtyp cols
8714        | RHashtable _ ->
8715            (* XXX *)
8716            pr "  throw_exception (env, \"%s: internal error: please let us know how to make a Java HashMap from JNI bindings!\");\n" name;
8717            pr "  return NULL;\n"
8718        | RBufferOut _ ->
8719            pr "  jr = (*env)->NewStringUTF (env, r); /* XXX size */\n";
8720            pr "  free (r);\n";
8721            pr "  return jr;\n"
8722       );
8723
8724       pr "}\n";
8725       pr "\n"
8726   ) all_functions
8727
8728 and generate_java_struct_return typ jtyp cols =
8729   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
8730   pr "  jr = (*env)->AllocObject (env, cl);\n";
8731   List.iter (
8732     function
8733     | name, FString ->
8734         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8735         pr "  (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, r->%s));\n" name;
8736     | name, FUUID ->
8737         pr "  {\n";
8738         pr "    char s[33];\n";
8739         pr "    memcpy (s, r->%s, 32);\n" name;
8740         pr "    s[32] = 0;\n";
8741         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8742         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
8743         pr "  }\n";
8744     | name, FBuffer ->
8745         pr "  {\n";
8746         pr "    int len = r->%s_len;\n" name;
8747         pr "    char s[len+1];\n";
8748         pr "    memcpy (s, r->%s, len);\n" name;
8749         pr "    s[len] = 0;\n";
8750         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8751         pr "    (*env)->SetObjectField (env, jr, fl, (*env)->NewStringUTF (env, s));\n";
8752         pr "  }\n";
8753     | name, (FBytes|FUInt64|FInt64) ->
8754         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
8755         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8756     | name, (FUInt32|FInt32) ->
8757         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
8758         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8759     | name, FOptPercent ->
8760         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
8761         pr "  (*env)->SetFloatField (env, jr, fl, r->%s);\n" name;
8762     | name, FChar ->
8763         pr "  fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
8764         pr "  (*env)->SetLongField (env, jr, fl, r->%s);\n" name;
8765   ) cols;
8766   pr "  free (r);\n";
8767   pr "  return jr;\n"
8768
8769 and generate_java_struct_list_return typ jtyp cols =
8770   pr "  cl = (*env)->FindClass (env, \"com/redhat/et/libguestfs/%s\");\n" jtyp;
8771   pr "  jr = (*env)->NewObjectArray (env, r->len, cl, NULL);\n";
8772   pr "  for (i = 0; i < r->len; ++i) {\n";
8773   pr "    jfl = (*env)->AllocObject (env, cl);\n";
8774   List.iter (
8775     function
8776     | name, FString ->
8777         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8778         pr "    (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, r->val[i].%s));\n" name;
8779     | name, FUUID ->
8780         pr "    {\n";
8781         pr "      char s[33];\n";
8782         pr "      memcpy (s, r->val[i].%s, 32);\n" name;
8783         pr "      s[32] = 0;\n";
8784         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8785         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
8786         pr "    }\n";
8787     | name, FBuffer ->
8788         pr "    {\n";
8789         pr "      int len = r->val[i].%s_len;\n" name;
8790         pr "      char s[len+1];\n";
8791         pr "      memcpy (s, r->val[i].%s, len);\n" name;
8792         pr "      s[len] = 0;\n";
8793         pr "      fl = (*env)->GetFieldID (env, cl, \"%s\", \"Ljava/lang/String;\");\n" name;
8794         pr "      (*env)->SetObjectField (env, jfl, fl, (*env)->NewStringUTF (env, s));\n";
8795         pr "    }\n";
8796     | name, (FBytes|FUInt64|FInt64) ->
8797         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"J\");\n" name;
8798         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8799     | name, (FUInt32|FInt32) ->
8800         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"I\");\n" name;
8801         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8802     | name, FOptPercent ->
8803         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"F\");\n" name;
8804         pr "    (*env)->SetFloatField (env, jfl, fl, r->val[i].%s);\n" name;
8805     | name, FChar ->
8806         pr "    fl = (*env)->GetFieldID (env, cl, \"%s\", \"C\");\n" name;
8807         pr "    (*env)->SetLongField (env, jfl, fl, r->val[i].%s);\n" name;
8808   ) cols;
8809   pr "    (*env)->SetObjectArrayElement (env, jfl, i, jfl);\n";
8810   pr "  }\n";
8811   pr "  guestfs_free_%s_list (r);\n" typ;
8812   pr "  return jr;\n"
8813
8814 and generate_java_makefile_inc () =
8815   generate_header HashStyle GPLv2;
8816
8817   pr "java_built_sources = \\\n";
8818   List.iter (
8819     fun (typ, jtyp) ->
8820         pr "\tcom/redhat/et/libguestfs/%s.java \\\n" jtyp;
8821   ) java_structs;
8822   pr "\tcom/redhat/et/libguestfs/GuestFS.java\n"
8823
8824 and generate_haskell_hs () =
8825   generate_header HaskellStyle LGPLv2;
8826
8827   (* XXX We only know how to generate partial FFI for Haskell
8828    * at the moment.  Please help out!
8829    *)
8830   let can_generate style =
8831     match style with
8832     | RErr, _
8833     | RInt _, _
8834     | RInt64 _, _ -> true
8835     | RBool _, _
8836     | RConstString _, _
8837     | RConstOptString _, _
8838     | RString _, _
8839     | RStringList _, _
8840     | RStruct _, _
8841     | RStructList _, _
8842     | RHashtable _, _
8843     | RBufferOut _, _ -> false in
8844
8845   pr "\
8846 {-# INCLUDE <guestfs.h> #-}
8847 {-# LANGUAGE ForeignFunctionInterface #-}
8848
8849 module Guestfs (
8850   create";
8851
8852   (* List out the names of the actions we want to export. *)
8853   List.iter (
8854     fun (name, style, _, _, _, _, _) ->
8855       if can_generate style then pr ",\n  %s" name
8856   ) all_functions;
8857
8858   pr "
8859   ) where
8860 import Foreign
8861 import Foreign.C
8862 import Foreign.C.Types
8863 import IO
8864 import Control.Exception
8865 import Data.Typeable
8866
8867 data GuestfsS = GuestfsS            -- represents the opaque C struct
8868 type GuestfsP = Ptr GuestfsS        -- guestfs_h *
8869 type GuestfsH = ForeignPtr GuestfsS -- guestfs_h * with attached finalizer
8870
8871 -- XXX define properly later XXX
8872 data PV = PV
8873 data VG = VG
8874 data LV = LV
8875 data IntBool = IntBool
8876 data Stat = Stat
8877 data StatVFS = StatVFS
8878 data Hashtable = Hashtable
8879
8880 foreign import ccall unsafe \"guestfs_create\" c_create
8881   :: IO GuestfsP
8882 foreign import ccall unsafe \"&guestfs_close\" c_close
8883   :: FunPtr (GuestfsP -> IO ())
8884 foreign import ccall unsafe \"guestfs_set_error_handler\" c_set_error_handler
8885   :: GuestfsP -> Ptr CInt -> Ptr CInt -> IO ()
8886
8887 create :: IO GuestfsH
8888 create = do
8889   p <- c_create
8890   c_set_error_handler p nullPtr nullPtr
8891   h <- newForeignPtr c_close p
8892   return h
8893
8894 foreign import ccall unsafe \"guestfs_last_error\" c_last_error
8895   :: GuestfsP -> IO CString
8896
8897 -- last_error :: GuestfsH -> IO (Maybe String)
8898 -- last_error h = do
8899 --   str <- withForeignPtr h (\\p -> c_last_error p)
8900 --   maybePeek peekCString str
8901
8902 last_error :: GuestfsH -> IO (String)
8903 last_error h = do
8904   str <- withForeignPtr h (\\p -> c_last_error p)
8905   if (str == nullPtr)
8906     then return \"no error\"
8907     else peekCString str
8908
8909 ";
8910
8911   (* Generate wrappers for each foreign function. *)
8912   List.iter (
8913     fun (name, style, _, _, _, _, _) ->
8914       if can_generate style then (
8915         pr "foreign import ccall unsafe \"guestfs_%s\" c_%s\n" name name;
8916         pr "  :: ";
8917         generate_haskell_prototype ~handle:"GuestfsP" style;
8918         pr "\n";
8919         pr "\n";
8920         pr "%s :: " name;
8921         generate_haskell_prototype ~handle:"GuestfsH" ~hs:true style;
8922         pr "\n";
8923         pr "%s %s = do\n" name
8924           (String.concat " " ("h" :: List.map name_of_argt (snd style)));
8925         pr "  r <- ";
8926         (* Convert pointer arguments using with* functions. *)
8927         List.iter (
8928           function
8929           | FileIn n
8930           | FileOut n
8931           | Pathname n | Device n | Dev_or_Path n | String n -> pr "withCString %s $ \\%s -> " n n
8932           | OptString n -> pr "maybeWith withCString %s $ \\%s -> " n n
8933           | StringList n | DeviceList n -> pr "withMany withCString %s $ \\%s -> withArray0 nullPtr %s $ \\%s -> " n n n n
8934           | Bool _ | Int _ -> ()
8935         ) (snd style);
8936         (* Convert integer arguments. *)
8937         let args =
8938           List.map (
8939             function
8940             | Bool n -> sprintf "(fromBool %s)" n
8941             | Int n -> sprintf "(fromIntegral %s)" n
8942             | FileIn n | FileOut n
8943             | Pathname n | Device n | Dev_or_Path n | String n | OptString n | StringList n | DeviceList n -> n
8944           ) (snd style) in
8945         pr "withForeignPtr h (\\p -> c_%s %s)\n" name
8946           (String.concat " " ("p" :: args));
8947         (match fst style with
8948          | RErr | RInt _ | RInt64 _ | RBool _ ->
8949              pr "  if (r == -1)\n";
8950              pr "    then do\n";
8951              pr "      err <- last_error h\n";
8952              pr "      fail err\n";
8953          | RConstString _ | RConstOptString _ | RString _
8954          | RStringList _ | RStruct _
8955          | RStructList _ | RHashtable _ | RBufferOut _ ->
8956              pr "  if (r == nullPtr)\n";
8957              pr "    then do\n";
8958              pr "      err <- last_error h\n";
8959              pr "      fail err\n";
8960         );
8961         (match fst style with
8962          | RErr ->
8963              pr "    else return ()\n"
8964          | RInt _ ->
8965              pr "    else return (fromIntegral r)\n"
8966          | RInt64 _ ->
8967              pr "    else return (fromIntegral r)\n"
8968          | RBool _ ->
8969              pr "    else return (toBool r)\n"
8970          | RConstString _
8971          | RConstOptString _
8972          | RString _
8973          | RStringList _
8974          | RStruct _
8975          | RStructList _
8976          | RHashtable _
8977          | RBufferOut _ ->
8978              pr "    else return ()\n" (* XXXXXXXXXXXXXXXXXXXX *)
8979         );
8980         pr "\n";
8981       )
8982   ) all_functions
8983
8984 and generate_haskell_prototype ~handle ?(hs = false) style =
8985   pr "%s -> " handle;
8986   let string = if hs then "String" else "CString" in
8987   let int = if hs then "Int" else "CInt" in
8988   let bool = if hs then "Bool" else "CInt" in
8989   let int64 = if hs then "Integer" else "Int64" in
8990   List.iter (
8991     fun arg ->
8992       (match arg with
8993        | Pathname _ | Device _ | Dev_or_Path _ | String _ -> pr "%s" string
8994        | OptString _ -> if hs then pr "Maybe String" else pr "CString"
8995        | StringList _ | DeviceList _ -> if hs then pr "[String]" else pr "Ptr CString"
8996        | Bool _ -> pr "%s" bool
8997        | Int _ -> pr "%s" int
8998        | FileIn _ -> pr "%s" string
8999        | FileOut _ -> pr "%s" string
9000       );
9001       pr " -> ";
9002   ) (snd style);
9003   pr "IO (";
9004   (match fst style with
9005    | RErr -> if not hs then pr "CInt"
9006    | RInt _ -> pr "%s" int
9007    | RInt64 _ -> pr "%s" int64
9008    | RBool _ -> pr "%s" bool
9009    | RConstString _ -> pr "%s" string
9010    | RConstOptString _ -> pr "Maybe %s" string
9011    | RString _ -> pr "%s" string
9012    | RStringList _ -> pr "[%s]" string
9013    | RStruct (_, typ) ->
9014        let name = java_name_of_struct typ in
9015        pr "%s" name
9016    | RStructList (_, typ) ->
9017        let name = java_name_of_struct typ in
9018        pr "[%s]" name
9019    | RHashtable _ -> pr "Hashtable"
9020    | RBufferOut _ -> pr "%s" string
9021   );
9022   pr ")"
9023
9024 and generate_bindtests () =
9025   generate_header CStyle LGPLv2;
9026
9027   pr "\
9028 #include <stdio.h>
9029 #include <stdlib.h>
9030 #include <inttypes.h>
9031 #include <string.h>
9032
9033 #include \"guestfs.h\"
9034 #include \"guestfs_protocol.h\"
9035
9036 #define error guestfs_error
9037 #define safe_calloc guestfs_safe_calloc
9038 #define safe_malloc guestfs_safe_malloc
9039
9040 static void
9041 print_strings (char *const *argv)
9042 {
9043   int argc;
9044
9045   printf (\"[\");
9046   for (argc = 0; argv[argc] != NULL; ++argc) {
9047     if (argc > 0) printf (\", \");
9048     printf (\"\\\"%%s\\\"\", argv[argc]);
9049   }
9050   printf (\"]\\n\");
9051 }
9052
9053 /* The test0 function prints its parameters to stdout. */
9054 ";
9055
9056   let test0, tests =
9057     match test_functions with
9058     | [] -> assert false
9059     | test0 :: tests -> test0, tests in
9060
9061   let () =
9062     let (name, style, _, _, _, _, _) = test0 in
9063     generate_prototype ~extern:false ~semicolon:false ~newline:true
9064       ~handle:"g" ~prefix:"guestfs_" name style;
9065     pr "{\n";
9066     List.iter (
9067       function
9068       | Pathname n
9069       | Device n | Dev_or_Path n
9070       | String n
9071       | FileIn n
9072       | FileOut n -> pr "  printf (\"%%s\\n\", %s);\n" n
9073       | OptString n -> pr "  printf (\"%%s\\n\", %s ? %s : \"null\");\n" n n
9074       | StringList n | DeviceList n -> pr "  print_strings (%s);\n" n
9075       | Bool n -> pr "  printf (\"%%s\\n\", %s ? \"true\" : \"false\");\n" n
9076       | Int n -> pr "  printf (\"%%d\\n\", %s);\n" n
9077     ) (snd style);
9078     pr "  /* Java changes stdout line buffering so we need this: */\n";
9079     pr "  fflush (stdout);\n";
9080     pr "  return 0;\n";
9081     pr "}\n";
9082     pr "\n" in
9083
9084   List.iter (
9085     fun (name, style, _, _, _, _, _) ->
9086       if String.sub name (String.length name - 3) 3 <> "err" then (
9087         pr "/* Test normal return. */\n";
9088         generate_prototype ~extern:false ~semicolon:false ~newline:true
9089           ~handle:"g" ~prefix:"guestfs_" name style;
9090         pr "{\n";
9091         (match fst style with
9092          | RErr ->
9093              pr "  return 0;\n"
9094          | RInt _ ->
9095              pr "  int r;\n";
9096              pr "  sscanf (val, \"%%d\", &r);\n";
9097              pr "  return r;\n"
9098          | RInt64 _ ->
9099              pr "  int64_t r;\n";
9100              pr "  sscanf (val, \"%%\" SCNi64, &r);\n";
9101              pr "  return r;\n"
9102          | RBool _ ->
9103              pr "  return strcmp (val, \"true\") == 0;\n"
9104          | RConstString _
9105          | RConstOptString _ ->
9106              (* Can't return the input string here.  Return a static
9107               * string so we ensure we get a segfault if the caller
9108               * tries to free it.
9109               *)
9110              pr "  return \"static string\";\n"
9111          | RString _ ->
9112              pr "  return strdup (val);\n"
9113          | RStringList _ ->
9114              pr "  char **strs;\n";
9115              pr "  int n, i;\n";
9116              pr "  sscanf (val, \"%%d\", &n);\n";
9117              pr "  strs = safe_malloc (g, (n+1) * sizeof (char *));\n";
9118              pr "  for (i = 0; i < n; ++i) {\n";
9119              pr "    strs[i] = safe_malloc (g, 16);\n";
9120              pr "    snprintf (strs[i], 16, \"%%d\", i);\n";
9121              pr "  }\n";
9122              pr "  strs[n] = NULL;\n";
9123              pr "  return strs;\n"
9124          | RStruct (_, typ) ->
9125              pr "  struct guestfs_%s *r;\n" typ;
9126              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
9127              pr "  return r;\n"
9128          | RStructList (_, typ) ->
9129              pr "  struct guestfs_%s_list *r;\n" typ;
9130              pr "  r = safe_calloc (g, sizeof *r, 1);\n";
9131              pr "  sscanf (val, \"%%d\", &r->len);\n";
9132              pr "  r->val = safe_calloc (g, r->len, sizeof *r->val);\n";
9133              pr "  return r;\n"
9134          | RHashtable _ ->
9135              pr "  char **strs;\n";
9136              pr "  int n, i;\n";
9137              pr "  sscanf (val, \"%%d\", &n);\n";
9138              pr "  strs = safe_malloc (g, (n*2+1) * sizeof (*strs));\n";
9139              pr "  for (i = 0; i < n; ++i) {\n";
9140              pr "    strs[i*2] = safe_malloc (g, 16);\n";
9141              pr "    strs[i*2+1] = safe_malloc (g, 16);\n";
9142              pr "    snprintf (strs[i*2], 16, \"%%d\", i);\n";
9143              pr "    snprintf (strs[i*2+1], 16, \"%%d\", i);\n";
9144              pr "  }\n";
9145              pr "  strs[n*2] = NULL;\n";
9146              pr "  return strs;\n"
9147          | RBufferOut _ ->
9148              pr "  return strdup (val);\n"
9149         );
9150         pr "}\n";
9151         pr "\n"
9152       ) else (
9153         pr "/* Test error return. */\n";
9154         generate_prototype ~extern:false ~semicolon:false ~newline:true
9155           ~handle:"g" ~prefix:"guestfs_" name style;
9156         pr "{\n";
9157         pr "  error (g, \"error\");\n";
9158         (match fst style with
9159          | RErr | RInt _ | RInt64 _ | RBool _ ->
9160              pr "  return -1;\n"
9161          | RConstString _ | RConstOptString _
9162          | RString _ | RStringList _ | RStruct _
9163          | RStructList _
9164          | RHashtable _
9165          | RBufferOut _ ->
9166              pr "  return NULL;\n"
9167         );
9168         pr "}\n";
9169         pr "\n"
9170       )
9171   ) tests
9172
9173 and generate_ocaml_bindtests () =
9174   generate_header OCamlStyle GPLv2;
9175
9176   pr "\
9177 let () =
9178   let g = Guestfs.create () in
9179 ";
9180
9181   let mkargs args =
9182     String.concat " " (
9183       List.map (
9184         function
9185         | CallString s -> "\"" ^ s ^ "\""
9186         | CallOptString None -> "None"
9187         | CallOptString (Some s) -> sprintf "(Some \"%s\")" s
9188         | CallStringList xs ->
9189             "[|" ^ String.concat ";" (List.map (sprintf "\"%s\"") xs) ^ "|]"
9190         | CallInt i when i >= 0 -> string_of_int i
9191         | CallInt i (* when i < 0 *) -> "(" ^ string_of_int i ^ ")"
9192         | CallBool b -> string_of_bool b
9193       ) args
9194     )
9195   in
9196
9197   generate_lang_bindtests (
9198     fun f args -> pr "  Guestfs.%s g %s;\n" f (mkargs args)
9199   );
9200
9201   pr "print_endline \"EOF\"\n"
9202
9203 and generate_perl_bindtests () =
9204   pr "#!/usr/bin/perl -w\n";
9205   generate_header HashStyle GPLv2;
9206
9207   pr "\
9208 use strict;
9209
9210 use Sys::Guestfs;
9211
9212 my $g = Sys::Guestfs->new ();
9213 ";
9214
9215   let mkargs args =
9216     String.concat ", " (
9217       List.map (
9218         function
9219         | CallString s -> "\"" ^ s ^ "\""
9220         | CallOptString None -> "undef"
9221         | CallOptString (Some s) -> sprintf "\"%s\"" s
9222         | CallStringList xs ->
9223             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9224         | CallInt i -> string_of_int i
9225         | CallBool b -> if b then "1" else "0"
9226       ) args
9227     )
9228   in
9229
9230   generate_lang_bindtests (
9231     fun f args -> pr "$g->%s (%s);\n" f (mkargs args)
9232   );
9233
9234   pr "print \"EOF\\n\"\n"
9235
9236 and generate_python_bindtests () =
9237   generate_header HashStyle GPLv2;
9238
9239   pr "\
9240 import guestfs
9241
9242 g = guestfs.GuestFS ()
9243 ";
9244
9245   let mkargs args =
9246     String.concat ", " (
9247       List.map (
9248         function
9249         | CallString s -> "\"" ^ s ^ "\""
9250         | CallOptString None -> "None"
9251         | CallOptString (Some s) -> sprintf "\"%s\"" s
9252         | CallStringList xs ->
9253             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9254         | CallInt i -> string_of_int i
9255         | CallBool b -> if b then "1" else "0"
9256       ) args
9257     )
9258   in
9259
9260   generate_lang_bindtests (
9261     fun f args -> pr "g.%s (%s)\n" f (mkargs args)
9262   );
9263
9264   pr "print \"EOF\"\n"
9265
9266 and generate_ruby_bindtests () =
9267   generate_header HashStyle GPLv2;
9268
9269   pr "\
9270 require 'guestfs'
9271
9272 g = Guestfs::create()
9273 ";
9274
9275   let mkargs args =
9276     String.concat ", " (
9277       List.map (
9278         function
9279         | CallString s -> "\"" ^ s ^ "\""
9280         | CallOptString None -> "nil"
9281         | CallOptString (Some s) -> sprintf "\"%s\"" s
9282         | CallStringList xs ->
9283             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9284         | CallInt i -> string_of_int i
9285         | CallBool b -> string_of_bool b
9286       ) args
9287     )
9288   in
9289
9290   generate_lang_bindtests (
9291     fun f args -> pr "g.%s(%s)\n" f (mkargs args)
9292   );
9293
9294   pr "print \"EOF\\n\"\n"
9295
9296 and generate_java_bindtests () =
9297   generate_header CStyle GPLv2;
9298
9299   pr "\
9300 import com.redhat.et.libguestfs.*;
9301
9302 public class Bindtests {
9303     public static void main (String[] argv)
9304     {
9305         try {
9306             GuestFS g = new GuestFS ();
9307 ";
9308
9309   let mkargs args =
9310     String.concat ", " (
9311       List.map (
9312         function
9313         | CallString s -> "\"" ^ s ^ "\""
9314         | CallOptString None -> "null"
9315         | CallOptString (Some s) -> sprintf "\"%s\"" s
9316         | CallStringList xs ->
9317             "new String[]{" ^
9318               String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "}"
9319         | CallInt i -> string_of_int i
9320         | CallBool b -> string_of_bool b
9321       ) args
9322     )
9323   in
9324
9325   generate_lang_bindtests (
9326     fun f args -> pr "            g.%s (%s);\n" f (mkargs args)
9327   );
9328
9329   pr "
9330             System.out.println (\"EOF\");
9331         }
9332         catch (Exception exn) {
9333             System.err.println (exn);
9334             System.exit (1);
9335         }
9336     }
9337 }
9338 "
9339
9340 and generate_haskell_bindtests () =
9341   generate_header HaskellStyle GPLv2;
9342
9343   pr "\
9344 module Bindtests where
9345 import qualified Guestfs
9346
9347 main = do
9348   g <- Guestfs.create
9349 ";
9350
9351   let mkargs args =
9352     String.concat " " (
9353       List.map (
9354         function
9355         | CallString s -> "\"" ^ s ^ "\""
9356         | CallOptString None -> "Nothing"
9357         | CallOptString (Some s) -> sprintf "(Just \"%s\")" s
9358         | CallStringList xs ->
9359             "[" ^ String.concat "," (List.map (sprintf "\"%s\"") xs) ^ "]"
9360         | CallInt i when i < 0 -> "(" ^ string_of_int i ^ ")"
9361         | CallInt i -> string_of_int i
9362         | CallBool true -> "True"
9363         | CallBool false -> "False"
9364       ) args
9365     )
9366   in
9367
9368   generate_lang_bindtests (
9369     fun f args -> pr "  Guestfs.%s g %s\n" f (mkargs args)
9370   );
9371
9372   pr "  putStrLn \"EOF\"\n"
9373
9374 (* Language-independent bindings tests - we do it this way to
9375  * ensure there is parity in testing bindings across all languages.
9376  *)
9377 and generate_lang_bindtests call =
9378   call "test0" [CallString "abc"; CallOptString (Some "def");
9379                 CallStringList []; CallBool false;
9380                 CallInt 0; CallString "123"; CallString "456"];
9381   call "test0" [CallString "abc"; CallOptString None;
9382                 CallStringList []; CallBool false;
9383                 CallInt 0; CallString "123"; CallString "456"];
9384   call "test0" [CallString ""; CallOptString (Some "def");
9385                 CallStringList []; CallBool false;
9386                 CallInt 0; CallString "123"; CallString "456"];
9387   call "test0" [CallString ""; CallOptString (Some "");
9388                 CallStringList []; CallBool false;
9389                 CallInt 0; CallString "123"; CallString "456"];
9390   call "test0" [CallString "abc"; CallOptString (Some "def");
9391                 CallStringList ["1"]; CallBool false;
9392                 CallInt 0; CallString "123"; CallString "456"];
9393   call "test0" [CallString "abc"; CallOptString (Some "def");
9394                 CallStringList ["1"; "2"]; CallBool false;
9395                 CallInt 0; CallString "123"; CallString "456"];
9396   call "test0" [CallString "abc"; CallOptString (Some "def");
9397                 CallStringList ["1"]; CallBool true;
9398                 CallInt 0; CallString "123"; CallString "456"];
9399   call "test0" [CallString "abc"; CallOptString (Some "def");
9400                 CallStringList ["1"]; CallBool false;
9401                 CallInt (-1); CallString "123"; CallString "456"];
9402   call "test0" [CallString "abc"; CallOptString (Some "def");
9403                 CallStringList ["1"]; CallBool false;
9404                 CallInt (-2); CallString "123"; CallString "456"];
9405   call "test0" [CallString "abc"; CallOptString (Some "def");
9406                 CallStringList ["1"]; CallBool false;
9407                 CallInt 1; CallString "123"; CallString "456"];
9408   call "test0" [CallString "abc"; CallOptString (Some "def");
9409                 CallStringList ["1"]; CallBool false;
9410                 CallInt 2; CallString "123"; CallString "456"];
9411   call "test0" [CallString "abc"; CallOptString (Some "def");
9412                 CallStringList ["1"]; CallBool false;
9413                 CallInt 4095; CallString "123"; CallString "456"];
9414   call "test0" [CallString "abc"; CallOptString (Some "def");
9415                 CallStringList ["1"]; CallBool false;
9416                 CallInt 0; CallString ""; CallString ""]
9417
9418 (* XXX Add here tests of the return and error functions. *)
9419
9420 (* This is used to generate the src/MAX_PROC_NR file which
9421  * contains the maximum procedure number, a surrogate for the
9422  * ABI version number.  See src/Makefile.am for the details.
9423  *)
9424 and generate_max_proc_nr () =
9425   let proc_nrs = List.map (
9426     fun (_, _, proc_nr, _, _, _, _) -> proc_nr
9427   ) daemon_functions in
9428
9429   let max_proc_nr = List.fold_left max 0 proc_nrs in
9430
9431   pr "%d\n" max_proc_nr
9432
9433 let output_to filename =
9434   let filename_new = filename ^ ".new" in
9435   chan := open_out filename_new;
9436   let close () =
9437     close_out !chan;
9438     chan := stdout;
9439
9440     (* Is the new file different from the current file? *)
9441     if Sys.file_exists filename && files_equal filename filename_new then
9442       Unix.unlink filename_new          (* same, so skip it *)
9443     else (
9444       (* different, overwrite old one *)
9445       (try Unix.chmod filename 0o644 with Unix.Unix_error _ -> ());
9446       Unix.rename filename_new filename;
9447       Unix.chmod filename 0o444;
9448       printf "written %s\n%!" filename;
9449     )
9450   in
9451   close
9452
9453 (* Main program. *)
9454 let () =
9455   check_functions ();
9456
9457   if not (Sys.file_exists "HACKING") then (
9458     eprintf "\
9459 You are probably running this from the wrong directory.
9460 Run it from the top source directory using the command
9461   src/generator.ml
9462 ";
9463     exit 1
9464   );
9465
9466   let close = output_to "src/guestfs_protocol.x" in
9467   generate_xdr ();
9468   close ();
9469
9470   let close = output_to "src/guestfs-structs.h" in
9471   generate_structs_h ();
9472   close ();
9473
9474   let close = output_to "src/guestfs-actions.h" in
9475   generate_actions_h ();
9476   close ();
9477
9478   let close = output_to "src/guestfs-actions.c" in
9479   generate_client_actions ();
9480   close ();
9481
9482   let close = output_to "daemon/actions.h" in
9483   generate_daemon_actions_h ();
9484   close ();
9485
9486   let close = output_to "daemon/stubs.c" in
9487   generate_daemon_actions ();
9488   close ();
9489
9490   let close = output_to "daemon/names.c" in
9491   generate_daemon_names ();
9492   close ();
9493
9494   let close = output_to "capitests/tests.c" in
9495   generate_tests ();
9496   close ();
9497
9498   let close = output_to "src/guestfs-bindtests.c" in
9499   generate_bindtests ();
9500   close ();
9501
9502   let close = output_to "fish/cmds.c" in
9503   generate_fish_cmds ();
9504   close ();
9505
9506   let close = output_to "fish/completion.c" in
9507   generate_fish_completion ();
9508   close ();
9509
9510   let close = output_to "guestfs-structs.pod" in
9511   generate_structs_pod ();
9512   close ();
9513
9514   let close = output_to "guestfs-actions.pod" in
9515   generate_actions_pod ();
9516   close ();
9517
9518   let close = output_to "guestfish-actions.pod" in
9519   generate_fish_actions_pod ();
9520   close ();
9521
9522   let close = output_to "ocaml/guestfs.mli" in
9523   generate_ocaml_mli ();
9524   close ();
9525
9526   let close = output_to "ocaml/guestfs.ml" in
9527   generate_ocaml_ml ();
9528   close ();
9529
9530   let close = output_to "ocaml/guestfs_c_actions.c" in
9531   generate_ocaml_c ();
9532   close ();
9533
9534   let close = output_to "ocaml/bindtests.ml" in
9535   generate_ocaml_bindtests ();
9536   close ();
9537
9538   let close = output_to "perl/Guestfs.xs" in
9539   generate_perl_xs ();
9540   close ();
9541
9542   let close = output_to "perl/lib/Sys/Guestfs.pm" in
9543   generate_perl_pm ();
9544   close ();
9545
9546   let close = output_to "perl/bindtests.pl" in
9547   generate_perl_bindtests ();
9548   close ();
9549
9550   let close = output_to "python/guestfs-py.c" in
9551   generate_python_c ();
9552   close ();
9553
9554   let close = output_to "python/guestfs.py" in
9555   generate_python_py ();
9556   close ();
9557
9558   let close = output_to "python/bindtests.py" in
9559   generate_python_bindtests ();
9560   close ();
9561
9562   let close = output_to "ruby/ext/guestfs/_guestfs.c" in
9563   generate_ruby_c ();
9564   close ();
9565
9566   let close = output_to "ruby/bindtests.rb" in
9567   generate_ruby_bindtests ();
9568   close ();
9569
9570   let close = output_to "java/com/redhat/et/libguestfs/GuestFS.java" in
9571   generate_java_java ();
9572   close ();
9573
9574   List.iter (
9575     fun (typ, jtyp) ->
9576       let cols = cols_of_struct typ in
9577       let filename = sprintf "java/com/redhat/et/libguestfs/%s.java" jtyp in
9578       let close = output_to filename in
9579       generate_java_struct jtyp cols;
9580       close ();
9581   ) java_structs;
9582
9583   let close = output_to "java/Makefile.inc" in
9584   generate_java_makefile_inc ();
9585   close ();
9586
9587   let close = output_to "java/com_redhat_et_libguestfs_GuestFS.c" in
9588   generate_java_c ();
9589   close ();
9590
9591   let close = output_to "java/Bindtests.java" in
9592   generate_java_bindtests ();
9593   close ();
9594
9595   let close = output_to "haskell/Guestfs.hs" in
9596   generate_haskell_hs ();
9597   close ();
9598
9599   let close = output_to "haskell/Bindtests.hs" in
9600   generate_haskell_bindtests ();
9601   close ();
9602
9603   let close = output_to "src/MAX_PROC_NR" in
9604   generate_max_proc_nr ();
9605   close ();
9606
9607   (* Always generate this file last, and unconditionally.  It's used
9608    * by the Makefile to know when we must re-run the generator.
9609    *)
9610   let chan = open_out "src/stamp-generator" in
9611   fprintf chan "1\n";
9612   close_out chan